LightSpace en de interactieve ruimte. De toekomst volgens Microsoft

Bij Microsoft Research werken ze al heel lang aan technologieën voor herkenning en interactie met de omgeving. Kinect is het paradigmatische voorbeeld, maar niet het enige. LightSpace is een ander project op dit gebied van de onderzoeksafdeling van Redmond. Door elementen van oppervlakteherkenning te combineren met augmented reality, en dankzij dieptecamera's en projectoren, maakt LightSpace elk oppervlak in de kamer en zelfs de vrije ruimte ertussen interactief.

Het doel van LightSpace is om interactie in de alledaagse omgeving mogelijk te maken, met behulp van verschillende elementen als projectieoppervlakken.Het systeem gebruikt tafels of muren om afbeeldingen weer te geven waardoor gebruikers handen en gebaren kunnen gebruiken om geprojecteerde inhoud te manipuleren. Hoewel in demo's alleen tafel en wand worden gebruikt, kan LightSpace een groter aantal oppervlakken herkennen en deze als interactief display gebruiken.

Interactie met elk oppervlak

Het systeem maakt het niet alleen mogelijk meerdere handen te herkennen alsof het een multi-touchscreen is, maar voegt ook nieuwe interacties met het lichaam toe waardoor overgangen tussen verschillende oppervlakken We kunnen bijvoorbeeld inhoud van de ene naar de andere verplaatsen door simpelweg een hand op het betreffende object te plaatsen en het bestemmingsoppervlak aan te raken. Op deze manier simuleert LightSpace inhoud die door ons lichaam reist van het ene deel van de kamer naar het andere.

Naast het verplaatsen van de inhoud van het ene oppervlak naar het andere, kunt u met het systeem de inhoud eruit halen en in uw handen houden alsof het een fysiek object is.Om dit te doen, projecteert het een rode bal op de hand die de betreffende inhoud vertegenwoordigt. De gebruiker kan het op deze manier door de kamer vervoeren en zelfs ruilen met andere gebruikers. Om het terug te brengen naar een oppervlak, brengt u het er gewoon dichter bij zodat het wordt overgedragen, waardoor de inhoud er weer op wordt weergegeven.

De dieptedetectie die door het systeem wordt gebruikt, maakt het ook mogelijk om representaties buiten de oppervlakken zelf te genereren Zo kunnen we, zoals getoond in de demo, navigeer door de opties van een menu door onze handen in de lucht te steken of te laten zakken. Het systeem detecteert de hoogte waarop het varieert tussen de verschillende opties. Net als de rest is dit slechts één voorbeeld van wat met LightSpace kan worden bereikt.

Hoe werkt het

Om de ruimte zo interactief te maken, maakt gebruik van meerdere dieptecamera's en projectorenDeze zijn gekalibreerd om de werkelijke positie van de objecten en oppervlakken in de kamer te detecteren, zodat er grafieken op kunnen worden weergegeven. Om dit te doen, registreert elk van de camera's de diepte waarop elk object wordt gevonden, waarbij onderscheid wordt gemaakt tussen stabiele objecten in de kamer en andere mobiele objecten, zoals de gebruikers zelf. Elke pixel wordt geconverteerd naar een coördinaat uit de echte wereld.

LightSpace gebruikt deze gegevens om een ​​3D-mesh van de elementen van de ruimte te bouwen en de oppervlakken te detecteren waarop de inhoud kan worden geprojecteerd. Het model van de kamer zal worden gebruikt om de interacties van de gebruikers in de omgeving te herkennen Met de eerder gebruikte camera's kunnen de bewegingen van de gebruiker worden gedetecteerd, waardoor hun contouren worden onderscheiden en het nauwkeurig detecteren van de positie van de handen.

Het systeem interpreteert dus de gebaren van de gebruiker om elk van de geïmplementeerde acties uit te voeren.We hebben er al enkele gezien, zoals het werken met de inhoud op elk oppervlak, het van het ene naar het andere overbrengen of het door de kamer zelf transporteren alsof het een echt object is. Maar het systeem zou andere instructies kunnen implementeren waardoor meer acties op elk oppervlak mogelijk zijn.

Hier kan ieders verbeelding aan het werk worden gezet. Het doel is om van elk oppervlak een interactief scherm te maken. Zonder dat er extra monitoren of bewegingssensoren nodig zijn, LightSpace transformeert elke kamer in een nieuwe werk- of speelruimte In iets meer van de toekomst.

In Xataka Windows | De toekomst volgens Microsoft Meer informatie | Microsoft-onderzoek