211service.com
Microsoft-demo's Augmented Vision
Vandaag zullen Microsoft-onderzoekers software demonstreren die, in realtime, door de computer gegenereerde informatie over een gedigitaliseerd beeld van de echte wereld kan leggen.
veranderde visie : Op deze laptop wordt augmented-reality-software uitgevoerd die is ontwikkeld door Microsoft-technici. Het kan de locatie van een persoon herkennen met behulp van de ingebouwde camera. In deze demonstratie leiden virtuele bubbels naar een virtuele pot met goud.
Het toevoegen van extra visuele gegevens aan een videoscherm is een techniek die bekend staat als augmented reality. Michael Cohen , hoofdonderzoeker bij Microsoft Research, in Redmond, WA, zegt dat de aanpak een nieuwe dimensie zou kunnen toevoegen aan toekomstige smartphones. Je zou op straat kunnen zijn, het apparaat omhoog houden, en het zou een restaurant kunnen herkennen en beoordelingen en het menu kunnen leveren, zegt hij. Een smartphone met een augmented-reality-display kan ook een busroute overlappen en een schatting geven van wanneer de volgende bus op een bepaalde straat aankomt. Het wordt in wezen je portaal naar informatie, zegt Cohen.
Cohen en zijn collega's zullen de augmented-reality-technologie demonstreren op TechFest , een jaarlijkse showcase van de onderzoeksprojecten van Microsoft, in Redmond. Hun software, die op een kleine draagbare computer draait, analyseert scènes van een camera, komt overeen met die in een database en legt aanvullende informatie op het scherm. De onderzoekers merken op dat een smartphone met augmented reality ingenieurs zou kunnen helpen om de leidingen of elektrische kabels onder een straat te zien. In de demonstratie op TechFest zal de software worden gebruikt om mensen op schattenjacht te leiden naar een verborgen prijs van een (virtuele) pot met goud.
Augmented reality is al meer dan tien jaar een actief onderzoeksgebied, hoewel het vaak een op het hoofd gemonteerd display en een rugzak aan computerapparatuur vereiste. In de afgelopen jaren zijn mobiele telefoons en draagbare computers met camera's en andere sensoren krachtig genoeg geworden om de rekenkracht aan te kunnen die nodig is om een augmented reality-systeem te laten draaien. Onderzoekers van Nokia en Columbia University ontwikkelen bijvoorbeeld ook augmented-reality-systemen en een Japanse startup genaamd Tonchidot hoopt het concept om te zetten in een product.
De meeste augmented reality-systemen moeten zich nauwkeurig kunnen oriënteren om betrouwbaar te kunnen functioneren. Sommigen bepalen hun positie met behulp van GPS of door triangulatie van verschillende Wi-Fi-signalen, en bepalen welke kant ze op wijzen met behulp van een versnellingsmeter en een digitaal kompas. Het augmented-reality-apparaat van Microsoft richt zich op het kunnen herkennen van objecten binnen een scène, met behulp van geavanceerde computervisie-algoritmen. Omdat de demonstratie wordt uitgevoerd in de gecontroleerde omgeving van de conferentiezaal, maken de onderzoekers geen gebruik van locatiedetecterende sensoren; in plaats daarvan vertrouwen ze uitsluitend op computervisie.
Het herkennen van elementen van een scène, ongeacht de hoek of belichting, is een grote uitdaging. Cohen en zijn collega Simon Winder, senior research engineer bij Microsoft, hebben algoritmen ontwikkeld die deze taak frame voor frame uitvoeren voor een videofeed in realtime. Het algoritme koppelt frames onmiddellijk aan eerder geanalyseerde afbeeldingen die in een database zijn opgeslagen. Bij het ontwikkelen van het algoritme bepaalden de onderzoekers de beste parameters of kenmerken om het systeem te helpen bij elke scène. Cohen legt uit dat ze machine learning hebben gebruikt om snel verschillende parameters te testen en de parameters te bepalen die de beste match opleveren.
Voor de demo van vandaag heeft het team van Cohen foto's gemaakt van de conferentiezaal waarin TechFest wordt gehouden. De foto's werden geanalyseerd met behulp van de computer-vision-software en de belangrijkste kenmerken werden opgeslagen in een database op een laptopcomputer die een ingebouwde videocamera gebruikt om een scène vast te leggen.
In ongeveer een tiende of een vijftiende van een seconde kan de software een scène herkennen en opzoeken in een database, zegt Cohen. Voor het schattenjachtspel dat tijdens TechFest wordt gedemonstreerd, toont de software een spoor van bubbels die wijzen in de richting waarin de gebruiker moet lopen om de prijs te vinden.
Omdat het slechts een onderzoeksproject is, benadrukt Cohen dat er nog veel ruimte is voor verbetering. Om te beginnen zouden de parameters die worden gebruikt om fysieke kenmerken van objecten te identificeren, kunnen worden verfijnd om het matchen nog nauwkeuriger te maken, zegt hij.
Een andere uitdaging om te overwegen is hoe dit soort systeem zou werken in een minder gecontroleerde omgeving, zegt Kari Pulli , een onderzoeker bij Nokia. De meest voorkomende augmented-reality-toepassing is om het te gebruiken als museumgids, zegt hij. Dat is gemakkelijk te doen, want de omgeving is vast. De uitdaging is om ervoor te zorgen dat dergelijke systemen kunnen werken in een onbekende context, zoals een stadsstraat. Maar Pulli gelooft dat dit mogelijk kan worden dankzij databases van Microsoft, Google en Navteq die afbeeldingen van straatbeelden bevatten.
Cohen zegt dat hij optimistisch is dat de computervisie-algoritmen die door zijn team zijn ontwikkeld talloze toepassingen kunnen hebben, van augmented reality-systemen tot gaming en robotica, maar hij verwacht niet dat ze binnenkort in een specifiek Microsoft-product zullen worden gebruikt.