Photosynth voor video en andere TechFest-traktaties

Elk jaar organiseert Microsoft een open huis genaamd TechFest om enkele van zijn meer flitsende onderzoeksprojecten te presenteren. Dit jaar waren er 37 demo's op het evenement in Redmond, WA, variërend van op gebaren gebaseerde interfaces tot augmented reality en beter zoeken naar afbeeldingen. Hieronder volgt een korte samenvatting van enkele van de projecten die dinsdag werden tentoongesteld en die mijn aandacht trokken.





1. Photosynth voor video

Drie mobiele videostreams worden in realtime gecombineerd tot één panoramische video met behulp van nieuwe software die is ontwikkeld door Microsoft-onderzoekers. Krediet: Microsoft Research

Op basis van de populariteit van Photosynth is het niet verwonderlijk dat Microsoft-onderzoekers nu proberen de technologie uit te breiden naar video. De reguliere software voegt naadloos foto's samen die op een bepaalde locatie zijn gemaakt, van verschillende camera's, om een ​​zoombaar, panneerbaar panoramisch beeld te creëren. Het nieuwe idee is dat meerdere mensen – ooggetuigen bij een nieuwsevenement of fans bij een muziekconcert bijvoorbeeld – videobeelden van het evenement opnemen op hun mobiele telefoon en deze naar een centrale server streamen. Met behulp van de locaties van de telefoons en met behulp van algoritmen voor beeldherkenning, organiseert en deelt software de mobiele streams in een grotere scène.



Ayman Kaheel, een ingenieur in het laboratorium van Microsoft in Caïro, demonstreerde de software in de congreszaal door twee mobiele telefoons, in cameramodus, op verschillende hoogtes omhoog te houden en in enigszins verschillende richtingen te wijzen. Op zijn laptop werden de twee videofeeds in realtime samengevoegd tot een grotere, completere video. Indrukwekkende dingen.

2. Schrijven in de lucht

Een van de problemen met videogamesystemen is dat het voor een speler moeilijk is om tekst in te voeren, een gamepersonage een naam te geven of bijvoorbeeld met andere spelers op een netwerk te chatten. Aangezien sommige van deze systemen worden gespeeld op computers met webcamera's of infraroodcamera's (zoals de Wii), redeneerden onderzoekers van het onderzoekscentrum van Microsoft in Peking dat handzwaaiende gebaren de traditionele en onhandige tekstinvoer zouden kunnen vervangen.



De onderzoekers schreven software die de beweging van een kleurrijk object, zoals een appel of een bal, in de hand van een gebruiker volgt en interpreteert, op basis van het pad van het object, het karakter dat de gebruiker in de lucht schetst. Hsiao-Wuen Hon , zegt de directeur van Microsoft Research Asia dat het systeem goed werkt voor Chinese karakters, en nog beter zou moeten zijn met Engelse karakters, omdat er veel minder zijn.

3. Een kleurenpalet voor beter zoeken naar afbeeldingen

De beeldzoekmachines van tegenwoordig doen goed werk - tot op zekere hoogte. Zoek naar een tijger en je krijgt over het algemeen een verzameling oranje, witte en zwarte grote katten. Maar op dit moment is het bijna onmogelijk om een ​​zoekopdracht aan te passen om bijvoorbeeld een tijger op een witte achtergrond of een zwart-witte tijger tegen een blauwe lucht te vinden.



Xian-Sheng Hua , een onderzoeker in het centrum van Peking en een TR35 uit 2008 denken dat hij een betere manier heeft gevonden om op de juiste afbeelding thuis te komen. Zijn zoekinterface biedt een kleurenpalet aan de zijkant van de resultaten en een gerasterd vierkant dat een gebruiker kan vullen met kleuren uit het palet om de zoekopdracht te ziften. Als u bijvoorbeeld naar een tijger met een blauwe lucht wilt zoeken, vult u eenvoudig een paar rasters bovenaan het vierkant met blauw en zoekt u opnieuw naar tijger. Dit op kleuren gebaseerde filtersysteem elimineert de noodzaak om extra metadata of tags te gebruiken die de scène beschrijven. Hsiao-Wuen zegt dat een dergelijke interface relatief eenvoudig te integreren is in de huidige zoekmachines.

4. Oppervlak gaat 3-D

Surface lijkt de lieveling van Microsoft Research te zijn. Het multi-touch tafelblad is het spraakmakende project dat de snelle weg van het lab naar de consument heeft gebracht. En nu, Andy Wilson , richt een van de onderzoekers die aan Surface hebben gewerkt zijn aandacht op een aanraakinterface in de lucht.



Op TechFest demonstreerde Wilson een projector-en-infraroodcamerasysteem dat beelden produceert in een koepel en gebaren van mensenhanden kan herkennen. In de demo werden beelden van Microsoft's World Wide Telescope, die een virtuele rondleiding door de nachtelijke hemel biedt, op de koepel geprojecteerd; een onderzoeker pante en zoomde over de sterren met een handgebaar en een kneepje in de duim. Wilson gelooft dat zijn team het systeem zo goedkoop kan bouwen dat het kan worden gebruikt in planetaria op school, of overal waar mensen willen communiceren met grote, panoramische projecties.

zich verstoppen