De geest van een robot zien in augmented reality

Justin Saglio

Toen de verhuizers vorige week naar het roboticalab van de Brown University van Stefanie Tellex kwamen, keken haar studenten met belangstelling toe. Kijk hoe ze behendig samenwerkten om een ​​bank op te pakken met lichaamstaal, oogcontact en slechts een paar commando's, zoals 1-2-3 … optillen.

Kunnen robots en mensen net zo soepel samenwerken? Dat is het doel van onderzoek in het Tellex-lab, dat zowel robots als mensen de tools probeert te geven om elkaar een beetje beter te begrijpen en vloeiender samen te werken in echte omgevingen.

Sommige robots, zoals de Roomba-stofzuiger, hebben eigenlijk maar één commando nodig: schoonmaken of stoppen. Dat is de juiste interface voor een Roomba, maar we zien robots verder gaan dan een enkele functie. We willen ze graag alles kunnen vertellen wat binnen de fysieke mogelijkheden van de robot ligt, zegt Tellex. Ik werk aan een systeem waarbij je als een mens tegen de robot praat. Je zegt: 'Zet de kist daar' en de robot zoekt het uit.'

Dat is een moeilijk probleem, niet in de laatste plaats omdat er veel manieren zijn om te beschrijven wat je gedaan wilt hebben. (Ik hoef alleen maar te denken aan wat er gebeurt als mijn vrouw en ik - geen deskundige verhuizers - proberen onze eigen bank te verplaatsen.)

In werk dat vorig jaar werd gepresenteerd, gebruikte het team van Tellex een spraakinterface om te zien of een persoon en een grijprobot konden samenwerken om uit een groep vergelijkbare objecten op een tafel te kiezen, inclusief kommen, markeringen en lepels. Een commando als Mag ik die kom hebben? zou de robot in twijfel kunnen trekken. Dus programmeerden ze de robot om enkele verhelderende vragen te stellen, zoals deze?

De Brown-groep nodigde 16 vrijwilligers uit in het laboratorium en ontdekte dat de robots met zo'n mini-dialoog de klus ongeveer 25 procent sneller en nauwkeuriger klaren. Ook dachten mensen dat de robot een stuk slimmer was dan hij in werkelijkheid is. Het was zo goed dat mensen dachten dat het systeem zinnen als 'links van' kon begrijpen, zelfs als dat niet het geval was. Maar het zou een vraag stellen, dus het leek alsof het het begreep, zegt Tellex.

De volgende stap van het project, geleid door promovendus David Whitney, is het combineren van verbale commando's met de augmented-reality-headset HoloLens.

Gedurende MIT Technology Review 's EmTech Next-conferentie Ik heb de setup geprobeerd, die de spookachtige paarskleurige gebruikersversies van de robot laat zien die de acties weergeven die hij van plan is te maken, zodat je ze indien nodig kunt repareren of verfijnen.

Hier is het doel om in de geest van de robot te kruipen, zegt Whitney. Goede verhuizers gebruiken veel lichaamstaal, maar robots lijken niet op ons, zegt hij. Dit is dus een manier om informatie over de robot te visualiseren - wat denkt hij?'

zich verstoppen