Een app om gebarentaal om te zetten in tekst

Wetenschappers werken aan een app die volgens hen als een soort vertaler voor doven zou kunnen fungeren. In het bijzonder zou de app de videocamera op een draagbaar apparaat gebruiken om gebarentaal vast te leggen en als tekst weer te geven. De technologie, ontwikkeld door Technabling, een spin-out van de Universiteit van Aberdeen, wordt de draagbare gebarentaalvertaler genoemd, of PSLT .





Zei Ernesto Compatangelo, een van de ontwikkelaars van de technologie, in een stelling : De gebruiker logt in op een standaardcamera die is geïntegreerd in een laptop, netbook, smartphone of ander draagbaar apparaat zoals een tablet. Hun tekens worden onmiddellijk vertaald in tekst, die kan worden gelezen door de persoon met wie ze praten ... Het is de bedoeling om een ​​applicatie te ontwikkelen - een 'app' in smartphonetermen - die gemakkelijk toegankelijk is en op verschillende apparaten kan worden gebruikt, waaronder smartphones, laptops en pc's.

Ik moet bekennen dat ik minimale persoonlijke ervaring heb met het communiceren met doven, dus het is moeilijk voor mij om erachter te komen hoe deze app precies effectiever zou zijn dan, laten we zeggen, het gebruik van blok en papier om te communiceren. Zou de dove gebruiker het apparaat op afstand moeten plaatsen, tekenen en het apparaat vervolgens aan zijn gesprekspartner moeten overhandigen om te lezen? Het lijkt mij dat de beste manier voor deze app om een ​​naadloze, Babelfish-achtige ervaring mogelijk te maken, zou zijn als de horende persoon zijn smartphone met de app laadt, zijn camera heeft gericht op de persoon die ondertekent, en bovendien hoofdtelefoon die de tekst onmiddellijk omzet in spraak. Technabling lijkt zich voorlopig te concentreren op de technologie voor gebarenherkenning en is minder bezorgd over hoe de technologie precies in app-vorm zou worden geïmplementeerd.

Afgezien van de exacte manier van implementeren, zijn er eigenlijk andere, minder intuïtieve redenen om enthousiast te worden over zo'n app. Een van de coolste dingen van de app is dat gebruikers hiermee hun eigen privé- of semi-privétalen kunnen maken. Schrijft Technabling:



Dit betekent dat elke ondertekenaar haar/zijn eigen reeks tekens kan maken en ... en hun eigen woorden en concepten aan hen kan associëren. Op deze manier kunnen ondertekenaars de huidige communicatiekloof met de bredere gemeenschap om hen heen overbruggen, en kunnen ze elk jargon gebruiken dat ze nodig hebben in elke situatie waarin ze zich bevinden ( bijv. , in het onderwijs, in opleiding, op het werk, thuis, onderweg).

Met andere woorden, stel dat je slechthorend bent en dat je ook enorm geïnteresseerd bent in informatica. Er komt voortdurend veel nieuw jargon en terminologie bij in de informatica, maar het is onwaarschijnlijk dat de Amerikaanse gebarentaal al dat jargon kan bijhouden. Je zou de app kunnen gebruiken om tekens uit te vinden om dit jargon uit te drukken, zodat je de moeite bespaart om elk woord letter voor letter te moeten spellen.

De wetenschappers zien ook een mogelijke toepassing waarbij helemaal geen sprake is van doof of slechthorend zijn. Ze denken dat mensen met beperkte mobiliteit en spraakproblemen als gevolg van een slechte gezondheid of ongelukken de technologie ook kunnen gebruiken om commando's te geven aan slimme apparaten in huis, met behulp van een eenvoudige maar effectieve reeks handgebaren die zijn afgestemd op hun fysieke mogelijkheden. Met andere woorden, de app zou uiteindelijk zoiets kunnen worden als een veel slimmere versie van die klap-aan-klap-lichten waarvan de commercials zo'n 30 jaar geleden een parodie op speelplaatsen waren.



zich verstoppen