In China kunnen doven en slechthorenden binnenkort met behulp van een Kinect-camera via gebarentaal communiceren met hun computer en met anderen die geen gebarentaal beheersen.

Onderzoekers aan de Chinese Academy of Science (CAS) hebben de afgelopen jaren onderzoek gedaan naar het herkennen van gebarentaal op een computer. Op basis van hun bevindingen, ontwikkelden ze software die losse woorden en hele zinnen kan herkennen. De software zet gebaren dus om in tekst, vergelijkbaar met spraakbesturing.

Op deze manier kunnen doven en slechthorenden op termijn niet alleen communiceren met hun computer, maar ook communiceren met anderen die geen gebarentaal beheersen. De software zet hun gebaren om in tekst en de persoon aan de andere kant van de lijn kan tekst invoeren die door een avatar in gebarentaal wordt omgezet.

Xbox camera
Het herkennen van gebaren werd in eerste instantie getest met speciale handschoenen die data over de handbewegingen doorstuurde naar de computer. Ook werd gebruik gemaakt van speciale camera's. Voor het uiteindelijke concept werd de Kinect gebruikt. Deze camera herkent bewegingen voor de besturing van de spelcomputer Xbox en kan worden ingezet bij het oppakken van gebarentaal.

In onderstaand filmpje is een voorbeeld te zien van hoe de software werkt:

Nabije toekomst
'We vinden dat IT het dagelijks leven van alle mensen zou moeten verbeteren. We hopen daarom dat deze ontwikkeling het gat kan dichten tussen de horenden en de doven en slechthorenden', aldus de onderzoeksmanager van Microsoft Research.

De uiteindelijke resultaten zouden tot nu toe 'veelbelovend' zijn volgens de onderzoekers aan de CAS. Wanneer het programma breed beschikbaar komt voor consumenten is niet bekend. Maar er wordt wel gesproken van 'de nabije toekomst'.

Bron: Nu.nl