Eerste stap naar computervertaling gebarentaalvideo`s

19-03-2015 algemeen

Een computer kan op basis van een tekst herkennen welke taal het is. Dit gebruikt de computer voor het maken van vertalingen. Maar gebarentaal herkennen is een stuk lastiger. Want heeft een persoon jeuk aan zijn neus of zegt hij iets?

Onderzoeker Binyam Gebrekidan Gebre heeft zich eraan gewaagd. Als onderdeel van zijn promotie voor de Radboud Universiteit in Nijmegen heeft hij een computerprogramma ontwikkeld dat gebarentaal kan herkennen. ‘Een moeilijke taak’, licht hij toe. ‘Gebarentaalgebruikers hebben allemaal een eigen stijl en ze zien er ook anders uit. Kleren, huidskleur, grootte van de handen, persoonlijke stijl. De computer moet leren om daar doorheen te kijken. Ook de opname van de video's verschilt sterk – het camerastandpunt, de belichting, de afstand. Ook dit compliceert de leertaak voor de computer.’

Hoe werkt het?
Het programma kan vooralsnog zes gebarentalen herkennen met een zuiverheid van 84%. Hierbij zijn er maar vier gebarenvaardige mensen per taal opgenomen en ingevoerd. Hoe meer data er ingevoerd worden hoe hoger de zuiverheid zal zijn. In ieder geval is het een eerste stap naar het vertalen van video’s in gebarentaal.

Toekomst
Het onderzoek zal in de toekomst gebarentaalonderzoekers helpen om video's uit te werken en kan gebruikt worden voor een zoeksysteem op basis van gebaren, of real time vertaling van gebarentaal in gesproken of geschreven taal. ‘Maar het doorzoeken van de inhoud van video's is ook van groot belang voor zoekmachinebouwers als Google.’

Binyam Gebrekidan Gebre
Binyam Gebrekidan Gebre promoveert op 9 april aan het Institute for Computer and Information Sciencede van Radboud Universiteit in Nijmegen. Het programma dat hij heeft ontwikkeld voor de herkenning van gebarentaal door computers, maakt hier deel van uit. Het Max Planck Instituut in Nijmegen heeft een project opgezet omtrent het automatisch uitschrijven van gebarentaal.

Gebaseerd op een artikel van EngineersOnline.


Reacties

Er zijn nog geen reacties Reageer

Geef een antwoord

Het e-mailadres wordt niet gepubliceerd.

Deze site gebruikt Akismet om spam te verminderen. Bekijk hoe je reactie-gegevens worden verwerkt.

Gerelateerde artikelen

Doof.nl maakt gebruik van cookies.

We gebruiken noodzakelijke cookies om onze website goed te laten werken.

Met jouw toestemming plaatsen wij statistische cookies die worden gebruikt om de website te testen en te verbeteren. De gegevens die we verzamelen zijn altijd anoniem.

Als je marketingcookies accepteert, wordt bij het afspelen van video's die wij via YouTube op onze site plaatsen informatie over jouw gebruik van onze site gedeeld met YouTube, voor social media, adverteren en analyse.

Lees meer

Noodzakelijke cookies helpen een website bruikbaarder te maken, door basisfuncties als paginanavigatie en toegang tot beveiligde gedeelten van de website mogelijk te maken. Zonder deze cookies kan de website niet naar behoren werken.

Lees meer

Statistische cookies helpen eigenaren van websites begrijpen hoe bezoekers hun website gebruiken, door anoniem gegevens te verzamelen en te rapporteren.

Lees meer

Onze website maakt zelf geen gebruik van marketingcookies. Bij het afspelen van video's die wij via YouTube op onze site plaatsen, worden wel marketingcookies geinstalleerd. Je kunt deze marketingcookies uitzetten, maar dan kun je de video's mogelijk niet meer afspelen.