AI geeft Vlaamse Gebarentaal (VGT) een duwtje in de rug

(23-10-2024) Onderzoeker Mathieu De Coster werkt aan AI-toepassingen die Vlaamse Gebarentaal kunnen vertalen en toegankelijker maken.

Artificiële intelligentie (AI) is overal om ons heen: we bedienen apparaten met spraakherkenning en vertalen teksten moeiteloos. Maar gebarentaal blijft achter. Onderzoeker Mathieu De Coster brengt daar verandering in met zijn onderzoek naar AI en Vlaamse Gebarentaal (VGT).

De voornaamste redenen waarom gebarentaalherkenning minder ver staat dan spraakherkenning, zijn het gebrek aan beschikbare data en de noodzaak voor een samenwerking tussen taalkundigen en computerwetenschappers. "Gebarentaal is visueel en minstens even complex als gesproken taal. Daarom hebben we specifieke AI-modellen nodig die bewegingen en handvormen nauwkeurig kunnen herkennen," legt De Coster uit. In zijn proefschrift stelt hij vier mogelijke AI-toepassingen voor: automatische transcriptie van gebarentaal, een vertalend woordenboek VGT-Nederlands, automatische vertaling van gebarentaal naar geschreven tekst en apps om gebaren te leren.

De modellen in dit onderzoek kunnen handvormen en bewegingen herkennen, een belangrijke stap richting volwaardige gebarentaaltoepassingen. "We staan nog aan het begin, maar deze technologie kan in de toekomst echt het verschil maken voor dove en slechthorende mensen. Het zal communicatie veel toegankelijker maken voor iedereen," zegt De Coster.

Het onderzoek van De Coster legt de basis voor AI-systemen die binnen enkele jaren al beschikbaar kunnen zijn. "Dankzij AI kunnen we beginnende VGT-gebruikers helpen om hun taalvaardigheden verder te ontwikkelen, en tegelijkertijd een brug slaan tussen gebarentalen en geschreven talen," aldus De Coster. Spannend nieuws voor iedereen die met gebarentaal werkt of gebarentaal wil leren!

Lees een uitgebreidere samenvatting of het volledige doctoraat

-

Titel doctoraat: Neurale herkenning en vertaling van gebarentaal: naar toepassingen voor gebarentaal op basis van artificiële intelligentie

Promotoren:  Joni Dambre en Mieke Van Herreweghe

-

Redacteur: Jeroen Ongenae - Illustrator: Roger Van Hecke