Laptop übersetzt Gebärdensprache
US-Forscher haben eine Wörterbuchsoftware für Gehörlose entwickelt, die Eingaben per Kamera akzeptiert.
Forscher an der Boston University (BU) arbeiten an einem durchsuchbaren elektronischen Wörterbuch der Gebärdensprache, bei dem der Benutzer eine Gebärde über die Kamera seines Rechners eingeben kann. Das sensorlose System soll von jedem Nutzer mit einem entsprechend ausgestatteten Laptop und einer Internetverbindung genutzt werden können, berichtet Technology Review in seiner Online-Ausgabe. "Wenn man beispielsweise bei YouTube einige Gebärden sieht, muss man dann in geschriebener Sprache danach suchen", sagt Stan Sclaroff, Professor für Computerwissenschaften an der BU. Das sei in etwa so, als würde man nach spanischen Texten fahnden, indem man die englische Übersetzung eingebe. "Das ist unnatürlich und außerdem ungerecht."
Sclaroff entwickelt sein Wörterbuch in Zusammenarbeit mit Carol Neidle, Professorin für Linguistik an der BU und Vassilis Athitsos vom Institut für Computer- und Ingenieurwissenschaften der University of Texas in Arlington. Sobald ein Nutzer eine Gebärde eingegeben hat, wird sie von der Software analysiert – sie zeigt daraufhin die fünf bestmöglichen Treffer und ihre Bedeutungen. Das Projekt gilt in seinem Umfang als bislang einzigartig im Forschungsfeld der Gebärdenspracherkennung.
Um die Algorithmen mit entsprechenden Daten zu füttern, bat das BU-Team mehrere Gebärdenmuttersprachler in ein Studio. Jeder musste einzeln 3000 Gebärden der klassischen amerikanischen Gebärdensprache (American Sign Language, ASL) in eine Kamera vorführen. Dabei nahmen vier Hochgeschwindigkeitskameras mit hoher Auflösung das Bild von vorne und seitlich auf, außerdem die jeweiligen Gesichtsausdrücke, die die Bedeutung unterstreichen können. Sclaroff hofft, dass seine Technologie in einer späteren Form auch dazu verwendet werden kann, mit Gebärden im Internet zu surfen.
Mehr zum Thema in Technology Review online:
(bsc)
