"Wissenschaftliches Verständnis und Entwicklung bildbasierter Technologien zur Erkennung und Übersetzung kontinuierlicher Gebärdensprache"
Systemspezifikationen
Die Spezifikationen des Systems sind wie folgt:
- Multimodalität: Informationen werden von beiden Händen, Gesichtsausdruck und Kopf-/Körperposition extrahiert
- Mehr Natürlichkeit: nicht-invasives System (keine speziellen Handschuhe oder Marker)
- Robustheit und Selbstadaption auf wechselnde Umgebung: Hintergrund, Lichtverhältnisse und Kleidung des Gebärdenden.
- Unabhängigkeit vom aktuell Gebärdenden
- Kontextabhängige Übersetzung: kontinuierliche Gebärdensprachenübersetzung innerhalb eines Kontexts statt lediglicher Identifizierung einzelner Gebärden; es wird berücksichtigt wo die Gebärde im Gebärdenraum ausgefuehrt wird
- Mehrsprachigkeit: die Hauptsprache ist die Niederländische Gebärdensprache (NGT), jedoch soll das System auf weiteren Gebärdensprachen getestet werden (wenn entsprechende Korpora vorhanden sind).
- Modellierung der Handhabung räumlicher Referenzen: Referenzen im Gebärdenraum treten häufig auf um Bezug auf vorher festgesetzte Personen oder Objekte im Gebärdenraum zu nehmen.
- Softwareintegration: die verschiedenen Softwaremodule werden in einer einzelnen Anwendung ablaufen; eine grafische Benutzeroberfläche (GUI) wird den Übersetzungsprozess kontrollieren und anzeigen.
- Keine Echtzeitdemonstration: der Echtzeitfaktor für die Übersetung von NGT liegt bei ca. 20.