"Compréhension scientifique et développement technologique basé sur la vision artificielle pour la reconnaissance et la traduction du langage des signes continu"
Spécifications du Système
Les spécifications du système sont résumées par les points suivants:
- Système multimodal: Information extraite des deux mains, de l'expression du visage, de la position de la tête/du corps.
- Plus naturel: système non invasif (pas de gants et pas de marqueurs)
- Robuste et auto-adaptatif au changement des conditions ambiantes: arrière-plan, illumination et vêtements du signeur.
- Indépendant au signeur
- Traduction contextuelle: traduction du langage des signes continu au sein d'un contexte, et non simplement en identifiant des signes isolés; on prendra en compte où les signes sont exécutés dans l'espace de communication.
- Polyglotte: le langage principalement visé est le Langage des Signes des Pays-Bas, bien que le système sera aussi évalué avec d'autres Langages des Signes (en fonction des corpora disponibles).
- Modélisation de la Gestion de Référence Spatiale: les références dans l'espace de communication apparaissent assez souvent se rapporter à des objets précédemment placés dans l'espace virtuel de communication.
- Intégration du logiciel: les différents modules logiciels tourneront sous une seule application; un environnement graphique (GUI) contrôlera et surveillera le processus de traduction.
- Ce ne sera pas un démonstrateur fonctionnant en temps réel: un facteur temps réel d'environ 20 pour traduire le NGT.