Interaction vocale avec un environnement simulé

Descriptif

L'Ecole devait se doter d'un cadre expérimental permettant à la fois de travailler sur les nouvelles cibles informatiques très hétérogènes tout en immergeant l'utilisateur dans un environnement réel simulé. Le département SI de Polytech Nice Sophia est donc le porteur d'un projet innovant de «plate-forme expérimentale d'étude des usages des équipements informatiques mobiles en environnement simulé» appelé Ubiquarium soutenu ey co-financé par la région PACA, en partenariat avec divers acteurs locaux de la recherche et de l'industrie.

Grâce aux travaux d'étudiants de l'année passée, de nombreux équipements sont aujourd'hui logiciellement accessibles comme autant de serveurs UPnP que ce soit les dispositifs réels ou des dispositifs virtuels dans les scènes 3D qui simulent un environnement (intérieur de maison, d'hôpital, extérieur).

Sujet

Des équipements permettent d'interagir avec l'environnement simulé: joystick sans fil, potentiomètre, badges identifiant, ... Toutefois, pour rendre plus agréable les expérimentations et aussi plus variées, nous souhaiterions pouvoir lancer des commandes à la voix du type: "allumer la télévision", "éteindre la chaîne hifi", ...

Nous proposons donc d'utiliser l'environnement de développement (SDK) de Dragon Naturally Speaking afin de concevoir des Web Services permettant de faire la reconnaissance vocale d'un vocabulaire de commandes. Nous pourrons l'utiliser dans le cadre de l'interaction avec un environnement virtuel ou pour la commande de logiciels à la voix (projets DeViNT).

Le projet consistera en la définition du vocabulaire de commande adapté et de l'interface à donner aux services que vous déploierez.

Autres informations

• Nombre d'étudiants: 3 (plus ou moins 1)
• Encadrants: Stéphane Lavirotte, Jean-Paul Stromboni, Jean-Yves Tigli
• Organisme: Polytech'Nice Sophia
• Lieu du projet: Département Sciences Informatiques
• Langages: C#
• Matériels utilisés: Ubiquarium (salle 316) et tous les équipements
• Logiciels utilisés: Dragon Naturally Speaking SDK (Vocon 3200), WComp