Système intégré de traitement de la parole pour interaction humain-robot en réadaptation

 

François Michaud

Université de Sherbrooke

 

Domaine : technologies de l'information et des communications

Programme : projet de recherche en équipe

Concours 2017-2018

Afin d'arriver à interagir de manière naturelle avec un robot dans des environnements courants, il faut pouvoir faire l'acquisition et le traitement de la parole dans des conditions bruitées et variées. Avec l'arrivée récente et prochaine de dispositifs capables d'interaction vocale sur le marché, le traitement de la parole en milieux réels est un sujet de grand intérêt. Pour y arriver, il faut pouvoir faire le traitement de la parole distante (distant speech processing) au lieu de le faire qu'à partir de signaux captés à proximité des interlocuteurs. De plus, l'utilisation d'une plateforme logicielle d'intégration des modalités d'acquisition, de traitement, d'interprétation et d'interaction vocale permettrait de réaliser les expérimentations appropriées en offrant des capacités de visualisation et d'interprétation des données acquises dans les conditions non-contrôlées de la vie courante.

À cet effet, notre projet vise à ajouter à notre système d'acquisition embarqué et temps réel MARS (pour la localisation, le suivi et la séparation de sources sonores) la capacité de filtrer les signaux sonores volontairement émis par un robot et de rendre plus robuste et réactive les interactions vocales. MARS sera intégré à une plateforme complète de traitement de la parole, et utilisée pour la détection de la fatigue dans la voix, un besoin identifié chez des clientèles en réadaptation. Une base de données audio sera développée et mise disponible à la communauté scientifique pour des fins scientifiques. Tous les développements réalisés dans ce projet seront diffusés sous forme de logiciel libre, avec l'objectif qu'ils seront adoptés par la communauté scientifique afin de contribuer aux progrès scientifiques du domaine de l'audition artificielle en conditions naturelles d'interaction.