Interface-opérateur multimodale et à réalité augmentée pour la téléprésence robotique à domicile

 

François Michaud

Université de Sherbrooke

 

Domaine : technologies de l'information et des communications

Programme projet de recherche en équipe

Concours 2011-2012

Les 2 principaux éléments d'un système de téléprésence sont la plateforme mobile et l'interface-opérateur. Bien qu'il soit possible d'avoir des robots pouvant être téléopérés à distance via Internet, les capacités perceptuelles de la plateforme ainsi que les modalités d'interaction à distance restent limitées. Cette demande vise le développement et la validation expérimentale d'une interface-opérateur multimodale de réalité augmentée qui intègre la représentation sous une seule vue du flux vidéo, d'une modélisation de l'environnement, de la localisation des sources sonores ainsi que des forces perçues par la plateforme dans l'environnement distant.

L'assistance à domicile de personnes en perte d'autonomie est le contexte d'applications privilégié. L'objectif poursuivi par notre équipe interdisciplinaire en génie et en réadaptation est d'arriver à satisfaire les exigences d'utilisabilité, d'acceptabilité et de sécurité inhérentes pour répondre à des besoins établis en téléréadaptation. La plateforme utilisée, parmi les robots mobiles interactifs les plus avancés au monde, est omnidirectionnelle et peut localiser les sons et percevoir les forces exercées sur elle par l'environnement. L'interface viendra construire, en ligne, un modèle en 3 dimensions de l'environnement à partir d'images, et permettra d'illustrer par des icônes la présence de sources sonores et de forces. Il devrait en résulter une meilleure perception de la situation et une diminution de la charge cognitive chez des opérateurs non-experts. L'évaluation du système de téléprésence se fera en laboratoire d'évaluation selon des scénarios réalistes d'exploitation du système.