Thèse de Julia Cohen


Sujet :
Reconnaissance d’objets et d’actions pour interagir avec un système de réalité augmentée

Résumé :

L'objectif de la thèse est d’analyser des vidéos égocentriques contenant des actions d'assemblage de pièces faites par une personne dans une chaine d’assemblage d’une usine. Nous voudrions proposer un ensemble de modèles capables de détecter des indices visuels (objets), spatio-temporels (mouvements) et sémantiques (relations entre actions et objets) qui permettraient de reconnaitre les tâches réalisées par un opérateur humain et de mesurer leur qualité. La reconnaissance de ces éléments a pour but de permettre à un système d’information intelligent (S2I) de venir à l’aide d’un opérateur dès qu’un doute se pose, ou d’intervenir, quand une action faite n’est pas en accord avec la tâche cible. En d’autres termes, nous voudrions développer des modules pour la détection d’actions et des objets-clé qui permettront des interactions entre l’opérateur et le S2I développé par le groupe DEMS. 


Encadrant : Laure Tougne
Co-encadrant : Carlos Crispim-Junior