Rushs hour #30 : IA et image vidéo : le cas d’un projet de recherche autour des arts du spectacle

A cette occasion, nous avons l'honneur de recevoir Philippe COLANTONI, Vice-président délégué à la Stratégie numérique, Maître de conférences en Génie informatique, automatique et traitement du signal à la Faculté des Sciences et Techniques de l'Université Jean Monnet Saint-Étienne qui nous présentera le projet PREMIERE.

Le projet européen PREMIERE (Performing arts in a new era: AI and XR tools for better understanding, preservation, enjoyment, and accessibility) vise à développer un ensemble d'outils capables de comprendre et de reconstruire, en 2D et 3D, le contenu de vidéos issues d'archives ou produites par nos soins.

Les techniques employées pour ces outils associent des méthodes de vision par ordinateur à des outils d'intelligence artificielle, nous permettant d'extraire de vidéos des informations variées, telles que la détection, la segmentation et le suivi d'humains et/ou d'objets ; la détection des poses 2D et 3D de danseurs ou d'acteurs ; la reconstruction 3D de l'environnement dans lequel évoluent ces danseurs/acteurs ; la détection des éclairages ainsi que les expressions faciales.

Ces informations, une fois extraites, sont ensuite utilisées pour réaliser des analyses complexes, permettant non seulement une compréhension approfondie des performances artistiques, mais aussi leur préservation, leur appréciation et l'amélioration de leur accessibilité grâce à des outils de réalité étendue.