Institut des Transformations Numériques
Lors du concert d’inauguration de l’Institut des Transformations Numériques, qui aura lieu le 5 décembre 2023 au soir, dans la salle Cortot à Paris, une vidéo sera projetée pendant le concert. Cette vidéo montrera les avatars des artistes Yan Pei-ming, Yang Jiechang et Shen Yuan interagir avec un monde virtuel en 3D.
Afin de créer cette vidéo, votre rôle dans ce projet sera de créer les interfaces d’interactions avec le monde virtuel que les artistes cités plus haut utiliseront en amont du concert. Il s’agira de permettre aux artistes d’écouter de la musique, et d’exprimer leur émotions sous diverses formes (création de formes 3D par le mouvement de leur corps par exemple) dans l’univers 3D grâce a un casque de réalité virtuelle et des manettes permettant la capture de leur mouvements.
La vidéo finale, montrera les avatars des artistes en train de créer des objets 3D (graphiques, sonores) en réaction à l’écoute d’un extrait de la 3ème symphonie de Pierre Wissmer. Leur évolution sera montrée dans des décors variés fournis par la société AIKA qui participera au projet. Cette création, et donc l’expression des émotions des artistes, sera donc synchronisée avec la musique produite en live par les musiciens dans la salle Cortot.
Le travail des élèves consistera donc a mettre en place cette interface d’expression en réalité virtuelle. La première étape sera de discuter avec les artistes, les musiciens, et la curatrice (Martina Koeppel-Yang), pour échanger sur les émotions qu’ils souhaitent transmettre et la nature des expressions possibles dans l’environnement virtuel.
Si le projet le permet, une seconde étape pourra consister à intégrer un système de participation du public, lequel saisira des mots correspondant à leurs émotions sur leur smartphone. Le système génèrera en sortie des des objets graphiques en utilisant des réseaux de neurones génératifs de type GAN (generative adversarial networks). Ainsi, des objets graphiques, issus de l’émotion du groupe, seront générés pendant le concert.