Pour le renouveau du SEGA Tokyo Joypolis, j'étais en charge de la direction technique image, couvrant le projection mapping de la structure de la scène principale et la création d'un personnage virtuel 3D live.

Le personnage virtuel pouvait danser aux côtés de vrais performers et communiquer avec le public en temps réel. Basé sur la motion capture et le rendu en temps réel, ses mouvements, expressions et lip sync étaient tous pilotés en direct, entièrement synchronisés avec l'éclairage scénique. Ce qu'on appellerait aujourd'hui un VTuber, c'était une tentative précoce et ambitieuse d'amener une personnalité virtuelle dans un contexte de divertissement live, à une époque où peu avaient tenté quelque chose de ce genre.

Pour le projection mapping, la forme complexe de la structure scénique nécessitait un workflow de contenu soigneusement conçu. J'ai construit un plugin After Effects pour unifier les différents formats de templates utilisés par les créateurs en un seul format prêt pour le media server.

Le projet a réuni des créateurs CG, des directeurs de scène et des danseurs, en faisant autant une collaboration humaine que technique.