Cyberpunk 2077 utilise des animations basées sur l'IA pour la synchronisation labiale en 10 langues
Le dialogue vocal de Cyberpunk 2077 prendra en charge la synchronisation labiale et les animations faciales dans 10 langues différentes grâce à la puissance de la technologie IA.
Cyberpunk 2077 est à moins d'un mois de la sortie et il a été révélé qu'il utilise l'IA pour faire correspondre les animations de synchronisation labiale dans 10 langues différentes. Le jeu devrait prendre en charge un total de 18 langues différentes au lancement, seules les 10 susmentionnées étant pleinement exprimées. Pour le reste, les joueurs pourront activer les sous-titres du jeu, qui peuvent également être personnalisés par les joueurs selon leurs préférences.
Dans d'autres jeux, l'animation faciale et vocale est généralement réalisée avec des acteurs et des plates-formes de capture de mouvement, et bien que cette approche mène à des animations plus détaillées et expressives, elle limite généralement les animations à un seul langage, ce qui était le cas avec Fantôme de Tsushima. Bien que le jeu prenne en charge les dialogues doublés en anglais et en japonais, les animations n'étaient disponibles que pour l'option de langue anglaise, de sorte que le dialogue dans le dub japonais n'avait pas l'air naturel avec le manque d'animations synchronisées.
Cliquez sur le bouton ci-dessous pour démarrer cet article en vue rapide.
Pour Cyberpunk 2077, CD Projekt Red a sollicité l’aide de la technologie de Jali Research pour réaliser les animations faciales et les dialogues multilingues du jeu. Dans une récente présentation de Jali Research, le co-fondateur Chris Landreth explique comment l'entreprise a pu réaliser le système d'animation de dialogue basé sur l'IA pour Cyberpunk 2077, qui comprend un modèle acoustique, un dictionnaire de prononciation et un modèle G2P (graphème à phonème) pour chacune de ses 10 langues de dialogue prises en charge, qui comprennent actuellement l'anglais, le français, l'allemand, le japonais, le portugais brésilien, le polonais, le russe et le mandarin , Italien et espagnol.
La présentation montre comment le système construit non seulement les animations de synchronisation labiale du personnage, mais également le reste des animations faciales en fonction de la langue spécifique et du degré d'inflexion de la langue. Enfin, Jali montre également comment la technologie utilise le balisage de transcription pour animer le dialogue des personnages bilingues et basculer entre plusieurs langues en une seule phrase. On ne sait pas quelle proportion du dialogue du jeu sera exprimée, mais la quantité de dialogue dans Cyberpunk 2077 semble être incroyablement massif.
La présentation montre combien de travail et d'efforts CD Projekt RED déploie pour faire Cyberpunk 2077 un jeu incroyablement impressionnant, qui a malheureusement conduit l'entreprise à mettre en œuvre un resserrement de dernière minute. Espérons que tout le temps et tout le travail que les développeurs et ses partenaires, comme Jali Research, ont investis dans le jeu portent leurs fruits et qu'il remporte encore plus de succès que le succès précédent du studio The Witcher 3.
Cyberpunk 2077 La sortie est prévue le 19 novembre sur PlayStation 5, Xbox Series X / S, PS4, Xbox One, PC et Google Stadia.
Source: Jali Research / YouTube