Wonder Dynamics est une plateforme d'effets visuels alimentée par l'IA qui automatise le processus d'intégration des personnages CG dans le métrage en action réelle, réduisant considérablement le temps, le coût et l'expertise technique traditionnellement requis pour les travaux d'effets visuels dirigés par des personnages. Le produit phare de la plateforme, Wonder Studio, utilise l'IA pour détecter automatiquement les acteurs dans le métrage vidéo et les remplacer par des personnages 3D générés par ordinateur, en gérant la capture de mouvement, le suivi du corps, l'estimation de l'éclairage et la composition de scène dans un pipeline automatisé unique. Le système analyse chaque image du métrage en action réelle pour extraire la performance de l'acteur, notamment le mouvement du corps, les expressions faciales et les mouvements des mains, puis transfère ces données de performance sur un modèle de personnage 3D fourni par l'utilisateur tout en correspondant aux conditions d'éclairage de la scène et à la perspective de la caméra. Wonder Dynamics a été fondée par Nikola Todorovic et Tye Sheridan, l'acteur connu pour son rôle dans Ready Player One, avec la mission de démocratiser les effets visuels haut de gamme pour les cinéastes indépendants et les petits studios. La plateforme élimine le besoin de costumes de capture de mouvement, d'environnements de studio spécialisés et de grandes équipes d'effets visuels, permettant aux créateurs individuels et aux petites équipes de produire des effets visuels qui exigeaient auparavant des budgets et une infrastructure au niveau des entreprises. Wonder Dynamics supporte les uploads de personnages 3D personnalisés et fournit une bibliothèque de personnages prédéfinis. La plateforme sort les éléments d'effets visuels séparés, y compris la passe de personnage CG, la plaque propre, le masque alpha et les données de mouvement, permettant aux artistes d'effets visuels professionnels d'affiner davantage les résultats dans leur logiciel de composition préféré. En 2023, Wonder Dynamics a été acquise par Autodesk pour intégrer ses capacités d'IA dans les flux de travail d'effets visuels et d'animation professionnels.

Générateurs 3D IA

Wonder Dynamics génère des performances de personnages 3D complètes à partir d'une entrée vidéo 2D, créant des rendus de personnages 3D animés avec un éclairage approprié, une perspective et un compositing corrects. La plateforme convertit les séquences vidéo plates en éléments d'effets visuels 3D en couches adaptés à la production cinématographique et télévisuelle professionnelle.

Outils d'animation IA

Wonder Dynamics automatise l'animation de personnages en extrayant les performances d'acteurs à partir de vidéo en action réelle et en les transférant sur des personnages CG 3D. La plateforme gère la capture de mouvement, l'animation faciale et le suivi du corps sans matériel spécialisé, rendant l'animation de personnages accessible aux cinéastes sans pipelines d'animation traditionnels.

Outils de deepfake IA

Wonder Dynamics effectue le remplacement d'acteur dans les séquences vidéo en utilisant l'IA, en substituant les acteurs réels par des personnages CG tout en préservant les nuances de performance incluant le langage corporel, les expressions faciales et les schémas de mouvement. Cette technologie partage des concepts sous-jacents avec les techniques de deepfake mais les applique à des fins légitimes de production cinématographique.

Editeurs video IA

Wonder Dynamics fonctionne comme un outil d'édition vidéo par IA qui transforme les séquences d'action en direct en remplaçant les acteurs par des personnages CG tout en maintenant la cohérence de la scène. La plateforme produit des couches VFX séparées incluant les passes de personnage, les plaques propres et les masques alpha pour l'intégration dans les flux de travail d'édition vidéo professionnels.

Modeles video IA

Wonder Dynamics emploie des modèles d'analyse vidéo IA sophistiqués qui comprennent le mouvement humain, l'éclairage des scènes, la perspective de la caméra et les relations spatiales dans les séquences vidéo. Ces modèles permettent l'intégration automatisée d'effets visuels qui nécessiterait traditionnellement un travail manuel image par image de la part d'artistes en effets visuels.