OmniHuman-1 : L’IA de ByteDance qui anime une photo en vidéo ultra-réaliste

ByteDance marque un grand coup avec OmniHuman-1, une intelligence artificielle révolutionnaire capable de transformer une simple photo en vidéo hyperréaliste. Grâce à cette technologie, une image statique prend vie : le sujet peut parler, chanter et bouger de manière fluide. De plus, l’IA reproduit avec une précision impressionnante les gestes et les expressions faciales, rendant l’animation encore plus réaliste.

Une avancée majeure dans l’animation humaine par IA

Dans un article publié sur arXiv, les chercheurs de ByteDance expliquent que l’animation humaine de bout en bout a connu d’énormes progrès ces dernières années. Cependant, la plupart des modèles existants peinent encore à atteindre l’échelle des grands générateurs de vidéos généralistes, limitant ainsi leur usage dans des applications concrètes. OmniHuman-1 semble bien décidé à repousser ces limites.

Pour obtenir des résultats aussi bluffants, ByteDance a entraîné son IA sur plus de 18 700 heures de vidéos humaines, en combinant différents types de données : texte, audio et mouvements corporels. Cette approche permet une synchronisation quasi parfaite entre les paroles et les gestes des personnages générés.

Des vidéos ultra-réalistes de personnalités célèbres

Les capacités de OmniHuman-1 ouvrent des perspectives fascinantes. ByteDance a déjà présenté plusieurs exemples de vidéos créées par son IA, dont :

• Un jeune Albert Einstein expliquant des concepts scientifiques.

• Jensen Huang, PDG de NVIDIA, en train de rapper.

• Taylor Swift chantant en japonais.

Ces démonstrations illustrent le potentiel immense de cette technologie pour l’industrie du divertissement, l’éducation et la communication numérique.