Vidu 1.0

Conversion avancée de texte en vidéo

La fonction texte-vidéo de Vidu 1.0 permet aux utilisateurs de générer des vidéos haute définition (1080p) d'une durée maximale de 16 secondes à partir de simples invites de texte.

Construit sur une architecture de modèle de transformation visuelle auto-développée connue sous le nom de Universal Vision Transformer (U-ViT) , Vidu 1.0 intègre deux puissants modèles d'IA texte-vidéo : le Diffusion et le Transformer, lui permettant de simuler la physique du monde réel, des expressions faciales complexes et des mouvements de caméra dynamiques, ce qui donne lieu à des vidéos non seulement esthétiquement attrayantes mais également riches en contexte.

Une image puissante en vidéo

La fonction image-vidéo de Vidu 1.0 offre une manière innovante d'animer des images fixes en contenu vidéo dynamique en quelques secondes seulement. Les utilisateurs peuvent télécharger une image et exploiter les algorithmes avancés de Vidu pour générer des animations qui conservent le contexte d'origine tout en lui apportant de la créativité.

Texte d'entrée	Image d'entrée	Sortie vidéo
Une femme blonde aux yeux bleus marchant le long de la plage.

Référence à la vidéo

La fonction de référence à la vidéo de Vidu 1.0 permet aux utilisateurs de créer des vidéos cohérentes entre les personnages. Cette fonctionnalité est essentielle pour les créateurs qui ont besoin de cohérence dans les sujets, les paramètres et les styles visuels.

En permettant aux utilisateurs de télécharger des images de référence, Vidu AI garantit que les personnages et les objets conservent leur apparence dans différentes scènes.

Les utilisateurs peuvent également télécharger des images de référence de n’importe quel environnement et utiliser des mots-clés descriptifs pour introduire de nouveaux éléments dans les scènes, qu’il s’agisse d’un personnage, d’un animal ou d’un objet.

De plus, l'outil de Vidu AI va au-delà de la simple cohérence des personnages. Il permet aux créateurs d'assembler différents sujets et environnements sans effort.

Texte d'entrée	Image d'entrée	Sortie vidéo
Une mystérieuse créature bleue aux longues oreilles rampe dans la forêt, entourée par l'ambiance calme de la nuit. La caméra recule, capturant un gros plan.

Différents modèles de vidéos

Vidu AI propose une grande variété de modèles de vidéos attrayants parmi lesquels choisir, permettant aux utilisateurs de créer facilement du contenu dynamique et créatif. Ces modèles incluent des fonctionnalités uniques basées sur l'IA, telles que l'étreinte et le baiser par l'IA, qui apportent une touche de fantaisie et d'innovation à la génération de vidéos.

Texte d'entrée	Sortie vidéo

L'équipe, la technologie et l'impact de Vidu AI

Vidu 1.0 est basé sur le modèle de transformateur de vision universel (U-ViT), développé par le scientifique en chef Zhu Jun et son équipe chez Shengshu. Présenté dans un article de recherche de 2022, U-ViT combine des algorithmes de transformateur et de diffusion, créant une architecture robuste pour générer diverses sorties vidéo.

Depuis son lancement, Vidu AI a attiré l'attention de l'industrie cinématographique. Le réalisateur chinois Li Ning utiliserait notamment Vidu AI et d'autres outils d'IA générative pour produire le premier film chinois entièrement généré par l'IA, dont la sortie est prévue plus tard cette année. La capacité de la plateforme à maintenir la cohérence visuelle entre les scènes est cruciale pour ce projet innovant, qui démontre le potentiel de l'IA pour transformer le cinéma de demain.