Vidu 1.0

Erweiterte Text-zu-Video-Funktion

Mit der Text-zu-Video-Funktion von Vidu 1.0 können Benutzer aus einfachen Textaufforderungen hochauflösende (1080p) Videos mit einer Länge von bis zu 16 Sekunden erstellen.

Vidu 1.0 basiert auf einer selbst entwickelten Architektur für visuelle Transformationsmodelle namens Universal Vision Transformer (U-ViT) und integriert zwei leistungsstarke Text-zu-Video-KI-Modelle: Diffusion und Transformer. Dadurch kann es reale Physik, komplexe Gesichtsausdrücke und dynamische Kamerabewegungen simulieren, wodurch Videos entstehen, die nicht nur ästhetisch ansprechend, sondern auch kontextreich sind.

Leistungsstarke Bild-zu-Video

Die Bild-zu-Video-Funktion von Vidu 1.0 bietet eine innovative Möglichkeit, Standbilder in Sekundenschnelle in dynamische Videoinhalte umzuwandeln. Benutzer können ein Bild hochladen und die fortschrittlichen Algorithmen von Vidu nutzen, um Animationen zu erstellen, die den ursprünglichen Kontext beibehalten und gleichzeitig mit Kreativität versehen.

Eingabetext	Eingabebild	Ausgabevideo
Eine blonde Frau mit blauen Augen geht am Strand entlang.

Verweis auf Video

Mit der Referenz-auf-Video-Funktion von Vidu 1.0 können Benutzer Videos mit konsistenten Charakteren erstellen. Diese Funktion ist für Entwickler von entscheidender Bedeutung, die Kohärenz in Bezug auf Themen, Einstellungen und visuelle Stile benötigen.

Indem Benutzer Referenzbilder hochladen können, stellt Vidu AI sicher, dass Charaktere und Objekte ihr Erscheinungsbild in verschiedenen Szenen beibehalten.

Benutzer können außerdem Referenzbilder beliebiger Umgebungen hochladen und beschreibende Schlüsselwörter verwenden, um neue Elemente in die Szenen einzuführen, egal ob es sich um eine Figur, ein Tier oder ein Objekt handelt.

Darüber hinaus geht das Tool von Vidu AI über die einfache Zeichenkonsistenz hinaus. Es ermöglicht Entwicklern, verschiedene Themen und Umgebungen mühelos zusammenzufügen.

Eingabetext	Eingabebild	Ausgabevideo
Ein geheimnisvolles blaues Wesen mit langen Ohren kriecht durch den Wald, umgeben von der stillen Atmosphäre der Nacht. Die Kamera bewegt sich rückwärts und macht eine Nahaufnahme.

Verschiedene Videovorlagen

Vidu AI bietet eine große Auswahl an ansprechenden Videovorlagen, mit denen Benutzer ganz einfach dynamische und kreative Inhalte erstellen können. Diese Vorlagen enthalten einzigartige KI-gestützte Funktionen wie KI-Umarmungen und KI-Küsse, die der Videoerstellung einen Hauch von Verspieltheit und Innovation verleihen.

Eingabetext	Ausgabevideo

Team, Technologie und Wirkung von Vidu AI

Vidu 1.0 basiert auf dem Universal Vision Transformer (U-ViT)-Modell, das von Chefwissenschaftler Zhu Jun und seinem Team bei Shengshu entwickelt wurde. U-ViT wurde in einem Forschungspapier von 2022 vorgestellt und kombiniert Transformer- und Diffusionsalgorithmen und schafft so eine robuste Architektur zur Erzeugung vielfältiger Videoausgaben.

Seit seiner Einführung hat Vidu AI in der Filmbranche an Aufmerksamkeit gewonnen. Insbesondere der chinesische Regisseur Li Ning nutzt Berichten zufolge Vidu AI und andere generative KI-Tools, um Chinas ersten vollständig KI-generierten Film zu produzieren, der noch in diesem Jahr erscheinen soll. Die Fähigkeit der Plattform, die visuelle Konsistenz über Szenen hinweg aufrechtzuerhalten, ist für dieses innovative Projekt von entscheidender Bedeutung und zeigt das Potenzial der KI bei der Umgestaltung des zukünftigen Filmemachens.