Vidu 1.0

Zaawansowany tekst do wideo

Funkcja zamiany tekstu na wideo w Vidu 1.0 umożliwia użytkownikom generowanie filmów w wysokiej rozdzielczości (1080p) o długości do 16 sekund na podstawie prostych komunikatów tekstowych.

Zbudowany na bazie samodzielnie opracowanej architektury modelu transformacji wizualnej, znanej jako Universal Vision Transformer (U-ViT) , Vidu 1.0 integruje dwa zaawansowane modele AI przekształcające tekst w wideo: Diffusion i Transformer, co pozwala symulować fizykę świata rzeczywistego, skomplikowane mimiki twarzy i dynamiczne ruchy kamery. W rezultacie powstają filmy, które są nie tylko atrakcyjne pod względem estetycznym, ale także bogate w kontekst.

Potężny obraz do wideo

Funkcja image-to-video w Vidu 1.0 oferuje innowacyjny sposób animowania nieruchomych obrazów w dynamiczną treść wideo w ciągu zaledwie kilku sekund. Użytkownicy mogą przesłać obraz i wykorzystać zaawansowane algorytmy Vidu do generowania animacji, które zachowują oryginalny kontekst, jednocześnie nasycając go kreatywnością.

Wprowadź tekst	Wprowadź obraz	Wyjście wideo
Blondynka o niebieskich oczach spacerująca po plaży.

Odniesienie do wideo

Funkcja odniesień do wideo w Vidu 1.0 umożliwia użytkownikom tworzenie filmów o spójnej postaci. Ta możliwość jest niezbędna dla twórców, którzy wymagają spójności w tematach, ustawieniach i stylach wizualnych.

Umożliwiając użytkownikom przesyłanie obrazów referencyjnych, Vidu AI dba o to, aby postacie i obiekty zachowywały swój wygląd w różnych scenach.

Użytkownicy mogą również przesyłać obrazy referencyjne dowolnego otoczenia i wykorzystywać opisowe słowa kluczowe w celu wprowadzania nowych elementów do scen, niezależnie od tego, czy jest to postać, zwierzę czy przedmiot.

Co więcej, narzędzie Vidu AI wykracza poza prostą spójność postaci. Umożliwia twórcom bezproblemowe łączenie różnych tematów i środowisk.

Wprowadź tekst	Wprowadź obraz	Wyjście wideo
Tajemnicze niebieskie stworzenie z długimi uszami czołga się przez las, otoczone cichą atmosferą nocy. Kamera cofa się, rejestrując ujęcie z bliska.

Różne szablony wideo

Vidu AI oferuje szeroką gamę angażujących szablonów wideo do wyboru, umożliwiając użytkownikom łatwe tworzenie dynamicznych i kreatywnych treści. Szablony te obejmują unikalne funkcje oparte na AI, takie jak przytulanie AI i całowanie AI, które wnoszą odrobinę zabawy i innowacji do generowania wideo.

Wprowadź tekst	Wyjście wideo

Zespół, technologia i wpływ Vidu AI

Vidu 1.0 jest napędzany przez model uniwersalnego transformatora wizji (U-ViT), opracowany przez głównego naukowca Zhu Juna i jego zespół w Shengshu. Wprowadzony w artykule badawczym z 2022 r. U-ViT łączy algorytmy transformatora i dyfuzji, tworząc solidną architekturę do generowania różnorodnych wyjść wideo.

Od czasu premiery Vidu AI zyskało uwagę w branży filmowej. Co ciekawe, chiński reżyser Li Ning podobno używa Vidu AI i innych generatywnych narzędzi AI do produkcji pierwszego w Chinach filmu w pełni generowanego przez AI, który ma zostać wydany pod koniec tego roku. Możliwość platformy do zachowania spójności wizualnej w różnych scenach ma kluczowe znaczenie dla tego innowacyjnego projektu, pokazując potencjał AI w transformacji przyszłego tworzenia filmów.