Vidu 1.0

Geavanceerde tekst naar video

Met de tekst-naar-videofunctie van Vidu 1.0 kunnen gebruikers op basis van eenvoudige tekstberichten video's met een hoge definitie (1080p) van maximaal 16 seconden genereren.

Vidu 1.0 is gebaseerd op een zelfontwikkelde visuele transformatiemodelarchitectuur die bekendstaat als de Universal Vision Transformer (U-ViT) en integreert twee krachtige tekst-naar-video AI-modellen: de Diffusion en de Transformer. Hiermee kunnen realistische natuurkundige wetten, complexe gezichtsuitdrukkingen en dynamische camerabewegingen worden gesimuleerd. Dit resulteert in video's die niet alleen esthetisch aantrekkelijk zijn, maar ook contextueel rijk.

Krachtige afbeelding naar video

De image-to-video-functie van Vidu 1.0 biedt een innovatieve manier om stilstaande beelden in slechts enkele seconden te animeren tot dynamische videocontent. Gebruikers kunnen een afbeelding uploaden en gebruikmaken van Vidu's geavanceerde algoritmen om animaties te genereren die de originele context behouden en deze tegelijkertijd voorzien van creativiteit.

Invoertekst	Invoer afbeelding	Uitvoervideo
Een blonde vrouw met blauwe ogen loopt langs het strand.

Verwijzing naar video

Met de referentie-naar-video-functie van Vidu 1.0 kunnen gebruikers karakterconsistente video's maken. Deze mogelijkheid is essentieel voor makers die coherentie in onderwerpen, instellingen en visuele stijlen nodig hebben.

Doordat gebruikers referentiebeelden kunnen uploaden, zorgt Vidu AI ervoor dat personages en objecten hun uiterlijk behouden in verschillende scènes.

Gebruikers kunnen ook referentiebeelden van elke omgeving uploaden en beschrijvende trefwoorden gebruiken om nieuwe elementen in de scènes te introduceren, of het nu gaat om een ​​personage, dier of object.

Bovendien gaat de tool van Vidu AI verder dan simpele karakterconsistentie. Het stelt makers in staat om moeiteloos verschillende onderwerpen en omgevingen aan elkaar te koppelen.

Invoertekst	Invoer afbeelding	Uitvoervideo
Een mysterieus blauw wezen met lange oren kruipt door het bos, omgeven door de stille ambiance van de nacht. De camera beweegt achteruit en legt een close-up shot vast.

Verschillende videosjablonen

Vidu AI biedt een breed scala aan boeiende videosjablonen om uit te kiezen, waardoor gebruikers eenvoudig dynamische en creatieve content kunnen maken. Deze sjablonen bevatten unieke AI-aangedreven functies zoals AI-knuffelen en AI-zoenen, die een vleugje speelsheid en innovatie toevoegen aan videogeneratie.

Invoertekst	Uitvoervideo

Vidu AI's team, technologie en impact

Vidu 1.0 wordt aangestuurd door het Universal Vision Transformer (U-ViT)-model, ontwikkeld door hoofdwetenschapper Zhu Jun en zijn team bij Shengshu. U-ViT, geïntroduceerd in een onderzoekspaper uit 2022, combineert transformator- en diffusie-algoritmen, waardoor een robuuste architectuur ontstaat voor het genereren van diverse video-uitvoer.

Sinds de lancering heeft Vidu AI aandacht gekregen in de filmindustrie. Met name de Chinese regisseur Li Ning zou Vidu AI en andere generatieve AI-tools gebruiken om China's eerste volledig door AI gegenereerde film te produceren, die later dit jaar uitkomt. Het vermogen van het platform om visuele consistentie tussen scènes te behouden, is cruciaal voor dit innovatieve project, dat het potentieel van AI laat zien bij het transformeren van toekomstige filmproductie.