Wan 2.1 (Alibaba)

Wan 1 en Wan 2 zijn versies van Alibaba's door AI aangedreven video-generatietool. Wan 1 is de eerste versie en biedt basisfuncties zoals het transformeren van tekst of afbeeldingen naar video's. Het legde de basis voor AI-gegenereerde videocontent. Wan 2, de geüpgrade versie, biedt geavanceerde mogelijkheden, waaronder verbeterde bewegingsnauwkeurigheid, multimodale contentcreatie (tekst-naar-video en afbeelding-naar-video) en krachtige bewerkingstools. Wan 2 richt zich op het leveren van visuals van hogere kwaliteit, soepelere workflows en meer creatieve opties. De overgang van Wan 1 naar Wan 2 laat aanzienlijke verbeteringen in functionaliteit zien, waardoor het een veelzijdiger en efficiënter platform is voor videoproductie.

Wan 2.1 is het geavanceerde video-generatiemodel van Alibaba Cloud dat tekstbeschrijvingen omzet in video's van hoge kwaliteit. Het maakt gebruik van geavanceerde technologieën zoals VAE (Variational Autoencoder) en DiT (Denoising Diffusion Transformer) om realistische resultaten te leveren met naadloze overgangen en nauwkeurige fysica.

Wan 2.1 onderscheidt zich met zijn uitstekende VBench-score van 84,7%, geavanceerde bewegingsgeneratiecapaciteiten en versies met zowel 14 miljard als 1,3 miljard parameters. Wan 2.1 beschikt over krachtige visuele dynamische generatiecapaciteiten, blinkt uit in conceptbegrip en combinatorische creaties. Het behandelt moeiteloos verschillende artistieke stijlen en levert visueel materiaal van filmkwaliteit. Daarnaast ondersteunt het meerdere talen en variabele resolutie-generatie.

Monica biedt gratis proefversies van Wan 2.1 aan met een eenvoudige registratie. De officiële release van Wan 2.1 bevat broncode en bronnen op GitHub en Hugging Face, waardoor ontwikkelaars het model kunnen verkennen, aanpassen en integreren in hun projecten.

Wan 1.3B omvat T2V-1.3B en I2V-1.3B, met een focus op efficiëntie en toegankelijkheid. T2V-1.3B genereert een 5-seconden 480p video in 4 minuten op een Nvidia RTX 4090, terwijl I2V-1.3B gespecialiseerd is in efficiënte beeld-naar-video-generatie, geschikt voor onderzoekers, ontwikkelaars en algemene gebruikers met beperkte hardwaremogelijkheden. Wan 14B bevat T2V-14B en I2V-14B en richt zich op hoogwaardige output voor professioneel gebruik. T2V-14B excelleert in gedetailleerde, dynamische video’s, en I2V-14B richt zich op het produceren van zeer gedetailleerde, professionele beeld-naar-video-transformaties. Om de beste ervaring voor onze gebruikers te waarborgen, heeft Monica ervoor gekozen om het topmodel op grote schaal, Wan 14B, aan te bieden.

WAN 2.1, gelanceerd dit jaar, ondersteunt texteffecten in het Chinees en Engels, en blinkt uit in realistische visuals, complexe bewegingen en nauwkeurige uitvoering. Veo2 richt zich op cinema-kwaliteit 4K video-creatie met geavanceerde controle voor opnametypes, lenzen en effecten. Het biedt ongeëvenaarde realisme, natuurlijke bewegingen en ondersteunt dynamische video's in verschillende beeldverhoudingen voor platforms zoals YouTube en TikTok.

Wan 2.1 ondersteunt tekst-naar-video en afbeelding-naar-video, en biedt een breed scala aan creatieve mogelijkheden. Het ondersteunt ook meertalige tekstinvoer.