Alibaba veröffentlicht Open-Source-Modell zur Videoproduktion

KI-Modell Wan2.1-VACE soll Video-Erstellung revolutionieren

(firmenpresse) - Hangzhou (China), 19. Mai 2025 - Alibaba stellt Wan 2.1-VACE (Video All-in-one Creation and Editing) vor, sein jüngstes Open-Source-Modell für die Videoproduktion und Videobearbeitung. Dieses innovative Tool vereint verschiedene Videoverarbeitungsfunktionen in einem einzigen Modell. Dies verschlankt den Prozess der Videoproduktion und sorgt so für mehr Effizienz und Produktivität.

Als Teil der Wan2.1-Serie, Alibabas Large Models für die Videogenerierung, bietet VACE als erstes Open-Source-Modell der Branche eine einheitliche Lösung für verschiedene Aufgaben rund um die Videogenerierung und Videobearbeitung.

Wan2.1-VACE unterstützt die Videoerzeugung mit multimodalen Eingaben - ob Text, Bild oder Video. Zu seinen umfassenden Videobearbeitungsfunktionen gehört das Referenzieren von Bildern oder Frames, das Video Repainting, das Ändern ausgewählter Bereiche des Videos sowie die räumlich-zeitliche Erweiterung. All diese Funktionen ermöglichen die Kombination unterschiedlicher Aufgaben für mehr Kreativität.

Mit diesem fortschrittlichen Tool können Anwender auf Basis von Musteraufnahmen Videos mit interagierenden Motiven generieren und mit natürlichen Bewegungseffekten statische Aufnahmen zum Leben erwecken. Zur Verfügung stehen außerdem fortschrittliche Funktionen fürs Video-Repainting, z. B. Posenübertragung, Bewegungssteuerung, Tiefensteuerung und Neueinfärbung.

Das Modell unterstützt auch das Ergänzen, Anpassen oder Löschen ausgewählter Videobereiche ohne Auswirkung auf deren Umgebung. Um die visuelle Erfahrung noch weiter anzureichern, lassen sich die Videogrenzen durch das intelligente Auffüllen erweitern.

Als All-in-One-KI-Modell zeichnet sich Wan2.1-VACE durch unvergleichliche Vielseitigkeit aus. Damit können Anwender viele verschiedene Funktionen nahtlos kombinieren und so ihr Innovationspotenzial ausschöpfen. Sie können beispielsweise ein statisches Bild in ein Video verwandeln und dabei seine Bewegung über die Bestimmung der Bewegungsrichtung steuern. Sie können Protagonisten oder Objekte mit definierten Referenzen nahtlos ersetzen, referenzierte Charaktere animieren, Posen steuern und eine vertikale Aufnahme durch das Hinzufügen neuer Objekte horizontal erweitern.





Innovative Technologien

Wan2.1-VACE nutzt mehrere innovative Technologien, um den Anforderungen verschiedener Videobearbeitungsaufgaben während der Entwicklung und des Designs gerecht zu werden. Die gemeinsame Schnittstelle namens Video Condition Unit (VCU) unterstützt die einheitliche Verarbeitung multimodaler Eingaben wie Texte, Bilder, Videos und Masken.

Mithilfe seiner Context-Adapter-Struktur bindet das Modell verschiedene Aufgabenkonzepte mit Hilfe formalisierter Darstellungen zeitlicher und räumlicher Dimensionen ein. Dank dieses innovativen Designs kann eine breite Palette von Videosyntheseaufgaben flexibel gesteuert werden.

Dank der Fortschritte in der Modellarchitektur eignet sich Wan2.1-VACE für die schnelle Produktion von Kurzvideos für Social Media, die Content Creation für Werbung und Marketing, die Postproduktion und Verarbeitung von Spezialeffekten für Film und Fernsehen sowie für das Erzeugen von Schulungsvideos.

Basismodelle für Trainingsvideos erfordern gewaltige Rechenressourcen und eine Unmenge an qualitativ hochwertigen Trainingsdaten. Der quelloffene Zugang senkt die KI-Einstiegshürde für viele Unternehmen und versetzt sie in die Lage, schnell und kosteneffizient qualitativ hochwertigen Content für ihre individuellen Bedürfnisse zu kreieren.

Alibaba stellt das Wan2.1-VACE Modell in zwei Open-Source-Versionen zur Verfügung: mit 14 Mrd. Parametern sowie 1,3 Mrd. Parametern. Die Modelle stehen zum kostenfreien Download auf Hugging Face und GitHub bereit sowie auf ModelScope, der Open-Source-Community von Alibaba Cloud.

Als einer der ersten globalen Tech-Konzerne hat Alibaba im Februar 2025 vier Wan2.1-Modelle als Open Source veröffentlicht. Im vergangenen Monat kam ein Modell zur Erstellung von Videos mit Start- und Endbildern hinzu. Bis heute wurden die Modelle über 3,3 Mio. Mal auf Hugging Face und ModelScope heruntergeladen.Weitere Infos zu dieser Pressemeldung:
Unternehmensinformation / Kurzprofil:
PresseKontakt / Agentur:
Bereitgestellt von Benutzer: Adenion
Datum: 26.05.2025 - 12:15 Uhr
Sprache: Deutsch
News-ID 2174265
Anzahl Zeichen: 4380

Kontakt-Informationen:
Ansprechpartner: Louisa Struif
Stadt:

München

Telefon: 49 89 211 871 59

Kategorie:

Information & TK

Diese Pressemitteilung wurde bisher 245 mal aufgerufen.

Alibaba bringt cloudbasierte KI-Innovationen zu den Olympischen Winterspielen Milano Cortina 2026 ...
Alibaba Cloud, die Cloud- und KI-Sparte der Alibaba Group, arbeitet mit Olympic Broadcasting Services (OBS) und dem Internationalen Olympischen Komitee (IOC) zusammen, um bei den Olympischen und Paralympischen Winterspielen Milano Cortina 2026 moderne Cloud- und KI-Technologien einzusetzen. Auf

Alibaba Cloud bringt KI+Cloud-Strategie nach Europa ...
Alibaba Cloud, die digitale Technologie- und Intelligenzplattform der Alibaba Group, hat auf seinem Global Innovation Summit 2025 in Paris eine Reihe verbesserter KI-Lösungen vorgestellt. Damit bekräftigt das Unternehmen sein Engagement für regionale Unternehmen durch die Erschließung neuer KI-C

Alibaba Cloud stärkt KI-Angebot für internationale Kunden ...
Alibaba Cloud hat im Rahmen seines Spring Launch 2025 neue KI-Modelle, PaaS-Funktionen und Infrastruktur-Updates vorgestellt. Die Neuerungen richten sich gezielt an internationale Unternehmen, die ihre Digitalisierung mit Cloud- und KI-Technologien weiter vorantreiben möchten. "Wir führe

Weitere Mitteilungen von Alibaba Cloud

Verbinden Sie sich mit den VDSL2 Modems von RubyTech Deutschland GmbH ...
Dieser Medienkonverter bietet Ihnen eine Punkt-zu-Punkt-Verbindung (auch mit PoE erhältlich) über eine 2-Draht-Leitung. Per Dip-Schalter entscheiden Sie ganz einfach, ob Sie aus dem Modem ein Master oder Slave machen. Zusätzlich verfügt dieser über einen SFP-Port 1000base-X, womit Sie neben den

Eine verlässliche Stimme des Ausgleichs: Das HDT intensiviert sein Social-Media-Engagement ...
Das HDT (Haus der Technik) und die sozialen Netzwerke – das ist kein Fall von „Wir müssen da dringend auch etwas machen“. Denn mit Blick auf Rolle und Herkunft von Deutschlands ältestem technischen Weiterbildungsinstitut handelt es sich vielmehr um ein „Perfect Match“. Warum das so ist u

"Storytelling-Bibel": Neue Kommunikationsbibel für Unternehmer, Selbstständige und Führungskräfte ...
Arnstadt, Mai 2025 - In Kürze erscheint mit der "Storytelling-Bibel" ein umfassendes Werk für alle, die ihre Kommunikations- und Vertriebsprozesse verbessern, ihren unternehmerischen Erfolg steigern wollen und im Berufsalltag auf klare, überzeugende Kommunikation angewiesen sind. Entwic

VATM begrüßt schnelle Gesetzesinitiative der neuen Bundesregierung zur Anerkennung des überragenden öffentlichen Interesses ...
 „Es ist ein wichtiges Signal für die Branche, dass die neue Bundesregierung als eine ihrer ersten digitalpolitischen Amtshandlungen das überragende öffentliche Interesse für den TK-Netzausbau gesetzlich verankern will,“ begrüßt VATM-Geschäftsführer Dr. Frederic Ufer die Ankündigung vo