Alibaba stellt mit Wan2.1-VACE ein leistungsstarkes Open-Source-KI-Modell für Videoproduktion und -bearbeitung vor – alles in einem System, von Text-zu-Video bis komplexes Repainting.
Mit Wan2.1-VACE veröffentlicht Alibaba ein All-in-One-Modell zur KI-gestützten Videoproduktion und -bearbeitung. Das Open-Source-Tool kombiniert Videoerzeugung, Repainting, Posensteuerung, Bewegungsanalyse und Szenenerweiterung in einem einzigen Framework – und verarbeitet dabei Text-, Bild- und Videoeingaben. Die Besonderheit: VACE ermöglicht kreative Workflows wie das Ersetzen von Objekten, das Animieren statischer Bilder oder das gezielte Bearbeiten einzelner Videobereiche – inklusive Tiefensteuerung, Farbveränderung und Frame-basierter Referenzen. Herzstück ist die neue Video Condition Unit (VCU), die multimodale Inputs verarbeitet und mit einer Context-Adapter-Struktur unterschiedliche Aufgaben zeitlich und räumlich verknüpft. Ziel: maximale Flexibilität für Content Creator, Filmemacher, Marketing-Teams und Entwickler. Zwei Varianten (14B & 1.3B Parameter) sind ab sofort auf Hugging Face, GitHub und Alibaba ModelScope verfügbar – quelloffen und kostenlos. (lfa)