 |
Das neue Tool von ByteDance lässt alle Konkurrenten souverän hinter sich. Foto: ByteDance . |
ByteDance – die Muttergesellschaft von TikTok und Douyin – hat gerade Seedance 1.0 offiziell vorgestellt, ein Tool für künstliche Intelligenz (KI), mit dem Videos aus Text und Bildern erstellt werden können. Dies gilt als wichtiger Schritt für den chinesischen Technologiekonzern im Wettlauf um die Entwicklung einer KI-basierten Plattform zur Inhaltserstellung.
Das Unternehmen veröffentlichte kürzlich eine ausführliche Forschungsarbeit zu Seedance 1.0. Das Tool soll einfache Anweisungen in hochwertige Videos umwandeln, ohne dass dafür detaillierte Skripte oder komplexe Befehle erforderlich sind. Das Tool verarbeitet nicht nur einzelne Aufnahmen, sondern kombiniert auch mehrere Kameraperspektiven, sorgt für fließende Übergänge und gewährleistet die Charakterkonsistenz im gesamten Video.
„Wir haben einen Weg gefunden, räumliche und zeitliche Informationen in Videos zu trennen. Diese Technologie nutzt eine einzigartige Methode zur ‚Kodierung‘ des Standorts. Dadurch kann KI lernen, Videos sowohl aus Text als auch aus Bildern im selben Modell zu generieren. Dadurch kann KI automatisch und reibungslos Videos mit verschiedenen Szenen generieren“, so ByteDance in der Forschungsarbeit.
ByteDance behauptet selbstbewusst, dass Seedance 1.0 den bestehenden KI-Tools zur Videoerstellung auf dem Markt überlegen sei, insbesondere in Bezug auf die Fähigkeit, Benutzerideen, Bildschärfe und Natürlichkeit der Charakterbewegungen genau zu verfolgen.
Laut Artificial Analysis – einer Plattform, die auf die Analyse und Bewertung der Leistung von KI-Modellen spezialisiert ist – hat Seedance 1.0 andere KI-Tools zur Videogenerierung wie Googles Veo 3, Kuaishous Kling 2.0 oder OpenAIs Sora übertroffen. Das Tool zeigt sowohl bei Text-zu-Video- als auch bei Bild-zu-Video-Aufgaben eine herausragende Leistung.
Das Unternehmen gab außerdem bekannt, dass Seedance 1.0 anhand eines umfangreichen Videodatensatzes aus öffentlich zugänglichen und lizenzierten Quellen trainiert wurde. Die Trainingsvideos durchliefen einen strengen Filterprozess, um gewalttätige oder sensible Inhalte zu entfernen.
Viele Meinungen besagen, dass die Datenquelle hauptsächlich von TikTok und Douyin stammt, zwei Plattformen, die von ByteDance selbst betrieben werden.
Der Trainingsprozess von Seedance 1.0 ist in mehrere Phasen unterteilt: zunächst das Lernen anhand umfangreicher Bild- und Videodaten, dann das Erlernen tiefer Szenenübergangstechniken in verschiedenen Stilen.
Auch im Trainingsprozess spielen Menschen eine Schlüsselrolle, da Ingenieure hochwertige Videos auswählen, aus denen das Modell lernen soll. Der Trainingszyklus wird so lange fortgesetzt, bis Seedance 1.0 aus einer großen Anzahl von Videos, die auf Anfrage generiert werden, das optimale Ergebnis auswählen kann.
Seedance 1.0 begrenzt die maximale Videolänge aktuell auf fünf Sekunden (im Vergleich zu acht Sekunden bei Veo 3). Der größte Vorteil ist jedoch die hohe Verarbeitungsgeschwindigkeit: Die Erstellung eines Full-HD-Videos dauert nur 41 Sekunden. Ein Nachteil von Seedance 1.0 ist, dass es im Gegensatz zum Konkurrenten von Google keine automatische Nachvertonung unterstützt.
ByteDance plant, dieses Tool bald sowohl für normale Benutzer als auch für professionelle Inhaltsersteller zu veröffentlichen, um den Anforderungen der Produktion von Werbevideos oder kurzen Inhalten in sozialen Netzwerken gerecht zu werden.
Vor Seedance 1.0 hatte ByteDance KI-Videoerstellungstools wie OmniHuman, Goku und Jimeng AI entwickelt. Seedance 1.0 ist jedoch das erste Produkt, von dem das Unternehmen überzeugt ist, dass es seine Konkurrenten in Bezug auf die KI-Videoerstellungsfunktionen übertreffen kann.
Quelle: https://znews.vn/cong-ty-me-tiktok-ra-mat-cong-nghe-thach-thuc-google-post1562025.html
Kommentar (0)