Einer der großen Fortschritte im Bereich der künstlichen Intelligenz ist die Videogenerierung. In der Branche wurden Tools wie Sora von OpenAI, Movie Gen von Meta, Runway und Kling AI eingeführt, die für einen starken und gesunden Wettbewerb sorgen. Jetzt hat Adobe die Verfügbarkeit von Firefly, seinem KI-gestützten Videogenerator, angekündigt.
Der KI-gestützte Videogenerator von Adobe kann Clips verlängern
Derzeit bietet Adobe Firefly drei Haupttools: Generative Extend, Text-to-Video und Image-to-Video. Beginnend mit Generative Extend ist es als Beta-Version als Teil der Premiere Pro-Suite verfügbar. Wie der Name schon sagt, ist die Funktion in der Lage, Videosegmente zu verlängern, was sie ideal für die Korrektur von Fehlern im letzten oder mittleren Abschnitt macht.
Generative Extend kann den von Ihnen benötigten Abschnitt des Videos nur um zwei Sekunden verlängern. Daher besteht sein Hauptzweck darin, kleinere Fehler zu korrigieren, und nicht darin, das Filmmaterial zu vervollständigen. Auch wenn zwei Sekunden vielleicht nicht viel klingen, können sie den Unterschied zwischen der Verwendung eines Filmmaterials oder der Notwendigkeit, es erneut aufzunehmen, ausmachen. Das Tool kann 720p/1080p-Videos mit 24 FPS ausgeben.
Die Funktion verlängert auch den Ton um bis zu 10 Sekunden. Es funktioniert jedoch nur für Audioeffekte und Umgebungsgeräusche, nicht für Dialoge oder Soundtracks.
Text- und bildbasierte Videogenerierung
Text-to-Video und Image-to-Video von Adobe sind in der öffentlichen Betaversion von Firefly mit eingeschränktem Zugriff verfügbar. Text-to-Video funktioniert wie die meisten auf dem Markt erhältlichen KI-gestützten Videogeneratoren. Das Tool ist in der Lage, eine Ausgabe basierend auf einer Textaufforderung zu generieren. Text-to-Video umfasst auch Optionen zum Emulieren bestimmter Filmmaterialstile. Sie können beispielsweise zwischen Kinoclips, 3D-Animation und Stop-Motion wählen. Sie können auch Dinge im Zusammenhang mit der „Kamera“ simulieren, wie Winkel, Bewegung oder Entfernung.
Image-to-Video hingegen erstellt Videos durch die Kombination eines Bildes und einer Textaufforderung. Damit können Sie Clips aus einem Bild generieren, das Sie aus Ihrem Filmmaterial extrahiert haben. Allerdings sind die Ergebnisse dieses Tools derzeit verbesserungswürdig.
Firefly ist für Entwickler „kommerziell rentabel“.
Adobe betont, dass sein Firefly-Videogeneratormodell „kommerziell realisierbar“ sei. Mit anderen Worten: Die Suite von Tools ermöglicht es Benutzern, die von ihr generierten Inhalte kommerziell zu nutzen, ohne sich über mögliche Klagen Gedanken machen zu müssen. Das Unternehmen versichert, das Modell auf der Grundlage von Inhalten trainiert zu haben, für die es die volle Nutzungsberechtigung hatte. Dies könnte ein Faktor in einem Segment sein, das in Kontroversen im Zusammenhang mit dem Urheberrecht verwickelt ist.
Schließlich generiert Firefly Clips, die Content Credentials unterstützen, einen Standard, der dabei hilft, festzustellen, ob ein Bild oder Video von KI stammt.
