Sie können jetzt KI-Videos direkt in Premiere Pro erstellen
Firefly könne nun Videos aus Bild- und Textaufforderungen generieren sowie bestehende Clips erweitern, gab Adobe am Montag bekannt . Die neue Funktion wird derzeit für Premiere Pro-Abonnenten eingeführt.
Die Funktion zur Videogenerierung feiert ihr Debüt in einer Reihe neuer Tools für Premiere Pro und der Firefly-Web-App. Generative Extend von PP kann beispielsweise bis zu zwei Sekunden hinzugefügtes KI-Material entweder am Anfang oder am Ende eines Clips hinzufügen und während der Aufnahme Anpassungen an der Kameraposition, der Nachführung und sogar den aufgenommenen Motiven selbst vornehmen.
Das generierte Video ist in einer Auflösung von 720p oder 1080p mit 24 Bildern pro Sekunde (fps) verfügbar. Das Tool kann auch die Soundeffekte und Umgebungsgeräusche des Clips um bis zu 10 Sekunden verlängern, bei gesprochenen Dialogen oder Musikpartituren ist dies jedoch nicht möglich.
Die Firefly-Web-App erhält zwei eigene neue KI-Tools : Text-zu-Video- und Bild-zu-Video-Tools werden in einer begrenzten öffentlichen Betaversion eingeführt, und Sie können sich hier für die Warteliste bewerben . Sie tun das, wonach sie klingen. Text-to-Video generiert kurze Clips in verschiedenen künstlerischen Stilen und ermöglicht es den Erstellern, das Ausgabevideo mithilfe der Kamerasteuerung der Web-App iterativ zu verfeinern.
Image-to-Video verwendet in ähnlicher Weise sowohl eine Textaufforderung als auch Referenzbilder, um das Modell in weniger Iterationen näher an die Vorstellungen des Erstellers heranzuführen. Beide Webfunktionen benötigen etwa anderthalb Minuten, um Videos mit einer Länge von bis zu fünf Sekunden bei 720p-Auflösung und 24 fps zu erstellen.
Während keines dieser neuen Features zur Videogenerierung besonders bahnbrechend ist – Runways Gen-3 , Metas Movie Gen und OpenAIs kommenderSora verfügen alle über nahezu identische Features und Funktionalitäten – bietet Firefly seinen Benutzern dennoch einen Vorteil gegenüber anderen Modellen, da seine Ausgaben „kommerziell“ sind sicher."
Adobe hat sein Firefly-Modell auf Adobe Stock-Bilder, offen lizenzierte Inhalte und gemeinfreie Inhalte trainiert, was bedeutet, dass die generierten Ausgaben wahrscheinlich keine Urheberrechtsverletzungsklagen auslösen. Wenn das Gleiche nur von den Konkurrenten Runway , Meta und Nvidia gelten könnte.