Sora schließt sich der Adobe-Familie an und das Video wird um Bilder und Szenen erweitert: PR-Update-Vorschau

Dies ist das Videobearbeitungstool im Zeitalter der generativen KI.

Adobe wird bald über die fortschrittlichsten generativen KI-Videoerstellungsfunktionen verfügen.

Heute hat Adobe einen Update-Plan für eine neue Version von Premiere Pro angekündigt. Dazu gehört das Hinzufügen von Plug-ins für KI-Videogenerierungsmodelle von Drittanbietern, sei es Sora von OpenAI oder Gen-2 und Pika von Runway, die bald im Adobe-Toolsystem erscheinen und von Menschen verwendet werden werden.

Basierend auf den Fähigkeiten von Adobes großem Modell Firefly können Sie nun Inhalte direkt zum Videomaterial hinzufügen oder entfernen.

Haben Sie das Gefühl, dass es während des Übergangs weniger Hintergrundaufnahmen gibt? Verwenden Sie jetzt einfach Sora von OpenAI, um automatisch einen Absatz zu generieren. Sora kann pro API-Aufruf bis zu drei Videovarianten für Eingabeaufforderungen in natürlicher Sprache erstellen.

Das neue Tool kann auch dazu verwendet werden, die Länge von vorhandenem Filmmaterial aus dem Nichts zu „verlängern“, aber dieser Teil scheint nicht durch die Eingabeaufforderungswörter gesteuert zu werden.

Seit OpenAI Sora im Februar dieses Jahres gestartet hat, konnten wir im TikTok-Konto nur die offizielle Demo der KI-generierten Videos sehen, und das eigentliche Tool befindet sich immer noch im Status „bald veröffentlicht“. Nachdem nun die neue Version von Adobe Premiere Pro vorgestellt wurde, könnte es darauf hindeuten, dass die neue Technologie bald auf den Markt kommt.

Für die 33 Millionen zahlenden Creative Cloud-Benutzer von Adobe ist dies eine noch größere Sache und könnte die radikalsten und revolutionärsten Veränderungen im Designbereich mit sich bringen.

Mit dieser Funktion können Premiere Pro-Benutzer mit herkömmlichen Kameras aufgenommene Live-Action-Videos sowie KI-Filmmaterial bearbeiten, verarbeiten und mischen. Stellen Sie sich vor, Sie nehmen ein Video auf, in dem ein Schauspieler eine Szene vorführt, in der er vor einem Monster flieht, und verwenden dann künstliche Intelligenz, um das Monster zu generieren. Für diesen Schritt sind keine Requisiten, Kostüme oder Schauspieler erforderlich, und auf die beiden Videoclips kann im selben Editor und zugegriffen werden in derselben Videodatei zusammengefasst.

Das Gleiche gilt für Animationen, die mit ausgereifteren Verfahren (vom Computer bis hin zu handgezeichneten Bildern) erstellt wurden und mit passendem KI-Filmmaterial in derselben Datei in Premiere Pro gemischt werden können.

Erwähnenswert ist, dass wir bei der Demonstration von Adobe erneut gesehen haben, dass zwischen Sora von OpenAI und anderen ähnlichen Produkten eine Generationslücke besteht – die erzeugten Videoeffekte sind viel besser als bei anderen verfügbaren Tools.

Im Gegensatz zu vielen früheren Firefly-bezogenen Ankündigungen von Adobe haben die neuen Tools zur Videogenerierung dieses Mal noch kein Veröffentlichungsdatum, Adobe hat lediglich angekündigt, dass sie dieses Jahr auf den Markt kommen werden.

Die Einführung fortschrittlicher KI-Großmodelle von Drittanbietern ist eine zukunftsweisende Erkundung der Videoverarbeitung. Laut Adobe besteht die Idee darin, Premiere Pro-Benutzern mehr Optionen zu bieten. Adobe gibt außerdem an, dass seine Content-Anmeldeinformations-Tags auf diese generierten Clips angewendet werden können, um zu identifizieren, welche KI-Modelle für deren Generierung verwendet wurden.

Adobes Premiere Pro (PR) ist seit seiner ersten Veröffentlichung für Mac Ende 1991 eines der weltweit beliebtesten Videobearbeitungsprogramme und wird heute von großen Hollywood-Filmeditoren und unabhängigen Filmproduzenten auf der ganzen Welt verwendet . Es steht vor einer Revolution, die in seiner 33-jährigen Geschichte beispiellos ist.

Es ist wichtig zu beachten, dass Adobe noch nicht festgelegt hat, wann diese KI-Videogeneratoren von Drittanbietern in Premiere Pro integriert werden, und die Details scheinen noch nicht vollständig festgelegt zu sein, da für viele Tools von Drittanbietern ein kostenpflichtiges Abonnement erforderlich ist freigeben.

Darüber hinaus verwendet Adobe auch seine eigenen generativen KI-Produkte (wie Firefly und Generative Fill usw.) und betont, dass seine Modelle auf Daten trainiert werden, die das Unternehmen besitzt oder für deren Nutzung es die Erlaubnis/Rechte besitzt. wie zum Beispiel Adobe-Inhalte, die von Stock-Erstellern bereitgestellt wurden (obwohl dies sehr zum Leidwesen einiger Adobe Stock-Fotografen und -Künstler ist).

Adobe fügt generative KI hinzu

Adobe konzentriert sich auf Multimedia-Erstellung und kreative Softwareprodukte. Nach dem Ausbruch der generativen KI-Technologie schloss sich dieses Unternehmen schnell dem Kampf an, nicht zurückgelassen zu werden.

Letzte Woche berichtete Bloomberg, dass Adobe Firefly anhand einiger Bilder des Konkurrenten Midjourney, der selbst auf dem Open-Source-KI-Modell Stable Diffusion basiert, anhand öffentlich gescrapter und urheberrechtlich geschützter Webdaten trainiert hat.

Heute gab Adobe bekannt, dass eine Version des Text-zu-Bild-Generierungsmodells Firefly „später in diesem Jahr“ in Premiere Pro integriert wird und einen neuen Satz „generativer KI-Workflows“ und -Funktionen bietet.

Mit der Generative Extension-Funktion können Videoeditoren und Filmemacher beispielsweise „nahtlos Frames hinzufügen, um Videoclips zu verlängern“, ohne neues Filmmaterial aufnehmen zu müssen, was eine sehr nützliche und zeitsparende Funktion sein könnte Funktion des Geldes. Adobe sagt außerdem, dass es flüssigere Übergänge in Videos ermöglichen wird, etwa das Verlängern von Clips, die zu abrupt enden, um einen Moment oder eine Aktion länger zu halten.

Firefly for Video stellt außerdem sicher, dass Premiere Pro-Benutzer intelligente Funktionen zur „Objekterkennung und -entfernung“ ausführen können, indem sie im Wesentlichen Objekte im Video (Requisiten, Charaktere, Kostüme, Kulissen usw.) hervorheben und es KI-Modellen ermöglichen, sie zu verfolgen über verschiedene Frames hinweg. Benutzer können außerdem generative KI nutzen, um diese Objekte in neue Objekte zu bearbeiten, die Kleidung oder Requisiten eines Charakters schnell zu ändern oder sogar Objekte über mehrere Clips und Kamerawinkel hinweg vollständig zu entfernen.

Schließlich wird Firefly for Video auch mit einem Text-zu-Video-Bildgenerator geliefert, wodurch es mit Sora, Runway, Pika und Stable Video Diffusion vergleichbar ist.

Obwohl sich Adobes KI-Integration der nächsten Generation für Premiere Pro noch in der Vorschau befindet, stößt sie bereits auf Beifall von Filmemachern und Social-Media-Kreativen.

„Das war für meine Live-Action-Filmarbeit sehr hilfreich“, sagte Regisseur Kevin K. Shah.

Referenzinhalt:

https://venturebeat.com/ai/adobe-to-add-ai-video-generators-sora-runway-pika-to-premiere-pro/

https://www.theverge.com/2024/4/15/24130804/adobe-premiere-pro-firefly-video-generative-ai-openai-sora

https:/ /www.adobe.com/products/premiere/ai-video-editing.html

Das obige ist der detaillierte Inhalt vonSora schließt sich der Adobe-Familie an und das Video wird um Bilder und Szenen erweitert: PR-Update-Vorschau. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!