Sora加入Adobe全家桶，影片改圖加戲樣行：PR大更新預告

這就是生成式 AI 時代的影片編輯工具。

Adobe 全家桶馬上就要擁有最先進的生成式 AI 影片創作能力了。

今天，Adobe 宣布了 Premiere Pro 全新版本的更新計畫。其中包含為第三方 AI 視訊生成模型添加插件，不論是 OpenAI 的 Sora 還是 Runway 的 Gen-2 和 Pika，很快都會出現在 Adob​​​​e 工具體系中可被人們所用。

現在，基於 Adob​​​​e 自己的大模型 Firefly 的能力，你可以在影片素材上直接增加或減少內容。

轉場時感覺少點烘托背景的畫面？現在用 OpenAI 的 Sora 自動產生一段就行了。

                              ^{Sora作用中在每個 API 呼叫中為自然語言指示建立多達三種視訊變體。}

新工具也可以用來「憑空延長」已有鏡頭內容的長度，不過這部分似乎不受提示詞的控制。

自今年2 月OpenAI 推出Sora 以來，我們一直只能看官方在TikTok 帳號裡放AI 生成影片的demo，真正的工具還是在「即將發布」的狀態。現在新版 Adob​​​​e Premiere Pro 都亮相了，可能預示著新技術馬上即將落地。

對於Adobe 高達3,300 萬的Creative Cloud 付費用戶群來說，這更是一件大事，它可能會帶來設計領域最徹底和革命性的變化。

有了這項功能，Premiere Pro 用戶將能夠編輯和處理傳統攝影機捕獲的實景影片以及 AI 素材並與之混合。想像一下，拍攝一個演員表演逃離怪物的場景的視頻，然後用人工智能生成這只怪物—— 這一步不需要道具、服裝和演員，而兩個視頻片段可以在同一個編輯器中訪問並組合在同一個影片檔中。

對於使用更成熟的流程（從電腦到手繪幀）創建的動畫也是如此，這些動畫可以與 Premiere Pro 上同一文件中匹配的 AI 素材混合。

值得一提的是，從Adobe 的演示裡，我們再次看到了OpenAI 的Sora 和其他類似產品存在代差—— 其產生的影片效果比其他可用工具好很多。

與 Adob​​​​e 先前發布的許多與 Firefly 相關公告不同，這次新影片產生工具尚未確定發布日期，Adobe 只是表示它們將在今年推出。

引入第三方先進 AI 大模型對於視訊處理來說屬於面向未來的探索。據 Adob​​​​e 稱，這一想法旨在為 Premiere Pro 用戶提供更多選擇。 Adobe 還表示，其內容憑證標籤可以應用於這些生成的剪輯，以識別使用哪些人工智慧模型來產生它們。

Adobe 的Premiere Pro（PR）自1991 年底首次發布Mac 版以來，一直是世界上最受歡迎的影片編輯程式之一，如今已被世界各地的主要好萊塢電影剪輯師和獨立電影製作人使用。它即將迎來一場 33 年歷史上從未有過的革新。

アドビは、これらのサードパーティ AI ビデオジェネレーターがいつ Premiere Pro に統合されるかを決定しておらず、詳細は完全に最終決定されていないようで、多くのサードパーティツールはリリース後に有料サブスクリプションが必要になることに注意してください。 。

さらに、Adobe は自社の生成 AI 製品 (Firefly や Generative Fill など) も使用しており、自社のモデルがこれらのモデルに基づいていることを強調しています。 Adobe Stock クリエイターが投稿したコンテンツなどの権利を使用してデータに基づいてトレーニングされています (これは一部の Adob​​e Stock フォトグラファーやアーティストにとって非常に残念なことですが)。

#アドビ、生成 AI を追加

アドビはマルチメディア作成とクリエイティブ ソフトウェア製品に注力します。生成 AI テクノロジーの出現後、この企業は取り残されないようにすぐに戦いに加わりました。

先週、ブルームバーグは、Adobe が競合他社の Midjourney によって生成された一部の画像で Firefly をトレーニングしたと報じました。この画像自体は、アクセスされ著作権で保護されているオープンソース AI モデル Stable Diffusion に基づいています。ウェブデータ。

本日、Adobe は、Firefly テキストから

画像生成モデルのバージョンが「今年後半」に Premiere Pro に統合されることを発表しました。新しい「生成 AI ワークフロー」と機能のセットを提供します。

たとえば、ジェネレーティブ エクステンション機能を使用すると、ビデオ編集者や映画制作者は、新しいレンズを撮影することなく、「フレームをシームレスに追加してビデオ クリップを長くする」ことができます。非常に便利でお金の節約になる機能です。 Adobeはまた、これにより、瞬間やアクションを長く続けることができない突然終了するクリップを延長するなど、ビデオのよりスムーズなトランジションが可能になるとも述べている。

Firefly for Video を使用すると、Premiere Pro ユーザーがインテリジェントなオブジェクトの検出と削除を実行できるようになり、基本的にビデオ内のオブジェクト (小道具、キャラクター、衣服、風景など) を強調表示できるようになります。 ) そして、AI モデルが異なるフレーム間でそれらを追跡できるようにします。ユーザーは生成 AI を活用して、これらのオブジェクトを新しいオブジェクトに編集したり、キャラクターの服や小道具をすばやく変更したり、複数のクリップやカメラ アングルにわたってオブジェクトを完全に削除したりすることもできます。

最後に、Firefly for Video にはテキストからビデオへの画像生成機能も付属しており、Sora、Runway、Pika、Stable Video Diffusion に匹敵するものになります。

まだプレビュー段階ではありますが、Adobe の Premiere Pro 向けの次世代 AI 統合は、すでに映画制作者やソーシャル メディア クリエイティブから賞賛を集めています。

「これは私の実写映画の仕事に非常に役立ちました」とケビン K. シャー監督は言いました。

参考コンテンツ：

https://venturebeat.com/ ai/adobe-to-add-ai-video-generators-sora-runway-pika-to-premiere-pro/

https://www. theverge.com/2024/4/15/24130804/adobe-premiere-pro-firefly-video-generative-ai-openai-sora

https:/ /www.adobe.com/products/premiere/ai-video-editing.html

以上是Sora加入Adobe全家桶，影片改圖加戲樣行：PR大更新預告的詳細內容。更多資訊請關注PHP中文網其他相關文章！