視頻工作者的福音來了!Adobe 將生成式 AI“螢火蟲” 引入視頻工具

華爾街見聞
2023.04.18 13:12
portai
I'm PortAI, I can summarize articles.

一鍵調色、一鍵配樂、一鍵生成分鏡……還不用擔心版權問題!

Adobe 又出新招了!

上個月,Adobe 剛剛宣佈進軍生成式 AI,和英偉達聯合推出了新工具 “Firefly” (螢火蟲) 。

在發佈之時,Adobe 方面就表示未來還會將螢火蟲引入視頻剪輯工具中。

説時遲那時快,4 月 17 日,Adobe 就宣佈,將很快將螢火蟲引入其 Creative Cloud 視頻和音頻應用程序。距離首次發佈還不到一個月。

雖然螢火蟲工具是基於瀏覽器的,但 Adobe 表示它們旨在將其集成到現有的服務和軟件中,其中包括 Photoshop、After Effects 和 Substance 3D Collection:

一切都是從頭開始設計的,可以嵌入到……Adobe Creative Cloud、Document Cloud、Experience Cloud 和 Adobe Express。

一鍵調色

根據 Adobe 的演示,我們可以看到,螢火蟲不僅可以使用户更輕鬆地編輯視頻,還可以根據用户的指令生成素材、添加音樂和聲音效果。

也就是説,用户只需要動動手指,通過簡單地用幾句話描述視頻應該是什麼樣子,AI 就能自動幫你完工(剪輯師的頭髮可能有救了)。

首先,最基本的顏色校正功能,不在話下——

輸入【轉為金秋時節】,以及【提亮面部】,即可一鍵完成校色。

再者,打字生成動態文本和動態圖形。

只需要輸入目標素材文字,提出需求(如 “3D 金屬液化”),螢火蟲就能自動幫你轉為平常可能耗費幾個小時才能做成的動態素材:

一鍵剪輯

進階版功能:自動剪輯——

通過分析視頻中的文本,螢火蟲可以自動選擇視頻中相匹配的其他畫面,自動選擇適當的時間軸位置,完成剪輯。

當然,這一功能的限制在於只能選擇同一視頻中的畫面,而不能選取來自其他視頻中的空鏡素材。

不過這有可能在未來的版本中進行更新,因為在音頻方面,螢火蟲已經做到了這一點。

一鍵配樂

根據 Adobe 的宣傳,只要輸入與畫面有關的關鍵詞(如明亮、冒險、歡快的音樂),螢火蟲就能自動搜索匹配需要的音樂。

此外,還能根據畫面匹配相應的音效(如海浪聲)。

關於這一功能,Adobe 官方驕傲地宣佈,這些使用到的音頻【完全原創的作品,已經符合商業使用的安全標準】。

這意味着,使用這些音樂,用户不會面臨任何侵權的指控(感覺好像在陰陽某些競爭對手……)。

一鍵分析劇本 生成分鏡

最後,也是最重磅的,劇本分析功能。

只要輸入劇本,螢火蟲就能自動添加特效字幕……

甚至能把分鏡都畫了出來,導演也解放了。

與圖片版本相同的是,“螢火蟲” 的功能依然主打 “創作者友好”——旨在減輕創作者的工作負擔,而不是取代人去創作,還頗為貼心地解決了素材版權的問題。

正如華爾街見聞此前提及,在藝術創作者圈子裏,AIGC 是一個爭議極大的話題。

有些人認為它是一種可以利用的新工具,有些人則認為它是偷竊,並且會讓自己的工作岌岌可危。

對於圖片版權商而言,AIGC 模型未經授權就使用自己數據庫裏的圖片,是一種侵權行為。

比如,全球最大的圖庫服務商之一 Getty Images,現在正和 AIGC 獨角獸、Stable Diffusion 母公司 Stability AI 打官司,指控其引擎利用受版權保護的照片進行了不當的訓練。

也正因如此,或許同樣飽受侵權困擾的 Adobe 才推出了這樣的一個工具,“誓要” 維護素材版權。

不過,可想而知的是,在保證了 “版權安全” 的前提下,Adobe 可以使用的素材必然會較 Midjourney 或 Stable Diffusion 這類競爭對手要少得多。

但除去素材方面的侷限性,螢火蟲在剪輯上展現的功能仍然相當強大,值得期待一波。

目前 Adobe 官方尚未公佈螢火蟲具體的開放時期,只是籠統地表示會在 “今年下半年”。

可以預見,當螢火蟲正式開放使用後,短視頻平台上的相當一部分內容,或許就是螢火蟲剪輯完成的了。