Adobe 正在進軍人工智慧生成視訊領域。該公司的Firefly 視訊模型自今年早些時候就開始被嘲笑，今天將在一些新工具中推出，其中包括Premiere Pro 內部的一些工具，這些工具將允許創意人員擴展素材並根據靜態圖像和文字提示生成影片.

第一個工具 – Generative Extend – 正在為 Premiere Pro 推出測試版。它可用於延長稍微太短的鏡頭的結尾或開頭，或在鏡頭中進行調整，例如糾正視線移動或意外的移動。

剪輯只能延長兩秒，因此生成式擴充僅真正適合小的調整，但這可以取代重新拍攝素材以修正微小問題的需要。可以以 720p 或 1080p、24 FPS 產生擴充剪輯。它也可以用於音訊以幫助平滑編輯，儘管有限制。例如，它會將音效和環境「房間音調」延長最多十秒，但不會延長語音對話或音樂。

另外兩個影片產生工具正在網路上推出。 Adobe 的文字到影片和圖像到影片工具於 9 月首次發布，目前正在 Firefly Web 應用程式中作為有限的公開測試版推出。

文字到影片的功能與其他影片產生器（如 Runway 和 OpenAI 的 Sora）類似 – 使用者只需插入他們想要產生的文字描述。它可以模擬各種風格，如常規“真實”電影、3D 動畫和定格動畫，並且可以使用一系列模擬攝影機角度、運動和拍攝距離等的“攝影機控制”進一步細化生成的剪輯。

圖像到影片更進一步，讓使用者在文字提示旁邊添加參考圖像，以提供對結果的更多控制。 Adobe 建議，這可以用於從圖像和照片製作花絮，或透過上傳現有影片的靜態圖像來幫助視覺化重拍。然而，下面的之前和之後的範例表明，這實際上並不能直接替換重新拍攝，因為結果中可以看到一些錯誤，例如擺動的電纜和移動的背景。

您也不會很快用這項技術製作整部電影。目前，文字轉影片和影像轉影片剪輯的最大長度為 5 秒，品質最高為 720p 和每秒 24 幀。相比之下，OpenAI 表示 Sora 可以生成長達一分鐘的視頻，「同時保持視覺質量並遵守用戶的提示」——但儘管比 Adob​​e 工具早幾個月宣布，但尚未向公眾開放。

文字轉影片、影像到影片和生成擴展都需要大約 90 秒的時間來生成，但 Adob​​e 表示正在開發「渦輪模式」來縮短時間。儘管可能受到限制，Adobe 表示其人工智慧視訊模型支援的工具是“商業安全的”，因為它們接受了這家創意軟體巨頭允許使用的內容的培訓。鑑於 Runway 等其他提供者的模型正在接受審查，因為據稱它們接受了數千個抓取的 YouTube 影片的訓練，或者在 Meta 的情況下，甚至可能是您的 個人的 影片－商業可行性對某些使用者來說可能是決定性因素。

另一個好處是，使用 Adob​​e Firefly 視訊模型建立或編輯的影片可以嵌入內容憑證，以協助在線上發佈時揭露人工智慧的使用和所有權。目前尚不清楚這些工具何時會結束測試版，但至少它們是公開可用的——這比我們對 OpenAI 的 Sora、Meta 的 Movie Gen 和 Google 的 Veo 生成器所能說的要多。

今天在 Adob​​e 的 MAX 會議上宣布了人工智慧影片的發布，該公司還在其創意應用程式中引入了許多其他人工智慧支援的功能。