Runway新AI工具挑戰OpenAI的Sora 以更具連貫性的視頻脱穎而出——彭博社
Rachel Metz
Runway AI首席執行官兼聯合創始人克里斯·瓦倫蘇埃拉。
攝影師:凱爾·格里洛特/彭博社Runway AI公司推出的新型人工智能模型旨在讓用户創建具有連貫角色、物體和背景的視頻,這標誌着利用計算機更快速、低成本製作電影的技術競賽可能實現重大突破。
Runway將於週一面向付費用户發佈Gen-4版本,並計劃在本週晚些時候新增一項功能,該功能旨在提升軟件生成跨視頻場景連貫性的能力。公司表示,用户將能生成720p、時長5秒和10秒的視頻片段。
這家紐約初創公司在2023年初通過發佈一款基於文字提示(如"沙漠景觀的無人機畫面")生成略顯卡頓的3秒視頻模型,掀起了AI視頻生成器的熱潮。兩年後,隨着OpenAI、Pika等科技公司相繼推出類似服務,行業競爭顯著加劇。如今,Runway正力爭保持領先地位。
AI生成視頻來源:Runway AI公司
“我們當前的目標是確保研發成果達到好萊塢及專業電影製作人要求的水準,“Runway聯合創始人兼首席執行官克里斯·瓦倫蘇埃拉在接受採訪時表示,“現在是個特殊時刻,因為我們已跨越了那個臨界點。”
在發佈前向彭博新聞展示的兩部由該軟件製作的短片,讓人對其產出有了直觀感受。其中一段模仿森林奇幻黏土動畫風格的片段裏,一簇孤獨的小篝火渴望陪伴,意外燙傷一隻臭鼬後,最終與附近岩石成為朋友。據Runway團隊成員透露,他們用數小時生成數百個獨立視頻片段,再剪輯成連貫畫面,音效後期單獨添加。瓦倫蘇埃拉表示,整個流程耗時約兩天。儘管AI視頻近兩年有所提升,但許多作品仍存在各種違和感——從幽靈般的肢體到違揹物理規律的物體,片段間差異明顯。彭博新聞看到的樣片雖仍有類似問題,但連貫性已顯著增強。
## 為何AI正在創造史上最大壟斷
9:00
瓦倫蘇埃拉指出,Runway最新AI模型能通過保持場景位置、角色形象和視頻風格等細節的一致性來提升輸出質量。他未深入技術細節,但表示團隊重新思考了視頻模型的設計目標。
該軟件已應用於多個項目:包括為亞馬遜公司《大衞之屋》生成部分場景、為麥當娜巡迴演唱會製作視覺效果*,以及打造*彪馬廣告。Runway還與獅門影業簽約,基於其影視內容訓練AI模型用於電影製作。紐約大學、羅德島設計學院和加州大學洛杉磯分校等院校也已引入該技術。
瓦倫蘇埃拉指出,該公司比以往更注重訓練模型掌握電影行業術語,旨在讓使用該系統的電影製作人能更自然地編寫提示詞。
“首要目標是實現視頻生成功能,我認為這代表了當前視頻AI的技術水平,“瓦倫蘇埃拉表示,“第二階段則是創作出真正引人入勝的故事作品,讓觀眾因為內容優質、娛樂性強且能產生共鳴而主動觀看。”