AI研究公司跑道已推出Aleph,這是一種新的視頻對視頻模型,允許創建者使用簡單的文本提示來編輯現有錄像。 Runwayaleph可以添加或刪除對象,更改場景的環境並產生全新的相機角度。
target=“ _ blank”>發布將這家總部位於紐約的公司定位為Adobe,Google和Meta的AI視頻工具的直接競爭對手。 The launch comes as Runway partners with Imax to screen AI-generated films and follows reports of a rejected takeover bid from Meta, cementing its growing influence.
What Aleph Brings to the Editing Suite
Runway describes Aleph as “a state-of-the-art in-context video model, setting a new frontier for multi-task visual generation,”designed to perform a wide範圍內在視頻操作。與從頭開始創建內容的文本到視頻模型不同,Aleph會改變現有的鏡頭,從而使電影製片人對鏡頭進行了顆粒狀的控制。這種方法使創作者可以與他們已經拍攝過的作品一起工作,通過AI進行增強,而不是完全替換它。用簡單的提示改變場景的整個心情。根據跑道的宣布,創作者可以將照明從苛刻的中午轉變為黃金時光,將晴天變成雪天,或將白天的拍攝轉變為夜景。 AI自然會調整陰影,反射和色溫以維持整個框架的現實主義。
對像操縱是另一個核心功能。用戶可以使用文本說明或參考圖像無縫地添加新元素,例如將產品放在桌子上或將人群插入空街。該工具同樣擅長從場景中刪除不需要的對像或反射。此外,Aleph可以重新下放或完全替換現有的對象,提供新的後期生產靈活性。
[嵌入式內容]
用於敘事和電影目的,Aleph提供了從單個拍攝中產生無盡覆蓋的工具。電影製片人可以請求新的相機角度,例如寬鏡頭,特寫鏡頭或反向拍攝,甚至要求模型以序列生成下一個邏輯鏡頭。它還可以將一個視頻的運動應用於靜態圖像,從而實現對相機運動的細粒度控制。
超越對象和相機,模型可以改變角色的外觀,例如其年齡,而無需複雜的化妝或昂貴的視覺效果。它還支持樣式轉移,從動漫到水彩顏色的任何美學都可以應用於視頻。對於後期製作的工作流程,Aleph包括一個複雜的綠屏工具,該工具可以通過精確的邊緣檢測來隔離任何主題,並保留了精細的細節,例如用於無縫合成的髮束。
跑道在AI Arms Race
Ten finalist films從8月17日至20日,跑道的AI電影節將在美國10個主要城市放映。 In a statement, Imax Chief Content Officer Jonathan Fischer explained the company’s perspective: “How these tools will shape filmmaking is an area for us to continue to explore while honoring the intent of our creative partners.”
Runway co-founder and CEO Cristóbal Valenzuela added, “The quality, variety and storytelling of these films deserves a premium viewing experience. This partnership will bring AIFF to美國各地成千上萬的電影觀眾,最高的質量。”此舉將AI電影製作從利基在線社區到可用的最大屏幕。
這種上升的影響可能解釋了為什麼據報導,據報導,據報導,梅塔試圖以最終被拒絕的競標來獲取這家初創公司。跑道保持獨立的決定強調了其對技術的信心和在創意工具的未來中的核心作用。
一個擁擠的領域:Aleph如何與競爭
Aleph進入AI視頻工具的競爭激烈的市場。 Big Tech在這個領域進行了大量投資,每個玩家都分解了一個不同的利基市場。 Adobe致力於將其“商業安全”螢火蟲AI直接整合到Premiere Pro中,該策略旨在吸引企業對版權糾紛的警惕。
同時,諸如Openai的Sora和Google的veo 2之類的模型為文本到視頻現實主義設定了一個很高的標準,從而創造了整個場景,從提示中創造了整個場景。 Runway專注於用Aleph編輯現有鏡頭,為想要增強的電影製片人提供了不同的動手工作流程,而不僅僅是生成其內容。聯合首席執行官Ted Sarandos將其作為創意支持的工具,並指出,“這是一個令人難以置信的機會,可以幫助創建者製作電影和系列,而不僅僅是便宜。”他聲稱“ VFX序列完成的速度比傳統的VFX工具和工作流程更快完成10倍”,這是一個指標,強調了效率工作室正在追逐。
這推動了AI-driender驅動的內容創建的推動力並非沒有爭議。該行業正在努力解決重大的法律和道德問題,尤其是在版權周圍。迪士尼的總法律顧問霍拉西奧·古鐵雷斯(Horacio Gutierrez)最近評論了針對中朱尼(Midjourney)的訴訟,他說:“盜版是盜版。而且事實是由AI公司完成的事實並沒有減少侵權。”
辯論是辯論的潛在創新,以抵制創造性創新的工作,以抵抗工作代替工作中的恐懼和知識財產。雖然有些人,例如電影製片人達倫·阿羅諾夫斯基(Darren Aronofsky),但人們相信“現在是探索這些新工具並為講故事的未來塑造它們的時刻,”許多創意工會仍然保持警惕。跑道的Aleph建在其前身Gen-4上,現在站在這種不斷發展的景觀的中心。