聲明:本文來自于微信公眾號 新智元（ID:AI_era），作者:新智元，授權轉載發布。
【新智元導讀】Sora還沒開放，但網友們用Runway、Pika等工具做出的電影級大片已經「上線」，B站西游記的瀏覽量快破百萬了!另外，Lightricks今天推出的革命性AI電影制作平臺LTX Studio，讓我們可以親手DIY電影級大片了。
最近，全網掀起了AI視頻熱潮。
各種史詩級大片紛紛出爐，逼真的效果、震撼的場面讓網友們震驚到失語。
比如B站UP主「AI瘋人院」的這部2024開篇王炸——AI版西游記動畫短片，已經取得了將近百萬的播放量。
網友們紛紛驚呼，開篇就被驚艷到，整個看下來感受就是:簡直絕了!
而一位名叫Shang Chi的小哥做出的AI電影「懷舊宇航員」，則讓無數人落淚，直接入選今年MIT AI電影大賽的最佳影片。
所以，我們離自己DIY出一部AI大片，到底有多遠?
雖然，最近爆紅的Sora把視頻時間延長到了史詩級的60秒，但離一整部電影大片的時長，還是差得遠。
不過，剛剛出爐的一套AI工具，直接把電影制作的整個工作流都給實現了!
AI大電影「完整工作流」來了
就在剛剛，以色列初創公司Lightricks正式發布了一款AI驅動的電影生成和剪輯軟件——LTX Studio。
只要通過文字，它就能直接生成復雜的劇情，包含語音、音效、視頻畫面，一整套全包圓了。
聯合創始人（從左至右）:Itai Tsiddon、Yaron Inger、Zeev Farbman、Amit Goldstein和Nir Pochter
它包含的一整套導演工具，直接重新定義了視頻制作的工作流!其中包括自動編寫腳本工具、調整多鏡頭的場景控制工具、保證角色一致性的工具、攝像機控制、一鍵編輯等等。
這樣，我們制作出高質量視頻，就更輕松了。
只要你給出一個初步想法，LTX Studio就能把你的想法可視化。
比如，現在我們的電影中需要一只因驚訝而放大的瞳孔。
一個躺在地上的女人。
一個被水淹了的未來主義房間中的一棵樹。
昏暗走廊中的一個女人。
一個惡棍。
根據你輸入的prompt，LTX Studio自動為創建出了腳本，分割出眾多個鏡頭。
比如一個未來主義空間的戲劇場景，它創建出的鏡頭如下。
或者，我們需要紐約法庭的場景。
有了這些分鏡頭之后，就可以直接讓它生成一部電影了!
自動生成的故事板，會組織起整個的敘事和場景規劃，對角色、攝像機角度都能自定義控制。這種直觀的體驗，讓前期制作和粗剪都更迅速。
而它生成的畫面內容，比如演員、造型、場景，都可以隨意剪輯更換。
比如，剛才生成影片中男人背后的綠車，我們想讓它變成紅色的，一秒給你改變。
可以讓肌肉女變成肌肉男嗎?完全沒問題。
后悔了，還是想讓男性角色變回女性?也沒問題。
我們可以把這個場景中女性角色身邊的男性換成一個中年黑人，或者一位衣冠楚楚的紳士。
一個效果炸裂的電影片頭怎么設計?它來幫你。
公司聯合創始人兼CEO Zeev Farbman表示，這款產品非常適合電影制作人、前期制作人員和廣告公司等專業人士。
「LTX Studio能夠幫助快速構建概念故事，或者在不需要大量投資的情況下，幫助電影制作人評估拍攝場景的不同方案。」
背后的模型
LTX Studio結合了多種AI技術，涵蓋了創作過程中的各個環節。
其中，公司獨創的文生視頻模型——LongAnimateDiff，能夠創作出幀數在16至64之間的視頻。
此外，團隊還發布了另一款專門用于創作32幀視頻的模型。與LongAnimateDiff相比，它在視頻質量上通常有更出色的表現。
不過，并不是所有的功能都依賴AI技術。
對于背景音樂，公司選擇了第三方的音樂資產供應商，因為他們認為目前的AI技術還無法創作出符合要求的背景音樂質量。
一大波真實制作來了!
官方在推特上已經放出了一大波網友制作的視頻，并且還分享了背后工作流的樣子。
在賽博朋克的未來城市中，一位賞金獵人的新手之旅意外地將他卷入了一場殘酷的城市幫派戰爭。
這一切始于他在一次意外中救下了一位黑幫老大的兒子，從而引發了一系列連鎖反應。
如果他想在法律的邊緣生存下去，就必須迅速適應這個充滿危險和詭計的世界。
A rookie cyberpunk bounty hunter finds himself at the center of a city gang war after saving a mob bosses son from a rival attack. Gotta learn the rules fast if he wants to survive life on this side of the law. A crime thriller packed with hits， jealousy， and power.
Marcus，一位身經百戰的角斗士，正站在競技場地下的昏暗房間中，進行最后的檢查。
畫面中的短劍是他在無數戰斗中的忠實伴侶，每一次的磨礪都是對生死的考驗。
當Marcus踏入競技場，那刺眼的陽光和滾燙的空氣仿佛預示著即將到來的戰斗。
Marcus is a gladiator and in the dimly lit room beneath the arena， he prepares for battle as he checks his gladius for the last time. He steps out into the light， seeing the vast crowd in the scorching sun， he sees his opponent and softly smiles. This day belongs to him.
在這個因核災難而變得荒涼的世界里，只有女性存活下來。
她們佩戴的防毒面具，不僅是在這充滿毒素的空氣中求生的必需品，更成為了她們反抗絕望、宣示力量的象征。
在這片滿目瘡痍的廢墟之中，她們為爭奪資源、權力以及自由，展開了殊死的斗爭。
In a world scorched by nuclear disaster， where only women survive， they wear gas masks， not just for air， but as a statement. Amidst the ruins， they fight for resources， power， and freedom. In a Mad Max inspired dystopia， witness their stylish resilience.
在一個奇妙的冒險中，一位8歲的勇敢女孩穿越時空回到了恐龍時代，卻意外發現了一個充滿神秘的高級文明。
面對時間的緊迫，她不僅要想方設法修復她的時間機器，還要揭開這個古老文明的秘密，并把這些珍貴的知識帶回現代。
An8year old girl travels back in time to see the dinosaurs and discovers an unknown advanced civilization. She must fix her time machine and bring back the secret on the civilization to the present before it's too late.
國外網友熱評十大AI電影
這些天，「AI顛覆好萊塢」的呼聲，是越來越猛了。
隨著Sora掀起AI視頻的熱潮，網友們也紛紛使用各種AI視頻工具，做出了自己的電影級大片。
國外博主Min Choi最近就評選出，全網十個效果最好的DIY電影預告片。
1懷舊宇航員
這個AI短片，出自一位叫Shang Chi的網友之手。
入選了2024年MIT AI電影制作大賽黑客馬拉松的最佳影片。
Shang Chi感嘆道:AI是講故事的終極武器，如果沒有偉大的AI社區靈感，自己不可能做出這個片子。
網友們看完后非常感動，紛紛表示:「感謝你創造了這個美麗的故事。」
2真人版高達預告
「Dave Clark」制作的這個高達真人概念預告片，效果好到令人震驚。
其中用到了Runway的運動筆刷功能。
3足球比賽
由「The Classified Football Results」制作的這部片子，是由傳奇人物James Alexander Gordon的聲音朗讀。
畫面和視頻由Midjourney和Runway生成。
4最終幻想VII重生
這是日本網友「吉川明靜」制作的《最終幻想》預告片。
「Shikoba」制作的這個視頻，是由Midjourney、PixVerse和Music Soundbay共同完成的。
6午夜奧德賽
「Ethereal Gwirl」制作的這部大片，已經在YouTube上正式播出了!
本視頻由Midjourney、Pika、Runway、Magnific AI、Stable Diffusion和FulljourneyAI共同完成。
精美的畫質，扣人心弦的情節，被網友們評為「史詩級」作品。
7Levi's風廣告大片
「Paul Montreal」經過全新的構想，對90年代的經典Levi's廣告「Creek」進行了再創作。
使用的工具是Midjourney、Runway、Artlist和Magnific AI。
在這個過程中應用到了許多電影攝影技術，和視覺敘事藝術。
8Absence
這個名為「Absence」的大片，講述的是一場穿越時空的因果之旅。
作者「Dustin Hollywood」使用的工具是Midjourney、Runway、Topaz Labs和Magnific AI。
9產婦:AI恐怖電影預告片
作者「PZF」表示，自己想創作一些與日常工作完全不同的東西，其次也想提高自己的編輯技能。
因此他虛構了一部恐怖電影「產婦」（Maternity），做出了60秒的預告片。
網友們表示，里面的小孩盯著你眼睛的時候，簡直毛骨悚然……
而作者表示，開始自己并沒有打算把視頻做得這么暗黑，但他發現了一種十分有效的風格，找到了很合適的配樂，然后就做成了這個樣子。
10犬之日
作者「Next on Now」表示，每個人都會偶爾需要屬于自己的「犬之日」。
使用的工具是Runway、Midjourney和ElevenLabs。
看到網友們的這些大片，你是不是也手癢癢了?
Runway、Pika之類的工具，大家一定已經玩得很溜了。這里重點介紹下LTX Studio的使用方法。
正如之前的演示，它使用起來非常簡單，很好上手。
我們只需先輸入一段自己的想法，然后LTX Studio就會根據這段prompt創建一個腳本和故事板，以及人物角色。
其中，故事板會展現分割成眾多鏡頭的不同場景。
接著，我們可以通過輸入指令來變換場景，更改風格（如動畫或影視風格）、調整天氣設定和更換地點。
一般而言，每個鏡頭的長度僅有幾秒。
借助LTX Studio提供的鏡頭編輯器，我們可以重命名鏡頭并調整包括視頻特效、動作幅度、攝像機的角度/位移、持續時間和角色對白等設置。
另外，我們還能通過一個獨立的角色頁簽，為整個構想增加、刪除或更改角色。或者， 直接上傳一張面部清晰可見的圖片，來創造角色。
這個過程中，故事角色的一致性是不需要操心的。
當用戶完成故事線的微調和鏡頭編輯后，就可以預覽電影了。還能導出文件，分享給其他人。
Waitlist現在就可以申請了，試用是免費的!
3月27日發布正式版后，估計就要收費了。
申請地址:https://ltx.studio/
Sora依然無人可擋
而在AI視頻領域，如果橫向比較的話，現在可以確定的是，Sora依舊無人可擋。
最近，國外的一位小哥Mickmumpitz，就對比了Sora和Runway Gen-2、AnimateDiff、Pika，以及LeonardoAI的生成效果。
一句話總結就是，Sora鶴立雞群。
接下來是固定考題:根據這幅靜圖創作視頻。
以下是四個AI視頻工具的作品。
同樣的prompt畫出的視頻，Sora和Runway是這樣的。
Sora和AnimateDiff是這樣的。
Sora和Pika是這樣的。
Sora和LeonardoAI是這樣的。
以下是生成小狗的效果圖對比。
以下是公路汽車的效果對比。
可以看到，Sora比起其他AI視頻工具，性能強大得不是一檔。
簡直難以想象，Sora正式上線以后，電影業會被顛覆成什么樣。
