清華系A(chǔ)I視頻工具，用10天給《毒液》官方做了個片子
漫威計劃將更多超級英雄IP AI化
《毒液》AI短片主創(chuàng)團(tuán)隊
量子位 | 公眾號 QbitAI
國產(chǎn)AI視頻大模型牽手國際頂尖IP！
最近票房單日冠軍漫威《毒液3》的水墨風(fēng)宣傳片，竟然是用AI做的。就是下面索尼電影官方發(fā)布這一條。
30秒的時長，搞了個水墨版毒液大咖秀——
時而幻化成魚，時而變做岸上奔騰的毒液馬；一會兒又飛檐走壁，變換為展翅飛鶴，在古樓最高處俯瞰城市。
臉上還露出毒液標(biāo)志性的邪魅一笑。
導(dǎo)演楊晟（電影《泰囧》、游戲《完蛋我被美女包圍了》主創(chuàng)）和凱倫（參與制作電影《邪不壓正》、游戲《星穹鐵道》）表示：
這條宣傳片，完全基于國產(chǎn)AI視頻工具生成。
制作總體時間效率提升了至少3倍，節(jié)省了近90%的后期投入。
背后是來自清華系A(chǔ)I視頻創(chuàng)業(yè)公司生數(shù)科技，用的就是其旗下的Vidu。
量子位特地聯(lián)系主創(chuàng)團(tuán)隊，要來了背后制作過程分享，對AI視頻感興趣的旁友可以參考參考業(yè)內(nèi)頂尖實踐。
首尾幀控制立大功
導(dǎo)演楊晟透露，整條短片的畫面都基于Vidu平臺實現(xiàn)，主要采用了Vidu的圖生視頻和首尾幀控制功能，其中后者的使用占比更高。
整個流程是醬嬸滴：
主創(chuàng)團(tuán)隊前期先人工手繪分鏡畫，畫出要喂給Vidu的首幀和尾幀畫面。
然后坐等Vidu在保持畫面變幻中主題、風(fēng)格、時空連貫的前提下，自動理解并補充過程中的視頻畫面內(nèi)容。
舉個“墨汁擴散演化成毒液”的例子。
這是一個水墨畫風(fēng)格的首幀：
這是一個水墨畫風(fēng)格的尾幀：
中間由AI“腦補”的畫面，既可以是一鏡到底，也可以進(jìn)行鏡頭切換的蒙太奇操作。
導(dǎo)演楊晟表示：
這支短片不長，但涉及到很多鏡頭變幻，即便對傳統(tǒng)特效公司來說，也需要投入專業(yè)人力花費一番力氣才能完成。
傳統(tǒng)動畫制作的流程需要先經(jīng)過腳本、分鏡（關(guān)鍵幀制作）、三維建模、動畫后期制作等環(huán)節(jié)。
一般而言，迪斯尼制作一部動畫需要4-5年的時間。
動畫中期的團(tuán)隊尤為龐大，常常是幾千人一起工作，過程相當(dāng)漫長，中間還會發(fā)生很多人為執(zhí)行上的不可控因素。
“用上AI視頻，朝九晚五有望了”
主創(chuàng)團(tuán)隊透露，當(dāng)時，索尼對主創(chuàng)團(tuán)隊下了個prompt：
一個月時間，圍繞“萬物皆可毒液”的主題制作一支創(chuàng)意短片。
短片所宣傳的《毒液：最后一舞》是“毒液三部曲”的最終章。此前，毒液的IP形象已經(jīng)給觀眾留下了深刻的印象。
因此，制作宣傳短片，對形象的穩(wěn)定性和一致性有著極高要求。
最初，團(tuán)隊的想法是采用實拍，譬如利用非牛頓流體等來實現(xiàn)毒液百變的特質(zhì)；甚至考慮用500ml強磁體去模擬真實存在的毒液。
但是事與愿違，實拍效果完全不及預(yù)期，更要命的是這樣操作的制作周期太長了。
于是，團(tuán)隊開始考慮嘗試今年風(fēng)頭很盛的AI視頻生成。
為了實現(xiàn)用AI制作該短片，主創(chuàng)團(tuán)隊此前嘗試了非常多款國內(nèi)外AI視頻生成工具，“但經(jīng)常會出現(xiàn)前后鏡頭風(fēng)格不統(tǒng)一、崩壞率高等問題。”
楊晟解釋道，選擇Vidu，一方面是看中了其在水墨風(fēng)格上的審美獨特性和一致性；另一方面，Vidu生成的視頻沒有鏡頭轉(zhuǎn)換的割裂感，同時畫面內(nèi)容也符合水墨渲染的特質(zhì)和水流動的物理規(guī)律。
基本上說，可以是拿來即用了。
Vidu加入工作流后，原本的動畫制作流程得到簡化。
創(chuàng)作團(tuán)隊提供到關(guān)鍵幀原畫，直接用AI生成視頻素材，再剪輯、包裝、配音，就完成了片子。
值得一提的是，AI僅花費了2天時間就生成了所有的素材，這在過去占工作量80%-90%。
而且主創(chuàng)團(tuán)隊表示，AI視頻生成突破了資金和時間的限制，創(chuàng)作者不需再在有限選擇范圍內(nèi)對內(nèi)容質(zhì)量做妥協(xié)，畢竟只需要半天時間，AI就能生成近2000條視頻素材，充分支持創(chuàng)作者進(jìn)行內(nèi)容選擇。
故而短片制作很順利——
傳統(tǒng)流程下，30s的動畫短片需要制作1-2個月；基于Vidu，主創(chuàng)團(tuán)隊耗時10天，全部制作完成，這比索尼電影給的ddl要早得多。
顯然，Vidu參與后整個流程被大大簡化，
導(dǎo)演凱倫表示，用上AI視頻，朝九晚五有望了（doge）。
One More thing
實際上，這并不是AI視頻領(lǐng)域的首次商業(yè)化嘗試。
2024最強期貨OpenAI的Sora，今年6月就已經(jīng)和玩具反斗城合作過AI商業(yè)片《玩具反斗城的起源》。
不過，后期包裝和特效制作的占比，以及AI在創(chuàng)作過程中實際發(fā)揮的作用等幕后制作環(huán)節(jié)，OpenAI都沒有放出具體細(xì)節(jié)。
據(jù)了解，未來，漫威計劃將更多超級英雄IP通過AI化的方式呈現(xiàn)到大眾面前。
甚至個人IP愛好者們也能用Vidu搞漫威二創(chuàng)——
誰說蜘蛛俠不能也AI起來？
相關(guān)閱讀
終于！全球爆火AI視頻神器PixVerse發(fā)布國內(nèi)版——拍我AI
同步上線網(wǎng)頁端及移動端應(yīng)用，并開放最新V4.5模型供用戶使用
