AI是今年的大熱點

在內(nèi)容生產(chǎn)領(lǐng)域，AI成為焦點，許多特別標明“由AI生成”的視頻短片，出現(xiàn)在各種網(wǎng)絡(luò)端口，被推送到你的眼前。

AI視頻究竟是怎么做出來的？

微電影《白蛇傳·江南》是浙江廣電集團“智媒果”AI創(chuàng)作大賽（第一季）的金獎作品?！癦MG部落”請來主創(chuàng)團隊主要成員、來自浙江衛(wèi)視（中國藍新平臺）的馮京，講述創(chuàng)作過程，分享創(chuàng)作感悟。

無論對AI創(chuàng)作者，還是僅僅對AI創(chuàng)作感興趣的朋友，都值得看看。

選題初衷

此次AI大賽，集團推出“江南”“文化中國行”“新質(zhì)生產(chǎn)力”“二創(chuàng)”四個主題。我是土生土長的江南人，當時一眼就相中了“江南”這個主題。

此片根據(jù)馮夢龍《警世通言》第二十八卷《白娘子永鎮(zhèn)雷峰塔》改編，為家喻戶曉的愛情傳說故事。改編的原因之一就是因為《警世通言》的作者是明朝著名的文學(xué)家、戲曲家、思想家馮夢龍，他與浙江有相當深厚的淵源，也是我的本家。借助《警世通言》，我的創(chuàng)作激情提升了好幾個level。今年也是我們家喻戶曉的《新白娘子傳奇》主創(chuàng)30周年重聚，以此片致敬兒時的神劇。

此片以微電影形式展現(xiàn)了經(jīng)典的白娘子水漫金山的片段以及江南文化的獨特韻味。其中《白娘子永鎮(zhèn)雷峰塔》作為銜接片頭和水漫金山的推手，順利地將最經(jīng)典的“水漫金山”情節(jié)引入其間，兩個核心故事點在此片中逐一展開，讓人不感到突兀，這也許是一種小小的創(chuàng)新。

AI 創(chuàng)作的瓶頸

整條短片，其視頻音頻基本上都用AI完成，包括劇情方面。

AI不僅僅是視頻模型，不同的AI大模型還可以在不同的場景下使用。例如劇情方面，可以用文心一言來獲取《警世通言》中的大量內(nèi)容，也可以獲取最初的劇本雛形，但AI畢竟只是工具，可以給人類靈感，但不能替代人類，要讓劇情蘊含靈魂，還得人力介入。

創(chuàng)作過程中，最大的困難是片中角色的創(chuàng)建，也是AI大模型現(xiàn)階段存在的最大瓶頸。

例如文生圖大模型，在創(chuàng)作中國神話系列圖像時，人物的角色一致性表現(xiàn)得不盡如人意，特別是在中國古代的冷兵器繪制方面也是一個巨大的盲區(qū)，也許與大模型及其訓(xùn)練素材有關(guān)，是西方生產(chǎn)的大模型“不服水土”。

文生圖，是將角色建立以及分鏡圖完成，那么接下來就是圖生視頻的流程。

這個流程中，翻車最多的當數(shù)圖生視頻功能。人物動作姿態(tài)的扭曲，物理運動軌跡的正確性，又或是生成的結(jié)果完全與提示詞不符等等。

在整個制作過程中，翻車畫面層出不窮，亦是樂趣所在，讓我哭笑不得。AI創(chuàng)作就像一個奔放的熊孩子，阻止不了它那“放肆”的步伐。比如，樹葉失去了地心引力，仿佛看見了“三體”；海水漸漸地變成了云霧，不知道這是在天上還是在海里；美麗的白素貞的臉嚴重扭曲，與原畫不符；時間似乎靜止下來，海水按下了“暫停鍵”……

諸如此類的翻車現(xiàn)場多到離譜，所幸隨著大模型的不斷迭代，翻車概率也越來越少了。

創(chuàng)作感悟

通過AI的實踐運用，會發(fā)現(xiàn)AI不能完全照著你的想法精確地呈現(xiàn)出來，這個時候便需要自身的傳統(tǒng)功底。例如左圖，并非由大模型直接生成，而是通過生成的兩張圖使用Photoshop進行了合成，從而達到最終想要的效果。

比如，白素貞變身白蛇水漫金山的畫面，是將蛇頭和海浪合成之后才達到了滿意的效果；而法海與神龜?shù)耐虍嬅?，一開始一直畫不出神龜巨大的身軀，但通過提示詞的改變，最終生成了滿意的結(jié)果。

自然界龜?shù)姆N類繁多，而陸龜是世界上最大的龜類，將提示詞修改為“中國神話神獸級別的陸龜，震撼的、史詩級的、與電影《環(huán)太平洋》一樣的視覺效果”，如此在生成三遍后，就得到了圖中的龐然大物。因此，AI實踐應(yīng)用中，構(gòu)建提示詞至關(guān)重要。提示詞需要靈活運用，繞開固定的思維，也許會達到自己滿意的效果。

本片的結(jié)尾所使用的鏡頭，其實是網(wǎng)絡(luò)上找的，大模型無法畫出真正的西湖。巧用一些無版權(quán)的免費圖片資源，然后再使用圖生視頻大模型來生成視頻片段，也能呈現(xiàn)出想要的畫面，可謂是“條條大路通羅馬”。

特別是在制作神話色彩權(quán)重高的 AI短片中，應(yīng)該大膽去想象自己的提示詞，不怕做不到，只怕想不到。文生圖大模型會時不時給你一些驚喜。比如法海某個鏡頭圖的提示詞是：A monk lifting a golden staff above his head surrounded.

未來與展望

《白蛇傳·江南》之后，我們又創(chuàng)作出了更多展現(xiàn)中國優(yōu)秀傳統(tǒng)文化的精品AI短片：《牛郎織女》已經(jīng)制作完成發(fā)布，同時還有中秋特輯《嫦娥奔月》和國慶特輯《英雄》。

隨著技術(shù)不斷提升，短片的品質(zhì)也將不斷提升。

AI的發(fā)展是無止境的，這印證了一句老話：“活到老，學(xué)到老”，技術(shù)的迭代在轉(zhuǎn)瞬之間。從最初的繪圖，到大家俗稱的“動態(tài)PPT”，又到目前以假亂真的Runway gen-3、可靈AI、LUMA AI 質(zhì)的飛躍，僅僅半年時間。在這半年之中，我每天起床的第一件事，就是搜索是否有新的大模型更新了。杜絕信息差，積極擁抱變化，應(yīng)該是一個AI創(chuàng)作者的基本素養(yǎng)。

未來，AI不會淘汰熱愛專業(yè)的人類，也只有癡迷于專業(yè)的人類才能真正操控AI。