智東西（公眾號：zhidxcom）
編譯 | 王涵
編輯 | 漠影
智東西5月(yue)23日(ri)消息，2年前我們還在對著(zhu)人(ren)工智能（AI）生(sheng)成的“威(wei)爾·史密斯吃面(mian)條”視頻捧腹(fu)大笑(xiao)時，一(yi)定想不到AI已經(jing)開始在動畫領(ling)域大展拳腳(jiao)了。
動畫制(zhi)作初創公司Toonstar的(de)實(shi)踐為我(wo)們(men)講述了一(yi)段引人深思的(de)故事(shi)：如果(guo)AI被用(yong)來制(zhi)作動畫片，那會(hui)是一(yi)個怎樣的(de)未來？
▲約(yue)翰·佩克(ke)（John Peck）正在配音，圖源(yuan)：《紐約(yue)時(shi)報》
“Fear not! For I shall lead ye to riches beyond your wildest dreams!”
在洛杉磯(ji)市中(zhong)心狹小的錄音棚(peng)里，33歲(sui)的約翰·佩克（John Peck）正(zheng)等待配音工(gong)程師的判斷——這(zhe)句(ju)臺(tai)詞(ci)夠不(bu)夠海盜(dao)味兒？工(gong)程師建議他再(zai)試一次，或許該用(yong)更沙啞的嗓(sang)音強(qiang)調“wildest”，能讓(rang)這(zhe)個獨腿海盜(dao)角色(se)的喜劇(ju)效果(guo)更濃烈些。
佩克清(qing)了清(qing)嗓(sang)子(zi)再次(ci)演繹，引得(de)制作團隊(dui)哄(hong)堂大笑(xiao)。隨著工程師在(zai)筆(bi)記本上輕點(dian)幾下，AI工具便(bian)將佩克的聲線與卡通(tong)海盜的嘴型完(wan)美同(tong)步。這個角(jiao)色將出(chu)現在(zai)YouTube系列動(dong)畫《史蒂文與帕克》中——這部(bu)講(jiang)述痞子(zi)兄(xiong)弟(di)的周(zhou)(zhou)更(geng)劇(ju)集每周(zhou)(zhou)吸(xi)引3000萬觀眾。
就(jiu)在(zai)數年前，一分(fen)鐘動畫的(de)唇形(xing)同步(bu)(bu)還(huan)需耗費四小(xiao)時(shi)(shi)：動畫師必須逐幀調整(zheng)角色(se)口型。而如(ru)今，AI工具(ju)僅用15分(fen)鐘就(jiu)完成了(le)佩克這段戲的(de)同步(bu)(bu)，其中(zhong)還(huan)包括人(ren)工精修(xiu)個別細節的(de)時(shi)(shi)間(jian)。
一、更少的人力，更低的成本：動畫領域面臨AI帶來的最大風險與機遇
《史蒂文與帕克》背(bei)后的(de)初創公司(si)Toonstar已(yi)將(jiang)AI貫穿(chuan)全流(liu)程——從打(da)(da)磨劇本(ben)到(dao)生成畫面，再到(dao)為海外(wai)市場配音。“借助(zhu)這項技術，我們制作(zuo)單集動畫的(de)速度比(bi)行業標準快80%，成本(ben)降低90%。”Toonstar聯合創始人約翰·阿塔納(na)西奧(ao)（John Attanasio）說。他興奮(fen)地(di)補充道(dao)：“這才是(shi)打(da)(da)造下一代熱門IP的(de)正確方(fang)式。”
AI創業者(zhe)總愛高談這(zhe)項技術將如何“顛覆”影視制(zhi)作(zuo)流程(cheng)，但(dan)在(zai)好萊塢傳(chuan)統派(pai)聽來，這(zhe)些狂(kuang)熱(re)分(fen)子就像(xiang)來劫掠的卡通海盜。那(nei)些拖慢進度、抬高成本的編(bian)劇、特效(xiao)師和(he)音效(xiao)師，他們珍(zhen)貴的創造(zao)力可能(neng)終究會被機器(qi)人取代(dai)。
但迄(qi)今(jin)為止，行業并未發生(sheng)巨變。OpenAI等AI科技公司(si)橫空(kong)出世(shi)后，大型制片廠仍(reng)基本沿襲傳統模式，人(ren)腦的(de)藝術(shu)(shu)創造力(li)仍(reng)遠勝機器。迪士尼、環球(qiu)、華(hua)納(na)兄弟等公司(si)還(huan)在糾結于生(sheng)成式AI的(de)核心問題：技術(shu)(shu)如(ru)何(he)(he)構建？版權方如(ru)何(he)(he)獲償？工會將作何(he)(he)反應？
不過有一(yi)點已很(hen)明確(que)：在(zai)娛樂產業中，動畫領域面臨AI帶來的最大風險與機遇(yu)。
▲制(zhi)作現(xian)場(chang)路透(tou)：設計師修正動畫人物形象，來(lai)源：《紐(niu)約(yue)時(shi)報》
4200億美元（約合人民幣3.03萬億元）的(de)全球動(dong)畫(hua)產業（含電影(ying)、電視(shi)動(dong)畫(hua)、游戲、動(dong)漫）早已被(bei)電腦(nao)制圖(tu)技(ji)(ji)術(shu)主導——迪士尼動(dong)畫(hua)工作室自2011年起就(jiu)再(zai)未推(tui)出過(guo)手繪電影(ying)。換言(yan)之(zhi)，與好(hao)萊(lai)塢其他領域不同，動(dong)畫(hua)公(gong)司(si)并不抗拒技(ji)(ji)術(shu)。
但即便(bian)使(shi)用(yong)電(dian)腦，制(zhi)(zhi)作(zuo)動(dong)畫電(dian)影，甚至卡通片，都需要大批(pi)藝(yi)術家、動(dong)畫師、平(ping)面設計師、3D建模師等(deng)專業人員，成(cheng)本仍異常高(gao)(gao)昂。制(zhi)(zhi)片廠尋找更高(gao)(gao)效的(de)(de)方(fang)法(fa)的(de)(de)動(dong)機十分(fen)強烈，而(er)AI已能以更少人力更快完(wan)成(cheng)更多的(de)(de)工作(zuo)。
迪士尼影業前主席、夢(meng)工(gong)廠動(dong)畫聯合(he)創始人杰弗里·卡森伯格（Jeffrey Katzenberg）曾(ceng)預測(ce)，到(dao)明(ming)年，制作(zuo)一部大型(xing)動(dong)畫電影只需約50人，而(er)十年前需要500人。他在(zai)(zai)播客節目《文化速度》中談(tan)到(dao)AI時表示，如(ru)果(guo)現(xian)在(zai)(zai)創辦夢(meng)工(gong)廠，他會“全身心(xin)投入這項技術”。
這(zhe)正是Toonstar正在做的事，其采用的AI輔助制作流程，或許預示了行業(ye)巨頭(tou)們的未來方向。
二、技術顛覆發行模式，開創動畫領域新未來
現(xian)年53歲的約翰(han)·阿塔納(na)西奧(ao)（John Attanasio）與46歲的Toonstar另一(yi)位創始人(ren)黃(huang)露莎（Luisa Huang）都起(qi)步于傳統制片廠。2001年《怪(guai)物(wu)史萊(lai)克》風靡全(quan)球時，他加入了夢工廠動(dong)畫(hua)營銷(xiao)團隊，她則同期(qi)進入迪(di)士(shi)尼戰略(lve)規劃部，兩人(ren)后來(lai)都曾供職(zhi)華納(na)兄弟。
直白地(di)說(shuo)，他們并(bing)非投機(ji)分(fen)子，但確實是“叛逃者(zhe)”。“好萊塢對變革的(de)抗拒已(yi)到癱瘓程度，”阿塔納西(xi)奧(ao)說(shuo)，“我們忍(ren)無(wu)可忍(ren)。”
▲從左到右分別(bie)是(shi)：黃露莎（Luisa Huang）與(yu)約翰·阿塔納西奧（John Attanasio），來源：《紐約時報》
擁有MBA學位的(de)二(er)人于2015年初離開(kai)華(hua)納兄弟。“那年早間，卡(ka)通片開(kai)始消亡，最(zui)后一家播出(chu)它們(men)的(de)廣播公(gong)司放棄(qi)了，因為孩子(zi)們(men)都泡在YouTube上，”黃露莎回憶道(dao)，“我(wo)們(men)當時就(jiu)想(xiang)：卡(ka)通片難道(dao)要(yao)就(jiu)此絕跡？”
這引發(fa)了他(ta)們更深層的(de)思考(kao)：如果動畫巨頭漢納(na)和(he)巴伯拉(la)活在當下會怎樣(yang)做？
上世紀50年代(dai)末(mo)，威廉·漢納（William Hanna）與約瑟夫·巴伯拉（Joseph Barbera）通(tong)過革(ge)新制作流程(cheng)開(kai)創了電視動畫時(shi)代(dai)。面對小屏幕對海量內容的需求與微薄預(yu)算，他們將(jiang)每秒原畫幀數減半，單集所需新繪圖從1.4萬張(zhang)(zhang)壓縮至2000張(zhang)(zhang)。
出人意料的是，這反(fan)而催生了一(yi)個(ge)動畫(hua)黃金時代。漢納(na)·巴伯(bo)拉公司的熱(re)門作品(pin)包括《摩登原始(shi)人》（1960）、《杰森一(yi)家》（1962）、《史努(nu)比》（1969）、《超級朋友》（1973）和《藍精靈》（1981），這些(xie)作品(pin)至今仍(reng)通過重播和周邊商品(pin)持續盈利。
2015年在洛杉磯倉(cang)庫創(chuang)立的(de)Toonstar，立志為YouTube時代重(zhong)(zhong)構(gou)動畫生(sheng)產(chan)體(ti)(ti)系。“當(dang)流媒體(ti)(ti)顛覆發行模式時，好萊塢(wu)幾乎毫無(wu)作(zuo)為，”阿塔納西奧說，“我們不愿(yuan)看(kan)到創(chuang)作(zuo)技術革命重(zhong)(zhong)蹈覆轍。”
三、生成式AI的爆發改變了游戲規則
早期(qi)他(ta)們為(wei)Snapchat制作短(duan)片（后者后來成(cheng)為(wei)投資人(ren)），試水過區塊鏈內容，還(huan)在Musical.ly培育虛擬(ni)網紅(hong)，從Greycroft等(deng)風投募得(de)500萬(wan)美元(yuan)（約合人(ren)民(min)幣3603萬(wan)元(yuan)）。到2021年，他(ta)們已建成(cheng)適應(ying)社交(jiao)媒體節(jie)奏的動畫流水線，但圖(tu)像創作仍(reng)是瓶頸，因為(wei)當時(shi)的AI尚不足(zu)以承擔核心繪圖(tu)工作。
2022年(nian)生(sheng)成式AI的爆發(fa)改變了游(you)戲規則(ze)。Toonstar基于開(kai)源架(jia)構(gou)開(kai)發(fa)了自主圖像生(sheng)成系統“Ink & Pixel”，這個名字戲仿了迪士(shi)尼當(dang)年(nian)由(you)大批描線師與上色(se)師組成的部(bu)門，他們曾在(zai)透明賽璐璐片上手工繪制(zhi)每一幀畫(hua)面。
▲“Ink & Pixel”示意圖，來(lai)源：《紐約時報》
“我至(zhi)今仍會激動，因為當時的感覺就(jiu)是‘天啊(a)，這真的可行’。”阿(a)塔(ta)納西(xi)奧回憶Ink & Pixel系統(tong)初見成(cheng)效(xiao)時的情景。
但就(jiu)在此(ci)時，好萊塢(wu)掀起了(le)對生(sheng)成式(shi)AI的激烈抵制(zhi)，超過17萬名演員和編劇在2023年發起罷工，部分訴求就(jiu)是(shi)要(yao)求制(zhi)片方限(xian)制(zhi)AI使用。創作者(zhe)們憎惡這(zhe)項(xiang)技術的另一(yi)個原(yuan)因在于(yu)：OpenAI等公司用網絡抓(zhua)取(qu)的數(shu)據訓練模型卻未給予補(bu)償(chang)。
阿(a)塔納(na)西奧當(dang)時公(gong)開反(fan)駁道：“與其擔憂AI奪走工作，不如思考如何用(yong)它推動電影革(ge)新。”這(zhe)番在行業(ye)刊物發(fa)表的言(yan)論招致“AI渣滓去死(si)”的激(ji)進回復。
四、藝術家主導，AI代替70%基礎工作
Toonstar采用(yong)“版權清潔”的(de)(de)生成式AI引擎，“Ink & Pixel”僅用(yong)委托創作的(de)(de)artwork訓練，而非網(wang)絡抓取數據。黃露莎強調：“必須是(shi)藝術(shu)家(jia)主導(dao)技術(shu)，而非相(xiang)反。”他們的(de)(de)核(he)心準則是(shi)H.I.T.L.（Humans in the Loop，人(ren)類始(shi)終參(can)與(yu)決策閉環）。
《史蒂文與帕克》的(de)創(chuang)作周(zhou)期(qi)通常從周(zhou)四的(de)視頻(pin)會(hui)議開始。24歲的(de)TikTok網紅、該系列(lie)聯(lian)合創(chuang)始人(ren)帕克·詹姆(mu)斯（Parker James）從家(jia)中接入，與編劇(ju)和制(zhi)作主管共同打磨(mo)劇(ju)本。
這(zhe)一環節全(quan)程人工創(chuang)作(zuo)，禁(jin)用AI，但(dan)他們會(hui)使(shi)用名為Spot的AI分析工具研(yan)究觀眾數據：哪些片段被反復觀看？棄劇(ju)時刻劇(ju)情進展到何處(chu)？結果發現觀眾對劇(ju)中的寵物狗(gou)Murphy興趣平平，”這(zhe)很意外，誰會(hui)不(bu)喜歡(huan)可(ke)愛狗(gou)狗(gou)呢(ni)？”黃露莎笑道。
周五完成(cheng)(cheng)劇(ju)(ju)本(ben)后，周一進(jin)入(ru)AI輔助(zhu)的前(qian)期制作。Ink & Pixel系(xi)統(tong)根(gen)據(ju)劇(ju)(ju)本(ben)分(fen)析所(suo)需新圖像(xiang)。“生成(cheng)(cheng)概念(nian)師”輸入(ru)“紅色頭巾”“棕色皮(pi)靴(xue)”等提示詞(ci)，系(xi)統(tong)即刻生成(cheng)(cheng)多個符合(he)劇(ju)(ju)集美術風(feng)格且比例(li)正確選(xuan)項。設計師選(xuan)定基礎(chu)形象后手工(gong)調(diao)整(zheng)，比如添加木制假(jia)腿增強喜劇(ju)(ju)效(xiao)果，全程約20分(fen)鐘。
▲制(zhi)作(zuo)現場路透(tou)：定稿后(hou)錄制(zhi)對(dui)白，來源：《紐約時報(bao)》
“這部(bu)分非常主(zhu)觀(guan)，正(zheng)因如此(ci)才需要藝(yi)術家(jia)和設計師的參與，”黃(huang)露莎解釋道(dao)，“我們的目(mu)標(biao)是讓(rang)AI完成(cheng)70%的基礎工作(zuo)。”Toonstar的首席設計師霍莉·迪菲利皮斯（Holly DiFilippis）將AI生成(cheng)的角色比(bi)作(zuo)“穿著戲服的模特人偶(ou)”。
26歲的(de)迪菲利皮斯說(shuo)：“AI只提供基底(di)，我(wo)們(men)藝術家(jia)的(de)職責(ze)是(shi)通過細節賦予角色視(shi)覺個(ge)性，決(jue)定這個(ge)海盜(dao)是(shi)該(gai)帶點邪氣，還是(shi)應該(gai)滑稽搞(gao)笑(xiao)，這些創作選擇是(shi)機器人無法替代(dai)的(de)。”
接(jie)下來，動畫師使用專屬軟件(jian)構建場景。劇本定稿(gao)后(hou)（有時甚至更早）錄制的(de)對(dui)白(bai)會通過AI工具自動同步到角色唇形，另一套(tao)AI程(cheng)序(xu)則負(fu)責添加滑板撞擊路(lu)緣等(deng)音效(xiao)。“傳統(tong)方式需要人工在音效(xiao)庫里大海撈針，”黃露莎說。
此外，Toonstar采用初創公司ElevenLabs的技術(shu)，能(neng)即時(shi)將角色配音轉換成西班牙語、葡萄牙語和日(ri)語，通過YouTube進行全球分(fen)發。
到了周四，新(xin)一(yi)周的(de)制作(zuo)循環又將(jiang)啟動。
結語：AI時代，動畫門檻終將消失
Toonstar遠(yuan)非(fei)好萊塢(wu)最炫酷的AI初創公司。
融資3億美元(yuan)的(de)(de)Runway近期發布(bu)了(le)面向(xiang)成(cheng)人(ren)觀眾的(de)(de)6分(fen)鐘(zhong)動畫試播(bo)集(ji)；去(qu)年秋(qiu)季(ji)成(cheng)立的(de)(de)Asteria自詡為“AI時代的(de)(de)皮(pi)克(ke)斯(si)”，其首部作(zuo)品《古怪鳥秀(xiu)》已上(shang)線；由前二十世紀福克(ke)斯(si)主席(xi)彼得·切爾寧（Peter Chernin）支(zhi)持(chi)的(de)(de)Promise工作(zuo)室(shi)，以及塞雷(lei)娜(na)·威廉(lian)姆斯(si)（Serena Williams）投資的(de)(de)Invisible Universe（又一(yi)家自稱(cheng)”網絡皮(pi)克(ke)斯(si)”）都在布(bu)局同類業(ye)務。英國(guo)AiMation工作(zuo)室(shi)甚至(zhi)用全AI工具制(zhi)作(zuo)了(le)87分(fen)鐘(zhong)長片《機器人(ren)成(cheng)長之地》來招攬(lan)人(ren)才(cai)。
但正如阿(a)塔(ta)納西奧(ao)所言，Toonstar已用自己草根的(de)方式提供了“成功藍本”：通過AI將(jiang)單集動畫(hua)(hua)制(zhi)作(zuo)周期壓縮至7天，成本控制(zhi)在傳(chuan)統模式的(de)1/10。這種高效創作(zuo)體系或許正預示(shi)著，當迪士尼(ni)還在為AI倫理爭論不休時，新(xin)一代動畫(hua)(hua)革命已從YouTube作(zuo)坊悄(qiao)然興起。
▲AI生成海盜(dao)形象示意，來源：《紐(niu)約(yue)時報》
無論是短(duan)片(pian)、新劇(ju)集還(huan)是舊(jiu)片(pian)段合集，《史蒂文與帕克》的內容已(yi)經持續穩(wen)定產出(chu)超過兩年。據Toonstar統計，該系列累(lei)計觀看量已(yi)達75億次。阿塔納西(xi)奧(ao)拒絕(jue)透露具體財務數(shu)據，但確認公司已(yi)實(shi)現盈利。
目前Toonstar正(zheng)與帕克(ke)·詹姆斯共同拓展該IP的商業版(ban)圖：已與蘭登書屋達成協議，將推出多(duo)部改編漫畫小(xiao)說；多(duo)家流媒體平臺(tai)也表(biao)示有意將其開發為傳統動畫劇(ju)集。
今年秋季，Toonstar計(ji)劃推出多部新動(dong)畫劇集，每部都(dou)將與知(zhi)名(ming)YouTube或TikTok創作者合作開發。“由于動(dong)畫制(zhi)作歷來(lai)成本高昂、周期(qi)漫(man)長，許(xu)多人才被擋在門外，特(te)別是年輕(qing)創作者，”阿(a)塔納西奧說，“我(wo)們認為動(dong)畫不該是私人俱樂部。”他還補充：“有了AI技術，這(zhe)個(ge)門檻終將消失(shi)。”
來源：《紐約時報》
