智東西(公眾號:zhidxcom)
編譯 | 汪越
編輯 | 心緣

智東西11月(yue)7日(ri)報道(dao),據(ju)VentureBeat報道(dao),11月(yue)1日(ri),美國明星AI視頻(pin)生(sheng)成創(chuang)企Runway為其Gen-3 Alpha Turbo模型推(tui)出了新的AI相機控制(zhi)(zhi)功能(neng)。該功能(neng)允(yun)許(xu)用戶(hu)在(zai)基于文本提示、上傳的圖(tu)像或現有(you)視頻(pin)生(sheng)成新視頻(pin)時(shi),進行(xing)更精(jing)細(xi)的AI攝(she)像機控制(zhi)(zhi)、動態(tai)視角調整和創(chuang)意鏡頭運動,從而創(chuang)造(zao)出更加逼真和生(sheng)動的3D效果。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

此(ci)外,據VentureBeat報(bao)道(dao),Runway還(huan)在(zai)積極(ji)研發能夠模(mo)擬物(wu)理世(shi)界的AI系(xi)統(tong),稱為“世(shi)界模(mo)型”。該系(xi)統(tong)的目(mu)標是創建一種能夠表示和(he)模(mo)擬各種現實世(shi)界情況(kuang)和(he)交互(hu)的通用(yong)模(mo)型。

一、打造電影級3D視覺:精細控制、動態視角與創意鏡頭

Runway的(de)(de)高(gao)級AI攝(she)像(xiang)頭控件為用(yong)戶提供了更精細(xi)的(de)(de)攝(she)像(xiang)機控制功(gong)能(neng),使用(yong)戶能(neng)夠(gou)輕(qing)松實現對場景和(he)主題的(de)(de)放大、縮(suo)小,同時保(bao)持AI生成角色的(de)(de)形(xing)態不變,以及背后背景的(de)(de)真實感,仿佛置身于真實的(de)(de)電影拍(pai)攝(she)現場。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,用戶(hu)可以放大(da)和縮(suo)小他(ta)們的(de)場景(jing)和主題,甚至保留AI生成(cheng)的(de)角(jiao)色形態(tai)和背后(hou)的(de)背景(jing),真實地(di)將他(ta)們和他(ta)們的(de)觀眾(zhong)帶入一個完全實現(xian)的(de)、看(kan)似3D的(de)世(shi)界,就像在真實的(de)電(dian)影布景(jing)或外景(jing)地(di)一樣。

除了(le)精細的攝像機控(kong)制,Runway的新(xin)功能還支(zhi)持(chi)用戶進行動(dong)(dong)態(tai)視(shi)角(jiao)調整,實現水平移動(dong)(dong)、圍繞主題平滑地形成弧線,或是從不同(tong)的角(jiao)度探索(suo)場景,極大地提(ti)升了(le)視(shi)頻的沉(chen)浸感(gan)和視(shi)角(jiao)多樣(yang)性(xing)。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,創(chuang)作者可(ke)以使用(yong)水平運動(dong)圍繞一個主題形成平滑的(de)弧(hu)線,或(huo)(huo)從不同的(de)有利位置(zhi)探索位置(zhi),增強沉浸(jin)感和視角。此外,還可(ke)以將各種攝像(xiang)機移動(dong)與速度變化相結合(he),創(chuang)造出(chu)視覺上更加(jia)引(yin)人(ren)入勝的(de)循環或(huo)(huo)過(guo)渡效(xiao)果(guo)。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

新(xin)功能還(huan)支持用戶進行創意鏡頭運用,包括戲劇性的(de)放大操作,深入(ru)具有電影質感的(de)場景(jing);或(huo)執行快(kuai)速縮(suo)小,引入(ru)新(xin)的(de)背景(jing),轉移(yi)故事的(de)焦點,為(wei)觀眾帶來全新(xin)的(de)視角體驗(yan)。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,用戶可以進行戲劇性的放大(da),更深入(ru)地進入(ru)具有電影風格(ge)的場(chang)景,或執行快速縮小以引入(ru)新(xin)的背景,轉移(yi)敘事焦點并為觀眾(zhong)提供(gong)新(xin)鮮的視角(jiao)。緩慢移(yi)動攝(she)像機的能力也被加入(ru)進來,使(shi)得(de)攝(she)像機能夠在場(chang)景中(zhong)平(ping)穩滑行,適合強調細節或營造緊張氣氛。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

從Runway在X平臺展示的(de)這些(xie)新功能的(de)視頻來(lai)看,這些(xie)控件顯著提高了控制(zhi)的(de)精確(que)度,有助于AI電影制(zhi)作人,包括與Runway合作的(de)傳統好萊塢工作室如獅門(men)影業,以更(geng)快、更(geng)經濟、更(geng)無縫(feng)的(de)方式實現高質量的(de)電影場景。

二、開發AI“世界模型”,愿景是預知未來

Runway不僅致力(li)于(yu)提供強大的視(shi)頻(pin)生成工(gong)具,還著(zhu)眼于(yu)開發能夠模擬物理世界的“世界模型”。這(zhe)類AI系(xi)統(tong)的目標是構建(jian)環境(jing)的內部(bu)表示,并用它來預測未來的事件。

據VentureBeat報道,當被問及Runway是否開(kai)(kai)發(fa)了3D AI場(chang)景生成模(mo)型(xing)時(shi),Runway首(shou)席執行(xing)官Cristóbal Valenzuela回(hui)答說:“世(shi)界模(mo)型(xing)。” 該回(hui)答暗示了Runway對開(kai)(kai)發(fa)“世(shi)界模(mo)型(xing)”持開(kai)(kai)放(fang)態(tai)度(du),并可(ke)能(neng)在(zai)這方面(mian)進(jin)行(xing)研究和開(kai)(kai)發(fa)。

Runway的聯合創始(shi)人兼首席技術官Anastasis Germanidis在去年12月的一(yi)篇文章中談道,世界模(mo)(mo)型是一(yi)種AI系(xi)統,它(ta)能夠構建環(huan)境(jing)的內(nei)部表示,并用它(ta)來(lai)預測該環(huan)境(jing)中的未來(lai)事件。迄今為止,世界模(mo)(mo)型的研究主要集(ji)中在非常(chang)有限和受控的環(huan)境(jing)中,例如(ru)視(shi)頻游戲中的虛擬世界或自動駕駛(shi)汽(qi)車的模(mo)(mo)擬環(huan)境(jing)。

Germanidis還說,Runway的(de)(de)目標是創建(jian)一(yi)種(zhong)能夠表(biao)示和模(mo)擬各種(zhong)現實(shi)世界情況和交(jiao)互的(de)(de)通(tong)用世界模(mo)型(xing)。正如最近推出的(de)(de)新相機控件所證(zheng)明的(de)(de)那樣(yang),Runway在構建(jian)此類模(mo)型(xing)并將(jiang)其應用到實(shi)際(ji)場景中的(de)(de)進(jin)展非常順利。

結語:突破AI面部識別障礙,打造3D影視效果,Runway持續創新

Runway首席執(zhi)行官(guan)Cristóbal Valenzuela曾經說過(guo),AI是這(zhe)個時(shi)代(dai)的(de)攝像機。上個月(yue),Runway推出了(le)一項名為Act-One的(de)新功能,突破(po)了(le)AI面部識別的(de)障礙,讓(rang)用戶(hu)能夠輕松(song)制作高質量的(de)動(dong)畫表(biao)情捕捉視(shi)頻。這(zhe)個月(yue),Runway又推出了(le)高級AI相機控制功能,使用戶(hu)可以輕松(song)創造出具(ju)有電影級3D視(shi)覺效果的(de)視(shi)頻內容。

AI視頻生成市(shi)場競(jing)爭(zheng)(zheng)激烈,新的(de)(de)模型幾乎每(mei)周都會發布。在這(zhe)一(yi)賽道上,Runway面臨著來自(zi)Adobe的(de)(de)Firefly、OpenAI的(de)(de)Sora、Meta的(de)(de)Movie Gen和Google的(de)(de)Veo等強大競(jing)爭(zheng)(zheng)對手的(de)(de)挑(tiao)戰。但Runway作(zuo)為早(zao)期(qi)的(de)(de)領導者,沒有(you)在技術(shu)能力上讓步。

來源:RunwayVentureBeat