文|壹娛觀察 大娛樂(lè)家
“感覺(jué)這又是一場(chǎng)工業(yè)革命。”
這是網(wǎng)絡(luò)上關(guān)于幾天前OpenAI發(fā)布文字生成視頻工具Sora制作的短片后最??吹降囊环N評(píng)論。
根據(jù)OpenAI發(fā)布的研究和演示片段,只需要給Sora一段幾十個(gè)單詞的文字指令,它就可以生成一段長(zhǎng)達(dá)時(shí)長(zhǎng)到達(dá)一分鐘的短片,短片類型既有真人也有動(dòng)畫,同時(shí)也有各種不同的題材與表現(xiàn)形式。
這意味著在不久將來(lái),只要有能力嘗試這一工具(大概率需要付費(fèi)),那么,任何人都可以生產(chǎn)出自己想要的視頻作品,換言之影視創(chuàng)作的門檻不說(shuō)完全不存在,卻實(shí)實(shí)在在的降到了最低。
“工業(yè)革命”的說(shuō)法或許有些過(guò)于標(biāo)題黨。但相對(duì)于Runway、Pica等目前流行的文字生成視頻工具,Sora的確又往前跨越了一大步——要生成超過(guò)一定時(shí)長(zhǎng)的視頻內(nèi)容,即AI工具必須對(duì)我們生活的物理世界有相當(dāng)認(rèn)識(shí),或至少是有模擬相關(guān)物理規(guī)則的能力。
這也是Sora讓全世界驚訝的一點(diǎn),不僅呈現(xiàn)效果驚人,同時(shí)一上來(lái)就能夠制作一分鐘時(shí)長(zhǎng)的視頻內(nèi)容。
可以說(shuō)Sora的出現(xiàn),再一次讓AIGC的創(chuàng)作能力來(lái)到了新的境界,尤其是直接進(jìn)犯到了人類創(chuàng)作的終極領(lǐng)域——專業(yè)級(jí)視頻內(nèi)容。
圖源:Open AI官網(wǎng)
過(guò)去幾年里,國(guó)內(nèi)外的影視公司都在大力投入虛擬制作,力圖讓實(shí)景拍攝最終都能被虛擬現(xiàn)實(shí)替代,然而,隨著AIGC工具的跨越式發(fā)展,這些前期投入不菲同時(shí)又有極高學(xué)習(xí)和使用成本的虛擬制作還有存在的必要嗎?抑或是借助AIGC,虛擬制作也能實(shí)現(xiàn)進(jìn)一步的躍升,從而迎接那個(gè)影視拍攝不再需要外景也不再依賴后期特效時(shí)代的到來(lái)。
虛擬制作的反思:距離降本增效尚需時(shí)日
自從2020年的《曼達(dá)洛人》帶動(dòng)了虛擬制作的這一影視行業(yè)的新技術(shù)之后,國(guó)內(nèi)長(zhǎng)視頻幾乎是前赴后繼的參與到了這場(chǎng)影視工業(yè)化的革命大潮,壹娛觀察也曾在多篇文章中,反復(fù)提到了虛擬制作的特點(diǎn)。
當(dāng)下定義的“虛擬制作”,核心其實(shí)就是將提前制作好的數(shù)字場(chǎng)景投映到LED屏幕上,讓演員置身于這面隨著視點(diǎn)位置隨時(shí)變化的“LED屏幕”(尺寸大小不限)前進(jìn)行表演。
另一頭則是利用像虛幻引擎這樣的游戲引擎工具實(shí)現(xiàn)圖像輸出和攝影機(jī)的追蹤能實(shí)現(xiàn)同步結(jié)合,也就是說(shuō)攝影機(jī)取景框在虛擬環(huán)境下拍到的畫面,就如同在實(shí)景中拍攝那樣,能夠?qū)崿F(xiàn)“所見(jiàn)即所得”。
《曼達(dá)洛人》拍攝現(xiàn)場(chǎng)
在《曼達(dá)洛人》《新·蝙蝠俠》《龍之家族》等好萊塢大作之后,國(guó)內(nèi)像《流浪地球2》《長(zhǎng)空之王》等電影,以及長(zhǎng)視頻自制劇《云之羽》《狐妖小紅娘》《清明上河圖密碼》《繁花》等作品也都使用了平臺(tái)各自搭建的虛擬制作技術(shù)流程。而從過(guò)去兩年的快速發(fā)展和最終的成品質(zhì)感中,其實(shí)不難總結(jié)出當(dāng)下虛擬制作的優(yōu)缺點(diǎn)。
優(yōu)勢(shì)——
提高效率和降低成本: 虛擬制片可以減少實(shí)景拍攝的時(shí)間和成本,例如無(wú)需搭建場(chǎng)景、尋找外景地等。
提升創(chuàng)意控制: 虛擬制片可以實(shí)現(xiàn)任何場(chǎng)景和特效,不受現(xiàn)實(shí)條件的限制,例如可以模擬外太空、古裝環(huán)境等場(chǎng)景。
增加安全性: 虛擬制片可以避免實(shí)景拍攝中的安全風(fēng)險(xiǎn),例如拍攝爆炸、火災(zāi)等場(chǎng)景。
虛擬制片VS傳統(tǒng)制片
劣勢(shì)——
技術(shù)門檻過(guò)高: 虛擬制片需要專業(yè)的技術(shù)團(tuán)隊(duì)和設(shè)備,對(duì)技術(shù)人員的技能要求較高。
創(chuàng)造性不足: 一些人認(rèn)為虛擬制片缺乏實(shí)景拍攝的質(zhì)感和真實(shí)感,容易流于形式化。
成本高昂: 虛擬制片的初期投入成本較高,需要大量的硬件采購(gòu)、軟件流程優(yōu)化和專業(yè)人員參與。
事實(shí)上,壹娛觀察(ID:yiyuguancha)也曾在《虛擬制作從0到X,是時(shí)候該反思了》一文中提到過(guò),在疫情打亂了好萊塢的制作流程時(shí),虛擬制作的確起到了非常重要的補(bǔ)充作用。但隨著這一階段過(guò)去,不少大制作其實(shí)也已經(jīng)回到了實(shí)拍的傳統(tǒng)流程上,像是《沙丘》系列這樣的高成本科幻大片,導(dǎo)演維倫紐瓦依然還是選擇了實(shí)拍,更不用說(shuō)諾蘭去年叫好又叫座的《奧本海默》。
《沙丘》劇照
同時(shí),虛擬制作居高不下的使用成本其實(shí)也成為了流媒體平臺(tái)很難過(guò)于依賴新技術(shù)的一個(gè)原因,畢竟這類新技術(shù)都需要規(guī)?;瘉?lái)平攤成本,但現(xiàn)實(shí)則是Netflix這樣擁有龐大產(chǎn)量的平臺(tái)也并沒(méi)有那么多作品值得用上這一技術(shù),像是專門為其搭建了全套虛擬制作平臺(tái)打造的《1899》一季過(guò)后便被砍掉,顯然高昂的技術(shù)投入都成為了沉沒(méi)成本。
那么,像Sora這類文字直接生成視頻的AIGC工具,能夠成為虛擬制作的平替嗎?
AIGC增強(qiáng)后的虛擬制作,或許是最終答案
從目前來(lái)看大概不能,并且很可能永遠(yuǎn)也不行。
因?yàn)锳IGC再?gòu)?qiáng)也不能無(wú)法把真人演員的表演也融入到其生成內(nèi)容中去,但就虛擬制作的流程來(lái)看,一旦足夠好用的AIGC工具真正問(wèn)世,無(wú)疑將會(huì)極大的優(yōu)化虛擬制作的準(zhǔn)備流程和使用成本,兩者的互補(bǔ)大概才會(huì)是趨勢(shì)。
就目前Sora展現(xiàn)出來(lái)的能力,其實(shí)不難總結(jié)出AIGC工具在影視創(chuàng)作語(yǔ)境下的優(yōu)勢(shì):
其一,速度和創(chuàng)意:AIGC在快速生成視覺(jué)想法和變化方面表現(xiàn)出色。雖然由AI生成的圖像和視頻缺乏專業(yè)VFX作品的質(zhì)量,但它們?cè)诳焖偬剿鳚撛阽R頭或場(chǎng)景設(shè)計(jì)方面表現(xiàn)出色。一旦創(chuàng)作者有什么想法,只需要打字就能夠馬上看到效果。
各大模型生成的“女人眨眼睛”的視頻
其二,高度適應(yīng)性:通過(guò)對(duì)環(huán)境和數(shù)字資產(chǎn)進(jìn)行基于文本的修改,AIGC為在制作過(guò)程中實(shí)現(xiàn)新的靈活性和動(dòng)態(tài)調(diào)整提供了潛在的可能性。像是OpenAI展示的那樣,不改變核心要素的情況下,只需要調(diào)整與環(huán)境有關(guān)的提示詞就能夠直接展現(xiàn)出不同的變化效果。
其三,泛用性:這類AIGC無(wú)疑大大降低了傳統(tǒng)VFX培養(yǎng)所造成的超高使用門檻,可能使較小的創(chuàng)意團(tuán)隊(duì)甚至業(yè)余愛(ài)好者參與利用數(shù)字環(huán)境進(jìn)行影視級(jí)制作。而對(duì)于真正擁VFX經(jīng)驗(yàn)的專業(yè)人士而言,這類工具自然能明顯降低其工作強(qiáng)度,畢竟VFX制作行業(yè)人力資源和工作量嚴(yán)重不對(duì)稱已經(jīng)是全球問(wèn)題。
將AIGC視頻工具和虛擬制作互補(bǔ)的好處,想象以下場(chǎng)景便不難看出二者相結(jié)合使用的強(qiáng)大力量:
圖源:Sora技術(shù)報(bào)告
1、早期預(yù)覽:導(dǎo)演對(duì)一個(gè)場(chǎng)景有一個(gè)視覺(jué)想法。AI根據(jù)文本描述快速生成不算精細(xì)但具有想象力的可用動(dòng)態(tài)圖像,這些可視化圖像有助于為虛擬制作上的詳細(xì)環(huán)境建設(shè)和拍攝列表制定指導(dǎo)。
2、臨時(shí)創(chuàng)意修改:在LED環(huán)幕等硬件上創(chuàng)造一個(gè)場(chǎng)景時(shí),一旦出現(xiàn)類似:“如果建筑物有一個(gè)哥特風(fēng)格的陽(yáng)臺(tái)會(huì)怎樣?”的想法時(shí),與其要求VFX工作人員從零開(kāi)始進(jìn)行復(fù)雜的數(shù)字資產(chǎn)創(chuàng)建,不如使用AI生成的圖像迅速探索這一想法的實(shí)際效果,供導(dǎo)演決定是否要使用這一場(chǎng)景。
3、增加多樣性:場(chǎng)景需要背景車輛或群演角色。使用預(yù)制數(shù)字資產(chǎn)和AI無(wú)限生成的多樣性結(jié)合進(jìn)行定制,可以快速填充場(chǎng)景,而無(wú)需進(jìn)行昂貴的單獨(dú)建模和動(dòng)畫制作。
事實(shí)上,即便現(xiàn)在Sora還尚未商用,這類利用AI來(lái)快速制作后期特效數(shù)字資產(chǎn)的創(chuàng)作方法就已經(jīng)出現(xiàn)了。優(yōu)酷不久前開(kāi)播的《大唐狄公案》中的長(zhǎng)安城畫面,如人流、街景、樓宇建筑等均由AI輔助生成,雖然不知道這部劇是否也使用虛擬制作的流程來(lái)進(jìn)行拍攝,但是這種思路其實(shí)一脈相承,利用AIGC工具來(lái)完成過(guò)去需要大量后期特效才能實(shí)現(xiàn)的內(nèi)容。
《大唐狄公案》劇照
換到虛擬制作中其實(shí)也只是讓AI的參與從后期變成前置,并且可以有效利用其更加高效的特點(diǎn)去快速試錯(cuò),以實(shí)現(xiàn)最終的畫面呈現(xiàn)。
當(dāng)然,就像虛擬制作的成本需要規(guī)?;褂脕?lái)攤薄,目前像Sora這樣的“尖端工具”,使用成本同樣不菲,像Sora生成一分鐘長(zhǎng)度、每秒30幀的視頻,按照TFLOPS換算約等于5500塊A100同時(shí)運(yùn)算的算力,這大概也是為什么目前Sora也還只提供極小范圍的內(nèi)部測(cè)試,之后推出大概率也會(huì)是訂閱制服務(wù)。
不管是優(yōu)愛(ài)騰芒自己投資搭建的虛擬制作攝影棚,還是現(xiàn)在市面上大量提供虛擬制作的后期制作公司,一個(gè)最直觀的問(wèn)題就是大量采購(gòu)的硬件成本其實(shí)已經(jīng)投入進(jìn)入了,相對(duì)應(yīng)的生成管線和流程也早就開(kāi)始磨合并形成了生產(chǎn)力,沒(méi)理由在當(dāng)下停滯不前或是直接放棄,原地等待AIGC成熟更不是現(xiàn)實(shí)的做法。
更重要的是,對(duì)長(zhǎng)視頻們來(lái)說(shuō),不論技術(shù)能力還是主要資源都不可能完全投入到AIGC的原生開(kāi)發(fā)中去。
作為直接面向用戶的平臺(tái),它們要做的只是等到足夠好的商用工具出現(xiàn)即可,在AIGC沒(méi)法一鍵生成一個(gè)好劇本之前,作為內(nèi)容供應(yīng)商過(guò)度糾結(jié)于AI技術(shù)的好壞其實(shí)并沒(méi)有多大意義,觀眾們最終只會(huì)為好劇或好電影付費(fèi)。