文|智東西 徐珊
編輯|云鵬
連沈騰都計劃在元宇宙里大干一場了?2022年央視春晚,沈騰這邊剛說完一句“我將成為元宇宙里的Dog King”,那邊同名虛擬幣DogeKing的價格就暴漲近50倍。
▲虛擬幣DogeKing價格上漲近50倍
央視春晚不但提到了元宇宙、無人駕駛、航天航空等科技領(lǐng)域,同時在舞臺效果上暗藏著不少創(chuàng)新科技的應(yīng)用。為紀(jì)念三星堆文物青銅大面具的出土,創(chuàng)意舞蹈《金面》通過CG設(shè)計制作和光學(xué)動作捕捉技術(shù),讓青銅大面具“活起來”,整個舞蹈跨越了古今時空,以虛實結(jié)合的形式呈現(xiàn)了一場視覺盛宴。
據(jù)初步統(tǒng)計,截至1月31日24時,2022年春晚電視端直播平均收視率達(dá)21.93%。新媒體直點播用戶觸達(dá)49.32億次,相對去年增加明顯。其中,央視首次推出的豎屏看春晚累計觀看人次2億,總點贊數(shù)3.6億。相比于前幾年的央視春晚,今年春晚中的科技運(yùn)用可能不會給人一種很“哇塞”的感覺,但在一些不起眼的角落,科技依舊在為春晚默默發(fā)力。
01.裸眼3D+XR技術(shù),真真假假分不清楚?
今年春晚包含9大科技創(chuàng)新亮點,有XR、AR、全息、AI動捕等多種硬核技術(shù),其中,XR虛擬視覺技術(shù)和8K裸眼3D技術(shù)為不少節(jié)目增添了更豐富的情節(jié)內(nèi)涵,讓演員在表演舞臺能夠發(fā)揮出更大的空間。在開場舞時,大寫的2022隨著虛擬煙花一起呈現(xiàn)在舞臺上方,為舞臺增添了不少新年氛圍。
李榮浩和張韶涵合唱一首《愛在一起》中,游來游去的鯨魚們、五彩斑斕的水底生物,屏幕上游動的水流都通過裸眼3D技術(shù),讓大家覺得自己仿佛置身于海底世界,共同享受相伴的美好。
創(chuàng)意音舞詩畫《憶江南》以古樸雅趣的水墨畫形式為大家還原了《富春山居圖》,通過XR技術(shù)、CG技術(shù)和動畫制造等技術(shù)詮釋了中國古代文化的獨特魅力。
春晚副總導(dǎo)演鄒為還介紹到,《只此青綠》同樣通過XR、全息掃描等前沿科技手段,做出了鏡面的效果,以配合舞蹈更好地呈現(xiàn)。
甚至,在少兒舞蹈《星星夢》中,“航天”也搬上了春晚舞臺。
不管是創(chuàng)意舞蹈《金面》,還是創(chuàng)意音舞詩畫《憶江南》的背后,離不開AI多模態(tài)動捕系統(tǒng)的支持。AI多模態(tài)動捕系統(tǒng)不僅能還原演員舉手投足的姿勢,還能讓舞臺上呈現(xiàn)出的虛擬形象更加栩栩如生。
AI多模態(tài)動捕系統(tǒng)主要是指,通過傳感器,攝像頭等設(shè)備收集動捕演員的語音、姿勢等相關(guān)數(shù)據(jù),用多模態(tài)系統(tǒng)進(jìn)行還原,從而讓虛擬形象能夠近乎完美地“復(fù)刻”動捕演員的神態(tài)、動作等。據(jù)悉,此次《金面》中的青銅人像的制作,來自于凌云光重明視效工作室。該工作室打造了一套光學(xué)運(yùn)動捕捉系統(tǒng),采用其自主研發(fā)的數(shù)十臺千萬級像素級別的相機(jī),采集舞蹈演員的相關(guān)數(shù)據(jù)。最后該系統(tǒng)采用網(wǎng)絡(luò)實時廣播分發(fā)模式,將舞蹈演員的動作遷移給青銅人的模型,合成最終的畫面。形成虛擬形象后,如何保證虛擬形象能和現(xiàn)場的舞臺女演員實現(xiàn)交互?一位行業(yè)人士表示,“解決辦法是采用AI多模態(tài)動捕系統(tǒng)中的AIMotion,即多人無標(biāo)記點智能動作捕捉系統(tǒng),來捕捉真實女演員的姿勢?!盇IMotion可以通過AI算法計算出演員形體影像的三維坐標(biāo),從而實現(xiàn)讓數(shù)字模型與演員互相配合,以達(dá)成最佳的表演效果。
像春晚快結(jié)束時展現(xiàn)的冬奧吉祥物“冰墩墩”和“雪容融”則采用了相關(guān)XR技術(shù),在舞臺上自由的奔跑,展現(xiàn)出虛擬形象的活力。
中央廣播電視總臺技術(shù)局高級工程師譚陽在接受央視記者采訪時講:“今年我們將結(jié)合最新的XR+AR技術(shù),做一個融合的虛擬和現(xiàn)實的呈現(xiàn),同時在AI方向融入更多的智能元素,包括我們今年首創(chuàng)的AI多模態(tài)跟蹤系統(tǒng)將融入多個節(jié)目中?!?/p>
02.720度環(huán)屏重構(gòu)演播大廳,央視春晚首次采用8K直播
不知道觀看春晚的你有沒有發(fā)現(xiàn),今年的春晚舞臺有很大不同。相比往年的面對面式舞臺形式,今年的春晚舞臺更像把“鳥巢”搬到了春晚舞臺。今年春晚搭建了一個4306平方米的720度巨型LED顯示屏幕,并通過分區(qū)域、多點擴(kuò)聲的方式重新設(shè)計了擴(kuò)聲系統(tǒng),在視覺上和聲音上都帶來更佳的感官盛宴。
在觀看春晚的過程中,我發(fā)現(xiàn)720度的屏幕會給現(xiàn)場的觀眾帶來沉浸式的視覺體驗,無論是頭頂?shù)男强?,還是左右游動的燈光,都從一定程度彌補(bǔ)了原來舞臺與觀眾席之間的割裂感,讓觀眾成為整個舞臺的重要組成部分。除此以外,央視還通過“豎屏看春晚”的方式來迎合當(dāng)下人們以手機(jī)為主要的移動設(shè)備的觀看情況,通過多角度的專屬機(jī)位為用戶呈現(xiàn)更多的舞臺細(xì)節(jié)。并且,此次央視春晚還在CCTV-8K頻道直播。在過去一年,中國廣播電視總臺逐漸規(guī)范化和標(biāo)準(zhǔn)化8K視頻制作、播出、傳輸、呈現(xiàn)等流程,1月24日,央視正式開通CCTV-8K電視頻道,接入北京和廣東有線電視網(wǎng),面向家庭用戶提供8K超高清電視服務(wù)。
一個星期之后,春晚演播大廳內(nèi)里架起了多臺8K攝像機(jī)。據(jù)新聞發(fā)布會介紹,此次直播采用全I(xiàn)P化的8K制作系統(tǒng),擁有在線包裝、多通道錄制服務(wù)器等設(shè)備,為春晚8K直播做足準(zhǔn)備。此外,觀眾可以通過“百城千屏隨身聽”微信小程序,用手機(jī)收聽到與8K超高清大屏同步的電視伴音。這些都是官方媒體在8K直播的領(lǐng)域做出一次新的嘗試,春晚的成功可能會成為8K視頻新的轉(zhuǎn)折點,或許8K高清視頻的普及指日可待。
03.采用8K裸眼3D、全息掃描技術(shù),春晚竟成前沿科技“打卡處”?
作為當(dāng)代中國春節(jié)文化的一個重要符號,春晚已經(jīng)陪伴著千家萬戶度過了40多個除夕。春晚,不僅奉獻(xiàn)了一場場凝結(jié)了民族情感與時代內(nèi)涵的文化盛宴,而且通過前沿科技與傳統(tǒng)文化的交融,將視聽審美體驗推向新的高度。如今的春晚,在引領(lǐng)文化潮流之余,也正成為展現(xiàn)科技創(chuàng)新與應(yīng)用的平臺?;仡欉^去五年,科技與春晚相得益彰,從舞臺展示效果到線上線下聯(lián)動,春晚儼然逐漸演變?yōu)樾屡d技術(shù)的競技場。2021年的春晚,周杰倫、劉德華通過AR、云技術(shù)“出現(xiàn)”在舞臺現(xiàn)場。由于疫情防控不能到場的劉德華,可以通過AR和云渲染技術(shù),和其他演員一起跳踢踏舞,其逼真程度讓人難辨真假,就連第二天的熱搜上都在討論“劉德華、周杰倫到底有沒有來春晚?”。
作為“科技感”的標(biāo)志場景之一,無人機(jī)陣列表演早在2020年就已經(jīng)出現(xiàn)在春晚的粵港澳大灣區(qū)分會場上,可以隨著舞臺的設(shè)計,在舞臺上方變幻出不同的形狀。而今年沒有采用無人機(jī)陣列表演的原因可能是與虎年春晚會場采用穹頂式設(shè)計有關(guān),無人機(jī)表演場地受到一定限制。
虛擬數(shù)字人在2019年時正處于剛剛興起的階段,就連中央電視臺網(wǎng)絡(luò)春晚上,四位主持人都擁有自己虛擬分身,8個人同臺主持,這可能是歷年以來主持人團(tuán)隊最龐大的一次。
2018年,由無人機(jī)、無人車、無人艇組成的“三無艦隊”,至今仍被不少觀眾津津樂道。其中,機(jī)器狗“Jimu汪汪”全部由Jimu零部件搭建而成的,全身共有19個模擬關(guān)節(jié)運(yùn)動的舵機(jī)、900多個零件還有2個LED燈“眼睛”,可以通過編程實現(xiàn)跳舞、撒嬌、舔爪子、搖尾巴等一系列的動作。
▲優(yōu)必選狗年特別版機(jī)器人“Jimu汪汪”
在2017年,春晚舞臺首次應(yīng)用VR直播,觀眾輕輕拖拽手機(jī)屏幕,就可以實現(xiàn)720度全景看春晚,如果戴上相應(yīng)的VR眼鏡甚至能一秒“穿越”會場,還能在候播大廳和明星大腕“偶遇”,甚至走進(jìn)演員化妝間。回顧過往春晚上運(yùn)用的黑科技,我們可以發(fā)現(xiàn)春晚上常常會采用當(dāng)下較為熱門或者較為新穎的前沿科技,像是虛擬數(shù)字人、AR技術(shù)等,也因此,春晚一直在見證國內(nèi)前沿技術(shù)的發(fā)展。
04.結(jié)語:從虎年春晚,看VR/AR技術(shù)新應(yīng)用前景
從2022年央視春晚中的8K裸眼3D技術(shù)、全息掃描技術(shù)以及XR技術(shù)等應(yīng)用,我們發(fā)現(xiàn)虛擬數(shù)字人和現(xiàn)實人物結(jié)合,以及虛擬場景和現(xiàn)實舞臺結(jié)合的相關(guān)技術(shù)已經(jīng)逐漸成熟,廣泛應(yīng)用各種場景中。無論是元宇宙的熱度讓更多人關(guān)注到人與景之間的XR技術(shù),還是人們對更新穎、更具有想象力的舞臺需求反推XR技術(shù)的發(fā)展,通過此次春晚,我們可以看到虛擬形象、XR技術(shù)、動捕技術(shù),都已經(jīng)在文娛領(lǐng)域擁有了較為廣泛的應(yīng)用。這意味著各種類型的虛擬藝人、虛擬場景破圈或成為必然趨勢,未來越來越多的公司將會推出相應(yīng)技術(shù)平臺,為不同的需求搭建專用的虛擬商業(yè)場景。