正在閱讀:

移動游戲技術(shù)迭代加速,端側(cè)AI和高幀優(yōu)化漸成趨勢

掃一掃下載界面新聞APP

移動游戲技術(shù)迭代加速,端側(cè)AI和高幀優(yōu)化漸成趨勢

隨著全球游戲廠商對移動平臺的重視程度增加,移動游戲的質(zhì)量也逐漸向PC和主機游戲靠攏,這對智能手機的終端算力和性能提出了更高的要求。

拍攝:崔鵬

界面新聞記者 | 崔鵬

界面新聞編輯 | 文姝琪

在第二十一屆中國國際數(shù)碼互動娛樂展覽(ChinaJoy)期間,高通與騰訊、網(wǎng)易和OPPO等游戲開發(fā)商及OEM廠商舉行了一場移動游戲技術(shù)展示活動,討論移動游戲行業(yè)的技術(shù)發(fā)展趨勢,以及生成式AI技術(shù)的相關(guān)落地實踐。

高通技術(shù)公司手機、計算和XR事業(yè)群總經(jīng)理Alex Katouzian給出的數(shù)據(jù)顯示,2023年全球玩家在移動游戲上的花費接近900億美元,約占全球游戲市場總銷售收入的50%,中國市場的銷售收入約占全球的三分之一。

隨著全球游戲廠商對移動平臺的重視程度增加,移動游戲的質(zhì)量也逐漸向PC和主機游戲靠攏,這對智能手機的終端算力和性能提出了更高的要求。

最近幾年,高通保持著每年發(fā)布一款新移動平臺的傳統(tǒng),目前主流的第三代驍龍8平臺(驍龍8 Gen3)發(fā)布于2023年末,目前已有超過115款安卓旗艦手機采用該平臺。

Alex Katouzian在展示會現(xiàn)場透露稱,高通Oryon CPU也即將登陸移動平臺,高通也將在十月份的驍龍峰會上公布更多技術(shù)細(xì)節(jié)。

終端側(cè)生成式AI將成主流選擇

驍龍8 Gen3是高通針對生成式AI研發(fā)的首個移動平臺,其NPU和異構(gòu)計算架構(gòu)支持虛擬助手、實時翻譯等終端側(cè)AI游戲功能,并且給了游戲公司開發(fā)AI NPC的硬件性能支持。

高通與網(wǎng)易已經(jīng)將這項技術(shù)在游戲中應(yīng)用落地。網(wǎng)易在7月25日剛剛上線的《永劫無間》手游中,發(fā)布了全球首例語音AI隊友功能。

該游戲基于驍龍8 Gen3的NPU直接在端側(cè)運行AI推理模型,玩家能通過語音交互的方式與AI進行交流。

在網(wǎng)易的實機演示中,這個AI隊友能聽懂玩家的指揮,執(zhí)行搜裝和送裝操作,還能實時觀察戰(zhàn)況,向玩家匯報關(guān)鍵信息。此外AI隊友還懂得與真人玩家進行博弈與配合。

網(wǎng)易伏羲實驗室AI技術(shù)負(fù)責(zé)人呂唐杰介紹稱,這項功能的實現(xiàn),融合了包括語音識別、語義理解、文本生成、語音合成、強化學(xué)習(xí)和模仿學(xué)習(xí)在內(nèi)的多項AI技術(shù)。

“為了達到極低的交互速度,實現(xiàn)類似于GPT-4o的交互體驗,我們做了大量的工程優(yōu)化工作”,呂唐杰表示,目前游戲內(nèi)AI隊友的最長相應(yīng)時間已經(jīng)被控制在1秒以內(nèi)。

網(wǎng)易為什么要在《永劫無間》手游中進行端測推理的問題,他給出了兩個理由:

首先,端側(cè)推理能解決傳統(tǒng)云端推理帶來的高時延問題,對于網(wǎng)絡(luò)條件不好的玩家來說,能明顯改善游戲流暢度的體驗。

其次,將AI推理從云端轉(zhuǎn)移到端側(cè),能充分利用手機終端的算力,降低服務(wù)運行成本,游戲開發(fā)者就不用通過限制AI玩法的方式降低成本,也不會影響到用戶的完整體驗。

他透露稱,未來網(wǎng)易游戲還計劃將更多AI能力,包括大語言模型(LLM)、語音合成(TTS)等技術(shù)適配到手機終端中。

移動端畫質(zhì)和功耗優(yōu)化是核心

高通在展示會上重點介紹了其Snapdragon Elite Gaming技術(shù),該技術(shù)目前包含超過60項游戲特性。

其中,Adreno圖像運動引擎2.0(AFME2.0)是高通自研的基于游戲3D信息的插幀技術(shù),它運行在GPU上,同時支持內(nèi)插幀和外插幀兩種模式。

AFME2.0從游戲管線中獲取運動向量、顏色信息和深度信息等,經(jīng)過算法運算生成更高質(zhì)量的新游戲幀,用較低功耗實現(xiàn)游戲幀率翻倍的效果。

高通研發(fā)出該項技術(shù)后,將其推廣給外部游戲公司,引起了很多游戲工作室的興趣。

騰訊與高通在剛剛發(fā)布的《塔瑞斯世界》項目上就進行了重點合作,這款產(chǎn)品是基于UE4(虛幻引擎4)研發(fā)的大世界MMORPG游戲,對游戲流暢性和操控響應(yīng)時間有非常高的要求。

此前,產(chǎn)品在原生60幀畫面下由于性能負(fù)載較大、功耗較高,導(dǎo)致游戲經(jīng)常出現(xiàn)幀率波動,手機在運行一段時間后便開始降頻,非常影響用戶體驗。

而AFME2.0是純GPU運算,不會調(diào)用CPU資源,所以幀數(shù)表現(xiàn)更加穩(wěn)定,在60幀下的CPU負(fù)載與30幀幾乎一致。

騰訊游戲國內(nèi)發(fā)行線生態(tài)發(fā)展部引擎組負(fù)責(zé)人胡豪翔給出的數(shù)據(jù)顯示,AFME2.0在能耗上相較原生60幀方案降低大約30%,畫面更加流暢的同時,畫質(zhì)沒有任何損失。

高通產(chǎn)品市場資深經(jīng)理姚軼非表示,提升游戲畫質(zhì)是手游行業(yè)的技術(shù)趨勢之一,Snapdragon Elite Gaming技術(shù)已經(jīng)對移動行業(yè)產(chǎn)生巨大影響,“因此越來越多的3A端游大作正在遷移到移動端?!?/span>

終端廠商也在跟進。本月初,一加Ace 3 Pro手機發(fā)布時曾宣布,其在安卓平臺首個實現(xiàn)了《原神》原生級120幀支持。

OPPO游戲中心負(fù)責(zé)人譚皓介紹稱,在這個過程中,一加獲得了不少自研技術(shù)突破。

比如,將幀生成與計算的整個過程放在高通芯片上完成,讓生成幀與游戲渲染幀之間,只間隔一個120Hz的垂直同步周期,“這已經(jīng)是安卓顯示體系的極限。”

此外一加還開發(fā)了基于GPU的算法,將幀生成的能力轉(zhuǎn)移到GPU上進行運算,解決出幀延遲的問題。

譚皓表示,在整個研發(fā)過程中,一加、高通與米哈游三方技術(shù)團隊花費10個月時間討論技術(shù)方案,然后又花費6個月時間進行調(diào)試,才最終實現(xiàn)這套高幀優(yōu)化方案。

OPPO相關(guān)技術(shù)人員在現(xiàn)場告訴界面新聞,OPPO已經(jīng)將此前的部分優(yōu)化技術(shù)方案分享給平臺方和外部開發(fā)者,并且正在關(guān)注基于UE(虛幻引擎)的移動游戲的高幀優(yōu)化工作,在這方面引擎差異不會是難點。

未經(jīng)正式授權(quán)嚴(yán)禁轉(zhuǎn)載本文,侵權(quán)必究。

評論

暫無評論哦,快來評價一下吧!

下載界面新聞

微信公眾號

微博

移動游戲技術(shù)迭代加速,端側(cè)AI和高幀優(yōu)化漸成趨勢

隨著全球游戲廠商對移動平臺的重視程度增加,移動游戲的質(zhì)量也逐漸向PC和主機游戲靠攏,這對智能手機的終端算力和性能提出了更高的要求。

拍攝:崔鵬

界面新聞記者 | 崔鵬

界面新聞編輯 | 文姝琪

在第二十一屆中國國際數(shù)碼互動娛樂展覽(ChinaJoy)期間,高通與騰訊、網(wǎng)易和OPPO等游戲開發(fā)商及OEM廠商舉行了一場移動游戲技術(shù)展示活動,討論移動游戲行業(yè)的技術(shù)發(fā)展趨勢,以及生成式AI技術(shù)的相關(guān)落地實踐。

高通技術(shù)公司手機、計算和XR事業(yè)群總經(jīng)理Alex Katouzian給出的數(shù)據(jù)顯示,2023年全球玩家在移動游戲上的花費接近900億美元,約占全球游戲市場總銷售收入的50%,中國市場的銷售收入約占全球的三分之一。

隨著全球游戲廠商對移動平臺的重視程度增加,移動游戲的質(zhì)量也逐漸向PC和主機游戲靠攏,這對智能手機的終端算力和性能提出了更高的要求。

最近幾年,高通保持著每年發(fā)布一款新移動平臺的傳統(tǒng),目前主流的第三代驍龍8平臺(驍龍8 Gen3)發(fā)布于2023年末,目前已有超過115款安卓旗艦手機采用該平臺。

Alex Katouzian在展示會現(xiàn)場透露稱,高通Oryon CPU也即將登陸移動平臺,高通也將在十月份的驍龍峰會上公布更多技術(shù)細(xì)節(jié)。

終端側(cè)生成式AI將成主流選擇

驍龍8 Gen3是高通針對生成式AI研發(fā)的首個移動平臺,其NPU和異構(gòu)計算架構(gòu)支持虛擬助手、實時翻譯等終端側(cè)AI游戲功能,并且給了游戲公司開發(fā)AI NPC的硬件性能支持。

高通與網(wǎng)易已經(jīng)將這項技術(shù)在游戲中應(yīng)用落地。網(wǎng)易在7月25日剛剛上線的《永劫無間》手游中,發(fā)布了全球首例語音AI隊友功能。

該游戲基于驍龍8 Gen3的NPU直接在端側(cè)運行AI推理模型,玩家能通過語音交互的方式與AI進行交流。

在網(wǎng)易的實機演示中,這個AI隊友能聽懂玩家的指揮,執(zhí)行搜裝和送裝操作,還能實時觀察戰(zhàn)況,向玩家匯報關(guān)鍵信息。此外AI隊友還懂得與真人玩家進行博弈與配合。

網(wǎng)易伏羲實驗室AI技術(shù)負(fù)責(zé)人呂唐杰介紹稱,這項功能的實現(xiàn),融合了包括語音識別、語義理解、文本生成、語音合成、強化學(xué)習(xí)和模仿學(xué)習(xí)在內(nèi)的多項AI技術(shù)。

“為了達到極低的交互速度,實現(xiàn)類似于GPT-4o的交互體驗,我們做了大量的工程優(yōu)化工作”,呂唐杰表示,目前游戲內(nèi)AI隊友的最長相應(yīng)時間已經(jīng)被控制在1秒以內(nèi)。

網(wǎng)易為什么要在《永劫無間》手游中進行端測推理的問題,他給出了兩個理由:

首先,端側(cè)推理能解決傳統(tǒng)云端推理帶來的高時延問題,對于網(wǎng)絡(luò)條件不好的玩家來說,能明顯改善游戲流暢度的體驗。

其次,將AI推理從云端轉(zhuǎn)移到端側(cè),能充分利用手機終端的算力,降低服務(wù)運行成本,游戲開發(fā)者就不用通過限制AI玩法的方式降低成本,也不會影響到用戶的完整體驗。

他透露稱,未來網(wǎng)易游戲還計劃將更多AI能力,包括大語言模型(LLM)、語音合成(TTS)等技術(shù)適配到手機終端中。

移動端畫質(zhì)和功耗優(yōu)化是核心

高通在展示會上重點介紹了其Snapdragon Elite Gaming技術(shù),該技術(shù)目前包含超過60項游戲特性。

其中,Adreno圖像運動引擎2.0(AFME2.0)是高通自研的基于游戲3D信息的插幀技術(shù),它運行在GPU上,同時支持內(nèi)插幀和外插幀兩種模式。

AFME2.0從游戲管線中獲取運動向量、顏色信息和深度信息等,經(jīng)過算法運算生成更高質(zhì)量的新游戲幀,用較低功耗實現(xiàn)游戲幀率翻倍的效果。

高通研發(fā)出該項技術(shù)后,將其推廣給外部游戲公司,引起了很多游戲工作室的興趣。

騰訊與高通在剛剛發(fā)布的《塔瑞斯世界》項目上就進行了重點合作,這款產(chǎn)品是基于UE4(虛幻引擎4)研發(fā)的大世界MMORPG游戲,對游戲流暢性和操控響應(yīng)時間有非常高的要求。

此前,產(chǎn)品在原生60幀畫面下由于性能負(fù)載較大、功耗較高,導(dǎo)致游戲經(jīng)常出現(xiàn)幀率波動,手機在運行一段時間后便開始降頻,非常影響用戶體驗。

而AFME2.0是純GPU運算,不會調(diào)用CPU資源,所以幀數(shù)表現(xiàn)更加穩(wěn)定,在60幀下的CPU負(fù)載與30幀幾乎一致。

騰訊游戲國內(nèi)發(fā)行線生態(tài)發(fā)展部引擎組負(fù)責(zé)人胡豪翔給出的數(shù)據(jù)顯示,AFME2.0在能耗上相較原生60幀方案降低大約30%,畫面更加流暢的同時,畫質(zhì)沒有任何損失。

高通產(chǎn)品市場資深經(jīng)理姚軼非表示,提升游戲畫質(zhì)是手游行業(yè)的技術(shù)趨勢之一,Snapdragon Elite Gaming技術(shù)已經(jīng)對移動行業(yè)產(chǎn)生巨大影響,“因此越來越多的3A端游大作正在遷移到移動端?!?/span>

終端廠商也在跟進。本月初,一加Ace 3 Pro手機發(fā)布時曾宣布,其在安卓平臺首個實現(xiàn)了《原神》原生級120幀支持。

OPPO游戲中心負(fù)責(zé)人譚皓介紹稱,在這個過程中,一加獲得了不少自研技術(shù)突破。

比如,將幀生成與計算的整個過程放在高通芯片上完成,讓生成幀與游戲渲染幀之間,只間隔一個120Hz的垂直同步周期,“這已經(jīng)是安卓顯示體系的極限?!?/span>

此外一加還開發(fā)了基于GPU的算法,將幀生成的能力轉(zhuǎn)移到GPU上進行運算,解決出幀延遲的問題。

譚皓表示,在整個研發(fā)過程中,一加、高通與米哈游三方技術(shù)團隊花費10個月時間討論技術(shù)方案,然后又花費6個月時間進行調(diào)試,才最終實現(xiàn)這套高幀優(yōu)化方案。

OPPO相關(guān)技術(shù)人員在現(xiàn)場告訴界面新聞,OPPO已經(jīng)將此前的部分優(yōu)化技術(shù)方案分享給平臺方和外部開發(fā)者,并且正在關(guān)注基于UE(虛幻引擎)的移動游戲的高幀優(yōu)化工作,在這方面引擎差異不會是難點。

未經(jīng)正式授權(quán)嚴(yán)禁轉(zhuǎn)載本文,侵權(quán)必究。