文|腦極體
讓郭德綱飆英文、讓霉霉說(shuō)中文的翻譯視頻生成工具HeyGen和掀起AI證件照熱潮的“妙鴨相機(jī)”一樣,在一陣瘋狂刷屏之后,又迅速在各大群里銷聲匿跡了。
十月份,由HeyGen制作的各種明星跨語(yǔ)言翻譯視頻,在全網(wǎng)瘋傳,大家震撼于AIGC地道的中英文表達(dá),完全沒有譯制片的腔調(diào),惟妙惟肖的音色還原、高度對(duì)齊的口型聲音,讓不少人表示,“真的有被嚇到”“配音演員要失業(yè)了”……
太陽(yáng)底下無(wú)新事,這個(gè)現(xiàn)象級(jí)AIGC應(yīng)用,也逃不過(guò)“速朽”的命運(yùn)。
如今我所在的LLM大模型討論群里,偶爾有人發(fā)一個(gè)中英翻譯視頻,根本無(wú)人討論,可能大多數(shù)人連點(diǎn)開看看,都提不起興趣。
大眾的新鮮感很快會(huì)過(guò)去,“明星譯制片”只有看個(gè)樂子的娛樂屬性,并不是高頻剛需,獵奇嘗鮮之后,到了真金白銀付費(fèi)的時(shí)候,自然風(fēng)過(guò)了無(wú)痕。
這一年,大模型無(wú)疑是全球最大的熱點(diǎn)。但熱歸熱,最終在商業(yè)市場(chǎng)立足的大模型應(yīng)用仍然稀少。
明明已經(jīng)是“百模爭(zhēng)艷”,為何成功產(chǎn)品化的現(xiàn)象級(jí)應(yīng)用,就那么幾個(gè)?
而這些產(chǎn)品成熟也不缺熱度的爆款A(yù)IGC應(yīng)用,為何無(wú)法將流量轉(zhuǎn)化為持久的經(jīng)濟(jì)效益,商業(yè)化仍是一團(tuán)迷霧?
本文希望從“AI譯制片”這個(gè)小切口,探討一下大模型的產(chǎn)品化條件和商業(yè)化迷思。
一夜爆紅是產(chǎn)品化的勝利
首先要明確一點(diǎn),妙鴨也好,HeyGen也好,AIGC應(yīng)用的一夜爆紅,對(duì)于大模型產(chǎn)業(yè)來(lái)說(shuō),絕對(duì)是一件正面的事。
大模型只是一種基礎(chǔ)技術(shù),相當(dāng)于鋼材,大模型廠商相當(dāng)于煉鋼廠,還要有人設(shè)計(jì)出洗衣機(jī)、跑步機(jī)、微波爐等一個(gè)個(gè)具體的產(chǎn)品,新技術(shù)才能為人所用。
而HeyGen的一夜爆紅,正是產(chǎn)品化的勝利。
技術(shù)原理上,跨語(yǔ)言翻譯視頻制作并不是什么新事物,業(yè)內(nèi)已經(jīng)有很多科技公司、影視公司、后期制作公司在探索并推出了專業(yè)級(jí)工具平臺(tái)。
簡(jiǎn)單來(lái)說(shuō),就是升級(jí)版的TTS(Text To Speech)技術(shù)。利用大語(yǔ)言模型對(duì)文本進(jìn)行更地道的翻譯,然后對(duì)聲音空間進(jìn)行更好的建模,訓(xùn)練一個(gè)跨語(yǔ)種遷移TTS模型,讓風(fēng)格遷移、音色遷移、情感遷移更加魯棒,合成的語(yǔ)音更加自然、還原。
這種技術(shù)的特點(diǎn)就是高效,整個(gè)翻譯過(guò)程全自動(dòng)化,可以批量生成翻譯視頻。不過(guò)在自然度和表現(xiàn)力細(xì)節(jié)上,還是不如真人配音演員的演繹那么細(xì)膩、有創(chuàng)造力。
總結(jié)一下就是,HeyGen背后的技術(shù)原理,并非什么獨(dú)家秘籍。
其火爆的原因,是極高的產(chǎn)品化能力。
一般來(lái)說(shuō),AI技術(shù)的產(chǎn)品化,要經(jīng)歷三個(gè)步驟:
第一步:選擇工具。
工欲善其事,必先利其器,工具是開發(fā)人員喜歡花費(fèi)大量時(shí)間爭(zhēng)論的話題。HeyGen的工具選擇,是比較務(wù)實(shí)的,甚至看起來(lái)特別“小白”,那就是頭部閉源模型+開源“大禮包”。
有網(wǎng)友扒出,HeyGen是用Whisper將語(yǔ)音轉(zhuǎn)文字,GPT4(目前未開源)進(jìn)行文本翻譯,聲音克隆+生成音頻用so-vits-svc,最后用GeneFace++,將翻譯后的語(yǔ)音與視頻中說(shuō)話者的嘴唇動(dòng)作同步。
大模型熱潮以來(lái),我們看到了許多開發(fā)者在衡量和挑選“最好”的大模型,而市面上有各種不同的基座模型供應(yīng)商,提供類似的競(jìng)品服務(wù),開發(fā)者想要找到絕對(duì)意義上最好的工具,幾乎不可能。這些底層工具如基座模型、編程語(yǔ)言等,先進(jìn)性都可能變化。選擇好相對(duì)較優(yōu)的工具組合,然后快速去開發(fā)demo、驗(yàn)證想法、迭代升級(jí),才是開發(fā)者最應(yīng)該做的。
第二步:原型設(shè)計(jì)。
HeyGen選擇的工具,無(wú)論是GPT4的API,還是開源模型,都是比較容易獲取的,但大多數(shù)普通人都不會(huì)從搜索GitHub倉(cāng)庫(kù)、處理軟件bug中獲得多少樂趣。
就拿跨語(yǔ)種視頻翻譯來(lái)說(shuō),其中涉及了多模態(tài)內(nèi)容的翻譯,包括語(yǔ)音、文本以及視頻,在字幕翻譯、語(yǔ)音合成、智能配音方面,目前都有很好的自動(dòng)化,但將多模態(tài)功能集成到一起,實(shí)現(xiàn)端到端一鍵翻譯的產(chǎn)品還不多見。
所以,HeyGen構(gòu)建了一個(gè)簡(jiǎn)單易上手的訪問(wèn)界面,通過(guò)集成多種模型、多種工具,降低了翻譯門檻,用戶只需要上傳初始視頻-選擇目標(biāo)語(yǔ)言-一鍵輸出,就可以坐等聲音克隆完成了。
HeyGen的核心價(jià)值,就是讓非技術(shù)用戶不必陷入繁多的技術(shù)細(xì)節(jié)中,不需要安裝N多個(gè)額外的工具,就可以與多個(gè)模型交互,完成轉(zhuǎn)寫、翻譯、配音、圖像處理、音畫同步等一大堆復(fù)雜的事情,輕松進(jìn)行高維度、可交互的內(nèi)容創(chuàng)作。
第三步:產(chǎn)品化。
明星、名人的跨語(yǔ)言翻譯視頻固然精彩,但只是一種用例,并且只能停留于C端用戶玩梗,涉及自然人的聲音、肖像等版權(quán)問(wèn)題,是無(wú)法大規(guī)模普及并商用的。所以,雖然明星譯制片帶火了HeyGen,但HeyGen想要將產(chǎn)品投放市場(chǎng)并發(fā)揮價(jià)值,還需要更有說(shuō)服力的產(chǎn)品力。
從HeyGen官網(wǎng)可以看到,數(shù)字人+跨語(yǔ)言翻譯視頻,才是HeyGen的核心產(chǎn)品力,并給出了跨境電商營(yíng)銷視頻、跨語(yǔ)種品牌宣傳、老師制作教學(xué)視頻、社交媒體吸粉、為生日婚禮等紀(jì)念日制作令人難忘的個(gè)人視頻等,一系列落地場(chǎng)景。
在此基礎(chǔ)上,HeyGen讓數(shù)字人跨語(yǔ)言翻譯視頻,可以通過(guò)自動(dòng)化流水線來(lái)制作。
用戶可以上傳自己的照片,進(jìn)行個(gè)性化形象定制,也可以在HeyGen提供的數(shù)字人素材和模板中選擇,輸入腳本后就能生成自己所需的多語(yǔ)種視頻了。
至此, HeyGen順利完成了AI譯制產(chǎn)品化的轉(zhuǎn)換,從而取得了巨大的成功,導(dǎo)致了“多年譯制無(wú)人問(wèn),一朝HeyGen天下知”的景況。
從AI寫真到AI譯制片的爆火,一次次說(shuō)明,產(chǎn)品化是承上啟下、不可或缺的一步,再怎么強(qiáng)調(diào)也不為過(guò)。
可以肯定地說(shuō),不能完成從技術(shù)到原型設(shè)計(jì)再到產(chǎn)品化的轉(zhuǎn)換,將是許多大模型投資回報(bào)率低的主要原因,也是許多AI創(chuàng)業(yè)項(xiàng)目失敗的原因之一。
難逃“速朽”命運(yùn),商業(yè)化的魔咒
然而,即便如此成功的產(chǎn)品化,HeyGen又一次重復(fù)了“妙鴨”前輩的故事,在訪問(wèn)量陡增之后,又很快在各大群里銷聲匿跡了。
公域流量的退潮,似乎是爆款A(yù)IGC應(yīng)用的共同命運(yùn)。
對(duì)此,有人認(rèn)為,HeyGen是在“悶聲發(fā)大財(cái)”。雖然獵奇玩家散去了,但留下來(lái)的用戶還是給HeyGen貢獻(xiàn)了收入增長(zhǎng),HeyGen連續(xù)九個(gè)月環(huán)比增長(zhǎng)率在50%以上。創(chuàng)始人Joshua Xu也在社交媒體上公布了相關(guān)數(shù)據(jù),僅七個(gè)月時(shí)間,ARR年度經(jīng)常性收入就達(dá)到了100萬(wàn)美元。
問(wèn)題來(lái)了,HeyGen的商業(yè)化潛力是可持續(xù)的嗎?
我們認(rèn)為,HeyGen將要面臨的商業(yè)化挑戰(zhàn),還是非常大的。
首先,技術(shù)工具無(wú)法被壟斷,僅靠多模態(tài)AI無(wú)法建立商業(yè)模式。
HeyGen憑借大模型強(qiáng)大的多模態(tài)和理解能力,讓跨語(yǔ)種翻譯視頻制作,達(dá)到了傳統(tǒng)AI譯制所望塵莫及的水平,這是非常厲害的工作。但大模型就像c++、數(shù)據(jù)庫(kù)一樣,只是一種新技術(shù)工具,它是無(wú)法被壟斷的。HeyGen所使用的開源工具極易獲得,閉源模型API也敞開了迎客,所以僅靠底層工具無(wú)法建立商業(yè)模式和競(jìng)爭(zhēng)壁壘。
而產(chǎn)品創(chuàng)意、交互界面的開發(fā)門檻并不高,大量科技企業(yè)和個(gè)人開發(fā)者都可以輕松復(fù)刻并優(yōu)化升級(jí),產(chǎn)品被超越或許只在旦夕之間。
如今點(diǎn)開海外科技媒體的報(bào)道頁(yè)面,會(huì)看到類似HeyGen(原movio)的視頻生成工具,推薦清單高達(dá)95個(gè)之多。可以說(shuō),HeyGen提供了一個(gè)寶貴的AIGC用例,但很快就開啟了一場(chǎng)白熱化競(jìng)爭(zhēng),這對(duì)其后續(xù)收入的持續(xù)增長(zhǎng)是很大的威脅。
其次,C端付費(fèi)剛性,B端行業(yè)壁壘深,收入增長(zhǎng)曲線會(huì)放緩。
目前,HeyGen收入主要靠C端客戶付費(fèi)。免費(fèi)版本只支持一個(gè)免費(fèi)的credits字幕,顯然僅供玩票,而最低的創(chuàng)作者(Creator)付費(fèi)檔也要24美元/月,對(duì)于個(gè)人博主來(lái)說(shuō)雖然不算太貴,但隨著一大堆同質(zhì)化產(chǎn)品的價(jià)格“內(nèi)卷”,未來(lái)也會(huì)面臨性價(jià)比不高的窘?jīng)r。
而商業(yè)用戶(business)雖然付費(fèi)能力強(qiáng)、價(jià)格接受度高,但對(duì)跨語(yǔ)言視頻翻譯的技術(shù)含金量則要求更為復(fù)雜。HeyGen商業(yè)版本的客戶,大多是制作電商營(yíng)銷廣告、語(yǔ)言學(xué)習(xí)數(shù)字人、多語(yǔ)種新聞播報(bào)、譯制片等,對(duì)翻譯質(zhì)量就會(huì)提出更為細(xì)粒度的要求,比如文本翻譯的長(zhǎng)度,要盡量和目標(biāo)語(yǔ)言接近,來(lái)保持說(shuō)話口型的一致性。還有,不同人說(shuō)話的韻律不一樣,停頓的位置、重音的位置都要對(duì)齊,才能高度還原個(gè)人風(fēng)格。
再比如,老人、小孩說(shuō)同一個(gè)文本時(shí),因?yàn)榻巧嗽O(shè)的不同,遣詞造句也應(yīng)該不一樣,翻譯后的文本、語(yǔ)音都需要跟人設(shè)相對(duì)齊。
還有很多文化細(xì)節(jié),是跨語(yǔ)種翻譯中要進(jìn)行強(qiáng)把控的,很多還是要人工譯者去完成。畢竟商用場(chǎng)景不同于娛樂場(chǎng)景,跨語(yǔ)言容易產(chǎn)生歧義,一旦出現(xiàn)1%的錯(cuò)誤,都可能讓做對(duì)的99%工作打了水漂,面臨丟單甚至海外市場(chǎng)合規(guī)風(fēng)險(xiǎn)。
所以說(shuō),商業(yè)用戶需要復(fù)雜、高質(zhì)量、高控制的產(chǎn)品。這就需要廠商在數(shù)據(jù)方面,尤其是小語(yǔ)種等少樣本數(shù)據(jù),有獨(dú)家的、高質(zhì)量的數(shù)據(jù)積累。模型訓(xùn)練,強(qiáng)行業(yè)知識(shí)等,都要長(zhǎng)期積累和迭代,達(dá)到專業(yè)譯者的水平。
目前,已經(jīng)有AI公司針對(duì)精品化視頻譯制的需求,推出了ToB的產(chǎn)品解決方案,訓(xùn)練跨語(yǔ)種 Voice Conversion模型,采集配音演員的口型,由人工控制,再經(jīng)由VC模型生成配音結(jié)果,比TTS模型的表現(xiàn)力更強(qiáng),細(xì)節(jié)保留更多。
目前國(guó)內(nèi)的AI巨頭都很重視B端市場(chǎng),資源充足,并且在機(jī)器翻譯TTS、多模態(tài)AI技術(shù)方面的積累深厚,都可能是HeyGen商業(yè)用戶的爭(zhēng)奪者。
大模型的產(chǎn)品創(chuàng)新風(fēng)口,才剛剛開始,要保持商業(yè)化的優(yōu)勢(shì)身位,如逆水行舟,“當(dāng)紅頂流”也不能掉以輕心。
爆款應(yīng)用“速生速朽”,大模型的商業(yè)迷思
2022年11月30日,ChatGPT問(wèn)世,在一周年剛剛過(guò)去之際,這場(chǎng)大語(yǔ)言模型的熱潮,將所有人都席卷其中?;蛟S還有人無(wú)知無(wú)覺,但也注定無(wú)法置身事外。
一年以來(lái),時(shí)常有妙鴨相機(jī)、HeyGen這樣的爆款應(yīng)用,在社交媒體刷屏。這證明了幾件事:
1.大模型是條件,而不是結(jié)果。運(yùn)用好這些新工具,創(chuàng)造新產(chǎn)品的人,會(huì)獲得新時(shí)代里無(wú)限多的機(jī)會(huì)。
2.基建是問(wèn)題,但也不是問(wèn)題。提到大模型,業(yè)界總會(huì)擔(dān)憂算力卡被限制,國(guó)產(chǎn)大模型能力有差距,但悲觀者正確,樂觀者前行。實(shí)際上,無(wú)論算力基建、開發(fā)工具、基座模型,在今天都不是,也不該是應(yīng)用開發(fā)者的阻礙。
業(yè)內(nèi)有人說(shuō)過(guò),國(guó)產(chǎn)卡只要達(dá)到N卡60%的性能,用戶就會(huì)買單。而一些開發(fā)者告訴我,密集使用了文心一言、訊飛星火等國(guó)產(chǎn)大模型,基礎(chǔ)邏輯推理確實(shí)能叫板GPT 3.5-turbo,非基礎(chǔ)能力比如func call、穩(wěn)定性等也可圈可點(diǎn)。而妙鴨、HeyGen也都是中國(guó)企業(yè)所開發(fā)的,行動(dòng)比洞見更重要。
3.產(chǎn)品化,是大模型商業(yè)化的必要條件。做了那么多通用大模型和行業(yè)大模型,如果沒有大量產(chǎn)品化的成果,是無(wú)法轉(zhuǎn)化為使用價(jià)值和經(jīng)濟(jì)效益的?!案淖兪澜纭钡牟皇谴竽P?,而是各種各樣的產(chǎn)品,無(wú)數(shù)個(gè)HeyGen,幫助開發(fā)者完成從原型設(shè)計(jì)到產(chǎn)品化的轉(zhuǎn)換,降低試錯(cuò)成本,將是接下來(lái)大模型廠商最重要的動(dòng)作。
4.建立商業(yè)壁壘的,是剛需場(chǎng)景+強(qiáng)業(yè)務(wù)知識(shí)/數(shù)據(jù)+軟件工程。HeyGen的商業(yè)化挑戰(zhàn),說(shuō)明大模型不是壁壘,產(chǎn)品也不是壁壘,這些都是很容易被復(fù)制的。而行業(yè)知識(shí)/數(shù)據(jù),大規(guī)模軟件工程的流程控制、降本增效,可以針對(duì)特定場(chǎng)景的需求深入挖掘、快速開發(fā)、快速迭代優(yōu)化,才符合AI技術(shù)特性,才是商業(yè)化的保障。
幾位行業(yè)大模型應(yīng)用的開發(fā)者,不約而同地跟我說(shuō)過(guò)一件事:先找到場(chǎng)景,再優(yōu)化產(chǎn)品和服務(wù)。也就是先想好商業(yè)變現(xiàn)的路線,確定自己的壁壘達(dá)到了,再去扎扎實(shí)實(shí)做產(chǎn)品,心里才能不慌。
比如一個(gè)ToC的民宿大模型,解決的是旅客入住民宿時(shí),管家介入太深顯得沒有邊界感,過(guò)度打擾;管家介入太淺,又缺乏服務(wù)價(jià)值感,無(wú)法及時(shí)解決問(wèn)題?;诖竽P偷恼Z(yǔ)音交互助手,就在旅客和管家之間,起到了很好的緩沖橋梁作用,讓服務(wù)恰到好處。而旅客在當(dāng)?shù)氐牟惋?、游玩、?gòu)物等活動(dòng),也都是圍繞“住”展開的,通過(guò)民宿大模型提供優(yōu)質(zhì)可靠的推薦服務(wù),也帶來(lái)了商業(yè)轉(zhuǎn)換的潛力。
一個(gè)ToB的金融大模型應(yīng)用開發(fā)者也表示,企業(yè)機(jī)構(gòu)內(nèi)部的多樣化需求,是不可能由一個(gè)通用的、標(biāo)準(zhǔn)化的軟件產(chǎn)品來(lái)承載的,所以ToB大模型創(chuàng)業(yè),既要做業(yè)務(wù)分析咨詢,又要做軟件開發(fā)寫代碼,才能真正服務(wù)好客戶。AI軟件開發(fā)的流程化、自動(dòng)化,對(duì)于控制成本非常重要,不能每個(gè)項(xiàng)目都靠一群博士“手搓”代碼。
對(duì)商業(yè)和場(chǎng)景的深刻洞察,對(duì)行業(yè)和客戶的理解,比掌握算法、掌握技術(shù)都要難得多,也是開發(fā)者最應(yīng)該重視的核心能力。
最后我想說(shuō),雖然大模型已經(jīng)非?;鹆?,但別急著擔(dān)心“泡沫”、害怕“追高”,這才是開始。
國(guó)際咨詢機(jī)構(gòu)的調(diào)查報(bào)告顯示,65%的受訪者目前有時(shí)或很少使用生成式人工智能,而約占90%的受訪者認(rèn)為,AI應(yīng)該被“經(jīng)?;蚩偸恰笔褂?。
也就是說(shuō),大眾對(duì)機(jī)器學(xué)習(xí)和生成式 AI(Gen AI)的接受度很高,而實(shí)際滲透率并不高。妙鴨、HeyGen等現(xiàn)象級(jí)Gen AI產(chǎn)品,無(wú)疑邁出了一大步,而只有它們,是遠(yuǎn)遠(yuǎn)不夠的。
爆款A(yù)IGC應(yīng)用,只是AI和大模型價(jià)值潛力的一小部分。目前還沒有一種商業(yè)模式長(zhǎng)期跑通,恰恰說(shuō)明技術(shù)的新大陸上,留給登陸者、建設(shè)者們的發(fā)揮空間還很大。