每經記者 可楊 每經編輯 張海妮
2月4日晚間,北京2022年冬奧會開幕式在國家體育場“鳥巢”舉行。本屆冬奧會期間,虛擬數字人是重要技術之一,中央廣播電視總臺新增了央視新聞AI手語虛擬主播,報道冬奧會新聞、準確及時地進行賽事手語直播。據悉,這名虛擬數字人主播是由“百度智能云曦靈”數字人平臺打造的首個AI手語主播。
虛擬數字人背后,涉及計算機圖形學、圖形渲染、動作捕捉、深度學習、語音合成等多種技術。隨著2021年元宇宙概念持續火熱,虛擬數字人也作為元宇宙的場景入口和連接紐帶而備受矚目,而冬奧會上的虛擬數字人元素,也將讓大眾進一步認識這項技術。
不過,虛擬數字人要實現大規模商業化,仍有難題待解。百度智能云AI人機交互實驗室負責人李士巖介紹,目前數字人尚未實現規模化產業落地,主要原因在于數字人制作技術門檻高、周期長、成本高。
AI助力聽障人士觀冬奧
據百度提供的數據,全球約有4.3億人患中度及以上聽力障礙,根據全國第二次殘疾人抽樣調查數據,中國有聽障人士2780萬。而在本次冬奧賽事中,AI手語數字人將成為他們觀賽的重要橋梁。
百度方面介紹,區別于傳統翻譯,手語翻譯的難點在于:手語并非按照語言逐字翻譯,而需要根據語句整體意思進行語言精煉和語序調整,同時還需實時配合表情和唇語,幫助聽障者更好地理解。這就導致AI手語數字人在信息凝練度、低時延和精細化三方面面臨極其復雜的技術難題。因此,AI手語主播不僅需要具備高精度的數字人形象,還需要具備能夠語音識別、手語翻譯和手語表達的AI大腦。
據悉,百度智能云目前建立了規模龐大的手語動作庫,基于《國家通用手語詞典》規范,結合動作捕捉設備和真實手語老師的雙向調優,精修近1萬個手語動作,保證了手語表達的動作準確性。同時,通過4D掃描技術,讓AI手語主播口型生成準確度達到98.5%。
而虛擬手語主播的“AI大腦”則依托于百度智能云。通過百度自主研發的機器翻譯技術,百度智能云構建出了一套精確的手語翻譯引擎,可懂度達到85%以上,結合百度自研的語音識別技術,可將冰雪賽事的文字及音視頻內容,快速精準地轉化為手語;同時再通過專為手語優化的自然動作引擎,完成AI手語主播的動作驅動,實時演繹為數字人的動作、表情和唇語。據百度方面介紹,這一虛擬數字人研發工作,耗時不到2個月。
虛擬數字人技術為何能在此次冬奧會期間成為重要技術之一,易觀分析互娛行業高級分析師王媛婭認為,中國很多領域在新技術應用方面很超前,具有很強的創新意識。在本屆冬奧會上,虛擬數字人是為觀眾帶來極致體驗的重要方式之一,隨著虛擬數字人在這幾年受到越來越多的關注,通過虛擬數字人來展示內容已變得越來越常見。虛擬數字人不僅能在疫情期間控制現場演員數量,更能夠用科技演繹藝術,為觀眾帶來更新穎更多元的表演。
她同時表示,冬奧會開幕式是讓大眾了解虛擬數字人價值的契機。目前很多廠商正在布局或者計劃布局虛擬數字人賽道,由于虛擬數字人是基于3D、VR、動作捕捉等一些技術實現的,隨著科技的進步、市場需求的增加和冬奧會的助推,虛擬數字人會越來越成熟,進一步進入大眾視野。除了直播帶貨和演出,虛擬數字人會在更多領域得到商業化機會。
商業化仍有難題待解
據元透社發布的《虛擬數字人深度產業報告》,預計2030年,我國虛擬數字人整體市場規模將達到2700億元,而目前市場仍處于前期培養階段。
王媛婭認為,目前國內虛擬數字人剛剛從探索期過渡到成長期,成為元宇宙生態中快速發展的賽道。最近幾年,虛擬數字人的應用領域逐漸拓寬,功能屬性加強,已不再是二次元專屬,比如現在已經有了虛擬KOL、虛擬主持人、虛擬客服等很多角色,商業價值也在直播帶貨場景中得到了驗證。以“初音未來”為代表的海外頭部虛擬數字人在探索期已建立全球影響力。同時,一些國外頭部廠商開始關注虛擬數字人在B端的應用,并且已經推出了一些服務于B端市場的產品。
百度智能云AI人機交互實驗室負責人李士巖介紹,目前數字人尚未實現規模化產業落地,主要原因在于數字人制作技術門檻高、周期長、成本高。打造一個高精度、高保真的非特異型虛擬數字人,動輒就需要百萬甚至上千萬的資金投入。
李士巖表示,虛擬數字人產業格局中,提供建模、渲染、動態捕捉等服務于數字人制作的基礎設施服務商已形成穩固格局,大多由海外巨頭把持。但在工具、應用層,中國企業已開始嶄露頭角。
不過,數字人規模化落地還面臨三大難點:產業鏈割裂、服務場景與演藝場景沒有有效打通、滿足高頻需求成本高。
對于虛擬數字人大規模商業化所面臨的難題,王媛婭認為,市場對虛擬數字人的關注度會持續上升,也會有越來越多的企業投入打造虛擬數字人。但是懂技術、懂美術、又懂偶像運營的公司太少,所以未來需要產業鏈各方企業合作聯合推出虛擬數字人,或者大型公司聯合多個業務部門推出。
對于虛擬數字人未來的發展,李士巖表示,數字人產業有三大核心推動力:第一級是用戶需求與技術升級,第二級是政策支持與資本涌入,第三級是計算平臺的迭代。每一次數字人發展本質上都是技術推動的,用戶從平面的圖文影音獲取信息與交互,向實時3D交互反饋的需求轉變。
百度集團副總裁吳甜則表示:“百度已發布集數字人生產、內容創作、業務配置服務為一體的智能數字人平臺百度智能云曦靈,希望通過全棧AI能力,把虛擬數字人的生產周期縮短到小時級別,降低生產成本,并且用AI驅動生成內容。”
責任編輯:陳程
投顧排行榜
收起APP專享直播
熱門推薦
收起24小時滾動播報最新的財經資訊和視頻,更多粉絲福利掃描二維碼關注(sinafinance)