好看的皮囊到有趣的靈魂-數(shù)字人產(chǎn)業(yè)發(fā)展趨勢(shì)報(bào)告

發(fā)展現(xiàn)狀產(chǎn)業(yè)趨勢(shì)應(yīng)用案例目

錄PAGE/

07PAGE/

08數(shù)字人定義數(shù)字人是指以數(shù)字形式存在于數(shù)字空間中，具有擬人或真人的外貌、行為和特點(diǎn)的虛擬人物，也稱之為虛擬形象、數(shù)字虛擬人、虛擬數(shù)字人等。數(shù)字人的核心技術(shù)主要包括計(jì)算機(jī)圖形學(xué)、動(dòng)作捕捉、圖像渲染、AI等。數(shù)字人可以打造更完美的人設(shè)，為品牌帶來正向價(jià)值?；ヂ?lián)網(wǎng)、金融、電商平臺(tái)、消費(fèi)品牌、汽車出行等領(lǐng)域紛紛推出數(shù)字人，用于品牌營(yíng)銷、智能客服等方向。數(shù)字人可以按照不同維度進(jìn)行分類：根據(jù)人物圖形資源的維度，數(shù)字人可分為2D和3D兩大類，從外形上又可分為2D真人、2D卡通、3D卡通、3D風(fēng)格化、3D寫實(shí)、3D超寫實(shí)、3D高保真等多種。根據(jù)驅(qū)動(dòng)的維度，可分為真人驅(qū)動(dòng)和AI驅(qū)動(dòng)兩種。根據(jù)商業(yè)和功能維度，可分為內(nèi)容/IP型、功能服務(wù)型和虛擬分身等三種。3D超寫實(shí)真人采集2D真人2D繪制2D卡通3D建模真人掃描+3D建模+美型加工3D寫實(shí)3D建模3D風(fēng)格化3D卡通3D建模類

型示

例創(chuàng)建方式真人掃描+3D建模+1:1復(fù)刻3D高保真PAGE/

09爆點(diǎn)事件推動(dòng)數(shù)字人產(chǎn)業(yè)被用戶認(rèn)知，底層是技術(shù)推動(dòng)、用戶需求、生態(tài)建設(shè)和標(biāo)準(zhǔn)等支撐爆點(diǎn)事件推動(dòng)數(shù)字人認(rèn)知的普及和深化技術(shù)、需求、生態(tài)和標(biāo)準(zhǔn)等底層支撐產(chǎn)業(yè)發(fā)展技

術(shù)第一動(dòng)力CG、光場(chǎng)采集、動(dòng)捕、AI等關(guān)鍵技術(shù)持續(xù)迭代，推動(dòng)產(chǎn)品升級(jí)。大廠入局，加速產(chǎn)業(yè)發(fā)展，并通過完善工具和應(yīng)用生態(tài)，引導(dǎo)良性發(fā)展。生

態(tài)加速器網(wǎng)紅數(shù)字人頻出網(wǎng)紅數(shù)字人大量出現(xiàn)，推動(dòng)數(shù)字人在C端用戶的認(rèn)知和普及。資本不斷投入資本不斷投入，數(shù)字人賽道成為融資領(lǐng)域熱點(diǎn)，用戶感知度不斷提升。專項(xiàng)政策出臺(tái)數(shù)字人專項(xiàng)政策發(fā)布，支持行業(yè)健康有序發(fā)展，影響力進(jìn)一步提升。認(rèn)知支撐用

戶新需求Z世代成為互聯(lián)網(wǎng)用戶的重要玩家，互聯(lián)網(wǎng)原生一代對(duì)體驗(yàn)有新需求。通過標(biāo)準(zhǔn)建設(shè)為行業(yè)提供夯實(shí)的技術(shù)底座，助力創(chuàng)新。標(biāo)

準(zhǔn)底

座PAGE/

10網(wǎng)紅數(shù)字人推動(dòng)C端直觀認(rèn)知和概念普及星瞳、艾靈等網(wǎng)紅數(shù)字人的爆紅和超級(jí)QQ秀為代表的虛擬空間中虛擬分身產(chǎn)品大量出現(xiàn)，推動(dòng)數(shù)字人在C端用戶中的認(rèn)知普及。進(jìn)入2022年以來，數(shù)字人在諸多應(yīng)用場(chǎng)景大放光彩，特別是在北京冬奧會(huì)的開幕式表演、氣象播報(bào)、手語(yǔ)解說中頻頻現(xiàn)身，使其用戶基礎(chǔ)不斷擴(kuò)大。虛擬偶像--星瞳和平精英虛擬解說--占樂樂AI歌姬--艾靈3D手語(yǔ)數(shù)智人--聆語(yǔ)超級(jí)QQ秀數(shù)字航天員--小諍網(wǎng)紅數(shù)字人數(shù)字人熱點(diǎn)事件虛擬分身推廣重大賽事活動(dòng)中數(shù)字人PAGE/

112021年，有20家以上的數(shù)字人企業(yè)獲得新一輪融資，2022年，數(shù)字人繼續(xù)成為融資熱點(diǎn)領(lǐng)域。2月世悅星承完成Pre-A輪融資慧夜科技Pre-A輪融資，金額數(shù)百萬(wàn)美元燃麥科技AYAYI完成Pre-A輪融資，金額數(shù)千萬(wàn)人民幣博宇蓋樂完成A輪融資，金額1000萬(wàn)美元匯智互娛智能完成天使輪融資，金額千萬(wàn)級(jí)人民幣次世文化完成A+輪融資魔琺科技Xmov完成B輪融資，金額2000萬(wàn)美元魔琺科技Xmov完成C輪融資，金額1.1億美元影眸科技完成Pre-A輪融資，金額數(shù)千萬(wàn)人民幣3月6月融資事件頻繁及專項(xiàng)政策的出臺(tái)進(jìn)一步加深對(duì)產(chǎn)業(yè)的認(rèn)知心識(shí)宇宙完成天使輪融資，金額數(shù)千萬(wàn)元八點(diǎn)八數(shù)字完成Pre-A輪融資，金額數(shù)百萬(wàn)元4月2022年7月，在2022全球數(shù)字經(jīng)濟(jì)大會(huì)上，北京市發(fā)布了《北京市促進(jìn)數(shù)字人產(chǎn)業(yè)創(chuàng)新發(fā)展行動(dòng)計(jì)劃（2022-2025年）》并進(jìn)行詳細(xì)解讀。該計(jì)劃是國(guó)內(nèi)出臺(tái)的首個(gè)數(shù)字人產(chǎn)業(yè)專項(xiàng)支持政策，從構(gòu)建數(shù)字人全鏈條技術(shù)體系、培育標(biāo)桿應(yīng)用項(xiàng)目、優(yōu)化數(shù)字人產(chǎn)業(yè)生態(tài)等方面為支持?jǐn)?shù)字人產(chǎn)業(yè)發(fā)展提供了指引，進(jìn)一步加深數(shù)字人在用戶中的認(rèn)知。

1月ISEC完成戰(zhàn)略投資，金額1億日元半人貓完成天使輪融資，金額千萬(wàn)級(jí)人民幣世悅星承完成天使輪融資，金額1000萬(wàn)人民幣8月10月9月12月7月IMVU

APP完成戰(zhàn)略投資，金額3500萬(wàn)美元中科深智完成A輪融資，金額數(shù)千萬(wàn)人民幣創(chuàng)壹科技完成股權(quán)融資，金額千萬(wàn)級(jí)人民幣

6月中科深智完成A+輪融資，金額數(shù)千萬(wàn)人民幣萬(wàn)象文化完成A輪融資，金額數(shù)百萬(wàn)美元代碼乾坤完成戰(zhàn)略融資，金額一億元STEPVR完成A+輪、B輪融資，金額近億元云舶科技完成A輪融資，金額數(shù)百萬(wàn)美元燃麥科技AYAYI完成Pre-A輪融資，金額數(shù)百萬(wàn)人民幣追一科技完成戰(zhàn)略融資，金額數(shù)億人民幣小冰完成A輪融資，金額數(shù)億人民幣次世文化完成A輪融資，金額500萬(wàn)美元云舶科技完成A+輪融資，金額數(shù)百萬(wàn)美元虛擬影業(yè)完成PreA輪融資，金額超千萬(wàn)人民幣ACE虛擬歌姬完成Pre-A輪融資，金額數(shù)百萬(wàn)美元次元潮玩完成天使輪融資，金額數(shù)百萬(wàn)人民幣追一科技完成戰(zhàn)略融資，金額未披露萬(wàn)像文化完成戰(zhàn)略融資，金額未披露次世文化完成A+輪融資，金額數(shù)百萬(wàn)美元中科深智完成B輪融資，金額千萬(wàn)級(jí)美元萬(wàn)像文化完成A+輪融資，金額數(shù)千萬(wàn)美元相芯科技完成戰(zhàn)略融資，金額7000萬(wàn)人民幣頭號(hào)偶像完成戰(zhàn)略融資，金額未披露11月PAGE/

122021年1月2月3月4月5月2022年技術(shù)發(fā)展是數(shù)字人第一推動(dòng)力數(shù)字人是多技術(shù)綜合產(chǎn)物，數(shù)字人近年的發(fā)展來源于CG(Computer

Graphics，利用計(jì)算機(jī)進(jìn)行視覺設(shè)計(jì)和生產(chǎn))、語(yǔ)音識(shí)別、圖像識(shí)別、動(dòng)捕等相關(guān)技術(shù)的共同成熟。數(shù)字人具有以下三方面特征，分別是由建模、物理仿真、渲染、動(dòng)捕、面捕和AI等技術(shù)支持，各項(xiàng)技術(shù)不斷迭代，推動(dòng)數(shù)字人制作效能和智能水平提升，其中通過AI技術(shù)實(shí)現(xiàn)高度擬人化的“思想和行為”，進(jìn)而給用戶帶來親切感、參與感、互動(dòng)感和沉浸感是未來發(fā)展的重要方向。人的外觀，具有人的相貌、性別和性格等人物特征。人的行為，具有語(yǔ)言、面部表情和肢體動(dòng)作的能力。人的思想，具有識(shí)別外界環(huán)境，并與人交流互動(dòng)的能力。形似人人的外觀人的行為人的思想神似人AI驅(qū)動(dòng)AI驅(qū)動(dòng)外在內(nèi)在數(shù)字人技術(shù)建模物理仿真渲染動(dòng)捕面捕好看的皮囊有趣的靈魂P(guān)AGE/

13角色形象音視頻合成顯示模塊交互模塊角色制作識(shí)別感知合成顯示分析決策建模綁定等終端顯示技術(shù)語(yǔ)音語(yǔ)義識(shí)別、人臉識(shí)別、動(dòng)作識(shí)別等知識(shí)庫(kù)、對(duì)話管理等建模

綁定等動(dòng)作捕捉動(dòng)畫渲染引擎應(yīng)用AR/VR技術(shù)AI語(yǔ)音理解AI圖像識(shí)別數(shù)字人通用框架數(shù)字人技術(shù)游戲技術(shù)動(dòng)畫生成模塊角色表達(dá) 語(yǔ)音生成、動(dòng)畫生成（驅(qū)動(dòng)、渲染）等語(yǔ)言生成模塊游戲科技不斷賦能數(shù)字人制作PAGE/

14Z世代用戶崛起數(shù)字人和虛擬空間為互聯(lián)網(wǎng)原生一代提供新體驗(yàn)91.383.9 82.674.671.6 70.054.749.2 48.732.773.143.422018-062019-06 2020-06 2021-06 2022-062021年6月Z世代人群興趣偏好活躍占比TOP10Z世代用戶規(guī)模變化趨勢(shì)單位:億作為互聯(lián)網(wǎng)原生一代，Z世代用戶增長(zhǎng)速度較快，規(guī)模已達(dá)到3.42億，已成為移動(dòng)互聯(lián)網(wǎng)的重度用戶，他們對(duì)社交、視頻、音樂、網(wǎng)購(gòu)等興趣愛好使用深度和廣度的上遙遙領(lǐng)先于全網(wǎng)平均水平。Z世代對(duì)新形式的互聯(lián)網(wǎng)產(chǎn)品需求更大，而數(shù)字人突出人物個(gè)性，強(qiáng)調(diào)體驗(yàn)感和交互性，與Z世代用戶可以產(chǎn)生情感鏈接，并產(chǎn)生情緒共振和文化認(rèn)同。特別是數(shù)字人和虛擬空間相結(jié)合，孵化新玩法，帶來新體驗(yàn)，因此Z世代用戶為數(shù)字人的核心用戶群體。76%19%年齡分布17歲及以下31-35歲18-24歲36歲及以上25-30歲保密星瞳粉絲：核心為18-24歲群體，達(dá)76%Source

:

星瞳用戶畫像標(biāo)簽社交 視頻 音樂 網(wǎng)購(gòu) 團(tuán)購(gòu) 游戲 學(xué)習(xí) 閱讀 時(shí)尚 辦公Z世代，通常是指1995年后出生的一代人Source

:QuestMobile

GROWTH用戶畫像標(biāo)簽數(shù)據(jù)庫(kù)2021年6月&

2022年6月1%

1%2%2%PAGE/

15頭部企業(yè)從工具、平臺(tái)和應(yīng)用多維度入局引領(lǐng)數(shù)字人產(chǎn)業(yè)發(fā)展EpicGames

MetaHumanNVIDIA

Omniverse騰訊云智能播報(bào)數(shù)智人平臺(tái)Meta

Horizon

Worlds

社交平臺(tái)頭部企業(yè)通過打造數(shù)字人制作工具和平臺(tái)、數(shù)字人應(yīng)用平臺(tái)等引領(lǐng)產(chǎn)業(yè)快速發(fā)展PAGE/

16類型組織項(xiàng)目名稱行業(yè)標(biāo)準(zhǔn)金標(biāo)委證券分委會(huì)《證券期貨業(yè)虛擬數(shù)字人應(yīng)用建設(shè)指南》行業(yè)標(biāo)準(zhǔn)北京金融科技產(chǎn)業(yè)聯(lián)盟《虛擬數(shù)字人金融應(yīng)用建設(shè)指南》團(tuán)體標(biāo)準(zhǔn)人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟《虛擬數(shù)字人指標(biāo)要求和評(píng)估方法》系列標(biāo)準(zhǔn)行業(yè)標(biāo)準(zhǔn)中國(guó)通信標(biāo)準(zhǔn)化協(xié)會(huì)《虛擬數(shù)字人指標(biāo)要求和評(píng)估方法》系列標(biāo)準(zhǔn)團(tuán)體標(biāo)準(zhǔn)人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟《數(shù)字人系統(tǒng)基礎(chǔ)可信能力要求及評(píng)估方法》團(tuán)體標(biāo)準(zhǔn)中國(guó)電子工業(yè)標(biāo)準(zhǔn)化技術(shù)協(xié)會(huì)《人工智能

深度合成圖像系統(tǒng)技術(shù)規(guī)范》國(guó)際標(biāo)準(zhǔn)ITU-T（國(guó)際電信聯(lián)盟）《Requirements

and

evaluation

methods

of

noninteractive2D

real-persondigitalhumanapplication

systems》《Frameworkand

metricsfor

digital

humanapplication

systems》發(fā)布或制定過程中的數(shù)字人相關(guān)標(biāo)準(zhǔn)標(biāo)準(zhǔn)制定引導(dǎo)產(chǎn)業(yè)規(guī)范發(fā)展針對(duì)數(shù)字人通用技術(shù)，通過可信能力、指標(biāo)和評(píng)估能力等對(duì)產(chǎn)品進(jìn)行規(guī)范和引導(dǎo)，支持產(chǎn)業(yè)健康發(fā)展。在垂直行業(yè)中，如金融行業(yè)，在證券期貨、金融應(yīng)用等方向陸續(xù)出臺(tái)相關(guān)應(yīng)用建設(shè)指南，推動(dòng)落地應(yīng)用。PAGE/

17IDC在《中國(guó)AI數(shù)字人市場(chǎng)現(xiàn)狀與機(jī)會(huì)分析，2022》報(bào)告中預(yù)計(jì)，到2026年中國(guó)AI數(shù)字人市場(chǎng)規(guī)模將達(dá)到102.4

億元中國(guó)AI數(shù)字人市場(chǎng)規(guī)模預(yù)測(cè)，2021-2026單位：億元人民幣來源：IDC中國(guó)，2022數(shù)字人市場(chǎng)將呈現(xiàn)高速增長(zhǎng)態(tài)勢(shì)數(shù)字人市場(chǎng)增長(zhǎng)迅速，根據(jù)市場(chǎng)分析機(jī)構(gòu)預(yù)測(cè)，其中AI數(shù)字人市場(chǎng)規(guī)模在2026年將達(dá)到102.4億元。PAGE/

18PAGE/

19價(jià)值定位技術(shù)迭代AI賦能融合發(fā)展行業(yè)應(yīng)用十大趨勢(shì)C端模式硬件載體發(fā)展路徑產(chǎn)業(yè)集聚合規(guī)前置PAGE/

20數(shù)字人產(chǎn)業(yè)發(fā)展十大趨勢(shì)數(shù)字人制造和運(yùn)營(yíng)服務(wù)的B端市場(chǎng)不斷擴(kuò)大，將面向更廣大的C端用戶提供服務(wù)，各類數(shù)字人價(jià)值定位和商業(yè)模式有差異。技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升AI技術(shù)驅(qū)動(dòng)數(shù)字人多模態(tài)交互更神似人，并逐步覆蓋數(shù)字人全流程數(shù)字人技術(shù)與SLAM、3D交互、體積視頻、空間音頻等技術(shù)深度融合，渲染將從本地到云端千行千面的數(shù)字人將成為人機(jī)交互新入口，但深度上仍需挖掘UGC數(shù)字人將加速出現(xiàn)，成為未來產(chǎn)業(yè)的增量空間數(shù)字人仍以2D顯示設(shè)備為主，3D顯示設(shè)備成為特定領(lǐng)域的新解法在場(chǎng)是數(shù)字人發(fā)展的高級(jí)階段，將與應(yīng)用場(chǎng)景深度耦合藝術(shù)和技術(shù)雙輪驅(qū)動(dòng)，北京有望成為產(chǎn)業(yè)新高地?cái)?shù)字人版權(quán)保護(hù)及行業(yè)合規(guī)體系需同步建設(shè)，推動(dòng)實(shí)現(xiàn)可用、可靠、可知、可控價(jià)值定位技術(shù)迭代AI

賦能融合發(fā)展行業(yè)應(yīng)用C端模式硬件載體發(fā)展路徑產(chǎn)業(yè)聚集合規(guī)前置騰訊研究院、騰訊云智能和創(chuàng)業(yè)黑馬：《數(shù)字人產(chǎn)業(yè)發(fā)展趨勢(shì)報(bào)告（2023）》PAGE/

21趨勢(shì)1：數(shù)字人制造和運(yùn)營(yíng)服務(wù)的B端市場(chǎng)不斷擴(kuò)大，將面向更廣大的C端用戶提供服務(wù)，各類數(shù)字人價(jià)值定位和商業(yè)模式有差異數(shù)字人的最終服務(wù)對(duì)象為C端用戶，在B端的應(yīng)用領(lǐng)域從電影動(dòng)畫向廣告營(yíng)銷、電商直播、虛擬偶像等領(lǐng)域不斷擴(kuò)展。未來，以虛擬分身為代表的應(yīng)用潛力巨大。從需求角度，數(shù)字人制造和運(yùn)營(yíng)服務(wù)在B端市場(chǎng)不斷擴(kuò)大領(lǐng)域和規(guī)模，面向更廣大的C端用戶提供服務(wù)，而制作方式也從PGC向UGC發(fā)展。在20世紀(jì)80年代電影、動(dòng)畫等領(lǐng)域早期的手繪數(shù)字人最先出現(xiàn)，伴隨著21世紀(jì)初計(jì)算機(jī)動(dòng)畫和動(dòng)捕技術(shù)的成熟，內(nèi)容/IP型數(shù)字人大量應(yīng)用在影視行業(yè)中，主要是增強(qiáng)影視中觀眾的體驗(yàn)效果，隨后逐漸在文娛、市場(chǎng)營(yíng)銷、文旅、虛擬偶像等場(chǎng)景推廣應(yīng)用。近年，伴隨AI驅(qū)動(dòng)技術(shù)的成熟，功能服務(wù)型數(shù)字人陸續(xù)出現(xiàn)，主要應(yīng)用于行業(yè)服務(wù)場(chǎng)景，如金融數(shù)字人客服、傳媒數(shù)字人口播等。在虛擬空間中的虛擬分身數(shù)字人大范圍出現(xiàn)相對(duì)較晚，虛擬空間的技術(shù)和產(chǎn)品還在發(fā)展中，待產(chǎn)業(yè)進(jìn)一步完善，此類應(yīng)用潛力巨大，是數(shù)字人市場(chǎng)的增量空間。80年底初 21世紀(jì)初 2018年-現(xiàn)在電影制作動(dòng)畫方向游戲、電影制作方向形態(tài)：內(nèi)容IP型技術(shù)路線

·投入成本

·技術(shù)路線

·投入成本

·動(dòng)捕設(shè)備、計(jì)算機(jī)動(dòng)畫人工密集型驅(qū)動(dòng)，學(xué)習(xí)和管理的成本高，單個(gè)電影制作，投入幾百萬(wàn)至千萬(wàn)美金不等內(nèi)容IP型：網(wǎng)紅型數(shù)字人大量出現(xiàn)。功能服務(wù)性：以金融、傳媒作為起點(diǎn)，進(jìn)入行業(yè)服務(wù)。虛擬分身：虛擬場(chǎng)景中虛擬分身大量出現(xiàn)形態(tài)：內(nèi)容IP型/功能服務(wù)型/虛擬分身技術(shù)路線

·

動(dòng)捕設(shè)備、AI驅(qū)動(dòng)算法，驅(qū)動(dòng)模型，2D驅(qū)動(dòng)，3DAI建模投入成本

· 人力、GPU，數(shù)據(jù)采集，算法投入AI驅(qū)動(dòng)部分不再依賴人力和設(shè)備，減少大規(guī)模商用成本傳統(tǒng)手繪手工繪本內(nèi)容生產(chǎn)，效率較低、效果較差第一需求方：文娛公司等B端廠商制作方式：PGC文娛產(chǎn)業(yè)打造虛擬偶像，塑造IP價(jià)值第一需求方：C端用戶制作方式：UGC虛擬分身虛擬空間的分身第一需求方：各行各業(yè)等B端企業(yè)制作方式：PGC企業(yè)服務(wù)提升技術(shù)服務(wù)，為企業(yè)降本增效第一需求方：影視、游戲公司等B端廠制作方式：PGC影視游戲增強(qiáng)體驗(yàn)效果PAGE/

22趨勢(shì)1：數(shù)字人制造和運(yùn)營(yíng)服務(wù)的B端市場(chǎng)不斷擴(kuò)大，將面向更廣大的C端用戶提供服務(wù)，各類數(shù)字人價(jià)值定位和商業(yè)模式有差異產(chǎn)品分類內(nèi)容/IP型功能服務(wù)型虛擬分身（Avatar）制作方式PGC為主PGC為主UGC為主產(chǎn)品定位偶像，用于娛樂、科教等數(shù)字員工，提供擬人化服務(wù)在虛擬空間中的身份代理代表應(yīng)用虛擬偶像、數(shù)字航天員、品牌代言人虛擬主播、數(shù)字客服、數(shù)字專家游戲身份如VRChat、虛擬演唱會(huì)觀眾應(yīng)用行業(yè)電影、電視、綜藝、科普紀(jì)錄片等金融、文旅、零售、直播游戲、VR應(yīng)用核心價(jià)值虛擬IP/偶像身份的具象化人工作的增強(qiáng)和輔助，降低企業(yè)成本，提供自動(dòng)化、智能化和標(biāo)準(zhǔn)化服務(wù)虛擬空間中的交互入口，推動(dòng)虛擬內(nèi)容生產(chǎn)核心競(jìng)爭(zhēng)力形象的藝術(shù)性、IP的打造和運(yùn)營(yíng)能力智能交互能力沉浸化、實(shí)時(shí)化、體驗(yàn)感驅(qū)動(dòng)方式中之人驅(qū)動(dòng)AI驅(qū)動(dòng)/中之人驅(qū)動(dòng)中之人驅(qū)動(dòng)/指令驅(qū)動(dòng)三種數(shù)字人（內(nèi)容/IP型、功能服務(wù)型和虛擬分身型）在產(chǎn)品定位、應(yīng)用行業(yè)、核心價(jià)值、競(jìng)爭(zhēng)力等方面存在顯著差異。其中，內(nèi)容/IP型主要應(yīng)用于影視、文娛和市場(chǎng)營(yíng)銷等場(chǎng)景，功能服務(wù)型主要應(yīng)用于行業(yè)服務(wù)場(chǎng)景。這兩種類型數(shù)字人制作方式以PGC為主，從數(shù)字人制作廠商角度，更多是面向B端。此外，虛擬分身類型數(shù)字人（Avatar）一般為C端用戶制作虛擬形象，應(yīng)用于C端用戶在虛擬空間中的形象分身和代理。按照商業(yè)和功能應(yīng)用維度劃分虛擬偶像、虛擬網(wǎng)紅虛擬代言人、虛擬品牌官...虛擬主持人虛擬主播...虛擬客服、虛擬導(dǎo)游虛擬專家、虛擬講解員...虛擬空間超級(jí)助手/入口真實(shí)世界底層邏輯增強(qiáng)連接建模 內(nèi)容 交互精細(xì)化 多元化 實(shí)時(shí)化載體 產(chǎn)業(yè)融合 知識(shí)圖譜多樣化 深化 全能化演進(jìn)方向生產(chǎn) 內(nèi)容

AI交互平臺(tái)化 場(chǎng)景化 情感化PAGE/

23趨勢(shì)1：數(shù)字人制造和運(yùn)營(yíng)服務(wù)的B端市場(chǎng)不斷擴(kuò)大，將面向更廣大的C端用戶提供服務(wù)，各類數(shù)字人價(jià)值定位和商業(yè)模式有差異項(xiàng)目制產(chǎn)

品視頻推流IP運(yùn)營(yíng)商業(yè)變現(xiàn)結(jié)合虛擬空間設(shè)定進(jìn)行流量變現(xiàn)交付并商業(yè)變現(xiàn)產(chǎn)品結(jié)合定制化IP運(yùn)營(yíng)，客戶服務(wù)和流量變現(xiàn)是當(dāng)前主要的三種商業(yè)模式：內(nèi)容/IP型數(shù)字人主要依靠數(shù)字人的商業(yè)IP運(yùn)營(yíng)實(shí)現(xiàn)商業(yè)變現(xiàn)，功能服務(wù)型是交付給客戶實(shí)現(xiàn)變現(xiàn)，而虛擬分身則需要結(jié)合虛擬空間的設(shè)定和規(guī)則進(jìn)行流量變現(xiàn)。數(shù)字人的制作成本和周期也伴隨定制化程度的下降而遞減：三種數(shù)字人的制作方式和周期也存在差異，內(nèi)容/IP型數(shù)字人更多是項(xiàng)目制，以定制為主；功能服務(wù)型是產(chǎn)品和定制化相結(jié)合，在通用產(chǎn)品上，進(jìn)行定制化開發(fā)；而虛擬分身更多是產(chǎn)品制，用戶利用平臺(tái)工具產(chǎn)品進(jìn)行數(shù)字人形象的制作并在相應(yīng)虛擬場(chǎng)景內(nèi)進(jìn)行活動(dòng)，一般而言內(nèi)容/IP型數(shù)字人的成本和周期最高，虛擬分身型數(shù)字人最低。各種數(shù)字人典型的商業(yè)流程和制作方式內(nèi)容/IP型功能服務(wù)型虛擬分身B端客戶需求/C端用戶需求B端客戶需求C端用戶需求人設(shè)打造數(shù)字人制作場(chǎng)景規(guī)則設(shè)定數(shù)字人制作AI訓(xùn)練使用場(chǎng)景打造中之人/AI訓(xùn)練平臺(tái)上架用戶定制形象平臺(tái)對(duì)接從數(shù)字人制作角度注：內(nèi)容IP型以視頻播放場(chǎng)景為例PAGE/

24趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升建模技術(shù)數(shù)字人形似人建模技術(shù)發(fā)展推動(dòng)外貌更接近人的超寫實(shí)數(shù)字人制作門檻和周期進(jìn)一步下降渲染引擎的迭代發(fā)展和GPU算力的提升推動(dòng)數(shù)字人渲染畫面更加精細(xì)和實(shí)時(shí)化物理仿真算法迭代推動(dòng)服裝動(dòng)態(tài)展示趨向真實(shí)工具AI技術(shù)人的外觀人的行為（中之人驅(qū)動(dòng)動(dòng)作和表情）人的思想數(shù)字人神似人管線化流程物理仿真渲染技術(shù)制作效能提升算法的優(yōu)化推動(dòng)動(dòng)捕技術(shù)門檻下降，使用將會(huì)更加輕量，視覺動(dòng)捕在C端應(yīng)用潛力更大動(dòng)捕技術(shù)面部捕捉技術(shù)向更簡(jiǎn)單的硬件、更細(xì)膩的表情、更自動(dòng)化的流程方向發(fā)展面捕技術(shù)PAGE/

25趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升數(shù)字人類型生成/建模方式精度建模/掃描時(shí)間特點(diǎn)數(shù)字人外形方向應(yīng)用領(lǐng)域技術(shù)成熟度2D數(shù)字人深度學(xué)習(xí)完全復(fù)刻小時(shí)-天可以定制形象或者融合形象均和真人無(wú)異， 真人傳媒、金融政務(wù)、 相對(duì)成熟3D數(shù)字人手工建模0.1毫米月人工操作，建模時(shí)間相對(duì)較長(zhǎng)，人物建模主流方式各種類型電影、傳媒行業(yè)應(yīng)用、 成熟相機(jī)陣列掃描建模毫米高速，后續(xù)需要人工進(jìn)一步完善模型重建數(shù)字人三維模型重建數(shù)字人紋理貼超寫實(shí)電影、傳媒相對(duì)成熟光場(chǎng)掃描微米高速重建數(shù)字人三維模型、紋理貼圖、法線貼圖、材質(zhì)貼圖動(dòng)態(tài)網(wǎng)格、 超寫實(shí)電影、傳媒落地完善中AI建模（上傳照片/視頻生成寫實(shí)類型數(shù)字人）相對(duì)較高1分鐘生成成本低，可定制，1分鐘生成，實(shí)現(xiàn)千人千面，簡(jiǎn)單易用，零基礎(chǔ)使用寫實(shí)互聯(lián)網(wǎng)發(fā)展中，需要多種技術(shù)路徑驗(yàn)證2D數(shù)字人和3D數(shù)字人生成/建模方式不同，2D數(shù)字人本質(zhì)是生成圖像，因此主要方式是利用深度學(xué)習(xí)技術(shù)根據(jù)視頻生成與真人相同的圖像，技術(shù)相對(duì)成熟。3D數(shù)字人需要建立3D模型，主要是利用軟件傳統(tǒng)的手工建模、靜態(tài)掃描建模（相機(jī)陣列掃描建模）、動(dòng)態(tài)光場(chǎng)或者AI建模（3D重建技術(shù)）生成3D模型。目前手工建模和靜態(tài)掃描建模技術(shù)較為成熟且應(yīng)用廣泛，利用3D重建技術(shù)或動(dòng)態(tài)光場(chǎng)重建可極大節(jié)約建模時(shí)間，提升建模效率，是未來重要布局方向。其中動(dòng)態(tài)光場(chǎng)重建優(yōu)勢(shì)在于重建人物的幾何模型同時(shí)

還可一次性獲取動(dòng)態(tài)的人物模型數(shù)據(jù)，

并高品質(zhì)重現(xiàn)不同視角下觀看人體的光影效果

。AI建模目前已經(jīng)初步實(shí)現(xiàn)產(chǎn)品化，目前精度可以達(dá)到次世代游戲人物級(jí)別，優(yōu)勢(shì)是可以開放程序接口，對(duì)接各種應(yīng)用，因此潛力較大，范圍較廣，特別是C端的應(yīng)用，可以通過便捷化的上傳圖片即可生成3D數(shù)字人面部模型。未來發(fā)展方向是通過算法驅(qū)動(dòng)提高精度，優(yōu)化建模效果，比如：偏移矯正、陰影修復(fù)等。2.1

建模技術(shù)發(fā)展推動(dòng)超寫實(shí)數(shù)字人制作門檻、成本和周期進(jìn)一步下降趨勢(shì)減低建模時(shí)間PAGE/

26光場(chǎng)是三維世界中光線集合的完備表示，包含光的位置、方向、光譜、時(shí)間等七個(gè)維度信息，采集并顯示光場(chǎng)就能在視覺上重現(xiàn)真實(shí)世界。數(shù)字人光場(chǎng)建模就是利用多角度攝像機(jī)、多角度光源模擬拍攝真人各種條件下的影像，解算人體表面形貌特性的技術(shù)?；驹恚喝四樒つw反射（I）與反照率（k）入射光方向（L）與皮膚反射方向（n）相關(guān)，符合I=kLn的關(guān)系。拍攝時(shí)，光場(chǎng)設(shè)備模擬x,y,z三個(gè)方向不同偏振態(tài)（或RGB不同色彩光照）的球形梯度光照拍攝人臉，采集不同偏振態(tài)的數(shù)據(jù)。由于梯度光照的對(duì)稱性，可以簡(jiǎn)化多光源的共同作用，以I=nC（C為常數(shù)）的公式根據(jù)照片迅速地計(jì)算人臉各處對(duì)入射方向的光線的反射狀況n，即法向信息。梯度光光場(chǎng)可以重建出精確而真實(shí)的多層皮膚材質(zhì)（漫反射材質(zhì)、高光反射材質(zhì)、法向信息），讓渲染出的人臉皮膚展現(xiàn)出更加逼真的質(zhì)感。光場(chǎng)建模維度提升帶來影視級(jí)數(shù)字人制作周期大幅縮減，AI技術(shù)是未來發(fā)展重點(diǎn)影眸面部光場(chǎng)掃描系統(tǒng) 大型光場(chǎng)系統(tǒng)相機(jī)陣列系統(tǒng)數(shù)字人制作周期：1-2月上?？萍即髮W(xué)相機(jī)陣列系統(tǒng)硬件系統(tǒng)高分辨率相機(jī)陣列+頻閃光源系統(tǒng)功能重建數(shù)字人三維模型重建數(shù)字人紋理貼圖系統(tǒng)指標(biāo)計(jì)算速度：<1小時(shí)/表情重建精度：毫米級(jí)，面部結(jié)構(gòu)->毛孔多維光場(chǎng)重建數(shù)字人制作周期：1周（不含精修時(shí)間）硬件系統(tǒng)高分辨率攝像機(jī)陣列+變光照光源系統(tǒng)功能重建數(shù)字人三維模型、紋理貼圖、法線貼圖、材質(zhì)貼圖、動(dòng)態(tài)網(wǎng)格系統(tǒng)指標(biāo)計(jì)算速度：<1小時(shí)/表情重建精度：亞毫米級(jí)，毛孔->皮膚噪波光場(chǎng)未來研究重點(diǎn)：AI加持、數(shù)據(jù)驅(qū)動(dòng)與神經(jīng)渲染技術(shù)結(jié)合的重建技術(shù)目標(biāo)更簡(jiǎn)單的硬件設(shè)備、更高的精細(xì)度、更豐富的材質(zhì)信息可驅(qū)動(dòng)、可重打光、可編輯代表工作Google｜帶動(dòng)態(tài)材質(zhì)的體積攝影技術(shù)Therelightables:Volumetricperformancecaptureofhumanswithrealistic

relighting,SIGGRAPH2019影眸科技｜AI驅(qū)動(dòng)的面部材質(zhì)與幾何資產(chǎn)Video-drivenNeuralPhysically-basedFacialAssetforProduction,SIGGRAPHasia

2022上?？萍即髮W(xué)｜神經(jīng)渲染相結(jié)合的可驅(qū)動(dòng)重建HumanPerformanceModelingandRenderingviaNeuralAnimatedMesh,ACMSIGGRAPH2022Meta｜手機(jī)掃描的CodecAvatar生成AuthenticVolumetricAvatarsfromaPhoneScan,ACMTOG41.4(2022):

1-19.PAGE/

27趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升布料仿真一直是CG動(dòng)畫中的研究熱點(diǎn)與難點(diǎn)，對(duì)提高動(dòng)畫質(zhì)量以及用戶體驗(yàn)具有重要意義。虛擬世界中虛擬角色強(qiáng)烈的視覺真實(shí)感主要來源于逼真的虛擬人物的服裝動(dòng)畫，布料的仿真程度很大程度上可以增強(qiáng)用戶的體驗(yàn)感。將服裝通過骨骼綁定驅(qū)動(dòng)的方式是市場(chǎng)上最為常見的應(yīng)用方式。這種應(yīng)用方式下，數(shù)字服裝作為剛性物體被驅(qū)動(dòng)，只能進(jìn)行拉伸，好處是對(duì)于服裝解算沒有算力消耗，因此，更常見于實(shí)時(shí)互動(dòng)應(yīng)用中?；谖恢玫膭?dòng)力學(xué)(Position

Based

Dynamics,PBD)技術(shù)，面數(shù)較大容易出現(xiàn)網(wǎng)格穿模，動(dòng)力學(xué)表現(xiàn)生硬，且較難區(qū)分不同面料質(zhì)感的物理差異，修型的工作量極大，單件服裝的效果調(diào)優(yōu)無(wú)法被負(fù)責(zé)且較難體現(xiàn)布料細(xì)節(jié)褶皺。物理仿真算法的服裝動(dòng)力學(xué)解算能夠無(wú)限接近真實(shí)世界的服裝表現(xiàn)，能夠很好的表達(dá)服裝的物理質(zhì)感，服裝與人體的關(guān)系，同時(shí)也不依賴于美術(shù)的高復(fù)雜且繁重的美術(shù)工作，但是過于依賴端的計(jì)算能力，移動(dòng)端只能夠通過云端服務(wù)器的計(jì)算然后進(jìn)行數(shù)據(jù)網(wǎng)絡(luò)傳輸，進(jìn)而對(duì)網(wǎng)絡(luò)傳輸速度也有了極高的要求?；贏I算法的服裝動(dòng)態(tài)模擬在學(xué)術(shù)上有所表現(xiàn)，但是成熟度較低，目前無(wú)法較好的處理多層級(jí)服裝的效果解算，服裝的細(xì)節(jié)表現(xiàn)也較弱，但是仍有較大的潛力與可能性。2.2

物理仿真算法迭代推動(dòng)服裝動(dòng)態(tài)展示趨向真實(shí)類型仿真程度仿真速度算力開銷數(shù)據(jù)依賴骨骼綁定無(wú)快無(wú)無(wú)position-based

dynamics（PBD）缺乏物理意義較快適合移動(dòng)端，面數(shù)大問題明顯無(wú)Physically-based

Simulation物理仿真基本接近真實(shí)物理效果較慢應(yīng)用開銷大無(wú)AI仿真有一定物理意義較快訓(xùn)練開銷大，應(yīng)用開銷尚可提前進(jìn)行大量數(shù)據(jù)訓(xùn)練PAGE/

28趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升渲染是對(duì)3D數(shù)字人或虛擬場(chǎng)景加入幾何、視點(diǎn)、紋理、照明和陰影等信息從而達(dá)成從模型到圖像的轉(zhuǎn)變，渲染決定了最終數(shù)字人的質(zhì)量，而渲染引擎和GPU算力的發(fā)展推動(dòng)數(shù)字人渲染更加信息和實(shí)時(shí)化。目前離線渲染比較成熟，應(yīng)用較為廣泛。而實(shí)時(shí)渲染尚有提升空間，伴隨GPU算力的不斷提升和渲染引擎的優(yōu)化，將推動(dòng)實(shí)時(shí)渲染的速度和真實(shí)度，未來實(shí)時(shí)渲染技術(shù)的發(fā)展也為數(shù)字人的實(shí)時(shí)交互提供了極大助力。主流的3D

渲染引擎UnrealEngine和Unity3D版本不斷迭代，推動(dòng)數(shù)字人皮膚紋理、3D

效果、質(zhì)感和細(xì)節(jié)等方面渲染效果更佳，同時(shí)生產(chǎn)效率更高。2.3

渲染引擎迭代和GPU算力提升推動(dòng)數(shù)字人畫面更加精細(xì)和實(shí)時(shí)化趨勢(shì)渲染方式離線渲染實(shí)時(shí)渲染定義在計(jì)算出畫面時(shí)并不顯示畫

面，計(jì)算機(jī)根據(jù)預(yù)先定義好的光線軌跡渲染圖片，

渲染完成后再將圖片連續(xù)播放，實(shí)現(xiàn)動(dòng)畫效果圖形數(shù)據(jù)實(shí)時(shí)計(jì)算與輸出，每一幀都是針對(duì)當(dāng)時(shí)實(shí)際的環(huán)境光源、相機(jī)位置和材質(zhì)參數(shù)計(jì)算出的圖像渲染時(shí)間長(zhǎng)，花費(fèi)幾十分鐘甚至更長(zhǎng)時(shí)間

渲染一幀畫面短，每秒至少渲染30幀計(jì)算資源多，受時(shí)效限制有限，可臨時(shí)調(diào)配更多計(jì)算資源少，受限于時(shí)效要求，計(jì)算資源一般不能及時(shí)調(diào)整渲染質(zhì)量高中數(shù)字人交互無(wú)無(wú)交互/有交互數(shù)字人文件格式視頻視頻或程序優(yōu)缺點(diǎn)強(qiáng)調(diào)“美學(xué)和視覺效果”，主要優(yōu)點(diǎn)是渲染時(shí)可以不考慮時(shí)間對(duì)渲染效果的影響缺點(diǎn)是渲染畫面播放時(shí)用戶不能實(shí)時(shí)控制物體和場(chǎng)景強(qiáng)調(diào)“交互性和實(shí)時(shí)性”，

優(yōu)點(diǎn)是可以實(shí)時(shí)操控，缺點(diǎn)是要受系統(tǒng)的負(fù)荷能力的限制，必要時(shí)要犧牲畫面效果

(模型的精細(xì)、光影的應(yīng)用、貼圖的精細(xì)程度)來滿足實(shí)時(shí)系統(tǒng)的要

求。應(yīng)用領(lǐng)域廣告營(yíng)銷/影視等預(yù)先設(shè)計(jì)好的模式的演示直播/行業(yè)數(shù)字客服/游戲等無(wú)預(yù)定腳本場(chǎng)景算力是渲染質(zhì)量和實(shí)時(shí)性的根本驅(qū)動(dòng)力1998年2002年2005年2007年2009年2010年2011年2012年2014年2015年2016年2017年2018年2019年2020年2021年2022年UE1UE2UE3UE4UE5Unity2017Unity2018Unity20191、UE4

采用了目前最新的即時(shí)光跡追蹤、HDR

光照、虛擬位移等新技術(shù)，而且能夠每秒鐘實(shí)時(shí)運(yùn)算兩億個(gè)多邊形運(yùn)算，效能是目前“UnrealEngine”的100倍，而通過NVIDIA的

GeForce6800顯示卡與“UnrealEngine3”3D引擎的搭配，可以實(shí)時(shí)運(yùn)算出電影CG等級(jí)的畫面。2、重新設(shè)計(jì)了整個(gè)架構(gòu),

對(duì)移動(dòng)平臺(tái)提供了更好的支持,

UE4廢棄了UnrealScript,

統(tǒng)一使用C++開發(fā),

并革命性的引入了代碼的熱更新。1、UE3整合了由

Ageia

所提供的“NovodeX”物理模擬技術(shù)，讓展示場(chǎng)景中的對(duì)象呈現(xiàn)出如同實(shí)際物體般的反應(yīng)，像是彎曲、抖動(dòng)、晃動(dòng)、碰撞、彈跳

等，并以常見的連鎖機(jī)關(guān)方式來展示這些真實(shí)物理反應(yīng)模擬所能做到的效果。2、UE3引擎的進(jìn)步之處在于在游戲的制作階段，引擎可以支持制作人員創(chuàng)建一個(gè)數(shù)百萬(wàn)多邊形組成的超精細(xì)模型，并對(duì)模型進(jìn)行細(xì)致的渲染，從而得到一張高品質(zhì)的法線貼圖，這張法線貼圖中記錄了高精度模型的所有光照信息和通道信息。Unity1.0 Unity2.01、Unity簡(jiǎn)化了對(duì)象的創(chuàng)建，尤其是分層的對(duì)象結(jié)構(gòu)和依賴，并簡(jiǎn)化了應(yīng)用程序代碼。2、支持需求的抽象，這允許開發(fā)人員在運(yùn)行時(shí)或者配置中指定依賴，并簡(jiǎn)化了橫切關(guān)注點(diǎn)的管理。3、通過延遲將配置組裝到容器來提高靈活性。4、服務(wù)定位功能允許客戶代碼保存或者緩存容器。這在開發(fā)人員可以持久化容器到

ASP.NETSession或者Application

中的

ASP.NET

Web

應(yīng)用程序中特別有用。Unity3.0 Unity

4.01、在

Unity

3.0

版本中（2013年），新增了基于約定的自動(dòng)注冊(cè)機(jī)制（RegistrationBy

Convention），以使

Unity

容器的裝配過程變得更加簡(jiǎn)單，并且減少冗余代碼。2、Unity

3提供一個(gè)新的延時(shí)光照系統(tǒng)，支持在場(chǎng)景中實(shí)現(xiàn)上百個(gè)點(diǎn)光源。同時(shí)開放了延時(shí)光照需要的G-Buffers，開發(fā)者可以重用到其他高端圖片效果上，而沒有額外的性能損失。Unity5.01、Unity

5.0

物理系統(tǒng)的預(yù)計(jì)工作速度是以前版本的

2

倍，基于物理的標(biāo)準(zhǔn)著色器使材質(zhì)在任何照明環(huán)境中看起來一致?；?/p>

GeomericsEnlighten

技術(shù)的實(shí)時(shí)全局照明。音頻混合器，可大幅改善游戲中的音頻。2、Unity

5.0

中，Cloth

不再對(duì)場(chǎng)景中的所有碰撞器做出反應(yīng)，也不再將力應(yīng)用回世界。相反有一個(gè)更快、多線程、更穩(wěn)定的角色服裝解決方案。當(dāng)添加它時(shí)，新的

Cloth

組件不再對(duì)任何物體做出反應(yīng)。圖形、網(wǎng)絡(luò)和文件系統(tǒng)集成為一個(gè)完整的引擎。初代虛幻引擎將渲

將《虛幻競(jìng)技場(chǎng)2004》染、碰撞偵測(cè)、AI、

中改進(jìn)載具模擬的Karmaphysics

SDK集成在一起，也強(qiáng)化了許多元素。UnityUE1、UE5主要是做了兩大核心功能的更新，第一個(gè)是Nanite（虛擬微多邊形幾何體技術(shù)）以及l(fā)umen（流明技術(shù)）。流明技術(shù)（lumen）是虛幻五的全動(dòng)態(tài)實(shí)時(shí)光照解決方案核心亮點(diǎn)，不需要性能強(qiáng)勁的顯卡，也不用場(chǎng)景預(yù)渲染，就可以達(dá)到類似于光線追蹤的實(shí)時(shí)效果。多邊形虛擬化技術(shù)（Nanite）可以被實(shí)時(shí)流送和縮放，無(wú)需再考慮多邊形數(shù)量預(yù)算、多邊形內(nèi)存預(yù)算或繪制次數(shù)預(yù)算了；也不用再將細(xì)節(jié)烘焙到法線貼圖或手動(dòng)編輯LOD，畫面質(zhì)量不會(huì)再有絲毫損失。2、虛幻5成本小，效率更高，效果更好，更加人性化，更加智能。Unity2020 Unity2021 Unity20221、Unity

2022.1中最大的變化之一是新的材質(zhì)變體系統(tǒng)，它適用于HDRP和URP渲染管線，它允許藝術(shù)家創(chuàng)建材質(zhì)模板，其中子材質(zhì)與父材質(zhì)共享公共屬性，并僅覆蓋那些不同的屬性。2、Unity

2022.1引入了一個(gè)新的Splines包，包括在Unity編輯器中創(chuàng)建和操作樣條線所需的工具，以及自定義這些工具所需的框架，它是一個(gè)通用工具集，用途包括生成用于3D建模的基本曲線、創(chuàng)建動(dòng)畫路徑或在布置環(huán)境時(shí)沿樣條線實(shí)例化預(yù)制件。PAGE/

29類型定位精度傳感器數(shù)量抗遮擋對(duì)場(chǎng)地空間要求移動(dòng)性硬件成本算法難度適用場(chǎng)景光學(xué)動(dòng)捕高高低高低高中電影、動(dòng)畫慣性動(dòng)捕中中高中中中低電視臺(tái)節(jié)目激光+慣性動(dòng)捕高中高中中中中影視、訓(xùn)練、虛擬直播視頻動(dòng)捕低無(wú)無(wú)低高低高虛擬直播動(dòng)作捕捉是指通過數(shù)字手段記錄現(xiàn)實(shí)中的運(yùn)動(dòng)過程，特點(diǎn)是動(dòng)作靈活、互動(dòng)效果覺好，多用于內(nèi)容/IP型數(shù)字人，場(chǎng)景多為直播、路演等互動(dòng)性活動(dòng)，其本質(zhì)上是傳統(tǒng)影視制作CG技術(shù)的演進(jìn)，目前主流的方式是光學(xué)動(dòng)捕和慣性動(dòng)捕，而基于計(jì)算機(jī)視覺的視頻動(dòng)捕發(fā)展速度較快。此外，多種方式相結(jié)合的混合動(dòng)捕方式也是未來重要的發(fā)展方向，如光學(xué)動(dòng)捕和慣性動(dòng)捕的結(jié)合，視覺動(dòng)捕和VR頭顯/手柄的結(jié)合等。光學(xué)動(dòng)捕是最早出現(xiàn)的動(dòng)捕技術(shù)，同時(shí)發(fā)展也最為成熟，需要多個(gè)專業(yè)動(dòng)捕攝像機(jī)結(jié)合穿動(dòng)捕服的中之人。未來會(huì)向?qū)I(yè)化和便捷化兩個(gè)方向發(fā)展：專業(yè)化方向，將實(shí)現(xiàn)更高的分辨率和更遠(yuǎn)的探測(cè)距離，動(dòng)作的還原度更高，更加逼真和穩(wěn)定，同時(shí)將數(shù)據(jù)在云上處理；便捷化方向?qū)⒑鸵曨l動(dòng)捕趨同，采用數(shù)量較少的消費(fèi)級(jí)攝像頭，無(wú)需穿戴設(shè)備。慣性動(dòng)捕是采用傳感器結(jié)合算法的方式，由于精度較高，對(duì)場(chǎng)地要求適中，因此是B端主流方式，未來伴隨算法的不斷完善，傳感器數(shù)量將呈下降趨勢(shì)，對(duì)中之人和場(chǎng)地的限制也會(huì)越來愈少

。激光+慣性動(dòng)捕方式，采用激光傳感器結(jié)合慣性傳感器的方式，對(duì)抗電磁干擾能力強(qiáng)，可連續(xù)24小時(shí)穩(wěn)定工作，適合大空間內(nèi)動(dòng)捕定位，未來向更低使用門檻發(fā)展。視覺動(dòng)捕顯著降低了使用門檻，從最初的利用深度攝像頭，到利用多目攝像頭到現(xiàn)在的利用單目普通攝像頭，對(duì)設(shè)備的要求逐漸降低，未來發(fā)展方向是在C端不斷提高定位精度和準(zhǔn)確度，適用于UGC的使用場(chǎng)景。另一發(fā)展方向是通過增加攝像頭的數(shù)量，向?qū)I(yè)化發(fā)展，與光學(xué)動(dòng)捕中便捷化發(fā)展趨勢(shì)趨同。趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升2.4

算法的優(yōu)化推動(dòng)專業(yè)動(dòng)捕設(shè)備趨向便捷化，視覺動(dòng)捕在C端應(yīng)用潛力更大兩者發(fā)展方向趨同慣性動(dòng)捕光學(xué)動(dòng)捕視覺動(dòng)捕更高的分辨率和更遠(yuǎn)的探測(cè)距使用消費(fèi)級(jí)別攝像頭，無(wú)需穿戴設(shè)備增加攝像頭數(shù)量，提高精度利用單目攝像頭和手機(jī)算力傳感器數(shù)量下降專業(yè)化便捷化專業(yè)化便捷化專業(yè)化便捷化發(fā)展方向激光+慣性動(dòng)捕更多的激光發(fā)射器和傳感器穿戴方便、零校準(zhǔn)、低使用成本PAGE/

30趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升2.5

面部捕捉技術(shù)向更簡(jiǎn)單的硬件、更細(xì)膩的表情、更自動(dòng)化的流程方向發(fā)展驅(qū)動(dòng)一個(gè)數(shù)字人往往被拆分為追蹤(Tracking)與重定向(Retargeting)兩個(gè)環(huán)節(jié)。追蹤由專業(yè)的面部捕捉設(shè)備及其輔助算法完成，負(fù)責(zé)記錄演員的面部動(dòng)作信息，重定向則是將捕捉到的面部動(dòng)作信息遷移到新的角色。追蹤：從傳統(tǒng)計(jì)算機(jī)視覺算法到基于深度學(xué)習(xí)的方案 重定向：從藝術(shù)家手工綁定到自動(dòng)綁定方案硬件：多目紅外攝像頭/深度傳感器裝備：面捕頭盔+面部標(biāo)記點(diǎn)（也有一些不需要標(biāo)記點(diǎn)）主要原理：基于傳統(tǒng)計(jì)算機(jī)視覺的關(guān)鍵點(diǎn)追蹤、雙目視覺技術(shù)、結(jié)構(gòu)光技術(shù)備注：由于采用傳統(tǒng)算法，對(duì)輸入內(nèi)容的質(zhì)量比較嚴(yán)苛，所以往往要求更好的硬件與光照環(huán)境（紅外）或者額外的深度信息作為輔助，成本居高不下硬件：?jiǎn)文繑z像頭裝備：面捕頭盔/手機(jī)主要原理：在二維、三維數(shù)據(jù)集上，通過可微分渲染、深度學(xué)習(xí)等技術(shù)實(shí)現(xiàn)備注：基于深度學(xué)習(xí)的算法對(duì)輸入數(shù)據(jù)具有更強(qiáng)的魯棒性，對(duì)捕捉設(shè)備的要求有所下降；同時(shí)，由于神經(jīng)網(wǎng)絡(luò)出色的表達(dá)性能，能夠更準(zhǔn)確的對(duì)微表情進(jìn)行捕捉?；谕ㄓ霉趋烂善ぁ?/p>

BlendShape的綁定方案+藝術(shù)家手動(dòng)調(diào)整的綁定方案（如：使用MetaHuman骨骼蒙皮遷移、Mesh

to

MetaHuman）參照掃描表情拆分BlendShape或骨骼蒙皮（影視級(jí)數(shù)字替身常用制作方案，如：《雙子殺手》）基于肌肉模擬仿真完成面部驅(qū)動(dòng)（如：ZIVA

DYNAMICS）不符合真人本人表情對(duì)藝術(shù)家水平要求高工作量極大難以實(shí)時(shí)解算Data

driven的面部綁定依據(jù)，如依靠4D連續(xù)幀數(shù)據(jù)與追蹤算法強(qiáng)關(guān)聯(lián)的自動(dòng)化綁定具有解剖學(xué)依據(jù)，符合肌肉動(dòng)力學(xué)采用更高級(jí)別的表達(dá)方式還原微表情，如BlendShape與骨骼混合，甚至是神經(jīng)網(wǎng)絡(luò)的隱式表達(dá)實(shí)時(shí)影眸科技最新微表情級(jí)面部捕捉技術(shù)，使用神經(jīng)網(wǎng)絡(luò)對(duì)4D數(shù)據(jù)進(jìn)行學(xué)習(xí)代替?zhèn)鹘y(tǒng)綁定，計(jì)算機(jī)圖形學(xué)頂會(huì)SIGGRAPH

Asia

2022接收為Technical

Paper

-Journal

Track并受邀作報(bào)告分享。量子動(dòng)力推出AVATARY綁定系統(tǒng)。AutoFace和Rigger功能模塊支持面部表情模型、骨骼和控制器的快捷生成和綁定，完成了從BS生成到骨骼綁定、控制器綁定的流程，高效實(shí)現(xiàn)了面部模型的生成和綁定。ZIVA

DYNAMICS推出ZIVAFACE

TRAiNER在線Sass服務(wù)，通過4D掃描技術(shù)得到的訓(xùn)練數(shù)據(jù)，使用機(jī)器學(xué)習(xí)技術(shù)實(shí)現(xiàn)自動(dòng)化綁定。傳統(tǒng)方式發(fā)展趨勢(shì)傳統(tǒng)方式發(fā)展趨勢(shì)PAGE/

31數(shù)字人技術(shù)擴(kuò)散，數(shù)字人各項(xiàng)技術(shù)如動(dòng)捕、布料仿真等，在數(shù)字人制作過程中發(fā)揮重要作用外，也溢出到其他產(chǎn)業(yè)，發(fā)揮重要作用動(dòng)作捕捉技術(shù)在擊劍訓(xùn)練中使用，定位精確輔助訓(xùn)練設(shè)備，解決了以往視頻分析等手段中存在的實(shí)時(shí)性問題，能對(duì)運(yùn)動(dòng)員的身體狀態(tài)、運(yùn)動(dòng)機(jī)能等關(guān)鍵要素直觀、可視化地展示，從而幫助教練與選手展開個(gè)性化、精準(zhǔn)化的訓(xùn)練。動(dòng)作捕捉技術(shù)和布料仿真等技術(shù)在服裝設(shè)計(jì)過程中可以還原人體尺寸和動(dòng)態(tài)效果，使服裝的設(shè)計(jì)無(wú)需經(jīng)過實(shí)物打樣生產(chǎn)制作，即可通過數(shù)字人及其一系列動(dòng)態(tài)來直觀反映服裝設(shè)計(jì)的設(shè)計(jì)美感與工業(yè)適配性。通過工業(yè)孿生的數(shù)字人和服裝，降低服裝設(shè)計(jì)開發(fā)的成本和周期。Style3D

凌迪科技將布料仿真技術(shù)應(yīng)用于服裝設(shè)計(jì)影眸科技聯(lián)合上?？萍即髮W(xué)、上海市第九人民醫(yī)院合力構(gòu)建了符合解剖學(xué)規(guī)則的參數(shù)化人臉生成模型SCULPTOR,

它對(duì)頭骨、臉部幾何形狀和臉部外觀進(jìn)行聯(lián)合建模，僅通過一張照片/一個(gè)人臉模型即可推測(cè)角色骨骼形狀，并以此為依據(jù)進(jìn)一步調(diào)整角色相貌；該技術(shù)將被應(yīng)用于數(shù)字人創(chuàng)作、整形預(yù)測(cè)等多個(gè)方向，為文化娛樂與醫(yī)療美容行業(yè)提供技術(shù)解決方案。國(guó)承萬(wàn)通將動(dòng)作捕捉技術(shù)應(yīng)用于機(jī)器人驅(qū)動(dòng)，解決了以往在開放環(huán)境中，機(jī)器人末端難以通過傳感器實(shí)現(xiàn)空間精準(zhǔn)定位的問題，在現(xiàn)有機(jī)器人感知框架內(nèi)，能夠訓(xùn)練機(jī)器人細(xì)節(jié)精準(zhǔn)抓取的動(dòng)作，從而幫助服務(wù)型機(jī)器人更快的走進(jìn)千家萬(wàn)戶，徹底提升人們的生活品質(zhì)。國(guó)承萬(wàn)通將動(dòng)捕應(yīng)用于機(jī)器人驅(qū)動(dòng)PAGE/

32趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升目前2D數(shù)字人的定制自動(dòng)化程度逐步提升，通過定制管線可完成從訓(xùn)練到播報(bào)、交互應(yīng)用平臺(tái)的上架。2.6

伴隨數(shù)字人制作流程更加管線化和智能化，制作效能不斷提升2、數(shù)據(jù)采集&錄制4、AI模型訓(xùn)練-文本&聲音驅(qū)動(dòng)數(shù)字人5、工程開發(fā)&測(cè)試上線騰訊2D數(shù)字人自動(dòng)化管線生產(chǎn)流程3、自動(dòng)化數(shù)據(jù)標(biāo)注、預(yù)處理專業(yè)影棚錄制的視頻，經(jīng)過AI自動(dòng)訓(xùn)練即生成用于播報(bào)&交互、動(dòng)作可配的專業(yè)數(shù)智人，用于業(yè)務(wù)辦理、信息咨詢、主播等場(chǎng)景。3分鐘視頻素材經(jīng)過天級(jí)別的AI訓(xùn)練，便可生成各行各業(yè)的數(shù)智人分身，適用于內(nèi)容講解、口播視頻生產(chǎn)、直播帶貨等場(chǎng)景

。1、模特人選及妝發(fā)確定PAGE/

33趨勢(shì)2：技術(shù)集綜合迭代驅(qū)動(dòng)數(shù)字人形似人，制作效能將繼續(xù)提升3D數(shù)字人制作涉及眾多技術(shù)領(lǐng)域、制作方法尚未完全定型，自動(dòng)化程度相對(duì)較低，需要大量的人工參與，高效率的生產(chǎn)高質(zhì)量難度較大，目前領(lǐng)域內(nèi)部正通過管線化生產(chǎn)的方式對(duì)生產(chǎn)流程進(jìn)行標(biāo)準(zhǔn)化，以提升制作效能。未來將在管線化生產(chǎn)的基礎(chǔ)上，通過算法優(yōu)化和更加便利的工具，如自動(dòng)化的骨骼和表情綁定工具，使制作更加簡(jiǎn)單化和一體化，特別通過AI技術(shù)提升制作的智能化水平，減少人工參與編輯和調(diào)優(yōu)。2.6

伴隨數(shù)字人制作流程更加智能化和管線化，制作效能不斷提升傳統(tǒng)手工建模方式制作數(shù)字人典型管線3D+4D掃描 數(shù)據(jù)采集及處理 皮膚材質(zhì)渲染 毛發(fā)拓?fù)?眼珠及瞳孔結(jié)構(gòu)制作 模型精修及多層渲染前期以超高的精度與超快的速度動(dòng)態(tài)掃描面部材質(zhì)、捕捉表情變化時(shí)的肌肉運(yùn)動(dòng)，基于微米級(jí)面部光場(chǎng)掃描，輸出精細(xì)到皮膚微結(jié)構(gòu)的逐幀面部幾何與材質(zhì)，并快速完成臉部細(xì)節(jié)精修、材質(zhì)制作、毛發(fā)制作及瞳孔制作，重拓?fù)浜笸渡渲脫Q貼圖，令虛擬人模型達(dá)到噪波級(jí)細(xì)致的毛孔以及超高度的皮膚質(zhì)感與精度。將超寫實(shí)數(shù)字人制作周期提速到3-4周左右（沒有動(dòng)捕和表情）1.選擇已有形象模版 2.形象創(chuàng)作 3.選擇頭發(fā) 4.選擇體型及服裝 5.

在UE中下載MetaHuman資產(chǎn)通過快速和容易地創(chuàng)建獨(dú)特高保真的數(shù)字人類的工具，直接操縱面部特征，調(diào)整膚色，并且從預(yù)設(shè)的身體類型、發(fā)型、服飾等范圍中選擇，在角色制作完成后，會(huì)包含完整的綁定并可以直接在虛幻引擎或者maya中制作動(dòng)畫。光場(chǎng)掃描方式制作數(shù)字人典型管線白模制作 面部修型 眼部修型 毛發(fā)制作 衣服制作綁定/材質(zhì)貼圖 光影精調(diào)采用Maya技術(shù)精確塑造模型，結(jié)合虛幻引擎技術(shù)渲染材質(zhì)，塑造高質(zhì)量寫實(shí)模型。同時(shí)采用綁定系統(tǒng)，高效完成人體肌肉搭建及口型精準(zhǔn)制作；配給布料物理專業(yè)人才，同時(shí)采用全套捕捉系統(tǒng)，解決動(dòng)捕過程中肢體動(dòng)作及服飾動(dòng)感等技術(shù)難題，使得虛擬人迅速投入商業(yè)場(chǎng)景的應(yīng)用。一站式制作數(shù)字人典型管線資產(chǎn)制作管線AI驅(qū)動(dòng)中之人驅(qū)動(dòng)PAGE/

34騰訊NExT

Studios自研xMoCap?3A級(jí)動(dòng)捕動(dòng)畫全流程管線和xFaceBuilder

?數(shù)字角色制作管線PAGE/

35騰訊NExT

Studios自研的xMoCap?

3A級(jí)動(dòng)捕動(dòng)畫全流程管線集角色綁定、動(dòng)作捕捉、動(dòng)畫工具、資產(chǎn)管理及動(dòng)捕數(shù)據(jù)庫(kù)為一體，支持大型團(tuán)隊(duì)協(xié)作、云端海量資產(chǎn)管理、高保真3D角色動(dòng)畫生產(chǎn)，符合3A游戲的開發(fā)需求。騰訊NExT

Studios自研的xFaceBuilder?

數(shù)字角色制作管線通過極致的算法優(yōu)化，便利工具的研發(fā)，提升了高保真人臉制作效率，打磨成了一套影視級(jí)別的建模、綁定、動(dòng)畫在內(nèi)的高保真人臉制作全流程管線，可以運(yùn)行于手機(jī)，主機(jī)，PC等平臺(tái)。不僅支持從手游到3A游戲角色的不同制作標(biāo)準(zhǔn)，也應(yīng)用到了影視、科教等更多領(lǐng)域。趨勢(shì)3：

AI技術(shù)驅(qū)動(dòng)數(shù)字人多模態(tài)交互更神似人，并逐步覆蓋數(shù)字人全流程目前主流方式是圍繞NLP技術(shù)進(jìn)行文本驅(qū)動(dòng)，

NLP是數(shù)字人的大腦，直接影響交互體驗(yàn)。CV決定數(shù)字人面部表情和肢體動(dòng)作。目前聲唇同步技術(shù)相對(duì)完善。自然語(yǔ)言處理（NLP）計(jì)算機(jī)視覺（CV）數(shù)字人神似人人的外觀數(shù)字形似人人的思想人的行為（AI驅(qū)動(dòng)表情動(dòng)作）PAGE/

36趨勢(shì)3：

AI技術(shù)驅(qū)動(dòng)數(shù)字人多模態(tài)交互更神似人，并逐步覆蓋數(shù)字人全流程當(dāng)前數(shù)字人對(duì)語(yǔ)言理解還是以文本為主，動(dòng)作合成上聲唇同步較為完善：AI驅(qū)動(dòng)數(shù)字人是指數(shù)字人等語(yǔ)音表達(dá)、面部表情和動(dòng)作形態(tài)等通過深度學(xué)習(xí)模型進(jìn)行運(yùn)算，并將其結(jié)果實(shí)時(shí)或者離線驅(qū)動(dòng)，并進(jìn)行渲染。目前主流的方式是圍繞NLP能力通過文本驅(qū)動(dòng)，本質(zhì)是通過ASR-NLP-TTS等AI技術(shù)進(jìn)行感知-決策-表達(dá)的閉環(huán)來驅(qū)動(dòng)數(shù)字人交互，同時(shí)需要預(yù)先設(shè)置相關(guān)的知識(shí)圖譜或問答庫(kù)等，與數(shù)字人的對(duì)話系統(tǒng)對(duì)接，但目前NLP在通用性場(chǎng)景的能力還需要進(jìn)一步完善。計(jì)算機(jī)視覺(CV）目前數(shù)字人聲唇同步技術(shù)相對(duì)完善，在游戲中已經(jīng)大量應(yīng)用；而其他表情和動(dòng)作還需要描述性的數(shù)據(jù)或者標(biāo)簽驅(qū)動(dòng)，尚未智能合成，表情動(dòng)作也是是AI驅(qū)動(dòng)未來發(fā)展的重點(diǎn)方向。技術(shù)階段作用和目的發(fā)展趨勢(shì)語(yǔ)音理解ASR感知階段將人的語(yǔ)音轉(zhuǎn)換為文本相對(duì)成熟NLP決策階段處理并理解文本，以對(duì)話能力為核心，為數(shù)字人的大腦配合知識(shí)圖譜，應(yīng)用于特定場(chǎng)景，未來通用型模型還需要完善TTS表達(dá)階段將需要輸出的文本合成為語(yǔ)音相對(duì)成熟，未來方向增加斷句、多音字的準(zhǔn)確度，增加情感，更加似人動(dòng)作合成AI驅(qū)動(dòng)嘴形動(dòng)作表達(dá)階段建立輸入文本到輸出音頻與輸出視覺信息的關(guān)聯(lián)映射，主要是對(duì)采集到的文本到語(yǔ)音和嘴形視頻（2D）/嘴形動(dòng)畫（3D）的數(shù)據(jù)進(jìn)行模型訓(xùn)練，得到相關(guān)模型，并智能合成隨著寫實(shí)度的提高，微表情更多，超寫實(shí)對(duì)精度要求更高，超寫實(shí)還需要進(jìn)一步完善AI驅(qū)動(dòng)其他動(dòng)作表達(dá)階段動(dòng)作是采用隨機(jī)策略或者腳本進(jìn)行預(yù)設(shè)，需要人工配制描述性的數(shù)據(jù)或者標(biāo)簽尚未實(shí)現(xiàn)智能合成騰訊AI

Lab的數(shù)字人AI口型驅(qū)動(dòng)技術(shù)已經(jīng)應(yīng)用到《重返帝國(guó)》、《代號(hào)破曉》等多款游戲中，其中大量游戲角色的臉部口型動(dòng)畫都是通過AI技術(shù)自動(dòng)生成《重返帝國(guó)》游戲畫面 《代號(hào)破曉》游戲畫面騰訊智影平臺(tái)聯(lián)合《王者榮耀》，實(shí)現(xiàn)《王者榮耀》自有IP為2022KPL春季賽提供手語(yǔ)解說。當(dāng)天觀賽人數(shù)突破1300萬(wàn)；后續(xù)該能力也將作為王者賽事的通用能力，輸出到包括世冠在內(nèi)的多個(gè)國(guó)際及海外賽事中。PAGE/

37趨勢(shì)3：

AI技術(shù)驅(qū)動(dòng)數(shù)字人多模態(tài)交互更神似人，并逐步覆蓋數(shù)字人全流程多模態(tài)AI技術(shù)是未來數(shù)字人發(fā)展的最大推動(dòng)力，驅(qū)動(dòng)數(shù)字人“思想”更像人：未來AI技術(shù)的重點(diǎn)方向是在輸入端實(shí)現(xiàn)多模態(tài)感知輸入，在輸出端提升多模態(tài)交互能力，綜合提升數(shù)字人的表現(xiàn)力，從目前的基于文本的交互，轉(zhuǎn)化為基于語(yǔ)義的交互，特別是需要強(qiáng)化對(duì)人情緒的感知和表達(dá)。注：黑色部分為近期和中期目標(biāo)，紅色部分是AI發(fā)展中長(zhǎng)期方向AI驅(qū)動(dòng)數(shù)字人未來發(fā)展方向示意圖多種喚醒方式肢體動(dòng)作面部表情口型聲音聲唇同步圖像空間感知肢體感知表情感知AI大腦輸入分析思考……語(yǔ)音語(yǔ)氣語(yǔ)義動(dòng)作信息表情信息情感信息重音位置激動(dòng)程度語(yǔ)言學(xué)特征……輸出多模態(tài)分析模型自主學(xué)習(xí)能力記憶推理和決策能力PAGE/

38高興難過驚訝厭惡生氣害怕常態(tài)可疑常態(tài)生氣害怕難過厭惡驚訝開心懷疑支持多種豐富立體情緒表達(dá)騰訊數(shù)智人強(qiáng)大的形象表現(xiàn)力、識(shí)別力、理解能力和服務(wù)性能語(yǔ)音技術(shù)ASRTTSAI降噪方言識(shí)別視覺技術(shù)人像、環(huán)境識(shí)別捏臉技術(shù)圖像對(duì)比手勢(shì)、表情識(shí)別自然語(yǔ)言處理自然語(yǔ)言生成場(chǎng)景知識(shí)庫(kù)意圖識(shí)別詞槽抽取知識(shí)圖譜知識(shí)定義知識(shí)抽取知識(shí)管理圖譜可視化驅(qū)動(dòng)建模文本驅(qū)動(dòng)人像生成聲音驅(qū)動(dòng)4D建模面捕驅(qū)動(dòng)自動(dòng)綁定動(dòng)捕驅(qū)動(dòng)動(dòng)作遷移情緒特征情緒變化用戶狀態(tài)異常行為知識(shí)問答表格圖譜寒暄庫(kù)信息傳遞會(huì)話AI情緒識(shí)別騰訊3D超寫實(shí)數(shù)智人擁有超細(xì)微的面部表情，超強(qiáng)的情緒表現(xiàn)力，精通多種語(yǔ)言，能夠生動(dòng)地表達(dá)情緒，可以滿足各類場(chǎng)景需求，數(shù)智人有個(gè)性、有情感、更真實(shí)生動(dòng)。騰訊數(shù)智人AI能力示意PAGE/

39趨勢(shì)3：

AI技術(shù)驅(qū)動(dòng)數(shù)字人多模態(tài)交互更神似人，并逐步覆蓋數(shù)字人全流程AI技術(shù)正在覆蓋數(shù)字人制作的全流程：除了利用ASR-NLP-TTS等技術(shù)驅(qū)動(dòng)數(shù)字人交互外，AI技術(shù)也應(yīng)用在2D數(shù)字人的視頻生成、3D數(shù)字人的建模、視頻驅(qū)動(dòng)、物理仿真等多個(gè)環(huán)節(jié)。利用AI技術(shù)，小K視頻動(dòng)捕無(wú)需穿戴任何硬件動(dòng)捕設(shè)備，僅需普通RGB攝像頭即可實(shí)時(shí)高精度捕捉人體身體，手指，表情等全棧3D運(yùn)動(dòng)數(shù)據(jù)；用戶可以方便的驅(qū)動(dòng)數(shù)字人形象進(jìn)行動(dòng)作表達(dá)，極大降低了動(dòng)捕技術(shù)的使用門檻。騰訊云智能利用多模態(tài)合成AI技術(shù)，能通過真人錄制的視頻數(shù)據(jù)快速生成2D真人數(shù)智人，具備與真人無(wú)異的交互和播報(bào)能力。同時(shí)2D真人形象不僅高度還原真人模特，也可通過融合技術(shù)創(chuàng)造世界不存在的形象。視頻驅(qū)動(dòng)：由視頻驅(qū)動(dòng)數(shù)字人的表情和動(dòng)作生成數(shù)字人形象對(duì)于數(shù)字化紡織物制造商來說，以往靠懸臂法來測(cè)試，一塊布條的測(cè)試至少需要15分鐘，凌迪Style3D通過AI技術(shù)將采集速度提升了5倍。布料仿真：通過AI預(yù)測(cè)的方式生成布料形態(tài)、動(dòng)力學(xué)形變物理仿真驅(qū)動(dòng)2D數(shù)字視頻生成：通過視頻和AI算法生成2D數(shù)字人的形象3D數(shù)字人AI

3D建模：通過AI的算法，由視頻自動(dòng)生成3D模型和相關(guān)紋理騰訊AI

Lab提出的通過手機(jī)自拍自動(dòng)創(chuàng)建高保真3D數(shù)字人技術(shù)，用戶可以通過手機(jī)自拍一段臉部視頻，然后將其輸入到三維建模算法和AI推理模型中，可以自動(dòng)生成高保真的3D數(shù)字人頭部模型及相應(yīng)的高清紋理、法線貼圖等數(shù)字資產(chǎn)，具有毛孔、唇紋、毛發(fā)級(jí)別的細(xì)節(jié)，再借助UE或Unity等基于物理的渲染引擎，可以得到高真實(shí)感的3D寫實(shí)數(shù)字人。PAGE/

40趨勢(shì)4：

數(shù)字人技術(shù)與SLAM、3D交互、體積視頻、空間音頻等技術(shù)深度融合，渲染將從本地到云端數(shù)字人作為3D呈現(xiàn)的一種方式，未來將與其他3D技術(shù)如SLAM（即時(shí)定位與地圖構(gòu)建）、體積視頻、空間音頻等融合，進(jìn)一步完善數(shù)字人和真實(shí)空間的交互。例如在直播場(chǎng)景中虛擬/真實(shí)空間中真人和數(shù)字人的交互，數(shù)字人對(duì)真實(shí)空間的感知等。同時(shí)由于數(shù)字人對(duì)渲染能力要求較高，未來云端渲染是重要的方向，將推動(dòng)云服務(wù)商從算力（CPU）云服務(wù)，到渲染力（GPU）的云服務(wù)。但成本仍是云渲染普及的關(guān)鍵阻礙，需要突破。容積視覺和跆拳道世界冠軍劉哮波合作，通過體積視頻技術(shù)在其道館可以隨時(shí)隨地把虛擬的自己召喚出來和小朋友進(jìn)行對(duì)戰(zhàn)，甚至和他互動(dòng)合影。小朋友還可以通過體積視頻技術(shù)直接在家里觀看他各個(gè)招式的分解動(dòng)作。云端分發(fā)服本地渲染輸出畫面本地渲染輸出畫面本地渲染輸出畫面用戶A-手機(jī)用戶B-PC渲染畫面用戶C-VR渲染畫面云渲染節(jié)點(diǎn)1云渲染節(jié)點(diǎn)2視頻流E視頻流D用戶D用戶E結(jié)構(gòu)化數(shù)據(jù)互聯(lián)網(wǎng)分發(fā)本地渲染云端渲染云端渲染成本下降騰訊仿真風(fēng)數(shù)字人技術(shù)，將虛擬人物投射到現(xiàn)實(shí)環(huán)境中，通過SLAM、實(shí)時(shí)3D渲染、混合現(xiàn)實(shí)等技術(shù)，讓虛擬內(nèi)容的生產(chǎn)者可隨時(shí)在日常環(huán)境中取材和創(chuàng)作，

同時(shí)打通移動(dòng)端與云端能力；以PaaS化形式將端云渲染混合解決方案作為基礎(chǔ)設(shè)施服務(wù)輸出給業(yè)界。凌云光數(shù)字員工沐嵐的XR虛擬直播使用凌云光運(yùn)動(dòng)捕捉系統(tǒng)擴(kuò)展了攝影機(jī)跟蹤功能，系統(tǒng)在完成數(shù)字人動(dòng)作捕捉的同時(shí)，利用SLAM技術(shù)對(duì)演播室多臺(tái)攝影機(jī)進(jìn)行同步跟蹤定位與大屏建模，一鍵完成多系統(tǒng)亞毫米級(jí)精準(zhǔn)融合標(biāo)定。眾多黑科技的加持，讓數(shù)字人沐嵐的直播充滿未來感及技術(shù)創(chuàng)新。PAGE/

41騰訊視頻自研的虛實(shí)交互技術(shù)，無(wú)需硬件外設(shè)輔助，任何人通過一臺(tái)相機(jī)/手機(jī)就可以把自己融入到虛擬世界中，極大降低了使用門檻和成本的同時(shí)，高品質(zhì)的人物摳圖、清晰穩(wěn)定的畫面、創(chuàng)新酷炫的互動(dòng)也為內(nèi)容創(chuàng)作帶來無(wú)限發(fā)揮空間，具有廣闊的應(yīng)用前景和社會(huì)價(jià)值。故宮講壇真人虛景項(xiàng)目利用虛擬運(yùn)鏡跟蹤、二維碼空間定位技術(shù)，可以實(shí)時(shí)渲染真人在虛擬空間中的位置，陰影。不僅可以保證人物和虛景地面的貼合。同時(shí)也可以保證在無(wú)需定位器的前提下，實(shí)拍攝像機(jī)和虛擬攝像機(jī)的運(yùn)動(dòng)同步。冬奧會(huì)數(shù)字人貝貝在數(shù)字人項(xiàng)目中，同樣可以運(yùn)用自研的摳圖、相機(jī)跟蹤、虛實(shí)交互的技術(shù)實(shí)現(xiàn)虛擬穩(wěn)定器，實(shí)現(xiàn)虛擬推拉鏡頭，3d特效前景等功能并且讓基于普通攝像頭形象驅(qū)動(dòng)的AI數(shù)字人可以和真人同步運(yùn)動(dòng)，實(shí)現(xiàn)高質(zhì)量的互動(dòng)效果。騰訊視頻自研虛實(shí)交互技術(shù)，可低成本、高畫質(zhì)的連接真人和數(shù)字人高質(zhì)量綠幕/無(wú)綠幕摳圖相機(jī)運(yùn)動(dòng)軌跡示意圖無(wú)硬件高質(zhì)量相機(jī)跟蹤算法虛實(shí)交互-實(shí)現(xiàn)對(duì)虛擬物體的操縱/踢/推等特效人體空間定位&虛擬陰影支持3D/全景背景的替換支持2D/3D/VR視頻的渲染虛擬穩(wěn)定器可AI運(yùn)鏡，效果媲美實(shí)體穩(wěn)定器PAGE/

42趨勢(shì)5：千行千面的數(shù)字人將成為人機(jī)交互新入口，但深度上仍需挖掘機(jī)器人人人數(shù)字人AI驅(qū)動(dòng)的數(shù)字人通過AI能力建立人與大數(shù)據(jù)的連接，提高效率并滿足人情感交流需求，提升用戶體驗(yàn)，將成為人機(jī)交互新入口：應(yīng)用廣度上：目前使用文字或語(yǔ)音交互的場(chǎng)景都可用AI數(shù)字人軟著陸的方式替代，不需要改變?cè)械臉I(yè)務(wù)邏輯和商業(yè)模式，大眾接受成本較低，并提供更好的用戶體驗(yàn)，未來應(yīng)用場(chǎng)景非常廣泛，可以與各種領(lǐng)域相結(jié)合，實(shí)現(xiàn)服務(wù)規(guī)?；蜆?biāo)準(zhǔn)化。應(yīng)用深度上：數(shù)字人作為企業(yè)的數(shù)字資產(chǎn)，是對(duì)員工工作的增強(qiáng)，具有生產(chǎn)力的屬性，可以進(jìn)一步釋放生產(chǎn)力，同時(shí)降本增效。未來數(shù)字人將根據(jù)不同行業(yè)的業(yè)務(wù)特點(diǎn)和應(yīng)用場(chǎng)景進(jìn)行更深度結(jié)合，孵化千行千面的數(shù)字員工，提供智能化服務(wù)。數(shù)字人提升人機(jī)交互體驗(yàn)當(dāng)前方式未來趨勢(shì)當(dāng)前方式未來趨勢(shì)數(shù)字人增強(qiáng)客服人員的效能人人數(shù)字人機(jī)器PAGE/

43趨勢(shì)5：千行千面的數(shù)字人將成為人機(jī)交互新入口，但深度上仍需挖掘銀行

資管 保險(xiǎn)文旅 政務(wù) 教育家居 交通出行 互聯(lián)網(wǎng)IP/內(nèi)容型、功能服務(wù)型、虛擬分身型等不同類型的數(shù)字人應(yīng)用領(lǐng)域非常廣泛，其中AI驅(qū)動(dòng)的功能服務(wù)型在在行業(yè)應(yīng)用仍處于探索階段，但已經(jīng)迅速擴(kuò)展到金融、傳媒市場(chǎng)、公共服務(wù)、生活服務(wù)、互聯(lián)網(wǎng)等，正向多元化發(fā)展。影視傳媒和市場(chǎng)公共服務(wù)生活服務(wù)互聯(lián)網(wǎng)金融影視

傳媒

市場(chǎng)營(yíng)銷功能服務(wù)型IP/內(nèi)容型虛擬分身型數(shù)字人行業(yè)應(yīng)用全景圖PAGE/

44生活服務(wù)—AI氣象主播搜狗輸入法上線“AI氣象主播”，覆蓋了40個(gè)省會(huì)城市和熱門旅游城市，不僅與中國(guó)氣象網(wǎng)保持實(shí)時(shí)同步，而且內(nèi)容豐富，除了涵蓋天氣情況、氣溫等基本信息外，還有感冒指數(shù)、穿衣指數(shù)等個(gè)性化內(nèi)容。傳媒行業(yè)--

AI主播“新小萌”騰訊與新華社推出全球首個(gè)AI女主播“新小萌”

。目前合作開發(fā)的三位主播都已在新華社APP上崗，參與了包括進(jìn)博會(huì)等若干重要報(bào)道，并且兩次參加服貿(mào)會(huì)，作為媒體融合的典型案例進(jìn)行現(xiàn)場(chǎng)演示。騰訊云智能和騰訊智影平臺(tái)合作，在數(shù)字人的形象、表現(xiàn)力、場(chǎng)景化能力上有豐富的儲(chǔ)備，在toB、toG方向有多年積累，特別在傳媒，金融，政務(wù)等領(lǐng)域?qū)崿F(xiàn)開創(chuàng)性和規(guī)模化的應(yīng)用。會(huì)展行業(yè)--VR大會(huì)虛擬主持人現(xiàn)場(chǎng)互動(dòng)2020世界VR產(chǎn)業(yè)大會(huì)在江西南昌拉開帷幕，全息投影技術(shù)首次被應(yīng)用在開幕式AI虛擬主持人和嘉賓論壇演講的環(huán)節(jié)之中，觀眾可以通過全息投影，身臨其境地感受由機(jī)器算法疊加的“超越時(shí)空”的世界。作為此次云峰會(huì)的硬核技術(shù)之一，AI虛擬主持人“鐘石”與大會(huì)現(xiàn)場(chǎng)主持人進(jìn)行實(shí)時(shí)互動(dòng)，虛擬與現(xiàn)實(shí)無(wú)縫切換，演示了一場(chǎng)未來智媒全息直播的場(chǎng)景。司法行業(yè)--首個(gè)AI法官騰訊制作首個(gè)AI法官，用戶從北京互聯(lián)網(wǎng)法院的訴訟服務(wù)中心平臺(tái)的電子導(dǎo)訴板塊，或直接進(jìn)入“移動(dòng)微法院”微信小程序，AI法官可以為當(dāng)事人提供智能導(dǎo)訴服務(wù)。證券行業(yè)--首個(gè)AI證券主播AI證券主播參與廣發(fā)證券易淘金APP上播報(bào)每日的早盤視點(diǎn)、盤中熱點(diǎn)和收盤點(diǎn)評(píng)等實(shí)時(shí)資訊。只需要輸入準(zhǔn)備好的文字腳本，等待2-3分鐘，即可生成一個(gè)精美的AI主播的視頻資訊。健康行業(yè)--首個(gè)AI營(yíng)養(yǎng)師騰訊基于積累超過15年的知識(shí)計(jì)算能力與自然語(yǔ)言處理能力，在權(quán)威機(jī)構(gòu)中國(guó)營(yíng)養(yǎng)學(xué)指導(dǎo)下，通過模擬真人與用戶進(jìn)行語(yǔ)音交互對(duì)話，7×24小時(shí)在線解答用戶關(guān)于飲食健康的問題，構(gòu)建覆蓋全人群、全食材、全疾病的權(quán)威知識(shí)庫(kù),為用戶提供個(gè)性化的飲食問題解答和膳食指導(dǎo)。文旅行業(yè)--數(shù)字云平臺(tái)IP虛擬科普員針對(duì)“大運(yùn)河國(guó)家文化公園數(shù)字云平臺(tái)”，江蘇文投與騰訊基于知識(shí)圖譜、人工智能、多媒體等現(xiàn)代信息技術(shù)，通過“科技+文化”的形式構(gòu)建多個(gè)數(shù)字文化領(lǐng)域的國(guó)內(nèi)創(chuàng)新平臺(tái)和應(yīng)用。公眾服務(wù)端發(fā)揮線上空間優(yōu)勢(shì)，分為“知運(yùn)河”、“探運(yùn)河”、“游運(yùn)河”三大板塊，數(shù)字萌寵“霸下”以知識(shí)普及、趣味互動(dòng)、智慧文旅等不同方式創(chuàng)新傳播運(yùn)河文化，與用戶互動(dòng)，吸引了不少目光。用戶可以一站式體驗(yàn)大運(yùn)河里的中國(guó)故事和中國(guó)智慧。騰訊在傳媒、金融、政務(wù)等多個(gè)行業(yè)實(shí)現(xiàn)了開創(chuàng)性、規(guī)?；膽?yīng)用PAGE/

45本次互聯(lián)網(wǎng)公益峰會(huì)啟用手語(yǔ)數(shù)智人進(jìn)行解說，由騰訊3D手語(yǔ)數(shù)智人“聆語(yǔ)”與著名主持人楊瀾共同主持，向全球超過100萬(wàn)觀眾提供了專業(yè)、實(shí)時(shí)、準(zhǔn)確的手語(yǔ)解說服務(wù)，讓處于無(wú)聲世界中的特殊人群更好地參與公益事業(yè)共建。2022年世界急救日上，

騰訊AI

Lab團(tuán)隊(duì)攜手天美工作室王者榮耀團(tuán)隊(duì)、騰訊SSV未來課堂、社會(huì)應(yīng)急實(shí)驗(yàn)室共同打造的急救知識(shí)動(dòng)畫科普課程，其中的數(shù)字人講解員是利用AI技術(shù)驅(qū)動(dòng)的王者榮耀游戲中

“云纓”角色。通過虛擬講師結(jié)合動(dòng)畫的形式，寓教于樂，幫助更多人了解關(guān)于急救與AED的使用小技巧。騰訊王者榮耀“云纓”助力2022世界急救日除了在商業(yè)中應(yīng)用外，在公益行業(yè)中也大量使用，發(fā)揮社會(huì)價(jià)值騰訊智影平臺(tái)聯(lián)合中國(guó)聾人協(xié)會(huì)聯(lián)合推出手語(yǔ)版《萬(wàn)疆》，不僅能幫助廣大聽障手語(yǔ)使用者表達(dá)出自己對(duì)黨和國(guó)家的心意，同時(shí)也能提升社會(huì)各界對(duì)聽障手語(yǔ)使用者的關(guān)注，幫助更好融入社會(huì)，通過科技去彌補(bǔ)“無(wú)聲世界”的遺憾。PAGE/

46趨勢(shì)6：UGC數(shù)字人將加速出現(xiàn)，成為未來產(chǎn)業(yè)的增量空間UGC數(shù)字人生產(chǎn)工具虛擬直播平臺(tái)/虛擬空間視頻驅(qū)動(dòng)技術(shù)更加成熟云舶科技推出的免費(fèi)3Ｄ虛擬直播軟件小K直播姬實(shí)現(xiàn)零成本UGC虛擬人互動(dòng)技術(shù)門檻下降制作成本下降C端使用場(chǎng)景更加豐富用戶體驗(yàn)更加完善騰訊推出的U82

APP，在手機(jī)端成功實(shí)現(xiàn)了仿真風(fēng)數(shù)字人的自定義外觀（捏臉/換裝）和基于手機(jī)攝像頭的驅(qū)動(dòng)（動(dòng)面捕），為UGC用戶開啟了一扇免費(fèi)定制、運(yùn)營(yíng)、打造數(shù)字人IP的大門。同時(shí)U82中可將數(shù)字人通過AR技術(shù)投射到現(xiàn)實(shí)環(huán)境中進(jìn)行照片/視頻的拍攝，實(shí)現(xiàn)了“虛實(shí)共創(chuàng)”“虛實(shí)相生”，為數(shù)字人未來使用場(chǎng)景的拓展提供了豐富的想象空間。未來1-2年技術(shù)門檻和成本將快速下降，會(huì)出現(xiàn)更開放的創(chuàng)作者生態(tài)、更豐富的UGC內(nèi)容和商業(yè)模式，UGC將成為數(shù)字人的增量空間，同時(shí)也是數(shù)字人在C端應(yīng)用的主要生產(chǎn)方式：二次元、寫實(shí)風(fēng)格等不同風(fēng)格的UGC數(shù)字人生產(chǎn)工具和平臺(tái)，C端用戶可以更加便利生產(chǎn)數(shù)字人。數(shù)字人直播平臺(tái)、自定義虛擬空間平臺(tái)等不斷涌現(xiàn)，使得UGC數(shù)字人的使用場(chǎng)景更加豐富。視頻驅(qū)動(dòng)等輕量級(jí)動(dòng)捕技術(shù)的成熟，通過手機(jī)的單攝像頭和算力可以獲得更高精度的動(dòng)作和表情數(shù)據(jù)。當(dāng)前未來趨勢(shì)發(fā)展方向PGCUGCPGCPAGE/

47趨勢(shì)6：UGC數(shù)字人將加速出現(xiàn)，成為未來產(chǎn)業(yè)的增量空間數(shù)字人+虛擬空間將成為未來C端主要的形式和增量市場(chǎng)，并孵化出新型的商業(yè)模式。虛擬空間的設(shè)定、規(guī)則和權(quán)益，會(huì)吸引特定的人群參與，并打通虛擬空間到真實(shí)空間。場(chǎng)景設(shè)定玩法規(guī)則用戶權(quán)益社交購(gòu)物廣告……虛擬空間數(shù)字人新型商業(yè)模式和體驗(yàn)PAGE/

48虛擬形象Avatar制作和換裝虛擬場(chǎng)景小窩/小島/城市社交互動(dòng)派對(duì)/聽歌/觀影/釣魚/種田....百變?cè)煨停疃榷ㄖ茦?gòu)建Z世代沉浸式虛擬生活空間，讓想象觸手可及播放視頻聽音樂釣魚會(huì)議看秀種田舉辦婚禮舉辦畢業(yè)典禮觀看體育盛會(huì)舉辦私人派對(duì)基礎(chǔ)功能邀請(qǐng)好友到小窩來做客 ? 購(gòu)買/收藏逛到的喜歡物品和好友一起看視頻影像 ? 文字、語(yǔ)音群聊給喜歡的小窩點(diǎn)贊 ? 給其他人發(fā)送打賞動(dòng)作給小窩主人留言 ? 拍照截圖進(jìn)階功能開展個(gè)人播客玩桌游才藝表演釣魚比賽超級(jí)QQ秀通過虛擬形象，用戶得以跳脫現(xiàn)實(shí)，暢游在充滿想象的虛擬場(chǎng)景中，進(jìn)行沉浸式互動(dòng)社交PAGE/

49TMELAND：樂迷通過虛擬形象在虛擬空間進(jìn)行社交、消費(fèi)及共創(chuàng)音樂內(nèi)容超高自由度，專屬虛擬形象導(dǎo)入及定制虛擬形象互動(dòng)、3D動(dòng)作捕捉虛擬表演等多元場(chǎng)景無(wú)縫切換，虛擬世界沉浸體驗(yàn) 多終端體驗(yàn)：移動(dòng)端/PC端/小程序端/TV端攜手央視五四晚會(huì)，尼格買提化身「數(shù)字人」穿越TMELAND會(huì)場(chǎng)

虛擬Livehouse場(chǎng)館首次落地，超400萬(wàn)歌迷以全新升級(jí)的虛擬形為廣大青年加油打氣，超百萬(wàn)青年進(jìn)入虛擬音樂世界，與真實(shí)舞臺(tái)

象與虛擬偶像團(tuán)體

TEAM

PEPSI

一同