元宇宙虛擬人建設解決方案

元宇宙虛擬人建設解決方案建設背景第一章整體架構(gòu)第二章技術能力第三章解決方案第四章目錄Contents虛擬人在二次元用戶中扮演著類似于明星組合一樣的偶像角色，在網(wǎng)絡等虛擬場景或現(xiàn)實場景進行各種活動，但并不具備人形實體的“愛豆”。即通過繪畫、動畫、CG等形式被制作出，基于動漫而打造的具有人設的虛擬明星。1建設背景元宇宙是一個浩大的系統(tǒng)工程，涉及通信、金融、硬件、軟件、計算視覺、光學等諸多領域。在元宇宙中，用戶擁有一個或多個虛擬身份形象，利用該身份不僅可以在虛擬世界里與真人社交，還可以與人工智能生成的虛擬人物交流。元宇宙場景構(gòu)想元宇宙場景02.市場規(guī)模大目前中國二次元產(chǎn)業(yè)的市場規(guī)模為1000億元，5年后將迎來1000億美元（約合人民幣6576億元）的市場規(guī)模。全世界最熟悉的虛擬人“初音未來”，

在70多個國家運營，擁有超過6億粉絲，在全球各大城市舉辦40多場演唱會，作為虛擬人物的價值已經(jīng)超過了10億人民幣，而且還以驚人的速度增長著。市場潛力大2016年至2018年，國內(nèi)泛二次元用戶近乎翻倍增長。此外，二次元聚集地--B站也已上市。這些在為虛擬人的發(fā)展筑造“溫床”。用戶增長快虛擬人自帶“二次元屬性+偶像屬性”，其覆蓋“御宅族+粉絲群體”兩個具有較高消費能力的群體，其中97.3%是“90后”和“00后”，每年在二次元文化周邊平均花費超過1700元。消費能力高01.國內(nèi)外巨頭不斷入局，虛擬人的投融資藍海

各大直播、短視頻平臺的海量內(nèi)容需求給虛擬人帶來新的機遇，“虛擬人”大有成為當前文娛產(chǎn)業(yè)焦點的趨勢。

國內(nèi)外的巨頭們紛紛在虛擬人發(fā)威布局，目前動作主要集中在“二次元和游戲”領域公司，虛擬人在中國尚處早期“萌芽”階段，未來具有極大的市場潛力及價值?！靶￠僮印?/p>

被授予“英國旅游局友好大使”稱號?！靶￠僮印?/p>

是騰訊旗下游戲虛擬角色代言人?！锻跽邩s耀》三周年音樂會，人氣英雄“貂蟬”與“公孫離”合作奉獻了一場絢麗多彩，震撼人心的AR秀表演。虛擬主播--虛擬次元的小希。網(wǎng)易游戲宣布推出《陰陽師》“平安京偶像計劃”。央視嘗試“虛擬主持人”早期1.0時代早期虛擬人采用的是“藝人”包裝模式，投入大，周期長，風險高。商業(yè)化模式有限，整個行業(yè)一直處于雷聲大，雨點小的尷尬局面?，F(xiàn)在2.0時代近兩年，得益于動作捕捉技術的成熟，虛擬人產(chǎn)業(yè)逐步從“藝人模式”的1.0時代，過渡到一個偶像類型更豐富，偶像打造模式更加多元化的“虛擬人2.0”時代，也就是“虛擬網(wǎng)紅”VTuber時代。虛擬人步入2.0時代的典型代表，是全球第一Vtuber“絆愛醬”。由于動捕技術的運用，“絆愛醬”得以在Youtube平臺上，像所有真人播主一樣，既可以直播游戲，也可以分享自己的“日?！薄＝O愛醬直播“吃雞”發(fā)展趨勢虛擬人發(fā)展趨勢虛擬人互動模式

虛擬人跟明星一樣，多棲發(fā)展，可以出演動漫電影、出席綜藝節(jié)目、擔任頒獎禮主持人。真實明星可以做的，他們都能做，明星不能做的，他們也能做，比如定期出鏡直播、舉辦演唱會、商業(yè)代言、活動通告、粉絲經(jīng)濟等等，明星做不到的，他們也可以做到，比如虛擬人定制、虛擬人養(yǎng)成、虛擬人私密陪伴。短視頻直播演唱會參加綜藝節(jié)目商業(yè)代言2整體架構(gòu)AI、物聯(lián)網(wǎng)、大數(shù)據(jù)、區(qū)塊鏈技術和產(chǎn)品有機結(jié)合，相互賦能，打造綜合能力產(chǎn)品建設好基礎平臺的同時，充分結(jié)合海航優(yōu)勢行業(yè)，打造優(yōu)勢云產(chǎn)品新零售智慧物流智慧城市智能安防智慧教育智能醫(yī)療數(shù)字航旅科技金融1、采用“自建+合作”模式打造云化場景的產(chǎn)品與交付體系。2、基礎能力現(xiàn)階段以合資，合作，采購等方式引入。逐漸培養(yǎng)自主研發(fā)能力。3、融合“AI+BlockChain+Iot+Data”，多種賦能，形成綜合解決方案。4、結(jié)合海航優(yōu)勢行業(yè)，針對場景打磨產(chǎn)品，形成標準靈活的云化產(chǎn)品?？蛻?行業(yè)：大數(shù)據(jù)·大數(shù)據(jù)銀行項目平臺(API市場）·多維度數(shù)據(jù)源整合平臺：AI·基于“聽說看辨想”的基礎能力平臺、智能客服云·身份認證云、知識圖譜、AI能力開放平臺、刷臉考勤云·深度學習框架、超算中心物聯(lián)網(wǎng)·設備管理、連接管理平臺、RFID\NFC電子標簽、2G\4G·數(shù)據(jù)分析平臺·物聯(lián)網(wǎng)能力服務、規(guī)則引擎、生命周期管理區(qū)塊鏈接入&節(jié)點管理、賬本應用賦能安全感知、數(shù)據(jù)硬件、數(shù)據(jù)數(shù)據(jù)決策決策數(shù)據(jù)決策數(shù)據(jù)賦能數(shù)據(jù)溯源數(shù)據(jù)決策數(shù)據(jù)連接數(shù)據(jù)超算中心、GPU集群·航旅大數(shù)據(jù)基地數(shù)據(jù)平臺·聯(lián)通大數(shù)據(jù)公司-精能夠準營銷產(chǎn)品·京東萬象航旅數(shù)據(jù)標簽場景產(chǎn)品總架構(gòu)12總架構(gòu)AI感知服務

AR/VR智能平臺IOT智能平臺SAAS云服務行業(yè)解決方案AI

認知服務視覺智能平臺語音智能平臺特征識別平臺認知智能大數(shù)據(jù)分析平臺SQL/MPPNOSQLHADOOP分類關系趨勢預測File平臺管控咨詢服務Portal賬戶計費安全視覺智能特征識別語音智能虛擬現(xiàn)實IOT智能服務連接管理設備管理智能通信服務互聯(lián)網(wǎng)通信運營商業(yè)務開放平臺(PAAS)基礎平臺業(yè)務基礎數(shù)據(jù)大數(shù)據(jù)存儲平臺算法與模型網(wǎng)絡傳輸IAAS存儲計算對等網(wǎng)絡數(shù)據(jù)采集機器學習框架大數(shù)據(jù)分析框架區(qū)塊鏈共識&激勵算法超算中心區(qū)塊鏈擴展層平臺區(qū)塊鏈服務接入&節(jié)點管理賬本應用DBP整體架構(gòu)-AI大數(shù)據(jù)云計算機器學習深度學習神經(jīng)網(wǎng)絡GPU語音語音識別語音合成語音喚醒生物特征人臉識別聲紋識別指紋識別視覺圖像識別文字識別自然語言理解知識圖譜語義機器翻譯五大能力18大場景……多渠道智能網(wǎng)絡客服樓宇解決方案-考勤門禁智慧醫(yī)院智慧景區(qū)未來機場呼叫中心解決方案樓宇解決方案-會議廳智能居住商業(yè)人流分析公共場所人群檢測卡/證/車牌/文檔OCR多維身份認證智慧營業(yè)廳智慧案場刷臉支付網(wǎng)絡版客服精靈語音搜索窄帶語音轉(zhuǎn)寫航旅數(shù)據(jù)航旅數(shù)據(jù)航旅數(shù)據(jù)航旅數(shù)據(jù)數(shù)據(jù)層功能層歷史數(shù)據(jù)分析實時數(shù)據(jù)分析客戶價值模型強差旅客戶識別客戶信用評分模型產(chǎn)品關聯(lián)推薦模型客戶產(chǎn)品需求偏好季節(jié)性消費時序預測客戶細分實時營銷實時申請反欺詐實時消費預測應用層用戶畫像類金融征信類決策與咨詢類整體架構(gòu)–大數(shù)據(jù)3技術能力完備的體系，模塊化的部署，云化的操作，便捷的隨心操作。如何連接人、系統(tǒng)？如何連接設備？AI人工智能17五大能力語音生物特征視覺自然語言理解知識圖譜語音識別語音合成語音喚醒人臉識別聲紋識別指紋識別圖像識別文字識別語義機器翻譯1810種技術語音識別

語音識別

長語音識別

遠場語音識別

窄帶語音識別語音合成語音喚醒文字識別

多語種手寫字體識別

通用打印字體識別自然語言理解機器翻譯知識圖譜圖像識別

靜態(tài)圖像識別

動態(tài)圖像追蹤卡證類文字識別車牌識別生物特征識別

人臉識別

人群檢測分析

人證比對

FaceSDK

身份驗證私有云

指紋識別

聲紋識別

hot！hot！hot！19技術-語音識別語音識別功能介紹：語音識別（TextToSpeech簡稱TTS）將語音識別成文字，讓機器輕松聽懂人類的語言。功能優(yōu)勢：識別率高連續(xù)語音識別率高達96%識別速度快采用實時識別方式，實現(xiàn)語音數(shù)據(jù)的傳輸和識別的同步，實時率可達0.3以下長語音識別功能介紹：通過SDK調(diào)用服務，可將長語音（長時間連續(xù)說話）轉(zhuǎn)換為文字。功能優(yōu)勢：識別率高連續(xù)語音識別率高達96%識別速度快采用實時識別方式，實現(xiàn)語音數(shù)據(jù)的傳輸和識別的同步，實時率可達0.3以下遠場語音識別功能介紹：基于麥克風陣列（SmartMicrophoneArray簡稱SMA）實現(xiàn)遠場語音識別，拾音抗噪。功能優(yōu)勢：可對遠距離的聲源疊加增益，實現(xiàn)聲源定向、回聲消除、語音喚醒為用戶提供天氣、交通、新聞。股票等日常生活常用的30多種信息與內(nèi)容服務窄帶語音識別功能介紹：基于電話的8k采樣率的音源提供高質(zhì)量的語音識別效果功能優(yōu)勢：為呼叫中心提供語音轉(zhuǎn)寫等多種形式的技術服務，完美支持電話場景多輪語音對話20技術-語音合成|語音喚醒語音合成功能介紹：語音合成（TextToSpeech簡稱TTS）將文本轉(zhuǎn)化成語音，讓機器像人類一樣能說會道。。功能優(yōu)勢：支持多語種連續(xù)語音識別率高達96%支持多音色支持中文普通話、粵語、維語、英語、日語、德語、法語等19種語言，覆蓋全球90%以上的國家和地區(qū)語音喚醒功能介紹：語音喚醒能夠基于給定的多路（1/2/4/6/…）麥克風音頻數(shù)據(jù)進行單喚醒詞/多喚醒詞檢測，并在檢測到喚醒語音時輸出對應的喚醒詞編號及語音信息。功能優(yōu)勢：可支持一至多個喚醒詞，且喚醒詞可定制21技術-文字識別多語種手寫字體識別功能介紹：手寫識別（HandWritingRecognition簡稱HWR）將手寫字跡轉(zhuǎn)化成文本。功能優(yōu)勢：高識別率識別正確率99%自有書寫支持行寫，疊寫，支持多字符集選擇和多字典選擇準確手寫支持多種語言的行寫和疊寫通用打印字體識別功能介紹：文字識別（OpticalCharacterRecognition簡稱OCR）將圖片中的文字轉(zhuǎn)化成電子文本。功能優(yōu)勢：多語種支持12種語言文檔識別混合識別支持中英、日英、韓英混合識別多類型圖片識別支持票據(jù)識別，文檔識別，名片識別，證照識別22技術-NLU|機器翻譯自然語言理解NLU功能介紹：語義理解（NaturalLanguageUnderstanding簡稱NLU）將人類語言進行分析，讓機器真正理解人類意圖，成為人類伙伴。功能優(yōu)勢：多領域支持天氣，導航等20多個常見領域快速識別意圖根據(jù)人說的話，識別說話人的精確意圖多輪對話可以在多輪語音或文字對話中持續(xù)理解意圖機器翻譯功能介紹：機器翻譯（MachineTranslation簡稱MT）支持中英互譯、維漢互譯。功能優(yōu)勢：精準快速便捷翻譯后可以直接獲取對應的語音多語言支持中英互譯、維漢互譯知識圖譜功能介紹：針對不同行業(yè)不同場景構(gòu)建詳盡的語料庫和知識庫。功能優(yōu)勢：在特定行業(yè)具備具備良好的基礎和積累。技術-圖像識別23靜態(tài)圖像識別功能介紹：精準識別圖片中的物體和場景，簡化圖片管理。功能優(yōu)勢：可顯著抵抗光照與姿態(tài)變化等干擾因素的影響。全球領先的通用物體檢測算法，能有效檢測出圖片中超過200類的常見物體。精準識別自然環(huán)境下數(shù)百種場景、上千種通用物體及其屬性卡證類文字識別功能介紹：視頻預覽模式+智能四邊定位技術，實現(xiàn)高性能精準識別。可自動捕捉身份證的邊緣、校正透視變形圖像，支持任意方向、正反圖像自動識別，支持全部少數(shù)民族身份證識別，刷新用戶體驗。。功能優(yōu)勢：全球領先的OCR識別算法動態(tài)圖像追蹤功能介紹：在視頻監(jiān)控、輔助駕駛等場景中，準確、迅速地找出場景中所有的行人車輛位置。在車輛追蹤等場景中，實時監(jiān)測車輛位置，精準識別車牌并準確分析車輛屬性。功能優(yōu)勢：可顯著抵抗光照與姿態(tài)變化等干擾因素的影響車牌識別功能介紹：停車場出入口、交通路口和限行路段等可以準確識別車牌關鍵信息。功能優(yōu)勢：強光照、大側(cè)角、模糊等極難條件下可以準確識別車牌號碼。24技術-生物特征識別人臉識別功能介紹：人臉識別（AutomaticFaceRecognition簡稱AFR）通過人的面部特征，進行身份鑒別。功能優(yōu)勢：支持人臉檢測及五官定位支持人臉屬性分析，包括性別、表情等可實現(xiàn)“一對一”與“一對多”人臉識別完善的人臉識別方案，可實現(xiàn)人臉查詢和數(shù)據(jù)庫管理指紋識別功能介紹：指紋識別（FingerprintRecognition簡稱FPR）通過識別手指上凸凹不平的紋線，對人的身份進行鑒別。功能優(yōu)勢：支持各類指紋采集設備支持一對一確認和一對多辨識聲紋識別功能介紹：聲紋識別（VoiceprintRecognition簡稱VPR）提取說話人的語音身份特征，提供聲紋鑒別和聲紋確認。功能優(yōu)勢：算法先進國際最先進聲紋引擎支持“一對一”和“一對多”辨識如何連接人、系統(tǒng)？如何連接設備？大數(shù)據(jù)航班數(shù)據(jù)基礎屬性姓名/身份證/手機號....活躍屬性飛行次數(shù)/飛行月份/艙位等級/境內(nèi)外飛行屬性/出發(fā)城市/到達城市....消費屬性機票折扣/平均票價....時間、地點屬性購票與起飛時間/飛行時間/飛行距離....乘機屬性所乘航司/起飛機場/計飛時間/實飛時間/機型/周轉(zhuǎn)次數(shù)/客艙等級....酒店數(shù)據(jù)基礎屬性姓名/身份證/手機號....活躍屬性住店次數(shù)/住店月份/住店星級/入住天數(shù)....消費屬性住店折扣/入住價格/工作日住宿消費次數(shù)/節(jié)假日及周末住宿消費次數(shù)....時間、地點屬性酒店平均入住天數(shù)/酒店所在城市/提前預定時間/入住時間....出行數(shù)據(jù)基礎屬性姓名/身份證/手機號....活躍屬性旅游次數(shù)/旅行社以及每個旅行社次數(shù)/出行工具....消費屬性票價/折扣/自助游次數(shù)/跟團游次數(shù)/旅游購物次數(shù)/出國游次數(shù)/同行人數(shù)/公務出差次數(shù)/探親次數(shù)....時間、地點屬性旅游目的地/旅游出發(fā)地/旅游目的地/旅游時間/旅行天數(shù)/購物逗留時間....內(nèi)部數(shù)據(jù)資源電商行業(yè)指數(shù)銷售指數(shù)價格指數(shù)城市消費指數(shù).....

網(wǎng)購信息網(wǎng)購賬齡活躍度近一年網(wǎng)購金額單筆最高消費金額消費偏好常用地址常用地址穩(wěn)定性常用手機穩(wěn)定性外部數(shù)據(jù)資源序號算法名稱序號算法名稱序號算法名稱序號算法名稱序號算法名稱1邏輯回歸6聚類11樸素貝葉斯16異常檢測21時間序列2線性回歸7普通最小二乘回歸12神經(jīng)網(wǎng)絡17

支持向量機22最大期望3分位數(shù)回歸8主成分分析13隨機森林18奇異值分解23組合方法4非線性回歸9偏最小二乘回歸14文本挖掘19關聯(lián)規(guī)則24主題分析5決策樹10因子分解15文本分析20社交網(wǎng)絡分析數(shù)據(jù)算法技術訓練數(shù)據(jù)數(shù)據(jù)采集特征提取數(shù)據(jù)分割數(shù)據(jù)驗證集數(shù)據(jù)訓練集深度分析模型創(chuàng)建模型驗證初期模型模型數(shù)據(jù)庫數(shù)據(jù)數(shù)據(jù)清洗有效數(shù)據(jù)維度聚合多維數(shù)據(jù)集報表生成器數(shù)據(jù)可視化數(shù)據(jù)分析流程航旅數(shù)據(jù)航旅數(shù)據(jù)航旅數(shù)據(jù)航旅數(shù)據(jù)數(shù)據(jù)層功能層歷史數(shù)據(jù)分析實時數(shù)據(jù)分析客戶價值模型強差旅客戶識別客戶信用評分模型產(chǎn)品關聯(lián)推薦模型客戶產(chǎn)品需求偏好季節(jié)性消費時序預測客戶細分實時營銷實時申請反欺詐實時消費預測應用層用戶畫像類金融征信類決策與咨詢類數(shù)據(jù)分析平臺應用系統(tǒng)開發(fā)工作臺數(shù)據(jù)分析應用(用戶畫像、精準營銷)……數(shù)據(jù)服務數(shù)據(jù)管理數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)運營管理數(shù)據(jù)安全管理數(shù)據(jù)服務總線服務管理

實時/批量服務

數(shù)據(jù)可視化工具

嵌入服務原子服務封裝（數(shù)據(jù)+數(shù)據(jù)語義+服務規(guī)則）服務組合+決策分析引擎數(shù)據(jù)存儲與加工實時處理準實時/離線處理數(shù)據(jù)處理實時環(huán)境非實時接口層非實時整合層非實時中間層非實時匯總層離線環(huán)境實時接口層實時匯總層實時計算層網(wǎng)頁數(shù)據(jù)圖片/視頻非結(jié)構(gòu)化數(shù)據(jù)采集系統(tǒng)數(shù)據(jù)抽取數(shù)據(jù)稽核接口定義數(shù)據(jù)規(guī)整數(shù)據(jù)解析數(shù)據(jù)清洗數(shù)據(jù)輸出數(shù)據(jù)入庫日志記錄數(shù)據(jù)抽取數(shù)據(jù)權(quán)限管理文本關系型數(shù)據(jù)庫結(jié)構(gòu)化數(shù)據(jù)機器數(shù)據(jù)數(shù)據(jù)存儲分布式數(shù)據(jù)庫綜合數(shù)據(jù)管理分布式文件系統(tǒng)全文搜索集群關系型數(shù)據(jù)庫

K-V數(shù)據(jù)庫集群數(shù)據(jù)倉庫離線引擎實時引擎流式引擎挖掘分析及機器學習數(shù)據(jù)計算分析預測算法狀態(tài)研判挖掘模型圖像識別機器引擎接口模型匯總模型業(yè)務特征人物特征平臺技術功能架構(gòu)業(yè)務系統(tǒng)（多租用戶）機器采集數(shù)據(jù)傳感器日志輿情……接口管理數(shù)據(jù)調(diào)取數(shù)據(jù)計算數(shù)據(jù)加密權(quán)限控制行為審計……數(shù)據(jù)統(tǒng)計數(shù)據(jù)分析數(shù)據(jù)挖掘……OA金融電商交通……第三方ETL（多租用戶）MPP分布式集群DataEngine融合平臺機器學習集群

機器學習訓練平臺大數(shù)據(jù)套件管理平臺電商分析交通分析……金融分析政務分析大數(shù)據(jù)中心數(shù)據(jù)源運維管理安全管控權(quán)限體系數(shù)據(jù)脫敏自服務門戶云kettle前置庫BI應用套件數(shù)據(jù)解決方案架構(gòu)數(shù)據(jù)源實時接入離線接入TstormSparkStreaming實時流處理MapReduceSparkPig離線批處理交互式探索分析多維分析機器學習交互式BI工具其他應用航旅電商政府數(shù)據(jù)集成數(shù)據(jù)探索數(shù)據(jù)應用場景數(shù)據(jù)技術處理流程4解決方案全身動作捕捉流程創(chuàng)建虛擬人角色：創(chuàng)建虛擬人角色，將創(chuàng)建的虛擬人角色導入圖形引擎中得到虛擬人角色模型。動作捕捉數(shù)據(jù)解算：RTS-Tracker軟件對被捕捉者身上的標記點進行跟蹤，獲得三維點云坐標，再經(jīng)過RTS-Rovonga軟件識別標簽、自動生成全身骨骼模型、運動預測這些過程，從而識別出被捕捉者主要骨骼的動作。虛擬形象渲染呈現(xiàn)：將采集到的動作數(shù)據(jù)與虛擬人角色模型進行關聯(lián)，令虛擬人角色模型按照數(shù)據(jù)執(zhí)行相關動作。身體動作捕捉：真人穿上帶有標記點的動作捕捉服，RTS動捕相機發(fā)出紅外光，照射在被動式標記點上，標記點反射被照射到的紅外光，RTS相機經(jīng)過處理，向跟蹤軟件流出標記點的2D坐標信息?；討茫嚎梢詰迷诙喾N場合，如視頻，將虛擬人角色模型和聲音數(shù)據(jù)疊加至攝錄的視頻畫面中后合成得到虛擬人角色視頻畫面；如演唱會，與全息投影技術結(jié)合，進行現(xiàn)場演唱。虛擬人制作技術流程圖

面向虛擬人產(chǎn)業(yè)，不管是怎樣的互動表現(xiàn)形式，全身動作捕捉作為核心底層方案，幫助虛擬人更自然的呈現(xiàn)，瑞立視提供一個完善的全身動作捕捉方案，打造模式更加多元化的虛擬人。全身動作捕捉系統(tǒng)建