2023年中國(guó)社交元宇宙的技術(shù)挑戰(zhàn)與探索書(shū)

2023年中國(guó)社交元宇宙的技術(shù)挑戰(zhàn)與探索書(shū)

目錄大綱

?元宇宙社交場(chǎng)景

?技術(shù)能力的探索

?與用戶(hù)的能力共創(chuàng)

?元宇宙社交平臺(tái)的暢想

元宇宙社交場(chǎng)景

敏捷智能

沉浸想象

家庭跨空間

合適的時(shí)間

合適的對(duì)象

關(guān)系

智能機(jī)器人

交流

魂淡君

面對(duì)面交互互動(dòng)

我覺(jué)得雙魚(yú)座的特點(diǎn)就是很好

相處

文字聊天AR場(chǎng)景

出生日期：2月19日?3月20

0；最大特征：多情；星座分

析：雙魚(yú)座是十二宮最后一個(gè)

星座，他集合了所有星座的優(yōu)

語(yǔ)音聊天缺點(diǎn)于一身，同時(shí)受水象星座

VR場(chǎng)景的情緒化影響，使他們?cè)瓉?lái)復(fù)

雜的性格又添加了更復(fù)雜的一

筆。雙魚(yú)座的人最大的優(yōu)點(diǎn)是

有一顆善良的心，他們?cè)敢鈳?/p>

助別人，昌至是犧牲自己。

視頻聊天智能助手

洛城人垂夏茨將，上將死拆解

劣啖，洛城空馀聲通迤，積雪

出得然泱薄

□<

學(xué)術(shù)&商務(wù)

場(chǎng)景可配置形象可選擇

商務(wù)學(xué)術(shù)

演講授課UNy

會(huì)議討論

形式不受限效果可觸發(fā)安全可保障

Reference:

[1]httDS:〃/watch?v=odbqlASYv9E

[2]film《Kingsman:TheSecretService)

游戲購(gòu)物旅行

Reference:

[1]GeC,SongY,GeY,etal.DisentangledCycleConsistencyforHighly-realisticVirtualTry-On[J].2021.

[2]https:〃/

[3]film《ReadyPlayerOne》

[4]/Home.html

[5]/product/live/dspace.html

人生里程碑

Reference:

[1]https:〃www.mana.art/article/detail/1658914316562464684

[2]https:〃/redian/zatan/316116.html

[3]https:〃/technology/japanese-university.remote-controlled-robots-zoom-virtual-graduation-04-06-2020/

[4]https:〃www.ritualstoday.co.uk/virtual4unerals-honouring-a-Hfe-in-times-of-covicM9/

其他

Reference:

[1]https:〃/car-culture/videos/a28918/player-two-short-film/

[2]https:〃/watch?v=exvAxUee4M

[3]https://www.163.eom/v/video/VEGOFNGMO.html

技術(shù)能力的探索

能力分析

設(shè)計(jì)

圖像

內(nèi)容

N/W^——

NAWAEngine是一個(gè)集Al,渲染與圖像處理于一體的集成化SDK,

輸出包含Avatar表情驅(qū)動(dòng)，美妝美顏，卡通化等十余種圖像處理與

2/3D渲染能力，同時(shí)開(kāi)發(fā)了匹配的編輯器，進(jìn)行個(gè)性化生產(chǎn)。

NAWAEngineIsASetOfAi,RenderingAndImageProcessingInOneOfThe

IntegratedSdk,OutputIncludingAvatarExpressionDriver,BeautyMakeup

Beauty,CartoonAndOtherMoreThanTenKindsOfImageProcessingAnd

2/3dRenderingCapabilities,

AtTheSameTime,TheDevelopmentOfAMatchingEditor,personalizedPro-

duction.

〉〉〉〉

API

(c++/oc/java)

Event2DRender3DRender

觸摸人臉框/角度檢測(cè)人像美化3DAvatar

拍照人/貓關(guān)鍵點(diǎn)檢測(cè)貼紙3D貼紙

錄制3D人臉重建鏡頭特效AR面具

表情表情識(shí)別全圖模糊3Dbody

手勢(shì)手勢(shì)識(shí)別調(diào)色濾鏡場(chǎng)景渲染

Gon風(fēng)格化風(fēng)格化濾鏡

t

CV能力

人臉人體生成場(chǎng)景寵物

三維表情屬性

重建識(shí)別識(shí)別

特效&渲染能力

■<F------------------------------------------------------------1■7

1場(chǎng)景］

基礎(chǔ)特效材質(zhì)動(dòng)畫(huà)燈光

,」

/廠>

"'(、、、

點(diǎn)光

源

鍵

關(guān)

m后顏平移

骼

骨HDR

幀動(dòng)

息

3型Morph平行全局

畫(huà)

濾鏡變形動(dòng)旋轉(zhuǎn)環(huán)境

貼紙圓

畫(huà)

息

m妝PBRSSS動(dòng)畫(huà)光光照

光

縮放

聚光

-燈

i

卜

卜.-

一一

0?；>.J

y

ddvvwsa

@SoulAPP

a

開(kāi)放式兀宇宙場(chǎng)景

@SoulAPP

體驗(yàn)層

游戲化社交體驗(yàn)

SoulMeta意在通過(guò)構(gòu)建以3DAvatar

數(shù)字身份為核心的多元數(shù)字生態(tài)，實(shí)現(xiàn)

與用戶(hù)共建的：4

以Soul為連接的多終端社交元宇宙力應(yīng)用層

沉浸式場(chǎng)景"虛擬形象

4

推薦系統(tǒng)一一靈犀

跨場(chǎng)景聯(lián)動(dòng)業(yè)務(wù)價(jià)值

更精準(zhǔn)的相似興趣群組更匹配的靈魂匹配更及時(shí)的廣場(chǎng)內(nèi)容

推薦用戶(hù)推薦

匹配深度聊天率推薦廣場(chǎng)互動(dòng)消費(fèi)

用戶(hù)送禮率提升

提升提升

直接優(yōu)化場(chǎng)景內(nèi)業(yè)務(wù)效果

智能語(yǔ)音引擎--伶?zhèn)?/p>

應(yīng)

用

場(chǎng)數(shù)字人交互語(yǔ)音安全審核虛擬KTV房間

景@SoulAPP

功語(yǔ)音識(shí)別語(yǔ)音合成

能

模

塊

歌聲合成空間音頻

基ConformerWavZVecWFST

礎(chǔ)

算

法

FastSpeechGANLSTM

對(duì)話(huà)系統(tǒng)一一倉(cāng)頡

應(yīng)

用

■

知識(shí)融合人設(shè)定制主動(dòng)對(duì)話(huà)跨模態(tài)對(duì)話(huà)性能優(yōu)化

功

能數(shù)據(jù)分析

模長(zhǎng)期記憶倉(cāng)頡對(duì)話(huà)引擎情感撫慰

塊

安全過(guò)濾

私聊預(yù)訓(xùn)練GPT3生成精排屬性蘊(yùn)含情緒情感

模型模型模型識(shí)別模型識(shí)別模型數(shù)據(jù)清洗

■

數(shù)

據(jù)大規(guī)模預(yù)訓(xùn)練語(yǔ)料人工標(biāo)注語(yǔ)