最近有很多數(shù)字人開發(fā)者看了B站頻道”小智同學(xué)來(lái)了”,找我們要了源碼和教程,開發(fā)者反饋了一些問(wèn)題,希望我們提供詳細(xì)的教程,我們也將一些反饋整理如下:
1、NLP文字OnNLPDrive()函數(shù)的調(diào)用傳參,需要注意只能傳文本語(yǔ)音(語(yǔ)音文件鏈接(.wav, .mp3)或者內(nèi)容為語(yǔ)音base64的文件鏈接(.json));不能是音樂(lè)、純電音等音頻。
解決方案:
文本文字免費(fèi)轉(zhuǎn)URL語(yǔ)音音頻鏈接:https://www.text-to-speech.cn
測(cè)試音頻:ds-model-tts.tos-cn-beijing.volces.com/temp/168956149023317142.wav
2、整個(gè)Demo項(xiàng)目跑下來(lái),蠻有意思的、對(duì)于想用Unity開發(fā)數(shù)字人還是很方便。調(diào)用Motionverse 3種API接口,直接驅(qū)動(dòng)數(shù)字人進(jìn)行語(yǔ)音播報(bào)及對(duì)應(yīng)的面部表情和肢體動(dòng)作。
3、希望能夠提供導(dǎo)入自己數(shù)字人使用教程,本版本使用平臺(tái)提供的數(shù)字人,下個(gè)版本會(huì)做Ready Player Me導(dǎo)入教程
以下是文字教程:
一、Unity3D安裝
Unity3D(我的Unity3D是2022.3.0f1c1最新版本)
引用原作者:Dugege007的Unity3D保姆級(jí)安裝教程:
https://blog.csdn.net/Dugege007/article/details/128472571
二、進(jìn)入Motionverse官網(wǎng)
1、注冊(cè)Motionverse賬號(hào):http://motionverse.deepscience.cn/#/
Motionverse是一款面向開發(fā)者的業(yè)務(wù)中臺(tái),利用AI技術(shù),提供多模態(tài)實(shí)時(shí)驅(qū)動(dòng)虛擬數(shù)字人的解決方案。它通過(guò)SDK和管理后臺(tái),解決產(chǎn)品和終端的虛擬數(shù)字人驅(qū)動(dòng)問(wèn)題。在元宇宙世界中,Motionverse能滿足大量虛擬數(shù)字人的動(dòng)作表情需求,通過(guò)各種輸入情況,智能實(shí)時(shí)生成所需的動(dòng)作表情和口型。作為中臺(tái)產(chǎn)品,Motionverse以API/SDK的形式,向行業(yè)開放性提供解決方案,使數(shù)字人驅(qū)動(dòng)變得更簡(jiǎn)單,更實(shí)時(shí),更低成本。2、創(chuàng)建應(yīng)用: 請(qǐng)按下圖5步驟實(shí)現(xiàn)。
3、點(diǎn)擊“配置" 獲取應(yīng)用的AppID和Secret號(hào),同時(shí)設(shè)置數(shù)字人的聲音、問(wèn)答庫(kù)。恭喜你、到這里你就已經(jīng)完成了前期的Unity3D環(huán)境搭建、數(shù)字人驅(qū)動(dòng)應(yīng)用API接口的設(shè)置。
4、下一步就是創(chuàng)建Unity3D項(xiàng)目、下載Motionverse插件且導(dǎo)入數(shù)字人資源包到Unity3D項(xiàng)目?jī)?nèi)、數(shù)字人驅(qū)動(dòng)數(shù)據(jù)配置。
5.補(bǔ)充“對(duì)接說(shuō)明”中如何快速導(dǎo)入U(xiǎn)nity3D插件資源。注意:對(duì)于Unity2022版本,需要在Player設(shè)置中允許Http下載,否則會(huì)報(bào)錯(cuò)。
三:Motionverse模型三大接口測(cè)試
1、打開Sample腳本文件、分別簡(jiǎn)單使用聲音文件OnAudioUrlDrive()函數(shù)、文字OnTextDrive()函數(shù)、NLP文字OnNLPDrive()函數(shù),等3種函數(shù)驅(qū)動(dòng)數(shù)字人。文章來(lái)源:http://www.zghlxwxcb.cn/news/detail-736866.html
- 效果如下:
整個(gè)Demo項(xiàng)目跑下來(lái),蠻有意思的、對(duì)于想用Unity開發(fā)數(shù)字人還是很方便,調(diào)用Motionverse 3種API接口,直接驅(qū)動(dòng)數(shù)字人進(jìn)行語(yǔ)音播報(bào)及對(duì)應(yīng)的面部表情和肢體動(dòng)作。
?文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-736866.html
到了這里,關(guān)于數(shù)字人系列一:10分鐘打造AI對(duì)話數(shù)字人(平臺(tái)提供數(shù)字人和問(wèn)答庫(kù))的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!