Audio2Face 是一款由 NVIDIA 推出的基于人工智能技術(shù)的創(chuàng)新應(yīng)用程序,旨在通過語音輸入生成逼真的 3D 面部動畫。該工具廣泛應(yīng)用于游戲、電影制作、實(shí)時數(shù)字助理以及娛樂和實(shí)驗性項目中,極大地簡化了 3D 角色動畫的制作流程。
Audio2Face官網(wǎng)入口網(wǎng)址:https://build.nvidia.com/nvidia/audio2face-3d

Audio2Face 的核心功能是將音頻輸入實(shí)時轉(zhuǎn)換為面部動畫。用戶只需上傳音頻文件,即可通過預(yù)訓(xùn)練的深度神經(jīng)網(wǎng)絡(luò)驅(qū)動角色的面部表情和唇部動作。這一過程不僅支持多種語言,還允許用戶調(diào)整表情和動作參數(shù),從而實(shí)現(xiàn)高度個性化的動畫效果。此外,Audio2Face 還支持角色轉(zhuǎn)移功能,用戶可以將任何 3D 人臉模型重新定位到目標(biāo)角色上,并通過 AI 網(wǎng)絡(luò)控制角色的情緒表達(dá)。
Audio2Face 的技術(shù)基礎(chǔ)來源于 NVIDIA 的 Omniverse 平臺和其原創(chuàng)論文研究。它預(yù)裝了“數(shù)字標(biāo)記”3D 角色模型,用戶可以通過簡單的操作即可開始制作動畫。這一工具還支持多種輸出格式,包括 USD 文件,可以直接導(dǎo)出到 Unreal Engine 和 Maya 等主流軟件中進(jìn)行進(jìn)一步處理。
在實(shí)際應(yīng)用中,Audio2Face 已被廣泛用于多個場景。例如,在游戲開發(fā)中,完美世界旗下的仙俠MMORPG 端游《誅仙世界》通過接入 Audio2Face 技術(shù),實(shí)現(xiàn)了角色表情的自動化生成,顯著提升了游戲的真實(shí)感和開發(fā)效率。此外,Audio2Face 還被用于 Misty 動畫聊天機(jī)器人和 Omniverse Mecanim 等項目中,展示了其在不同領(lǐng)域的廣泛應(yīng)用潛力。
Audio2Face 的界面友好且功能強(qiáng)大,適合個人創(chuàng)作者和專業(yè)團(tuán)隊使用。它不僅降低了動畫制作的技術(shù)門檻,還為數(shù)字內(nèi)容創(chuàng)作者提供了新的可能性。無論是生成逼真的角色動畫,還是創(chuàng)建虛擬形象,Audio2Face 都是一個不可或缺的工具。



