【ITBEAR】英偉達(dá)在西雅圖虛幻節(jié)上宣布推出新的虛幻引擎5插件,該插件專為英偉達(dá)的ACE技術(shù)開發(fā),有助于開發(fā)者更便捷地在Windows PC上構(gòu)建和部署AI驅(qū)動的metaHuman角色。
這款新插件名為Audio2Face-3D,它能根據(jù)音頻輸入實時生成準(zhǔn)確的唇形同步和面部表情,極大提升了數(shù)字人角色的表現(xiàn)力,使其表情更為自然。
ACE技術(shù)不僅限于生成逼真的面部動畫,它還擁有出色的上下文理解能力。借助檢索增強生成技術(shù),數(shù)字人能根據(jù)對話內(nèi)容和背景做出更為合理且自然的反應(yīng)。
通過與虛幻引擎5的深度融合,英偉達(dá)為游戲開發(fā)者提供了一種更為簡便的方式,將ACE的先進(jìn)技術(shù)快速應(yīng)用到游戲制作中。同時,英偉達(dá)還準(zhǔn)備了示例項目,為開發(fā)者提供了實用的學(xué)習(xí)指南。