【ITBEAR】英偉達在西雅圖虛幻節上宣布推出新的虛幻引擎5插件,該插件專為英偉達的ACE技術開發,有助于開發者更便捷地在Windows PC上構建和部署AI驅動的metaHuman角色。
這款新插件名為Audio2Face-3D,它能根據音頻輸入實時生成準確的唇形同步和面部表情,極大提升了數字人角色的表現力,使其表情更為自然。
ACE技術不僅限于生成逼真的面部動畫,它還擁有出色的上下文理解能力。借助檢索增強生成技術,數字人能根據對話內容和背景做出更為合理且自然的反應。
通過與虛幻引擎5的深度融合,英偉達為游戲開發者提供了一種更為簡便的方式,將ACE的先進技術快速應用到游戲制作中。同時,英偉達還準備了示例項目,為開發者提供了實用的學習指南。