在2024 年西雅图虚幻节上,英伟达发布了适用于Nvidia ACE 的新虚幻引擎 5 设备端插件半岛官网,可以让开发者更轻松地在 Windows PC 上构建和部署 AI 驱动的 MetaHuman 角色。
据IT之家了解,名为 Audio2Face-3D 的插件能够根据音频输入,实时生成准确的唇形同步和面部表情,让数字人的表情更加自然生动。
值得一提的是,ACE 技术不仅能生成逼真的面部动画,还具备强大的上下文理解能力半岛全站。借助检索增强生成(RAG)技术,数字人能够根据对话历史和上下文做出更自然、更符合逻辑的反应。
此次与虚幻引擎 5 的集成,使得开发者能够更加便捷地将 ACE 技术应用于游戏开发中。英伟达还提供了示例项目,为开发者提供了一个清晰的指引,帮助他们快速上手。