NVIDIA开源Audio2Face模型及SDK

发布时间:2026-03-21 03:00:03

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

NVIDIA开源Audio2Face模型及SDK

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

相关信息更新

《上古卷轴4:重制版》并非完全重制 只是现代化升级

近日B社举行发布会,正式公布了《上古卷轴4:重制版》。Steam国区售价249元,总评为“特别好评”。有玩家认为该作画面精美,优化也好。但也有玩家认为这是复刻版而非重制版。B社发文称,《上古卷轴4:重

2026-03-21 04:30:03

《无主之地4》加入小吵闹音量 可以完全让小吵闹闭嘴

《无主之地4》在设置菜单中新加入了一个“小吵闹音量”滑条,如果你感觉小吵闹太吵了,你可以下调小吵闹的声音,甚至可以做到完全关闭。如果你真的讨厌小吵闹的声音,那么你在《无主之地4》中可以将其禁声 小吵闹

2026-03-21 04:15:03

《无主之地4》大更新! 修复内存泄露问题

《无主之地4》近日推出跨平台技术优化补丁,针对玩家反映强烈的内存泄漏问题,开发商Gearbox确认已取得修复进展。创意总监格雷姆·蒂明斯在更新发布后回应社区关切,强调开发团队将持续致力于游戏稳定性与平

2026-03-21 03:30:03

索尼新专利:游戏角色口型能同步不同语言

近十年来AI和游戏技术飞速发展,游戏公司也在争相申请最疯狂的专利创意。现在索尼的一项新专利,可能将彻底改变我们所知的的游戏开发。近日索尼公布了一项新专利,其描述了一套面向游戏NPC的次世代唇形同步系统

2026-03-21 02:30:03

《巫师》小说作者透露叶奈法灵感来源:来自多位女神

近日《巫师》系列小说作者安杰伊·萨普科夫斯基揭露了他创作的女性角色叶奈法的灵感来源。最近安杰伊接受采访时被问及叶奈法是否有具体原型,他承认借鉴了许多不同的灵感。安杰伊说:“叶奈法的灵感来源很多,多到我

2026-03-21 02:15:03

Motive招聘关卡设计师 《钢铁侠》游戏开发已达里程碑

近日,EA在其招聘网站上发布了一则新的职位空缺信息,该职位是为负责设计“主要单人关卡”的关卡设计师而设。除了设计关卡,该招聘职位的职责还包括将关卡带入开发的每个阶段。他们需整合开发和测试的反馈,并与团

2026-03-21 01:00:03