NVIDIA开源Audio2Face模型及SDK

发布时间:2026-04-04 02:30:02

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

NVIDIA开源Audio2Face模型及SDK

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

相关动态板块

画风相似!《GTA6》和《荒野大镖客2》画面对比、《GTA6》预告片2浏览量破亿

《GTA6》第二支预告片,R星官方频道浏览量现已破亿,仅用了四天时间。最近,有国外网友对比了《荒野大镖客2》(2018)和《GTA6》的画面,发现《GTA6》明显就是基于《荒野大镖客2》的技术打造的,

2026-04-04 06:00:02

《牧场物语 来吧!风之繁华集市》1.2.0版本更新 宾果新增“特别卡片2”

《牧场物语:丰收满屋 豪华版》1.2版本更新带来了全新欢乐宾果内容及多项优化调整,旨在提升农场经营与集市体验。本次更新追加「特别卡片第二弹」,内含三张全新宾果卡牌及一系列装饰奖励,亮点包括寿司师傅帽

2026-04-04 05:30:02

《明末:渊虚之羽》通关率升至26.4% 你通关了吗?

《明末:渊虚之羽》自推出后便争议不断,官方也在积极更新。最近1.5.1版更新上线,修复了诸多问题并进一步提升性能稳定性。玩家们也迸发热情,积极通关游戏。近日据Steam数据显示,击败最终BOSS“玄阳

2026-04-04 05:15:02

最新游戏商标曝光 经典红白机名作《特救指令》或将重制

9月4日今天,一个最新游戏登录商标《Shatterhand》曝光,据悉这是1991年登陆FC红白机的经典游戏,意味着官方或将重制,敬请期待后续消息。·《特救指令》是日本Bandai与Natsume共同

2026-04-04 04:15:02

双拇指残疾玩家求助无法玩Steam Deck 民间高手解决难题

日前一位有着两只左手拇指的残疾玩家发帖求助,称大拇指过短够不到左边摇杆,该如何玩Steam Deck,没想到很快就有民间高手支招解决难题。·Reddit玩家Alpha-Quartz就是有着罕见双拇指的

2026-04-04 01:45:02

神作再现! SE将举办《超时空之轮》30周年音乐会

史克威尔艾尼克斯公司(SE)宣布,为庆祝《超时空之轮》发行30周年,将于2026年1月在东京举办大型管弦音乐会。这场名为"穿越时空的旋律"的音乐会将于2026年1月17日至18日在东京国际论坛A厅举行

2026-04-04 00:30:02