NVIDIA开源Audio2Face模型及SDK

发布时间:2026-06-09 06:15:01

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

NVIDIA开源Audio2Face模型及SDK

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

相关最新资讯

《红色的炼金术士和白色的守护者蕾斯莱莉姬娜的炼金工房》情报第三弹!

全新「王道炼金工房作品」 于PlayStation5 / Nintendo Switch / Steam 登场! 本作无须连接网路即可游玩※ 承袭「炼金工房」系列一直以来的游玩体验,同 时更加进化,让

2026-06-09 03:45:01

《完美黑暗》彻底无了? 曝微软与R星母公司谈判破裂

《完美黑暗》原计划在明年发售,但随着微软大规模裁员,该项目近日被取消。这轮裁员波及多个工作室,导致项目流产与大批员工失业。在受害项目中,《完美黑暗》无疑是Xbox最受期待的作品之一。不过,据最新报道,

2026-06-09 03:15:01

不!这不是一份礼物! Steam可疑私信内容警报功能测试上线

V社在10月30日面向Steam客户端测试版发布更新,进行了多处调整。其中值得注意的是,在Steam内部聊天中,对于可能包含恶意内容的消息,现在会显示警告。在本次Steam客户端测试版更新中,进行了多

2026-06-09 01:30:01

日本电竞2024白皮书发布 规模达200亿日元

日本电竞协会于3月31日今天宣布,《日本电竞白皮书2024》,定价不菲高达99000日元,一起来了解下部分公开的内容,预计今年日本国内的电竞市场规模达200亿日元。·《日本电竞白皮书》2022年创刊,

2026-06-09 00:30:01

Steam验证服务公司遭黑客攻击 可能导致数据泄露

最近为Steam等多个服务提供两步验证(双因素认证)系统的Twilio公司疑似遭遇黑客攻击,部分数据已被泄露。据游戏记者Mellow_Online1报道称,有海外网站正在买卖名为Twilio的两步验证

2026-06-09 00:00:01

前开发者称贝塞斯达转用虚幻引擎 或将威胁MOD生态

在2023年,B社推出的《星空》对Creation引擎进行了彻底的升级。尽管如此,这款游戏并未如预期般引起轰动,网上批判Creation引擎的声音也越来越多。众多网络评论建议B社应放弃自主研发的Cre

2026-06-08 23:45:01