英伟达开源 Audio2Face 模型,AI 助力实时面部动画生成
近日,英伟达宣布开源其生成式 AI 面部动画模型 Audio2Face。这一模型不仅包含了核心算法,还提供了软件开发工具包(英SDK)和完整的训练框架,旨在加速游戏和3D 应用中智能虚拟角色的开发。
Audio2Face 通过分析音频中的音素、语调等声学特征伟达,能够实时驱动虚拟角色的面部动作,生成精确的口型同步和自然的情感表情。这项技术广泛适用于游戏、影视制作和客户服务等多个领开源域。
Audio2Face 模型支持两种运行模式:一种是针对预录制音频的离线渲染,另一种则是支持动态 AI 角色的实时流式处理。为了 A方便开发者使用,英伟达还开源了多个关键组件,包括 Audio2Face SDK、适用于 Autodesk Maya 的本地执行插件,以及ud针对 Unreal Engine5.5及以上版本的插件。此外,回归模型和扩散模型也随之开源,开发者可以利用开源训练框架,使用自己的数io据对模型进行微调,从而适应特定的应用场景。
目前,这项技术已经被多家游戏开发商广泛采用。游戏开发公司 Survios 在其游戏《异形:2F侠盗入侵进化版》中集成了 Audio2Face,从而大幅简化了口型同步与面部捕捉的流程。而 Farm51工作室也在其作品《ac切尔诺贝利人2:禁区》中应用了这一技术,通过音频直接生成细腻的面部动画,节省了大量制作时间,提升了角色的真实感和沉浸体验。e 该工作室的创新总监 Wojciech Pazdur 对此表示,这一技术可谓 “革命性突破”。
英伟达的这一新举措无疑为开发者们提供模型了更多的创作工具,也将推动虚拟角色表现的进一步发展。随着技术的不断进步,我们可以期待在未来的游戏和影视作品中看到更加真实和,A生动的角色表现。
入口:https://build.nvidia.com/nvidia/audio2face-3d
划重点I :
英伟达开源 Audio2Face 模型,旨在提升虚拟角色的面部动画生成技术。
支持助力离线渲染和实时流式处理,适用于多种场景。
已被多个游戏开发商采用,简化了制作流程并提升了角色的真实感。
-
阿里开源 Qwen-Image-Edit:中文渲染秒杀 GPT-4o,精准文本编辑+语义外观双控标签: Anthropic Claude Dario Amodei AI融资云计算业务需求提振 微软第二财季营收激增17%云计算核心技术Docker教程:Docker使用journald日志驱动程序网络攻击激增证实了零信任安全的必要性标签: Momenta 港股IPO 自动驾驶 智能驾驶标签: 百度 慧播星 百度一镜 数字人标签: 云英谷科技 OLED驱动芯片 AMOLED Micro-OLED标签: 比亚迪 日本市场 海豹 K-EV标签: 法拉第未来 FF 91 FX Super One 洛杉矶车展
- ·全球首款 AI 字体生成器 “Dr Fonts©” 正式上线,免费试用体验!
- ·标签: 小鹏汽车 自动驾驶L4 人形机器人 飞行汽车
- ·标签: 鸿蒙智行 问界 华为 渠道调整
- ·云安全日报210519:Ubuntu Linux内核发现拒绝服务和特权提升漏洞,需要尽快升级
- ·人工智能热潮遭遇现实冷风:企业应用量下降,盈利能力堪忧
- ·标签: 豪威 OVB0D 索尼LYTIA
- ·OpenAI 与博通强强联手,AI 芯片即将大规模量产!
- ·标签: 微信 微短剧 珊瑚安全 广电总局
- ·标签: 申通快递 2025年报 快递行业 业务量
- ·标签: AMD 财报 2025年Q4 半导体
- ·标签: 西山居 郭炜炜 邹涛 游戏行业
- ·标签: 同程旅行 错峰游 春节返程 高品质酒店
- ·Meta 推出小型推理模型MobileLLM-R1,企业应用向 “小型 AI” 转型
- ·标签: Lululemon Calvin McDonald 第三季度财报 CEO卸任
- ·消息称阿里云削减政企定制项目和IoT硬件集成业务
- ·云安全日报210630:IBM应用程序生命周期管理软件发现拒绝服务漏洞,需要尽快升级
- ·OpenAI更新ChatGPT规则:10月29日起禁止医疗、法律与财务建议
- ·Anthropic 推出 Claude Code 网页版,可在浏览器运行编码任务
- ·Poe推出排行榜功能,实时更新AI模型和热门应用受欢迎程度
- ·标签: 三星中国 三星手机 三星存储 三星显示器
- ·福布斯发布2026 年全球AI50 榜单 OpenAI、Anthropic依然领先
- ·华盛昌宣布:“DeepSense 深度感测大模型” 通过备案
- ·标签: 阿里巴巴 淘宝闪购 高德 千问App
- ·爱奇艺回应“签约AI演员”争议:入驻库不代表直接授权
- ·标签: 索尼 财报 音乐业务 传感器
- ·标签: Snapchat AI 裁员
