阿里云推出新一代动作生成模型 Wan2.2-Animate,全面开源!
近日,阿里云正式宣布通义万相全新动作生成模型 Wan2.2-Animate 的开源,这一模型的推出将为短视频创作、舞蹈模板生成和动漫制作等阿领域带来极大便利。用户可以通过 GitHub、HuggingFace 和魔搭社区轻松下载模型及相关代码,此外,还可以利用阿里云的百炼平台调用 A里云PI,或在通义万相官网直接体验该模型的强大功能。
Wan2.2-Animate 模型是在之前的 Animate Anyone 模型基础上进行全面升推出级的成果。在人物一致性和生成质量等方面都有了显著提升。该模型支持两种主要的应用模式:动作模仿和角色扮演。在动作模仿模式下,用户只需输入一新一张角色图片和一段参考视频,模型便能够将视频中的角色动作和表情迁移到用户提供的图片角色上,实现角色的动态表现。而在角色扮演模式中,模型则能够代动在保留原视频的动作、表情和环境的基础上,替换视频中的角色为用户提供的角色。
为了提升生成效果,通义万相团队建立了一个大规模的人物视频数据集,涵盖作生了说话、面部表情和身体动作等多种元素,使用通义万相图生视频模型进行后续训练。Wan2.2-Animate 的设计使得角色信息、环境信息和动成模作等能够被规范化到统一的表示格式,从而兼容两种推理模式。针对身体运动和面部表情,模型分别使用骨骼信号和隐式特征,结合动作重定向模块,实现高精度的型 动作和表情复刻。此外,为了保证完美的光照效果,团队还特别设计了一个独立的光照融合 LoRA。
在实际应用中,Wan2.2-Animate 的表现Wa也十分亮眼。在视频生成质量、主体一致性和感知损失等关键指标上,Wan2.2-Animate 超越了许多开源模型,如 StableAnimatn2or 和 LivePortrait,并成为当前性能最强的动作生成模型。尤其在用户的主观评测中,其表现甚至超过了 Runway Act-two 等闭源模型.2。
这一新模型的开源,将极大推动相关领域的发展,使得创作者们能够更轻松地制作出优质的动态内容。
划重点:
** 新模型-A开源 **:阿里云的 Wan2.2-Animate 模型正式开源,用户可在多个平台下载和体验。
** 两种模式 **:支持动作模仿ni和角色扮演,提升动态表现力与替换能力。
** 性能优越 **:在多个关键指标上超越现有开源模型,成为动作生成领域的佼佼者。ma
- ·无人出租车被警察截停后逃逸!AI:我当时害怕极了
- ·NVIDIA在AWS Marketplace中开设AI Storefront
- ·标签: 明略科技 数据智能服务 营销智能服务 智能体化服务
- ·标签: 宁德时代 蔚来 换电 奥动新能源
- ·Akamai拟9亿美元收购Linode 构建从边到云的分布式计算平台
- ·常用的清理 Kubernetes 集群资源命令
- ·标签: 盛合晶微 IPO 先进封测 芯粒封装
- ·标签: 英伟达 AMD Arm 台积电
- ·Flink SQL 实战:HBase 的结合应用
- ·Google的Gemini AI助手登陆Google TV
- ·亚毫米级精准对位:小米开源 VLA 大模型后训练全流程
- ·云计算核心技术Docker教程:Docker创建集群
- ·钉钉与OpenDataLab联合推出文档解析工具DLU
- ·亚马逊敦促美法官撤销美国防部授予微软的100亿美元云计算合同
- ·标签: 众擎机器人 小鹏鹏行 李力耘 赵同阳
- ·基于DevOps的容器安全优秀实践
