震撼开源！开源界福音！通义万相 Wan2.1-VACE 正式开源！集视频生成与编辑大统一模型！能力强大效果炸天！

更多AI前沿科技资讯，请关注我们：

closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

【closerAI ComfyUI】震撼开源！开源界福音！通义万相 Wan2.1-VACE 正式开源！集视频生成与编辑大统一模型！能力强大效果炸天！

大家好，我是Jimmy。5月14日，通义万相正式宣布开源其最新的视频生成与编辑模型——通义万相 Wan2.1-VACE。这一模型的推出标志着人工智能在视频处理领域取得了重大突破，成为目前业界功能最为全面的视频生成与编辑工具。

项目地址：

https://github.com/Wan-Video/Wan2.1

https://github.com/ali-vilab/VACE

1. wan2.1-VACE大一统的视频生成与编辑模型

这是目前业界首个支持文生视频、图生视频、视频编辑、背景延展、时长扩展等全流程视频生成与编辑能力的AI模型。

该模型提供1.3B和14B两个版本，其中1.3B轻量版可在消费级显卡运行，极大降低了开发者使用门槛。

2. 核心功能与技术突破

(1) 全能视频生成与编辑能力

Wan2.1-VACE 支持：✅ 文生视频（Text-to-Video）—— 输入文字描述生成视频✅ 图生视频（Image-to-Video）—— 基于参考图像生成动态视频✅ 视频重绘（Video Inpainting）—— 局部修改视频内容✅ 视频背景延展（Background Extension）—— 扩展视频画布✅ 视频时长扩展（Duration Extension）—— 延长视频长度

(2) 创新架构：视频条件单元（VCU）

• 统一输入形态将文生视频、图生视频、视频编辑等任务统一处理，简化模型架构。
• 多模态输入优化采用可变序列+不可变序列编码方式，提升训练效率。
• 控制信号支持兼容文本、图像、Mask、深度图、光流等控制信号，实现更精细的生成控制。

(3) 灵活组合能力

用户可通过自由组合基础功能实现复杂任务，例如：

• 物体替换（图片参考 + 主体重塑）
• 竖版转横版视频（图片参考 + 首帧参考 + 背景扩展 + 时长延展）

3. 技术优势

🔹 高效训练：VCU 架构减少冗余计算，提升训练速度。🔹 高质量生成：支持角色一致性、运动姿态控制，生成视频更自然。🔹 轻量化设计：1.3B 版本可在消费级显卡运行，降低部署成本。

wan2.1-VACE 在comfyUI中的实现

其实在今年3月31日在VACE仓库已发布1.3B预览版本。当时已掀起波澜。5月14日正式在wan官方发布VACE 1.3B与14B版本。

那在comfyUI中如何使用呢？

使用KJ节点：https://github.com/kijai/ComfyUI-WanVideoWrapper 更新最新版

下载KJ版的量化模型：https://hf-mirror.com/Kijai/WanVideo_comfy/tree/main

根据自己设备情况下载。下载后放置diffusion_models下，加载KJ示例工作流：

这里我们测试wan2.1 VACE首尾帧效果体验

使用的是14B量化模型。加载两张图如下：

加载好对应模型：

这里要注意，加载方式跟之前方式不同，框住的请细看。

执行后跑出来结果如下：

因为是14B的模型，质量非常高，人物还原度高，运镜丝滑！

正如前面介绍wan VACE 还能处理更多任务：

本地算力不够怎么办？

如果本地设备算力不好的小伙伴，推荐使用线上comfyUI来运行体验：runninghub.cn

runninghub.cn wan2.1 VACE 首尾帧体验地址：

https://www.runninghub.cn/ai-detail/1922819176535310337

注册地址：https://www.runninghub.cn/?utm_source=kol01-RH151

通过这个链接第一次注册送1000点，每日登录送100点

最后几句：

Wan2.1-VACE 的开源标志着AI视频生成进入全功能时代，其灵活的任务组合能力和高效架构为开发者提供了强大的工具，有望推动视频创作、影视制作、广告设计等领域的革新。

以上是wan2.1 VACE介绍的全部内容以及在comfyUI中的实现，以及closerAI团队制作的stable diffusion comfyUI closerAI搭建closerAI VACE工作流介绍，大家可以根据工作流思路进行尝试搭建。

当然，也可以在我们closerAI会员站上获取对应的工作流(查看原文)。

以上，既然看到这里了，如果觉得不错，随手点个赞、在看、转发三连吧，如果想第一时间收到推送，也可以给我个星标⭐～谢谢你看我的文章，我们，下次再见。

>/ 作者：JimmyMo

更多AI前沿科技资讯，请关注我们：

closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示：请在后台主题设置-主题授权-激活主题的正版授权，授权购买：RiTheme官网