更多AI前沿科技资讯，请关注我们：
【closerAI ComfyUI】超强主体一致性！频生成一致性新利器！MAGREF：基于掩码引导的多参考视频生成框架！效果炸天！
大家好，我是Jimmy。基于wan2.1视频模型又增加一员猛将，名叫MAGREF，它的能力是能保持主体一致性视频生成！很屌很炸裂！必须用起来！
先看效果：
添加图片注释，不超过 140 字（可选）
MAGREF：基于掩码引导的多参考视频生成框架
一、MAGREF 是什么？
MAGREF（Masked Guidance for Any-Reference Video Generation）是一个专注于视频生成的开源项目，由 MAGREF-Video 团队开发。其核心技术通过掩码引导机制，实现了基于文本描述、参考图像等多种输入形式的高质量视频生成。项目于 2025 年 6 月正式开源，目前已发布推理代码和模型，支持单 GPU 和多 GPU 部署，致力于解决视频生成领域中分辨率、时间一致性和生成质量的优化问题。
项目链接：https://github.com/MAGREF-Video/MAGREF
技术核心与架构
- 多模态输入支持兼容文本提示（Text-to-Video）、参考图像（Image-to-Video）、首末帧（First-Last Frame to Video）等多种输入模式
- 分布式训练框架基于 PyTorch 实现，集成 FSDP（Fully Sharded Data Parallel）技术支持大规模模型训练
- 模块化设计核心代码包含模型架构（magref/modules）、推理工具（generate.py）、多 GPU 脚本（infer_multi_gpu.sh）等组件
二、MAGREF 有什么用？
核心功能与应用场景
- 创意内容生成
- 为影视特效、广告制作提供自动化视频生成能力，降低素材制作成本
- 支持通过文本描述快速生成概念视频，适用于动画预演、短视频创意构思
- 视觉效果优化
- 提升低分辨率视频的清晰度（如 480P 升级），增强时间维度的动作连贯性
- 基于参考图像风格生成一致性视频，满足角色动画、场景漫游等需求
- 科研与技术验证
- 为视频生成领域的学术研究提供可复现的工程框架
- 支持自定义数据集训练，推动多模态生成模型的技术迭代
解决的行业痛点
- 传统视频制作流程冗长通过 AI 生成减少手动关键帧绘制和特效合成工作量
- 跨设备部署难题提供单 GPU（需 80GB VRAM）和多 GPU 推理方案，适配不同算力环境
- 生成效果可控性差支持通过文本提示精细化调整视觉内容，可通过种子值（--base_seed）和提示词优化结果
comfyUI中的实现与体验
目前KJ大佬已对MAGREF模型进行fp8量化。
在其抱脸主页的模型页中下载即可：
基于此，我们搭建了MAGREF的使用工作流：
工作流由图像去背景处理，外扩，然后进入视频生成即可。
MAGREF的使用很简单，基于KJ版的wan2.1视频生成工作流换底模就行了。
这里加入了前面介绍的lightX2V加速LORA：
【closerAI ComfyUI】快到变态！300多M的LORA却如此犀利！四步加速生视频！万相视频生成模型生态再次起飞！冲！
对生成视频进行放大补帧处理：
工作流使用方法：
1、加载一张图：
2、设置宽高和帧率
3、外扩处理成横屏（根据需要吧，要竖屏忽略即可）
4、采样生成
参数参考如下：
提示词写下：
在一个现代感十足的时尚秀场，灯光聚焦于 T 台。一位模特身着以粽子为灵感的独特服饰，上身是带有粽叶元素的短上衣，搭配层叠裙摆，下身是粽叶造型短裙，脚踩精致高跟凉鞋。模特头戴可爱的卡通粽子头套，面带俏皮笑容。背景是简洁的白色墙面，醒目地印着 “closerAI FASHION SHOW” 字样 ，地面是色彩斑斓的几何图案。整体画面充满未来感与创意，营造出奇幻又前卫的时尚氛围。
放大补帧后最后效果如下：
本地算力不够怎么办？
如果本地设备算力不好的小伙伴，推荐使用线上comfyUI来运行体验：runninghub.cn
magref+图生视频+放大补帧体验地址：
https://www.runninghub.cn/ai-detail/1935933864269574145
注册地址：https://www.runninghub.cn/?utm_source=kol01-RH151
通过这个链接第一次注册送1000点，每日登录送100点
最后几句：
高度主体一致性，非常好的一致性，可玩性强，能基于此搞很多内容 。让你高效出片！
以上是closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI magref主体一致性视频生成工作流介绍，大家可以根据工作流思路进行尝试搭建。
当然，也可以在我们closerAI会员站上获取对应的工作流(查看原文)。
以上，既然看到这里了，如果觉得不错，随手点个赞、在看、转发三连吧，如果想第一时间收到推送，也可以给我个星标⭐～谢谢你看我的文章，我们，下次再见。
>/ 作者：JimmyMo
更多AI前沿科技资讯，请关注我们：
主题授权提示：请在后台主题设置-主题授权-激活主题的正版授权，授权购买：RiTheme官网
评论(0)