更多AI前沿科技资讯,请关注我们:https://aigc.douyoubuy.cn/
comfyui的教程:
【closerAI ComfyUI】动作还在,主角换了?Viggle Remake基于 MiniMax-H3的视频重制项目,支持动作迁移与视频编辑

大家好,我是Jimmy。
手里已经有一段视频,人物动作合适,镜头也满意,只想把主角换一下,或者把背景里的某个东西去掉。重新生成一遍,动作和运镜很可能跟着变。逐帧处理,又要面对前后不一致的问题。
11月4日, Viggle AI又整活,开源Viggle Remake,就是围绕视频编辑这方面做的项目。它基于 MiniMax-H3,让源视频继续提供动作、运镜和时间节奏,再结合目标参考图与提示词,修改里面的人物、物体或场景。
这次,我也整理了两份适配 ComfyUI 的轻量 LoRA,每份约 236MB,并把工作流接回了原来 H3 的省显存方案。下面介绍下这个项目的亮点与comfyUI的使用方法。
一、Viggle-Remake:视频重制与编辑
Viggle开源的介绍中,极其简单的向我们介绍了这个项目的作用:想重制任何视频?只要开口。

我们直接看它的示例:

完美地将人物进行替换。
Viggle Remake 提供两种模式,对应两套 LoRA。

1、swap替换人物或角色 ,把视频中的主角换成目标角色,保留原动作和镜头 。
2、edit 修改物体和环境,删除画面里的物体,替换道具,调整背景、天气、光照或风格
比如,一段角色动作已经设计好的短片,可以围绕这段动作制作不同角色的版本;一条镜头节奏合适的素材,也可以尝试修改里面的道具或环境,而不用重新设计整段视频。
我比较看重的是这类“保留已有设计,再做局部版本迭代”的用途。做短片、角色概念验证、同一镜头的不同视觉方案时,它有研究价值。
不过,保留动作和运镜是模型的目标,具体能保留到什么程度,还要看素材、参考图和参数。官方也列出了长镜头里的非人形角色、细节瑕疵、多镜头时间漂移等已知问题。
还有一个区别:它沿用源视频的声音,不负责生成新的声音。原片静音,结果也不会凭空有对白或音乐。
项目地址:https://huggingface.co/Viggle/Viggle-Remake
二、comfyUI中的使用与体验
如何在comfyUI中使用呢?
它提供了comfyUI的量化LORA模型:

但是,这两个模型体积都非常大。大家直接下载使用是没有问题的。

作为本身本地设备条件有限的我,显存与硬盘空间都告急,我将这两个LORA进行了一些降秩压缩转换,形成了两个236MB的lORA版本。所以,这套方案可以理解为:量化的 H3 底模,加上降秩压缩后的轻量 LoRA。
两份 rank16 LoRA,分别对应角色替换与场景编辑;两类工作流,分别面向直接测试和中文需求转换。

它们尽量复用已有 H3 环境,减少重新下载和重新接线的工作。
已经搭过 MiniMax-H3 的用户,可以复用现有环境和匹配的模型组件。新用户则需要先准备底模、文本编码器、视频 VAE、音频 VAE,再安装 Remake 节点。
我这次的 KJ 版采用以下配置,供大家对照文件位置:

然后要下载Viggle官方的comfyUI节点,如下图框住的位置:

下载好后,打开我们的工作流:
首先是看视频编辑工作流:closerAI-Viggle-Remake-edit-视频编辑工作流1105

模型加载方面,使用comfyUI官方基础工作流,接入lora:

接入素材:一段视频与一张图。

原视频:

参考图:

这里需要提前基于视频的画面,抽帧抽出其中一张,使用图像编辑模型进行图像修改,这里我使用flux2klein进行编辑,将衣物修改成绿色,如下图所示:

然后加载到closerAI-Viggle-Remake-edit-视频编辑工作流中。
这里采用6步Sigmas值:直接参考我的。

直接运行,这里我跑了5秒左右,没有跑完原视频长度,效果如下图所示:

其次,是角色替换的工作流实现:

主要变化就是LORA,换成替换LORA。
输入参考视频:

转换后的视频如下:

效果非常赞,唯一缺点是什么,就是在视频编辑方面需要自己准备关键帧的参考图,要自己选通过图像编辑模型形成关键帧的参考图,有些麻烦。但出来的效果是非常棒的。如果是长视频,则需要分段,最长支持是12秒的。
其中还有一点要注意,提示词按理来讲是要写规范的minimaxH3表格的。我的minimaxH3-helper套件节点中的提示词优化节点也同步支持了。

以上就是Viggle remake的comfyUI的使用方法与体验。
有了这套方案,我们也直接集成到我们的closerAI flowStudioPro中使用:

以上是本期内容。如果对你有帮助,请一键三连支持下我哦,这对我而言很重要,谢谢!
原文地址:https://aigc.douyoubuy.cn/2026/11/05/422466/
会员小伙伴可在小站上下载本期工作流、优化节点、模型。
我在RH上也生成了简单的minimaxH3的角色替换的应用,可以直接在上面体验下
本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

MinimaxH3角色替换(简约版):
注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151
或者输入邀请码:kol01-rh151
国际站邀请码:graufo3b
通过这个链接第一次注册送1000点,每日登录送100点
最后几句:
如果对你有帮助,请一键三连支持下我,感谢!以下是小站主流的一些AI工具应用:
- CloserAI AI短剧工作台(本地化解决方案) https://aigc.douyoubuy.cn/ai-agent/
- closerAI FlowStudio本地AIGC无限画布创作工具 https://aigc.douyoubuy.cn/closerai-flowstudio/
- closerAI AI绘画大师万象视界: https://aigc.douyoubuy.cn/closerai-vision/
- CLOSERAI POD电商印花批量生产工作站: https://aigc.douyoubuy.cn/?page_id=420541
- closerAI flowStudio Pro万能全链工作台: https://aigc.douyoubuy.cn/closerai-flowstudio-pro/
以上是就是本期的分享,当然,更多工作流、资讯、插件、工具也可以在我们closerAI会员站上获取(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

评论(0)