
更多AI前沿科技资讯,请关注我们:
【closerAI ComfyUI】很强!AI视频之AI MV制作全流程:humo+infiniteTalk+wan强强联合!

大家好,我是Jimmy。这期围绕AI MV,我们前面很多期我们主要讲的是通过S2来生成视频,因为强,但是呢,目前S2不能通过音频驱动,但通过文生视频它很OK,我们看看:
没错,用它来做MV,真不错。
但是,有些音频想让它来理解后生成目前来看是不行的。那我们就没有办法了吗?方法还是有的。这期将围绕两个技术提供最强数字人的解决方案。
我们先看看效果:
这两个是我分别生成的两个AI MV视频。
主要用到两个技术。一个是HuMo,一个是infiniteTalk。
HuMo
HuMo是一个统一的、以人为中心的视频生成框架,旨在从多模式输入(包括文本、图像和音频)生成高质量、细粒度和可控的人类视频。它支持强大的文本提示跟随,一致的主题保留,同步的音频驱动运动。它算是此前我们介绍的Phantom的升级版本:【closerAI ComfyUI】更强更像更连贯!字节跳动重磅开源!Phantom-14B模型让AI视频生成进入主题一致时代!
项目地址:https://huggingface.co/bytedance-research/HuMo
InfiniteTalk:用于稀疏帧视频配音的音频驱动视频生成
项目地址:https://github.com/MeiGen-AI/InfiniteTalk
一种新的稀疏帧视频配音框架。给定一个输入视频和音频轨道,InfiniteTalk合成一个新的视频, 精确唇同步 而 同时调整头部动作、身体姿势和面部表情 带着音频与只关注嘴唇的传统配音方法不同,InfiniteTalk 无限长视频生成 具有精确的唇同步和一致的身份保持。此外,InfiniteTalk还可以用作图像-音频-视频模型,其中图像和音频作为输入。
具有以下特点:
💬 稀疏帧视频配音 - 同步不仅嘴唇,但aslo头,身体,和表情
⏱️ 无限长生成 - 支持无限的视频时长
✨ 稳定性 - 与MultiTalk相比,减少手部/身体扭曲
🚀 唇缘精确度 - 实现上级嘴唇同步到MultiTalk
通过这两个项目结合,使用infiniteTalk对口型,通过humo合成视频内容。
comfyUI中的实现
一、安装方法
InfiniteTalk和HumoKJ有实现版本,更新KJ wan视频节点,下载好模型
https://github.com/MeiGen-AI/InfiniteTalk/tree/comfyui
https://github.com/kijai/ComfyUI-WanVideoWrapper


二、工作流
加载我们的工作流:closerAI Humo+InfiniteTalk MV视频生成1029

工作流主要模块:
一、参考图去背景处理
这里如果大家有想要的服饰,用nano让模特穿上,这张参考图就是我根据平铺衣服来生成的:

二、音频加载与处理


裁剪出音频中需要的那一段。
因为是同一个视频,不同分镜画面。所以可以分成N段,然后再接WanVideo Sampler采样器生成。
三、WanVideo Sampler采样器
工作流看上去复杂,实质很简单。就是将音频与图像接入WanVideo Sampler采样器


模型加载如下:因为基于wan2.1的,实质就换下主模型和额外模型。

然后执行即可。注意,建议16~24G以上显存。不然会爆。最好在线上运行。

剩下的就是执行力了。
本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

AI MV:wan Humo+Infinitetalk视频生成应用体验地址:
https://www.runninghub.cn/ai-detail/1983560266946387970
注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151
通过这个链接第一次注册送1000点,每日登录送100点
最后几句:
如果对你有帮助,请一键三连支持下我,感谢
以下是我开发的节点,配合kontext能高效出片:
1、comfyUI kontext 标注助手节点:
http://closerai.douyoubuy.cn/2025/07/01/2089/
2、comfyUI kontext提示词生成器节点:
http://aigc.douyoubuy.cn/2025/06/30/2062/
3、closerAI 图像循环助手节点:
http://aigc.douyoubuy.cn/2025/07/05/2137/
4、closerAI 自由组合节点:
http://aigc.douyoubuy.cn/2025/07/24/2305/
5、closerAI 自动白边处理节点:
http://aigc.douyoubuy.cn/2025/07/28/2357/
6、closerAI NAG_Sampler节点:
http://aigc.douyoubuy.cn/2025/07/28/2354/
7、comfyUI kontext提示词生成器网页应用:
http://aigc.douyoubuy.cn/closerai-flux-kontext/
8、closerAI 图像自由组合在线版
http://aigc.douyoubuy.cn/closerai-imagefree/
以下是qw然en-image相关节点:
以下是我开发的节点,配合qwen-image能高效出片:
1、comfyUI qwen-image-edit提示词生成器节点:
http://aigc.douyoubuy.cn/2025/08/20/2615/
2、closerAI可视化中文编辑节点:
http://aigc.douyoubuy.cn/2025/08/11/2545/
以上是closerAI团队制作的stable diffusion comfyUI closerAI开发的节点以及
closerAI Humo+InfiniteTalk MV视频生成1029介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:
主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

评论(0)