更多AI前沿科技资讯,请关注我们:
【closerAI ComfyUI】本地无限制的生产方式!口播、卖货直播视频也能生成!自定义音频+多画面参考的LTX2.3的N宫格分镜视频生成法!

大家好,我是Jimmy。
前言:
关于AI视频生成,开闭源是存在差距的,这毋庸置疑。闭源模型最强是Seedance2.0这已经是目前的事实,只要大家在工作上觉得内容可以用钱去生产解决的,能在合理的承受范围内,直接使用seedance2.0就完事了。
那开源模型就不能用了吗?就真的时一无事处了吗?NO,任何事物,存在即合理!开源视频模型本地生成无限制,这里说的就是内容上的不限制,时长不限制,只费电等等。单单“内容上的不限制”这一条就能与闭源模型抗衡。开源模型是自由生产的象征,且未来是要以终端及边缘算力为方向的,只有能触及用户的设备才能让解决数据安全等问题。为什么最近大厂如谷歌搞gemma4且能在手机就能推理和使用?在我看来任何个人产生的行业数据、生产数据等都是个人私有财产。而目前我们使用的都是中心化的软件应用产生的任何数据都不是直接属于“个人的”!那开源模型本地化生产所形成的数据都是私有化的,这就是重要差别:数据资产私有化。为什么这一点很重要?思考下你在其它平台使用AI生成的内容是真正属于你的吗?你证明不了,因为这个AI工具不是去中心化的且你生产的数据在别人服务器里,你甚至不能物理删除它!
为什么上面聊这么多?算是作为开源模型作为本地生产力工具的论点吧。开闭源各有各有优缺点,根据实际情况能解决自己工作上的问题就好。
正文:
这期还是关于开源视频生成模型LTX2.3模型的。为什么最近分享这么多呢?因为围绕LTX2.3的生态地完善,技术在迭代进步,如LTX2.3蒸馏版的V1.1发布,以及KJ大佬复现了Prompt Relay 项目:用于多事件视频生成中时间控制的推理时间提示路由。这的作用是在长视频中精准控制不同事件发生的时间点。Prompt Relay 提供了一个低成本、高效率的方案,通过文字精准地“定场”和“转场”。
项目地址:https://gordonchen19.github.io/Prompt-Relay/
KJ复现项目:https://github.com/kijai/ComfyUI-PromptRelay
以及一些一致性LORA、编辑LoRA等的出现以及量化模型的技术,在一定程度上提高了LTX2.3生产质量与生产效率。所以围绕它的我们的一些工作流也是需要调整与迭代的。
LTX2.3能文生视频、图生视频、音频生视频等,前面也介绍了围绕它并结合GPT image2.0的N宫格分镜图生视频生成法:【closerAI ComfyUI】强得离谱!LTX2.3的N宫格分镜视频生成法!GPT image2负责一致性生成N宫格分镜,LTX 2.3直接生成!显存越强它越强!
【closerAI ComfyUI】GPT image2+LTX2.3四宫格分镜图视频生成法:高效生产AI漫剧/短剧的解决方案工作流!
那这期介绍如何自定义音频+多参考图进行视频生成。

以四宫格的工作流为例,主要修改的地方是在音频的输入。之前是空音频输入。现在是需要加载一段音频接入,通过加载音频节点加载一个音频文件来替换原来空音频输入


因为加载了音频,就要对音频进行VAE编码如下图的接法:

那剩下就是输入参数:
同样的操作套路:
一、GPT image2.0生成四宫格分镜图

并让它生成总分结构的分镜脚本
二、 closerAI LTX-2.3四宫格+自定义音频图生视频工作流
包括上传四宫格分镜,每个分镜的提示词,帧率设置等,具体操作看这篇:
【closerAI ComfyUI】GPT image2+LTX2.3四宫格分镜图视频生成法:高效生产AI漫剧/短剧的解决方案工作流!

直接输入这些参数后执行工作流:



整体实现方法如上,效果非常赞,特别是搞AI短剧、AI漫剧、AI动画等都是非常不错本地化运行的解决方案。
上面在N宫格分镜图视频制作中,还有另外一种方法,在runningHug上的无限画布,也能生成分镜与视频

它集成了多个优秀的闭源模型:

在图像与视频生成中,一个节点就能直接调用使用并生成。十分方便,且价格优惠。它通过集成闭源模型简化了工作流程直接输入即所得,速度很快。是一个不错的选择。通过注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151 注册后打开无限画面

关于分镜我也在RH上生成了应用,可通过下方直接使用。
本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

NanoBanana Pro分镜图应用体验地址:
注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151
通过这个链接第一次注册送1000点,每日登录送100点
最后几句:
如果对你有帮助,请一键三连支持下我,感谢
CloserAI 3D Pose Editor:http://aigc.douyoubuy.cn/2025/12/03/3448/ closerAI-nanoPrompts: http://closerai.douyoubuy.cn/2025/11/24/3396/ closerAI 分镜设计 软件(exe)本地运行版closerAI 分镜设计 软件(exe)本地运行版 操作说明文档以下是closerAIwater节点:closerAIsorawater Sora 水印移除 ComfyUI 节点分镜分词器节点:closerAI分词器节点说明json结构化提示词 http://aigc.douyoubuy.cn/2025/11/05/3242/
以上是closerAI团队制作的closerAI LTX-2.3四宫格+自定义音频图生视频工作流0508的介绍,当然,也可以在我们closerAI会员站上获取(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

评论(0)