
更多AI前沿科技资讯,请关注我们:

closerAIGCcloserAI,一个深入探索前沿人工智能与AIGC领域的资讯平台,我们旨在让AIGC渗入我们的工作与生活中,让我们一起探索AIGC的无限可能性! 7篇原创内容 公众号

产品经理逛世界一只在互联网PM浪迹多年的吉希望与大家一起分享,一起成长,一起用发现的眼光看世界,用一颗产品心分析世间万物。个人资源分享网站:www.douyoubuy.cn 888篇原创内容 公众号
【closerAI ComfyUI】太不可思议了!flux三重控制还能这么玩,创意生产工具,只要你能想到就能给你生产!就是这么屌!
大家好,我是Jimmy。关注我们的小伙伴,相信已经深知flux三重控制的威力。没看的可以看看什么是flux三重控制哟:
【closerAI ComfyUI】很强!flux态的三重控制能力实现万物一致性生图,这个思路很屌很强很实用,建议收藏学习
flux生态下的三重控制的重要作用就是万物一致性迁移。但只要你的控制力度变化一下,它就能有更多可能性。这期在此前的closerAI flux三重控制工作流的基础上进行优化。主要实现自动蒙版,实时调整物体大小和位置进行构图,从而完成自动蒙版下的三重控制万物迁移。
这里用一些夸张的创意图来作演示。
以下是实现的效果:








closerAI flux三重控制万物迁移(自动蒙版+实时构图)工作流如下:

主要功能:自动抠图、自动蒙版、实时构图、三重控制模块。
1、自动抠图。对加载图像进行抠图去背,形成白底图的处理。

2、实时构图。可对背景、主体,进行实现的调整构图。

根据喜好进行位置,大小的调整。

3、自动蒙版,这里用颜色进行自动蒙版。这里我设置成红色,大家可自动调整颜色进行自动蒙版。

4、最后主要的模块就是我们的三重控制了。
基于flux模型的三重控制物体一致性生图的原理:
第一重,利用flux redux模型原生的高强度微调图片能力。因为之前我们测试过官方出的redux风格模型,发现它对于参考图的参考非常强,如果不加高级redux控制强度,基本就是微调图像达到图片修复、图片微调、图片优化的功能。所以,正是利用它的强参考性来实现第一重的控制。
第二重,利用flux fill出色的局部重绘能力。fill的能力,我们之前也介绍了,它是黑森林官方出的重绘模型,对于flux模型是非常友好地,同时有很好的提示词理解甚至有推理的能力。所以,我们基本不用写提示词,它就能很好地完美高效地补全画面。这里,我就利用理解的能力实现第二重的控制。
第三重是结合阿里巴巴团队的IC-lora的思路。也就是同一画面生成多张图片能使物体保持一致性的思路。它其实就是flux模型对于自然语言提示词的理解能力。只要在同一时间同一张画面中生成的物体,它是具有高度相似性的。正是IC-lora的出现,给与了我们一种启发,通过这种方式实现物体一致性的转移。当时,有能力的可以基于IC-lora来进行物体LORA的训练,但它存在一定的难度和门槛。所以其实如果外加一个物体的IC-lora,能更好实现物体一致性的生成。这个就是第四重了。但第四重的控制可有但非必要。
closerAI flux三重控制万物迁移(自动蒙版+实时构图)工作流的操作很简单,加载背景和主体图,然后实时构图一上就能生图,小白也能操作。

以上是closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI flux三重控制万物迁移(自动蒙版+实时构图)工作流介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流。
更多AI前沿科技资讯,请关注我们:

closerAIGCcloserAI,一个深入探索前沿人工智能与AIGC领域的资讯平台,我们旨在让AIGC渗入我们的工作与生活中,让我们一起探索AIGC的无限可能性! 7篇原创内容 公众号

产品经理逛世界一只在互联网PM浪迹多年的吉米猫,希望与大家一起分享,一起成长,一起用发现的眼光看世界,用一颗产品心分析世间万物。个人资源分享网站:www.douyoubuy.cn 888篇原创内容 公众号
点击“阅读原文”跳转工作流
主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)