
更多AI前沿科技资讯,请关注我们:
closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台
【closerAI ComfyUI】超强控制能力!controlnet大统一控制模型2.0让FLUX控制力再次增强!效果出色,冲!
大家好,我是Jimmy。两天前Shakker-Labs团队发布了最新版的围绕FLUX模型的统一控制模型FLUX.1-dev-ControlNet-Union-Pro-2.0。FLUX的控制生图能力再次提升,可玩性更高。用过它1.0版本的应该都知道。1.0版本的控制能力可以说是等于没有,效果很差。同时加载FLUX+controlnet非常吃配置。直到FLUX原生团队推出depth和candy才稍微算是补全生态。这次Shakker-Labs的2.0版本,效果如何呢?我们也来
FLUX.1-dev-ControlNet-Union-Pro-2.0
目前最新版的ControlNet-Union-Pro-2.0相比1.0有以下改进:
- 架构精简:通过删除冗余模式嵌入层,模型体积从6.15G压缩至3.98G,推理速度提升42%
- 控制增强:新增SoftEdge控制模式,支持0.55-0.65阈值的精准边缘识别,在电商产品抠图测试中边缘平滑度提升67%
- 动态适配:引入智能权重调节算法,根据画面复杂度自动调整控制强度(推荐0.6-0.8),避免姿态僵硬或细节丢失
目前统一控制模型能实现: canny、soft edge、depth、pose、gray等控制模式。如下图示:

FLUX.1-dev-ControlNet-Union-Pro-2.0的安装
直接下载模型即可。
镜像站链接:
https://hf-mirror.com/Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro-2.0
下载后将模型放置:comfyUI\models\controlnet\下。
体验,搭建FLUX union controlnet控制工作流如下:

首先是姿势控制:上传左边的图,预处理后得出右边,加入生图:

提示词写:一个男人穿着西装走在纽约街头

2.0:

1.0:

以下是深度控制:

提示词:一个美女装着厚厚的羽绒服在雪地上

2.0深度控制结果:

1.0深度控制结果:

可见2.0效果明显比1.0的好,且没有污染,背景也清晰。
以下是canny



本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

runninghub.cn FLUX控制生图工作流体验地址:
https://www.runninghub.cn/ai-detail/1913386792442130434
注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151
通过这个链接第一次注册送1000点,每日登录送100点
最后几句:
大统一的controlnet的控制能力提升,增加了FLUX在控制生图能力,从以前的有变成现在的能用,相互使用还能玩出更多创意出来。让你高效出片!后面我们也会结合controlnet来实现一些有意思的工作流出来。

以上是closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI Flux 全能控制工作流,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:
closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)