
更多AI前沿科技资讯,请关注我们:
closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台
【closerAI ComfyUI】FLUX模型的兄弟模型?!Flex.2:内置修图与控制的强大文本到图像模型!实测不错!
大家好,我是Jimmy。这期我们介绍一个新的基于Flux进行训练的模型,这也是之前我们介绍加强版四重控制万物迁移的Flex redux的作者训练的模型Flex 2。
【closerAI ComfyUI】重磅更新!FLUX复制能力再次提升!万物迁移效果史诗级加强!这波一定要接住,必须收藏学习起来
Flex.2 的发展经历了多个阶段,从 Flux.1 Schnell 到 OpenFlux.1,再到 Flex.1-alpha,最终推出了 Flex.2-preview。每个阶段都带来了显著的改进和新的功能。
Flex.2 模型介绍
Flex.2 是一款由社区驱动的文本到图像(Text-to-Image)扩散模型,旨在提供更灵活和强大的生成能力。它是在 Flex.1-alpha 的基础上进一步发展的版本,引入了许多新的功能和特性,使其成为当前最灵活的文本到图像模型之一。
主要特性
- 80亿参数:Flex.2 模型拥有 80 亿个参数,使其能够生成高质量的图像。
- 内置修图功能:Flex.2 内置了修图(inpainting)支持,可以直接在生成的图像中进行局部修改。
- 通用控制输入:模型支持通用的控制输入,包括姿态(pose)、线条(line)和深度(depth),使用户能够对生成的图像进行更精细的控制。
- 细调能力:Flex.2 设计为可细调的模型,用户可以通过训练低秩适应(LoRA)来微调模型以满足特定需求。
- 开源许可证:Flex.2 使用 Apache 2.0 许可证,确保模型的开放性和可访问性。
- 长文本输入:模型支持 512 个标记长度的文本输入,提供了更大的创作空间。
- 16 通道潜在空间:Flex.2 使用 16 通道的潜在空间,增强了模型的表达能力。
项目仓库页:https://hf-mirror.com/ostris/Flex.2-preview/blob/main/Flex.2-preview.safetensors
模型直接下载即可。如下图框住的。下载后放置comfyUI/models/unets下

ComfyUI中的实现
在 ComfyUI 中,Flex.2 通过 Flex2 Conditioner 节点进行支持。用户可以使用 ComfyUI-FlexTools 来加载模型并进行图像生成。下载下面的节点以及上述模型。重启comfyUI即可。
https://github.com/ostris/ComfyUI-FlexTools

加载工作流。注意,作者给出的工作流是有问题的,这里我们修改调整了一下。
在它的节点后再加入K采样器进行采样生图。
closerAI flex.2 文生图、CN控制、重绘工作流整体如下:

测试工作流主要包括
它的文生图:如下是调整后接法。提示词写:



简单的文本生图,手部是有问题的。
第二是通过controlnet深度控制生图:加载下图



完全没问题。OK的
第三它还能CN控制+重绘来生图:加入了深度控制+局部重绘



本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

runninghub.cn模特多姿势一致性套图工作流体验地址:
https://www.runninghub.cn/ai-detail/1916131798894444545
注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151
通过这个链接第一次注册送1000点,每日登录送100点
最后几句:
尽管 Flex.2 在许多方面表现出色,但它仍然处于实验阶段,存在一些限制。例如,模型在处理解剖结构和文本时仍有一些挑战,修图功能也仍在开发中。开发者正在积极改进这些限制,并计划在每次训练迭代中提升模型性能。

以上是Flex2模型的介绍、安装和comfyUI体验。以及closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI flex.2 文生图、CN控制、重绘工作流介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:
closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)