添加图片注释,不超过 140 字(可选)

更多AI前沿科技资讯,请关注我们:

closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

【closerAI ComfyUI】FLUX模型的兄弟模型?!​​Flex.2:内置修图与控制的强大文本到图像模型​!实测不错!

大家好,我是Jimmy。这期我们介绍一个新的基于Flux进行训练的模型,这也是之前我们介绍加强版四重控制万物迁移的Flex redux的作者训练的模型Flex 2。

【closerAI ComfyUI】重磅更新!FLUX复制能力再次提升!万物迁移效果史诗级加强!这波一定要接住,必须收藏学习起来

Flex.2 的发展经历了多个阶段,从 Flux.1 Schnell 到 OpenFlux.1,再到 Flex.1-alpha,最终推出了 Flex.2-preview。每个阶段都带来了显著的改进和新的功能。

Flex.2 模型介绍

Flex.2 是一款由社区驱动的文本到图像(Text-to-Image)扩散模型,旨在提供更灵活和强大的生成能力。它是在 Flex.1-alpha 的基础上进一步发展的版本,引入了许多新的功能和特性,使其成为当前最灵活的文本到图像模型之一。

主要特性

  1. 80亿参数:Flex.2 模型拥有 80 亿个参数,使其能够生成高质量的图像。
  2. 内置修图功能:Flex.2 内置了修图(inpainting)支持,可以直接在生成的图像中进行局部修改。
  3. 通用控制输入:模型支持通用的控制输入,包括姿态(pose)、线条(line)和深度(depth),使用户能够对生成的图像进行更精细的控制。
  4. 细调能力:Flex.2 设计为可细调的模型,用户可以通过训练低秩适应(LoRA)来微调模型以满足特定需求。
  5. 开源许可证:Flex.2 使用 Apache 2.0 许可证,确保模型的开放性和可访问性。
  6. 长文本输入:模型支持 512 个标记长度的文本输入,提供了更大的创作空间。
  7. 16 通道潜在空间:Flex.2 使用 16 通道的潜在空间,增强了模型的表达能力。

项目仓库页:https://hf-mirror.com/ostris/Flex.2-preview/blob/main/Flex.2-preview.safetensors

模型直接下载即可。如下图框住的。下载后放置comfyUI/models/unets下

添加图片注释,不超过 140 字(可选)

ComfyUI中的实现

在 ComfyUI 中,Flex.2 通过 Flex2 Conditioner 节点进行支持。用户可以使用 ComfyUI-FlexTools 来加载模型并进行图像生成。下载下面的节点以及上述模型。重启comfyUI即可。

https://github.com/ostris/ComfyUI-FlexTools

添加图片注释,不超过 140 字(可选)

加载工作流。注意,作者给出的工作流是有问题的,这里我们修改调整了一下。

在它的节点后再加入K采样器进行采样生图。

closerAI flex.2 文生图、CN控制、重绘工作流整体如下:

添加图片注释,不超过 140 字(可选)

测试工作流主要包括

它的文生图:如下是调整后接法。提示词写:

添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)

简单的文本生图,手部是有问题的。

第二是通过controlnet深度控制生图:加载下图

添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)

完全没问题。OK的

第三它还能CN控制+重绘来生图:加入了深度控制+局部重绘

添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)

本地算力不够怎么办?

如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn

添加图片注释,不超过 140 字(可选)

runninghub.cn模特多姿势一致性套图工作流体验地址:

https://www.runninghub.cn/ai-detail/1916131798894444545

注册地址:https://www.runninghub.cn/?utm_source=kol01-RH151

通过这个链接第一次注册送1000点,每日登录送100点


最后几句:

尽管 Flex.2 在许多方面表现出色,但它仍然处于实验阶段,存在一些限制。例如,模型在处理解剖结构和文本时仍有一些挑战,修图功能也仍在开发中。开发者正在积极改进这些限制,并计划在每次训练迭代中提升模型性能。

添加图片注释,不超过 140 字(可选)

以上是Flex2模型的介绍、安装和comfyUI体验。以及closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI flex.2 文生图、CN控制、重绘工作流介绍,大家可以根据工作流思路进行尝试搭建。

当然,也可以在我们closerAI会员站上获取对应的工作流(查看原文)

以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。

>/ 作者:JimmyMo

更多AI前沿科技资讯,请关注我们:

closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

添加图片注释,不超过 140 字(可选)
隐藏内容
本内容需权限查看
  • 普通用户: 99.9金币
  • VIP会员: 免费
  • 永久会员: 免费

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。