
更多AI前沿科技资讯,请关注我们:请使用正版授权-盗版主题后果自负-授权购买官网-ritheme.com-一个深入探索前沿人工智能与AIGC领域的资讯平台
【closerAI ComfyUI】又是阿里!重大升级!ACE Plus fft模型再次赋能,万物迁移一致性能力是否能再次升级?
大家好,我是Jimmy。之前我们介绍过阿里团队推出的ACE++ 的三个Lora,它是基于flux模型的lora,在人物、物体的迁移方面提供了很好的一致保持能力。这一次升级,推出了大模型The unified fft model。
ACE_Plus:统一大模型FFT介绍
仓库地址:https://github.com/ali-vilab/ACE_plus
模型下载地址:https://hf-mirror.com/ali-vilab/ACE_Plus/tree/main


团队已在介绍页中说明,这应该是ACE最后一次迭代更新,FFT统一大模型已经能很好处理图像生成、本地编辑和可控生成等任务,已明确后期再进行迭代的模型是很大可能存在不稳定性,其主要原因是训练数据集和FLUX模型之间的高度异质性,这导致训练非常不稳定。所以其团队将会在wan2.1模型中开展新的任务。
统一大模型FFT通过指导性的方法,使用ACE的数据完全微调复合模型,以支持各种编辑和参考生成任务。
官方给出了comfyUI的节点包,以及工作流和FFT大模型。大家在上面地址中下载即可。closerAI 会员可以在我们模型库中找到ACE++FFT直接下载大模型和工作流以及节点。

Ace FFT统一大模型的能力:重绘、轮廓重绘、深度重绘、重上色、区域编辑、超分辨率等。
官方已提供基础工作流。

这期,我们主要测试它在换装方面的效果,看是否加强了控制能力,跟以前用fill模型+ACE Lora看有什么区别。其它功能我们后面分别出几期再测试下。
用我们的closerAI 四重控制换装工作流运行。可自动蒙版,也可手动蒙版。如下图示是我们closerAI四重控制的换装工作流全貌:
【closerAI ComfyUI】AI微短剧人物IP设计必备的人物服装设计、换装工作流,换装、设计就是随心所欲,收藏学习不迷路
【closerAI ComfyUI】万物迁移新思路,flux四重控制高阶玩法,提示词控制人与物关系,实现一致性迁移,收藏学习


可见效果很好。
以下是ACE FFT模型基础工作流,我稍微修改了下,加入sageattention:

这结果发生了色差。不知道为何,我测试了几次。同样存在色差问题。


结论:
从目前测试来看,ACE fft基于fill的微调,在换装方面存在色差。细节还原也稍微逊色。可能是我打开方式不对,但我是直接运行官方工作流,出现色差真不应该。但对比原来的换装流,加入ACE lora的控制,换装效果更棒,更稳定。
以上是closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI ACE fft换装和四重控制换装对比工作流介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流(查看原文)。
更多AI前沿科技资讯,请关注我们:http://aigc.douyoubuy.cn/

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)