添加图片注释,不超过 140 字(可选)

更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

【closerAI ComfyUI】混元微调视频模型SkyReels V1,首个以人为中心且可图生视频的高质量模型,吊炸天!

大家好,我是Jimmy。AI视频界近期卷飞了,2024年底到2025年初混元模型彻底疯狂,唯一缺点就是还不能图生视频,最近昆仑万维开源基于hunyuan模型微调模型SkyReels V1,一个高质量的可图生视频的微调模型。同时comfyUI官方原生支持。重大消息是今天又发布了量化模型。低显存的小伙伴也能愉快玩耍了。

SkyReels V1以人为中心的视频基础模型

官方仓库:https://github.com/SkyworkAI/SkyReels-V1

添加图片注释,不超过 140 字(可选)

SkyReels V1是第一个也是最先进的以人为中心的开源视频基础模型。通过对混元视频在O(10M)高品质影视片段上的微调,SkyReels V1提供了三大关键优势:

  1. 开源领导力:我们的文本到视频模型在开源模型中实现了最先进的(SOTA)性能,可与Kling和Hailuo等专有模型相媲美。
  2. 高级面部动画:捕捉33种不同的面部表情,超过400种自然运动组合,准确反映人类的情绪。
  3. 电影照明和美学:经过高质量好莱坞级电影和电视数据的训练,每个生成的帧在构图,演员定位和摄像机角度方面都具有电影质量。

推出了两个模型,一个是文生视频,一个是图生视频。如下图示:

添加图片注释,不超过 140 字(可选)

量化模型地址:以下是镜像站啦,大家可支持下原地址上下载

https://hf-mirror.com/Kijai/SkyReels-V1-Hunyuan_comfy/tree/main
添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)

如上图,KJ大佬已测试过不同量化模型之间的效果对比,从结果上看,大家可直接下载Q4版本就好了,如果设备显存很好,也可以下载skyreels原生的。closerAI会员可在模型库中下载。

comfyUI中的实现官方与ComfyUI-HunyuanVideoWrapper

ComfyUI-HunyuanVideoWrapper节点的实现:

插件地址:https://github.com/kijai/ComfyUI-HunyuanVideoWrapper

模型地址https://huggingface.co/Kijai/SkyReels-V1-Hunyuan_comfy/tree/main

text-encoder模型:https://huggingface.co/Kijai/llava-llama-3-8b-text-encoder-tokenizer文件转到ComfyUI/models/LLM/llava-llama-3-8b-text-encoder-tokenizer

clip-vit-large-patch14模型https://huggingface.co/openai/clip-vit-large-patch14,(只需要权重中的.safetensor和所有配置文件)放置:ComfyUI/models/clip/clip-vit-large-patch14

工作流直接用仓库中的workflow。

下面讲comfyUI官方的实现。

加载我们closerAI搭建的closerAI skyreels图生视频工作流

添加图片注释,不超过 140 字(可选)

提示词要先写:FPS-24,然后再写提示词。尺寸方面建议三个尺寸:544*960、480*848、368*640

添加图片注释,不超过 140 字(可选)

效果如下:

加载图如下图用我们昨天生成的图:

添加图片注释,不超过 140 字(可选)

图生视频效果:

以上是skyreelsV1介绍和在comfyUI中的节点和安装说明,以及closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI skyreels图生视频工作流介绍,大家可以根据工作流思路进行尝试搭建。

当然,也可以在我们closerAI会员站上获取对应的工作流(查看yuanwen)。

更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

添加图片注释,不超过 140 字(可选)
隐藏内容
本内容需权限查看
  • 普通用户: 99.9金币
  • VIP会员: 免费
  • 永久会员: 免费

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。