
更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台
【closerAI ComfyUI】混元微调视频模型SkyReels V1,首个以人为中心且可图生视频的高质量模型,吊炸天!
大家好,我是Jimmy。AI视频界近期卷飞了,2024年底到2025年初混元模型彻底疯狂,唯一缺点就是还不能图生视频,最近昆仑万维开源基于hunyuan模型微调模型SkyReels V1,一个高质量的可图生视频的微调模型。同时comfyUI官方原生支持。重大消息是今天又发布了量化模型。低显存的小伙伴也能愉快玩耍了。
SkyReels V1以人为中心的视频基础模型
官方仓库:https://github.com/SkyworkAI/SkyReels-V1

SkyReels V1是第一个也是最先进的以人为中心的开源视频基础模型。通过对混元视频在O(10M)高品质影视片段上的微调,SkyReels V1提供了三大关键优势:
- 开源领导力:我们的文本到视频模型在开源模型中实现了最先进的(SOTA)性能,可与Kling和Hailuo等专有模型相媲美。
- 高级面部动画:捕捉33种不同的面部表情,超过400种自然运动组合,准确反映人类的情绪。
- 电影照明和美学:经过高质量好莱坞级电影和电视数据的训练,每个生成的帧在构图,演员定位和摄像机角度方面都具有电影质量。
推出了两个模型,一个是文生视频,一个是图生视频。如下图示:

量化模型地址:以下是镜像站啦,大家可支持下原地址上下载


如上图,KJ大佬已测试过不同量化模型之间的效果对比,从结果上看,大家可直接下载Q4版本就好了,如果设备显存很好,也可以下载skyreels原生的。closerAI会员可在模型库中下载。
comfyUI中的实现官方与ComfyUI-HunyuanVideoWrapper
ComfyUI-HunyuanVideoWrapper节点的实现:
插件地址:https://github.com/kijai/ComfyUI-HunyuanVideoWrapper
模型地址https://huggingface.co/Kijai/SkyReels-V1-Hunyuan_comfy/tree/main
text-encoder模型:https://huggingface.co/Kijai/llava-llama-3-8b-text-encoder-tokenizer文件转到ComfyUI/models/LLM/llava-llama-3-8b-text-encoder-tokenizer
clip-vit-large-patch14模型https://huggingface.co/openai/clip-vit-large-patch14,(只需要权重中的.safetensor和所有配置文件)放置:ComfyUI/models/clip/clip-vit-large-patch14
工作流直接用仓库中的workflow。
下面讲comfyUI官方的实现。
加载我们closerAI搭建的closerAI skyreels图生视频工作流

提示词要先写:FPS-24,然后再写提示词。尺寸方面建议三个尺寸:544*960、480*848、368*640

效果如下:
加载图如下图用我们昨天生成的图:

图生视频效果:
以上是skyreelsV1介绍和在comfyUI中的节点和安装说明,以及closerAI团队制作的stable diffusion comfyUI closerAI开发的closerAI skyreels图生视频工作流介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流(查看yuanwen)。
更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)