
更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台
【closerAI ComfyUI】阿里通义万相强势开源,comfyUI尝鲜玩转wan2.1!很强、很稳,8G显存可玩!收藏学习。
大家好,我是Jimmy。在人工智能领域,视频生成技术一直备受关注。Wan2.1 作为一个开源的大型视频生成模型库,为研究人员和开发者提供了一个强大的工具。昨天阿里通义万相正式开源。
Wan2.1:开放、先进的大规模视频生成模型
Wan2.1 是一个全面且开源的视频基础模型库,旨在推动视频生成技术的发展。该项目在 GitHub 上公开,由 Wan-Video 团队维护。Wan2.1 提供了一系列先进的视频生成模型,支持多种任务,包括文本到视频(Text-to-Video)、图像到视频(Image-to-Video)、视频编辑、文本到图像(Text-to-Image)以及视频到音频(Video-to-Audio)等。
官方仓库地址:https://github.com/Wan-Video/Wan2.1
主要功能与特点
- 先进的性能。Wan2.1 在多个基准测试中均表现出色,超越了现有的开源模型和一些商业解决方案。其 T2V-1.3B 模型仅需 8.19 GB 的显存,即可在消费级 GPU 上运行,生成 5 秒 480P 视频仅需约 4 分钟,性能与某些闭源模型相当。
- 多任务支持。Wan2.1 不仅支持文本到视频和图像到视频的生成任务,还支持视频编辑、文本到图像以及视频到音频等多种任务,极大地拓展了视频生成的应用场景。
- 可视化文本生成。Wan2.1 是首个能够生成中英文文本的视频模型,具备强大的文本生成功能,增强了其在实际应用中的实用性。
- 强大的视频 VAE。Wan-VAE 是 Wan2.1 的核心组件之一,它在编码和解码 1080P 视频时表现出色,能够保留时间信息,为视频和图像生成提供了理想的基础设施。

comfyUI 运行wan2.1
comfyUI项目页:https://github.com/kijai/ComfyUI-WanVideoWrapper

安装方法:手动安装
以下是命令安装:
将此存储库克隆到custom_nodes文件夹中。

以下是手动下载,解压后将文件夹放置到comfyUI/custom_notes中

模型下载
模型下载页:https://huggingface.co/Kijai/WanVideo_comfy/tree/main


closerAI会员可在模型库中找wan文件夹下载所有模型和工作流。

对应模型放置以下路径:
Text encoders to ComfyUI/models/text_encoders
Transformer to ComfyUI/models/diffusion_models
Vae to ComfyUI/models/vae
wan2.1工作流

提示词:
high quality nature video featuring a red panda balancing on a bamboo stem while a bird lands on it's head, on the background there is a waterfall
由于我设备只有8G显存,用的文生视频工作流,使用Wan T2V1.3B文生视频模型。以下是生成结果:
提示词:美女主持在讲话
以上就是通义万相Wan2.1AI视频模型的介绍、安装、体验和comfyUI节点以及closerAI comfyUI wan2.1视频生成工作流介绍,大家可以根据工作流思路进行尝试搭建。
当然,也可以在我们closerAI会员站上获取对应的工作流和模型(查看原文)。
更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网
评论(0)