添加图片注释,不超过 140 字(可选)

更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

【closerAI ComfyUI】阿里通义万相强势开源,comfyUI尝鲜玩转wan2.1!很强、很稳,8G显存可玩!收藏学习。

大家好,我是Jimmy。在人工智能领域,视频生成技术一直备受关注。Wan2.1 作为一个开源的大型视频生成模型库,为研究人员和开发者提供了一个强大的工具。昨天阿里通义万相正式开源。

Wan2.1:开放、先进的大规模视频生成模型

Wan2.1 是一个全面且开源的视频基础模型库,旨在推动视频生成技术的发展。该项目在 GitHub 上公开,由 Wan-Video 团队维护。Wan2.1 提供了一系列先进的视频生成模型,支持多种任务,包括文本到视频(Text-to-Video)、图像到视频(Image-to-Video)、视频编辑、文本到图像(Text-to-Image)以及视频到音频(Video-to-Audio)等。

官方仓库地址:https://github.com/Wan-Video/Wan2.1

主要功能与特点

  1. 先进的性能。Wan2.1 在多个基准测试中均表现出色,超越了现有的开源模型和一些商业解决方案。其 T2V-1.3B 模型仅需 8.19 GB 的显存,即可在消费级 GPU 上运行,生成 5 秒 480P 视频仅需约 4 分钟,性能与某些闭源模型相当。
  2. 多任务支持。Wan2.1 不仅支持文本到视频和图像到视频的生成任务,还支持视频编辑、文本到图像以及视频到音频等多种任务,极大地拓展了视频生成的应用场景。
  3. 可视化文本生成。Wan2.1 是首个能够生成中英文文本的视频模型,具备强大的文本生成功能,增强了其在实际应用中的实用性。
  4. 强大的视频 VAE。Wan-VAE 是 Wan2.1 的核心组件之一,它在编码和解码 1080P 视频时表现出色,能够保留时间信息,为视频和图像生成提供了理想的基础设施。
添加图片注释,不超过 140 字(可选)

comfyUI 运行wan2.1

comfyUI项目页:https://github.com/kijai/ComfyUI-WanVideoWrapper

添加图片注释,不超过 140 字(可选)

安装方法:手动安装

以下是命令安装:

将此存储库克隆到custom_nodes文件夹中。
添加图片注释,不超过 140 字(可选)

以下是手动下载,解压后将文件夹放置到comfyUI/custom_notes中

添加图片注释,不超过 140 字(可选)

模型下载

模型下载页:https://huggingface.co/Kijai/WanVideo_comfy/tree/main

添加图片注释,不超过 140 字(可选)
添加图片注释,不超过 140 字(可选)

closerAI会员可在模型库中找wan文件夹下载所有模型和工作流。

添加图片注释,不超过 140 字(可选)

对应模型放置以下路径:

Text encoders to ComfyUI/models/text_encoders

Transformer to ComfyUI/models/diffusion_models

Vae to ComfyUI/models/vae

wan2.1工作流

添加图片注释,不超过 140 字(可选)

提示词:

high quality nature video featuring a red panda balancing on a bamboo stem while a bird lands on it's head, on the background there is a waterfall

由于我设备只有8G显存,用的文生视频工作流,使用Wan T2V1.3B文生视频模型。以下是生成结果:

提示词:美女主持在讲话

以上就是通义万相Wan2.1AI视频模型的介绍、安装、体验和comfyUI节点以及closerAI comfyUI wan2.1视频生成工作流介绍,大家可以根据工作流思路进行尝试搭建。

当然,也可以在我们closerAI会员站上获取对应的工作流和模型(查看原文)。

更多AI前沿科技资讯,请关注我们:closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

添加图片注释,不超过 140 字(可选)

隐藏内容
本内容需权限查看
  • 普通用户: 99.9金币
  • VIP会员: 免费
  • 永久会员: 免费

主题授权提示:请在后台主题设置-主题授权-激活主题的正版授权,授权购买:RiTheme官网

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。