更多AI前沿科技资讯，请关注我们：closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

【closerAI ComfyUI】字节团队又放大招！开源Bernini：一个统一的视频生成和编辑框架，精准、可控编辑，开源界的gemini Omini来了，强！

大家好，我是Jimmy。开源界的gemini Omini来了，它是字节跳动伯尼尼团队最新开源的视频生成与编辑模型：Bernini。我们通过它的宣传视频，了解下它的能力：

Bernini：一个统一的视频生成与编辑模型

它是基于wan2.2底模的。Bernini 的核心思路是“先理解、再生成”的协同机制：

  • 多模态大模型规划器：负责深度解析输入（文本、图片、视频），进行语义理解、规划和 latent semantic planning（在 ViT embedding 空间预测目标语义表示）。它像一个“大模型军师”，处理复杂指令、参考素材的语义对齐等。
  • 扩散模型渲染器，Bernini-R：基于 Wan2.2 等基础，负责高质量像素渲染。渲染器接收规划器的语义指导 + 文本特征 +（编辑时）源 VAE 特征，实现细节保留和高保真输出。

那它能做什么呢？它能完成以下五大类的任务：

  1. 文本到图像/视频（T2I/T2V）。
  2. 图像/视频编辑（I2I/V2V），支持复杂指令编辑、无需遮罩、语义引导。
  3. 参考引导编辑（如服装替换、视频插入/融合）。
  4. 多参考图像到视频（R2V）等。
  5. 输入灵活：文本、图片、视频；输出视频/图像。

它有效解决了传统视频扩散模型“理解不足”导致的画面失控、帧间闪烁、一致性差等问题，在字节自建评测中达到行业领先（编辑任务上与顶尖闭源商业模型相当）。

comfyUI中的实现与体验

目前社区KJ大佬已作支持，但目前仍未合并到最新comfyUI中，可以先等它官方合：https://github.com/Comfy-Org/ComfyUI/pull/14216

模型下载：https://huggingface.co/Kijai/WanVideo_comfy_fp8_scaled/tree/main/Bernini

但我们可以在RH上先体验一波。

打开工作流：

基本结构是wan2.2的结构，工作流不复杂，主要是模型加载区，使用bernini高低噪模型，同时接入4步加速LORA，

加载一张图，一个视频，提示词：You are a helpful assistant specialized in video editing with reference. 用参考图替换视频中的人物

KJ将它任务归纳下，做每个任务就将这个提示词复制粘贴到提示词中：

然后测试效果如下：

人物替换：输入源视频，和参考图：

输出结果：

其它案例：

图生视频 ：You are a helpful assistant specialized in subject-to-video generation。一个网球飞向她，她马上拍回去

总结：

bernini统一生成与编辑，降低视频创作门槛，支持精准、可控编辑，对内容创作者、影视后期、广告制作等场景意义重大，推动“AI 原生视频内容”发展。

总体而言，Bernini 是 2026 年 AI 视频领域的一个亮点开源贡献，体现了字节在生成式 AI 上的实力输出，对开发者友好，也为开源社区注入了实用、高性能的视频工具。

我在RH上也制作成应用大家可以玩玩。

本地算力不够怎么办？

如果本地设备算力不好的小伙伴，推荐使用线上comfyUI来运行体验：runninghub.cn

Bernini_多参考视频生成应用体验地址：

https://www.runninghub.cn/ai-detail/2062847387361697793

注册地址：https://www.runninghub.cn/?utm_source=kol01-RH151

通过这个链接第一次注册送1000点，每日登录送100点

最后几句：

如果对你有帮助，请一键三连支持下我，感谢

CloserAI AI短剧工作台（本地化解决方案）:
https://aigc.douyoubuy.cn/ai-agent/
closerAI FlowStudio本地AIGC无限画布创作工具：
https://aigc.douyoubuy.cn/closerai-flowstudio/
closerAI AI绘画大师万象视界：
https://aigc.douyoubuy.cn/closerai-vision/
CLOSERAI POD电商印花批量生产工作站：
https://aigc.douyoubuy.cn/?page_id=420541
印花提取：
https://aigc.douyoubuy.cn/yinhua/

以上是就是本期的分享，当然，更多工作流、资讯、插件、工具也可以在我们closerAI会员站上获取(查看原文)。

以上，既然看到这里了，如果觉得不错，随手点个赞、在看、转发三连吧，如果想第一时间收到推送，也可以给我个星标⭐～谢谢你看我的文章，我们，下次再见。

>/ 作者：JimmyMo

更多AI前沿科技资讯，请关注我们：closerAI-一个深入探索前沿人工智能与AIGC领域的资讯平台

隐藏内容
本内容需权限查看
  • 普通用户: 199金币
  • VIP会员: 免费
  • 永久会员: 免费

主题授权提示：请在后台主题设置-主题授权-激活主题的正版授权，授权购买：RiTheme官网

声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。