news 2026/9/18 2:01:11

【ComfyUI】Wan2.2 SmoothMix 文生视频自动扩写

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
【ComfyUI】Wan2.2 SmoothMix 文生视频自动扩写

今天给大家演示一个基于 Wan2.2 与 SmoothMix 的 ComfyUI 文生视频自动扩写工作流。这个工作流围绕单张图片展开,通过多阶段文本扩写、图像理解、动态脚本生成和视频生成模型协同,让输入画面自动延展成完整的 5 秒镜头脚本,再由 Wan 系列 T2V 模型生成稳定、连贯、细节丰富的视频。

整体流程涵盖模型加载、文本编码、参数计算、采样、VAE 解码和视频导出,帮助创作者从一张图快速得到专业级的短视频输出。

文章目录

  • 工作流介绍
    • 核心模型
    • Node 节点
  • 工作流程
  • 大模型应用
    • Qwen3_VQA 图像语义理解与文本补全
    • CR Prompt Text ① 视频导演规则注入
    • CR Prompt Text ② 主体行为与场景逻辑生成
    • CR Prompt Text ③ 负面提示规则构建
  • 使用方法
  • 应用场景
  • 开发与应用

工作流介绍

这个工作流以“图像驱动的视频自动扩写”为核心目标。通过 Qwen3-VL 图像理解节点读取参考图,再结合三段 CR Prompt 文案指令,将图像信息、用户设定和视频导演规则拼接为完整的 5 秒分镜脚本。CLIP 文本编码节点将正负提示词处理为可用于 Wan ImageToVideo 模型的条件输入。视频时长与帧数通过 SimpleMath+ 与 ImpactInt 节点自动计算,确保生成长度与帧率精确一致。随后使用 Wan2.2 和 SmoothMix Wan 模型作为高噪与低噪双路径输入,由 WanMoeKSampler 混合采样,得到动态一致的潜空间序列,再经 VAE 解码和最终的视频导出节点生成 H264 视频。整个结构覆盖从素材输入、文本处理、参数配置、模型推理到视频导出的全链路。

核心模型

该工作流加载了多组模型协同完成从文本理解到视频生成的完整流程。Wan2.2 模型与 SmoothMix 混合模型负责核心的 T2V 结构噪声与细节保持,GGUF 低噪路径与 LoRA 进一步提升精细度。CLIP 和 VAE 则分别承担文本编码和潜空间解码,让脚本描述能被准确转换为运动影像。最终组合实现了画面稳定、动作连贯、时间一致的视频生成效果。

模型名称说明
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/18 1:58:49

kohya_ss Stable Diffusion LoRA 训练:5 张图跑出自己的风格模型

kohya_ss Stable Diffusion LoRA 训练:5 张图跑出自己的风格模型 【免费下载链接】kohya_ss 项目地址: https://gitcode.com/GitHub_Trending/ko/kohya_ss 输入提示词点生成,出来的图带着和你自己作品一样的色调、光影和笔触——这就是训练完成后…

作者头像 李华
网站建设 2026/9/18 1:58:32

SecureCRT中文乱码终极解决方案:UTF-8编码协同配置指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/18 1:57:33

客服语音机器人选 GPT-Live-1 前,先看 TaoToken 的 Token 消耗路径

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/18 1:55:14

为什么 ALTK-Evolve 的 GPT-4.1 在 AppWorld 耗 Token?TaoToken 换 Key 复跑

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/18 1:54:27

Unity场景性能优化实战:用Simplyon从阴影到遮挡剔除稳住Pico 4帧率

做Unity场景优化这些年,我越来越确信一件事:大部分项目的渲染卡顿,不是显卡不行,而是场景里重复的、不合理的设置太多。尤其是光照、阴影、包围盒、遮挡剔除这些东西,Unity默认全开,项目一旦复杂起来&#…

作者头像 李华