ARTICLE DETAIL

资讯详情

深耕网站视觉设计与运营推广的一线实战洞察。

ComfyUI 视频生成教程:三步跑通第一条 AI 视频

ComfyUI 视频生成教程:三步跑通第一条 AI 视频 ComfyUI 视频生成教程三步跑通第一条 AI 视频【免费下载链接】ComfyUI-WanVideoWrapper项目地址: https://gitcode.com/GitHub_Trending/co/ComfyUI-WanVideoWrapper你有一张想动起来、却不知道怎么开始的照片吗ComfyUI-WanVideoWrapper 是服务于 WanVideo 系列模型的 ComfyUI 视频生成节点扩展把文字转视频、图像转视频拆成一个个即插即用的节点。读完这篇你能装好扩展、放对模型文件并用两条自带示例工作流分别跑通 T2V 和 I2V 全流程。一、认识这个项目一句话定位它把 WanVideo 视频生成模型的各部分封装成 ComfyUI 节点你在画布上连线就能生成视频全程不需要写代码。能做什么文字转视频T2V一句提示词生成连续画面图像转视频I2V让静态照片里的人物或物体动起来音频口型照片加一段音频生成对口型说话的画面运动与运镜控制用姿态、轨迹、相机参数控制画面动作开始前你需要一台已能正常启动的 ComfyUI显卡跑 1.3B 模型加 fp8 量化约 8GB 显存可用14B 建议 16GB 以上4 个模型文件T5 文本编码器、CLIP Vision、主生成模型、VAE磁盘空间1.3B 全套模型约 10GB 级别14B 更大装好扩展之后剩下的事只有两步先跑文字转视频再跑图像转视频。二、上手三步第 1 步装好扩展与模型这一步做什么让 ComfyUI 识别出全部 WanVideo 节点并让 4 个模型文件都能被节点找到。操作进入 ComfyUI 的扩展目录cd ComfyUI/custom_nodescustom_nodes是扩展的固定安装位置。克隆本项目git clone https://gitcode.com/GitHub_Trending/co/ComfyUI-WanVideoWrapper把扩展代码放进刚才那个目录里。安装依赖pip install -r ComfyUI/custom_nodes/ComfyUI-WanVideoWrapper/requirements.txtrequirements.txt列全了扩展需要的包一条命令装完Windows 便携版把pip换成python_embeded\python.exe -m pip再执行同样内容即可。把模型文件放进ComfyUI/models/下的对应目录T5 文本编码器 →text_encoders/CLIP Vision →clip_vision/主模型Wan2.1 1.3B 或 14B→diffusion_models/VAE →vae/每个加载节点只在自己的目录里找文件放错位置就加载不到。重启 ComfyUI。怎么算成功在节点搜索框输入WanVideo能看到 WanVideo Model Loader、WanVideo Sampler、WanVideo Decode 等一系列节点。容易踩的坑⚠️ 搜索框搜不到 WanVideo 节点 → 依赖没装全或克隆后没重启先看启动日志里扩展是否报错再补装requirements.txt。 ⚠️ 加载节点的下拉框里没有你放的模型 → 文件放错目录对照上表四个位置重新归位。节点齐了就可以加载第一条文字转视频的工作流。第 2 步文字生成视频T2V这一步做什么加载项目自带的 T2V 示例改一句提示词输出你的第一条视频。操作把example_workflows/wanvideo_2_1_14B_T2V_example_03.json拖入 ComfyUI 画布节点图会自动连线完成。在文本编码节点里把提示词换成你自己的描述例如一只泰迪熊在桌子上缓缓转圈背景干净柔和光线。在 WanVideo Model Loader 的下拉框选择主模型显存紧张就选 1.3B或 14B 的 fp8 量化版本。采样参数先用默认值steps 取 20~30fps 设 16分辨率 832×480。点击 Queue Prompt等进度条走完。 提示出片后想复现同样效果记下当时的 seed之后换个提示词也不会影响这条结果的稳定性。怎么算成功输出目录默认ComfyUI/output/里多出一个 mp4 文件画面内容与你写的提示词对应运行过程中节点里的预览图会从噪点逐渐显影成清晰画面。容易踩的坑⚠️ 视频全黑或全是噪点 → VAE 与主模型不匹配确认 VAE 在vae/目录且和主模型版本对应。 ⚠️ 运行中显存告急、速度极慢 → 先换 1.3B 或 fp8 版本再考虑加 WanVideo Block Swap 节点。文字能生成之后把输入端换成一张图片就是图像转视频。第 3 步图像生成视频I2V这一步做什么用一张图替代文字作为起点让人物或物体按提示词动起来。操作把example_workflows/wanvideo_2_1_14B_I2V_example_03.json拖入画布。在 LoadImage 节点里选择要用的图片example_workflows/example_inputs/里有三张现成素材thing.png静物、human.png全身人物、woman.jpg肖像。检查连线WanVideo ClipVision Encode 负责让模型看懂图片WanVideo ImageToVideo Encode 把图片编码成生成的起始状态。提示词只写要发生什么例如转头微笑并轻轻挥手不要复述图中已有的静态内容。点击 Queue Prompt 运行。怎么算成功输出目录生成新的 mp4首帧与输入图片一致画面中的动作方向与提示词相符。容易踩的坑⚠️ 画面里人物长相漂移、变形 → 输入图分辨率和输出尺寸差异过大先用接近图片比例的较低分辨率跑通再放大。 ⚠️ 动作和提示词对不上 → 提示词在描述图片已有的内容改成只写动作变化例如抬手转头。三、常见问题速查现象可能原因解决办法搜索不到 WanVideo 节点依赖未装或没重启用 pip 装requirements.txt重启 ComfyUI加载节点下拉框看不到模型模型放错目录T5 放text_encoders/、CLIP 放clip_vision/、主模型放diffusion_models/、VAE 放vae/显存不足、生成中途报错模型超出显存换 1.3B 或 fp8 版本再加 WanVideo Block Swap生成耗时过长14B 加高分辨率加帧数太多先用 832×480、49 帧验证创意满意后再上调视频全黑或全是噪点VAE 与主模型不匹配检查vae/目录里的文件是否对应模型版本四、跑通之后往哪走省显存方法换 fp8 量化版主模型显存占用约砍半适合想跑 14B 但显存只有 12~16GB 的情况加 WanVideo Block Swap 节点把暂时不用的模型块挪到内存1.3B 跑长视频可压到 5GB 显存以内降分辨率、减帧数512×512、49 帧足以验证创意确认后再拉满其他玩法示例都在example_workflows/里直接拖入画布即可FantasyTalking 口型同步加载wanvideo_2_1_14B_I2V_FantasyTalking_example_01.json照片加音频生成说话画面WanAnimate 动作控制加载wanvideo_WanAnimate_example_01.json精细控制人物动作与表情ReCamMaster 运镜加载wanvideo_1_3B_ReCamMaster_example_01.json给画面加推拉镜头感SkyReels加载wanvideo_2_1_14B_skyreels_a2_example_01.json体验另一种风格化生成方案五、接下来做这三件事换一句提示词再跑一次 T2V把满意那条的 seed 记下来作为你的固定配方用example_workflows/example_inputs/里的三张图各跑一遍 I2V感受同一工作流下不同素材的差异在 I2V 工作流里接上 WanVideo Block Swap 节点对比加与不加时控制台报告的显存数字那张一直想动起来却不知道怎么开始的照片现在已经有办法了扩展装进custom_nodes四个模型文件放进对应目录两条示例工作流各跑一遍流程就算彻底跑通。往后想生成更长的视频、更清晰的画面或是让照片开口说话去example_workflows/里找下一个示例加载进来把输入换成你自己的素材就行。核心关键词ComfyUI视频生成长尾关键词ComfyUI WanVideoWrapper 安装、WanVideo 文字生成视频、ComfyUI 图像转视频、低显存 AI 视频生成、WanVideo 新手入门【免费下载链接】ComfyUI-WanVideoWrapper项目地址: https://gitcode.com/GitHub_Trending/co/ComfyUI-WanVideoWrapper创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表