ARTICLE DETAIL

资讯详情

深耕网站视觉设计与运营推广的一线实战洞察。

让图片开口说话:ComfyUI 图像转提示 image2prompt 插件如何帮你省下写提示词的时间

让图片开口说话:ComfyUI 图像转提示 image2prompt 插件如何帮你省下写提示词的时间 让图片开口说话ComfyUI 图像转提示 image2prompt 插件如何帮你省下写提示词的时间【免费下载链接】Comfyui_image2promptimage to prompt by vikhyatk/moondream1项目地址: https://gitcode.com/gh_mirrors/co/Comfyui_image2promptComfyUI 图像转提示插件image2prompt可以把一张图片自动转写成一段描述性文字提示你只需在工作流中加载图片它就能生成可直接用于文生图的英文 prompt。本文带你从零安装、配置模型并跑通第一条图生文链路。功能速览它能为你的工作流做什么 ✨看图写描述Image to Text节点读取图片后输出一段自然语言描述细节丰富可直接作为正向提示词标签增强Image to Text with Tags能叠加 wd-swinv2-tagger-v3 的人物特征标签人物场景更精准提示词润色Text2GPTPrompt把原始描述改写成更精炼、更适合 7B 级模型的 prompt中文翻译Translate Text to Chinese一键把英文描述译成中文方便快速核对美学打分结合 ImageReward 模型对生成图评分用于批量筛选优质结果需要先明确一点它并不是一个独立的对外 API而是一组注册在 ComfyUI 画布里的节点你在界面里连线即可调用。三步完成插件安装前提是 ComfyUI 已能正常启动。打开终端进入 ComfyUI 的根目录执行下面这条 git clone 命令把插件代码拉进插件目录git clone https://gitcode.com/gh_mirrors/co/Comfyui_image2prompt custom_nodes/Comfyui_image2prompt执行成功后custom_nodesComfyUI 的插件目录下会多出一个Comfyui_image2prompt子目录里面就是插件的全部脚本。重启 ComfyUI 后插件首次运行会自动安装 transformers、diffusers 等依赖控制台会有较长的装包日志属正常现象。模型镜像站下载命令moondream1 与 internlm 双核心 两个核心模型决定了描述风格按需取用即可模型仓库适合场景moondream1vikhyatk/moondream1场景描写细节丰富推荐与 tagger 标签组合使用internlm-xcomposer2-vl-7binternlm/internlm-xcomposer2-vl-7b7B 级大模型描述更细腻适合人物与复杂画面模型首次运行会自动下载若网络不畅你可以在 Hugging Face 镜像站手动拉取先把端点切到镜像地址再用 huggingface-cli 下载支持断点续传export HF_ENDPOINThttps://hf-mirror.com huggingface-cli download --resume-download vikhyatk/moondream1 --local-dir ComfyUI/models/image2text/moondream1 huggingface-cli download --resume-download internlm/internlm-xcomposer2-vl-7b --local-dir ComfyUI/models/image2text/internlm-xcomposer2-vl-7b注意落盘位置是ComfyUI/models/image2text/下的同名子目录路径差一个层级插件就找不到模型。从图片到提示词四步使用流程刷新节点重启 ComfyUI 后刷新浏览器页面在右键添加节点菜单中搜索Image to Text即可看到新节点接入工作流依次连线 Load Image → Loader Image to Text Model选中模型与 cuda 设备→ Image to Text节点里填写描述指令如 Please describe this image in detail→ Show Text拖入图像在 Load Image 节点中点击上传选择待分析的本地图片读取输出运行工作流后Show Text 节点显示生成的描述可直接接到 CLIP Text Encode 做文生图复现常见问题 FAQ 提示找不到模型或首次运行卡在下载确认模型是否完整位于ComfyUI/models/image2text/对应子目录插件虽会自动下载但网络不佳时建议先按上面的镜像站方式手动备好。镜像下载中断或速度很慢--resume-download支持断点续传重新执行同一条命令即可继续若仍失败检查HF_ENDPOINT是否在当前终端生效。画布里搜不到新节点先确认仓库克隆在custom_nodes内而不是 ComfyUI 源码目录里再重启一次若日志有报错多为依赖装包失败留意控制台中 transformers、diffusers 相关的错误提示。写在最后装好模型、连上节点你的 ComfyUI 就具备了看图说话的能力图片复现、提示词反查都能一步到位。接下来不妨把生成的文本再接到 Prompt Conditioning 或 T5 提示词模型节点上尝试图像风格迁移与多模型提示词对比等玩法。【免费下载链接】Comfyui_image2promptimage to prompt by vikhyatk/moondream1项目地址: https://gitcode.com/gh_mirrors/co/Comfyui_image2prompt创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表