CLIP Interrogator 展示图片 1

CLIP Interrogator

一款通过分析图片来生成并优化文生图提示词的工具。

工具介绍

CLIP Interrogator 是一款提示词工程工具,主要用途是分析你提供的图片并生成匹配该图片的文本提示词。它结合 OpenAI CLIP 与 Salesforce BLIP,将图片与多种艺术家、媒介和风格进行比对,再结合 BLIP 描述给出提示词建议。生成的提示词可用于 Stable Diffusion 等文生图模型,适合使用文生图工具的用户和提示词创作者,常见于参考图反推提示词、创作相似风格图像的场景。

核心功能

  • 图片提示词生成:分析给定图片并给出可用于文生图模型的文本提示词。
  • 风格与媒介比对:将图片与多种艺术家、媒介和风格进行测试,分析模型如何理解图片内容。
  • CLIP 与 BLIP 结合:把 CLIP 的分析结果与 BLIP 图片描述结合,形成提示词建议。
  • 相似图像创作支持:生成的提示词可用于 Stable Diffusion 等文生图模型,帮助创作与参考图相近的图像。
  • API 调用:托管于 Replicate,可通过 API 运行。

使用方法

  1. 1进入 Replicate 上 pharmapsychotic/clip-interrogator 的产品页面。
  2. 2提供你想要分析并反推提示词的图片。
  3. 3调用其图片分析能力,让 CLIP 与 BLIP 结合生成匹配该图片的文本提示词。
  4. 4查看返回的提示词结果,并将其用于 Stable Diffusion 等文生图模型以创作相似图像。

常见问题

CLIP Interrogator 能做什么?

它是一款提示词工程工具,可以分析你提供的图片,并生成匹配该图片的文本提示词,用于文生图模型创作相似图像。

生成的提示词可以用在哪些模型上?

官方说明生成的提示词可用于 Stable Diffusion 等文生图模型,用来创作与参考图相近的图像。

CLIP Interrogator 是如何分析图片的?

它结合 OpenAI CLIP 与 Salesforce BLIP,将图片与多种艺术家、媒介和风格进行比对,再结合 BLIP 描述给出提示词建议。

在哪里可以使用 CLIP Interrogator?

它托管在 Replicate 上,标识为 pharmapsychotic/clip-interrogator,可通过 API 运行。

使用 CLIP Interrogator 需要付费吗?

该产品在 Replicate 上按量付费,具体费用以平台实际计费为准。

开源项目与托管调用如何收费?

当前链接是作者维护的 Replicate 托管页,云端推理按用量计费;项目也开源,可按官方部署说明自行运行,自行部署仍需承担算力成本。两种方式不能混为全免费。

中文支持的具体范围是什么?

官方标准 BLIP/CLIP 流程从图片输出英文提示词,默认标签与描述面向英文文生图模型;原始版本不提供直接中文提示词输出,中文使用可另行翻译结果。