CLIP Interrogator图像描述生成
CLIP Interrogator图像描述生成
  • 模型资讯
  • 模型资料

图像描述介绍

图像描述:给定一张图片,CLIP Interrogator模型根据图片信息生成一句对应描述(Prompt)。它结合了OpenAI的CLIP和Salesforce的BLIP, 可以将产生的Prompt与文生图模型,如Stable Diffusion,一起使用,创造酷炫的艺术作品!

如何使用

在安装完成MaaS-lib之后即可使用image-captioning的能力

推理代码范例

from modelscope.pipelines import pipeline
from modelscope.utils.constant import Tasks

model_id = 'damo/cv_clip-interrogator'
input_image = "test.png"

pipeline_ci = pipeline(Tasks.image_captioning, model=model_id)
print(pipeline_ci(input_image))

Clone with HTTP

 git clone https://www.modelscope.cn/damo/cv_clip-interrogator.git