自动生成精确提示词

梦晨 发自 凹非寺

量子位 | 公众号 QbitAI

笑不活了家人们，最近突然流行起一个新玩法：

给AI发自拍，看AI如何描述你。

比如这位勇敢晒出自拍的纽约大学助理教授，他的笑容在AI看来居然是“兽人式微笑”。

AI还吐槽他胡子没有打理，但他表示拍照那天胡子要比平常整齐多了。

在评论区里还有一位也被评价为兽人微笑的网友现身。

两位“部落勇士”就这样赛博认了个亲。

这还不算完，有了AI生成的描述就可以再当作提示词喂回给AI，看看能画出些什么来。

不得不说，与他本人还是有一些神似的～

AI绘画逆着玩，火到服务器被挤爆

上面这个玩法，相当于把最近火爆的AI绘画逆过来玩，输入图片输出文字描述。

负责文字描述的正是大名鼎鼎的CLIP，也就是DALL·E、Stable Diffusion等AI绘画模型中负责理解语言的那部分。

目前这个CLIP Interrogator（CLIP审问官），在HuggingFace上已有现成的Demo可玩。

玩法也非常简单，只需打开网页→上传图片→一键提交即可，另外还提供了简单的裁剪编辑功能，方便选择图片中想要描述的对象。

（地址放在文末）

不过因为现在实在是太火爆，服务器资源有限经常排不上队，要多尝试几次才行。

除了上传自拍之外，更实用的玩法是上传一张心仪的图片，看看AI给出怎样的提示词。

因为与市面上常见的AI绘画模型使用了同款算法，所以这些提示词也就格外准确。

（谷歌系的Imagen等用的是自家T5语言模型，其他大部分用的是CLIP。）

先来举个栗子。

AI生成的描述会包含主体内容“海龟”、艺术风格“水彩画”、作者或风格相似的作者、可能出现在什么网站、主要颜色、饱和度等等，甚至还能给出专业的绘画技法“wet-on-wet”。

拿着这段提示词，就可以再喂回给指定的AI轻松出图了。

如果稍作修改，也可以做到更换画风，或保留画风更换主体内容等众多玩法。

HuggingFace的一位工程师，还用这套流程搞出了想要很久的羊驼纹身。

看到这里，你有没有产生一些大胆的想法？

作者的个人网站是个宝藏

应用的作者，是AI绘画圈子里的大佬@pharmapsychotic。

他之前做过一套高质量的机器人图集也非常火。

CLIP Interrogator最早8月就推出第一版，不过一开始还不够完善，经常出现离谱的结果。

他在网友提的建议下不断改进，也越来越流行。

甚至最近HuggingFace官方还给他特批了4张GPU，让更多人能够玩上。

在作者的个人网站上，还收集了从去年7月以来诞生的AI艺术相关工具和资源大全。

除了AI画画模型以外，还有超分辨等后续步骤的工具，音乐生成、视频生成工具等等，以及相关学习资料。

也是一个宝藏了～

在线试玩：
https://huggingface.co/spaces/pharma/CLIP-Interrogator

工具大全：
https://pharmapsychotic.com/tools.html

参考链接：
[1]https://twitter.com/moyix/status/1582769088807305218
[2]https://pharmapsychotic.com/