当前位置:首页|资讯|提示词|ChatGPT

造梦师手记:自然对话模式,SDXL时代最好用的提示词翻译插件

作者:铁华团的黄金船发布时间:2023-08-17


我曾经热衷于汉化stable diffsion的各种插件,尤其是提示词插件,我用了巨大的精力,搞了3000+的提示词。为了方便新手,甚至搞到了7.5万+的提示词清单,准备搞一波大的。

但是,当SDXL来临后,我意识到,这些操作已经变得毫无意义。

原因很简单,SDXL可以很好的理解自然语言。我们几乎无需对提示词进行各种权重的配置,就能用自然语言和SDXL对话,生成想要的画面。

当然了,SDXL现在能理解的,是英文,如何让它理解中文呢?

习惯用ChatGPT的小伙伴都了解,对于大模型来说,翻译太简单了,SDXL为什么没有呢?

不过没关系,有人做了基于大模型的翻译插件,挂在WebUI上,表现完美。

本来这个插件在SD1.5时代就已经开发完成,只是SD1.5对自然语言的理解非常粗糙,导致这个插件比较鸡肋,我用了几次后,干脆停用了插件。

没想到SDXL大模型到来后,让这个插件重新换发青春。

如果结合ChatGPT、Claude等生成式AI,SDXL会给我们非常惊艳的效果。

让我们一起编个故事。

故事梗概是一个女孩骑着大猫打败了恶龙。

先让Claude(或ChatGPT)来设计分镜:

扮演专业漫画家,给描写彩色漫画分镜脚本,详细描述画面的细节:剧情:一个女孩穿着盔甲骑着一只白色的大猫打败了恶龙分镜头一共4段完结,要求如下:
描写画面里出现的角色,描写每个角色的动作和神态,如果画面有多个人,必须要分别描述,描写写周围环境。

Claude回复:

第一格:一个约16岁的女孩站在峭壁边缘,身穿闪亮的银色盔甲,头顶一个尖尖的头盔。她有着一头红色长发,绿色的大眼睛中透着坚定。在她脚下是一只巨大的白色猫科动物,有着黄色的眼睛和流线型的身体。它的头顶两根尖耳朵立着,尾巴慢慢甩动。女孩正坐上这只大猫准备出发。背景是座火山,火山口冒出滚滚浓烟。天空乌云密布,偶尔闪过一道闪电。
第二格:接近镜头显示女孩骑在白猫背上,缓缓飞过烟雾弥漫的火山口。白猫的四肢伸展,爪子像钩子一样牢牢抓住岩石。女孩手持一柄银色宝剑,目不转睛地看向前方。在浓烟中隐约可见一个巨大的红色恶龙,它张开血盆大口冲女孩吼叫。
第三格:白猫飞到恶龙头顶,女孩高举长剑猛砍向恶龙。恶龙痛苦地仰头大吼,感到极度痛苦。
第四格:恶龙身负重伤,无力再战。女孩手持长剑,满脸胜利的笑容,高高站立在白猫背上。白猫也洋洋得意地看着打败的恶龙。背景是喷发的火山,为两者勾勒出壮阔的剪影。

启用翻译插件后,直接分批把中文贴到提示词界面。

第一格:

除了这只猫有点小以外,整体画面非常符合预期。

第二格:

喂,我的白猫黑化了吗?

SDXL在处理多个角色的时候,依然会有理解偏差。

第三格:

哈哈哈哈,这次白猫长大了,不过恶龙怎么成了中国传统龙?

第四格:

故事结束了,让我们看看这个翻译插件怎么用。

安装并启用后,直接在提示词界面输入中文,插件会自动翻译成英文再送给SDXL,生成的结果里可以看到翻译好的英文。

安装地址:

https://github.com/ParisNeo/prompt_translator

安装后,首次使用会下载2个多G的语言翻译大模型,时间较长,耐心等待,下载完毕后,点击启用就可以了。

启用成功后,可以直接在提示词栏输入中文。




Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1