随着人工智能的不断发展,AI绘图已经成为了一个热门的领域。AI绘图可以帮助艺术家们更快速地创建美丽的艺术作品,同时也可以帮助非艺术家们更轻松地创造出令人惊叹的图形。其中,Midjouney 和 Stable Diffusion 是两个备受关注的算法模型,它们可以帮助用户快速生成出各种高质量的图像。
Midjouney 是一款基于变分自编码器(VAE)的生成式模型,它可以生成出各种高质量的图像。它的核心思想是通过编码器将输入图像转化为一个潜在向量,再通过解码器将这个潜在向量转化为一个新的图像。这种方法可以帮助用户快速生成出具有艺术美感的图像,例如人物、动物、建筑等。
Stable Diffusion 是一种新的生成式模型,它可以帮助用户生成出更加复杂的图像。与 Midjouney 不同的是,Stable Diffusion 采用了一个连续的时间轴,从而可以生成出更加自然的图像。此外,Stable Diffusion 还具有更好的稳定性和可扩展性,能够处理更大规模的数据集。
Stable Diffusion项目地址:https://github.com/apple/ml-stable-diffusion
但不幸的是,Stable Diffusion 至少需要以下内容才能有效运行:
16GB 内存
具有至少 10GB VRAM 的 Nvidia 显卡
即使你的硬件合格了,从上手难度来讲,使用 Stable Diffusion AI 绘图需要一定的技术基础和实践经验。要使用 Stable Diffusion AI 绘图,你需要先了解深度学习、人工神经网络等相关的基础知识,并且熟练掌握使用Python编程语言的技能。同时,你还需要学习如何使用人工智能框架,例如TensorFlow、PyTorch等,以及如何使用Stable Diffusion AI绘图工具进行图像生成和调整等,所以建议小白直接pass。
那我们再说Midjouney,Midjouney虽然用起来傻瓜,封神的V5模型也能应对绝大数需求,但免费白嫖的时代已经过去,现在每个月最便宜的10美刀的价格也让很多人望而却步。
除了 Midjouney 和 Stable Diffusion,Leonardo AI 也是一款备受关注的AI绘图工具。它采用了类似 Midjouney 的变分自编码器(VAE)的生成式模型,同时还引入了自注意力机制(Self-Attention),从而可以帮助用户快速生成出各种高质量的图像。
Leonardo是基于Stable Diffusion的网站,同时深度集成了Stable Diffusion的各种插件,比如ControlNET的openpose姿势参考、局部重绘、prompt提示等等,甚至还提供了傻瓜式在线训练自己模型的功能。
光说不练假把式,Leonardo在绘图效果也是非常的优秀,跟midjourney有的拼,并且平台采用代币制,每人每天150个token,渲染一张图大概3~8token不等,基本上如果不是高频式的疯狂用,一天绝对,一来二去等于免费无限白嫖了。
从实际的使用体验来看,一般新人要顺畅进入AI绘画大门,配置流程与Prompt是卡住大量新人的两道坎。
这里给大家推荐一个生成prompt的网站:https://prompt.noonshot.com/
很好用、很好用、很好用,重点说三遍
这里我拿一个现成的指令:
a very cute boy and a very cute girl, in a forest, at night, exploring, running, 3d art, c4d, octane render, ray tracing, popmart blind box, clay material, Pixar trend, animation lighting, depth of field, ultra detailed, 8k --ar 3:4 --v 5
先看效果图
如果这是巧合,那好,我们再换一个。
我们什么都不输入,直接就硬编码,输入Pure and sweet girl(清纯甜美女孩)
哦,soga,这是不一样的feel,太爽了有木有。
说一点干货吧。
1.Leonardo最有趣的一点就在于,他们有很多非常精良的微调模型,都是基于v1.5和v2.1微调而来,在某一个领域极其专精,比如为对像素风专精的Pixel Art、对角色专精的RPG 4.0,甚至还有对专门做斧子的Battle Axes。这跟Midjouney的超大型V5走了两种完全不同的路。
2.Leonardo最近推出了一个内测的新功能。
翻译过来就是:测试版: Prompt Magic v2。我们的实验性渲染管道可能具有更好的即时依从性。暂时没有代币成本乘数,但由于更高的GPU开销,4月中旬这将恢复为代币成本的2倍乘数。
所以就是:目前这个功能也是免费可以白嫖的。
3.快速抄作业
Leonardo借鉴(抄袭)了playgroundai的核心功能,当用户看到一张自己很喜欢的图时,点开,就可以直接看到这个图用了什么模型,使用了了什么prompt,你可以直接点击copy prompt照抄再复刻一张,如果生成的不是很理想,同时也像要和这个图片同风格的话,可以将这个老鼠的图片下载到电脑本地,然后返回Leonardo中,在左下角点击上传将老鼠的图片上传上来,接着以图生图基本上就没什么大问题了。
4.一键去背景
在某些场景下,我们需要把主人物给抠出来,合成到别的背景上。扔到PS里去扣或者用别的工具,总归是很麻烦。Leonardo提供了快捷的方式,直接点一下,花费2token,直接一键抠图。
5.画板编辑
我们生成了自己想要的图片,但是很有可能,这些图的细节距离我们想要的,还是有一些距离,Leonardo也提供了一个有趣的能力,去画板中编辑。
在画板中,如果我们觉得生成图的构图不太好,人物太贴边了,比如想要在左边再额外渲染一些背景把构图补全,我们只要把图片拖到渲染框中,把需要格外渲染额地方给空出来Leonardo就可以自动补齐。
画板中还有其他很多有趣的小工具,比如局部重绘、消除等等,大家自行尝试就行。
6.姿势复刻
Stable Diffusion有一个神级插件ControNET,ControNET中有个最强的模型叫Openpose,可以抽取参考图的骨骼,让新生成的图片按照骨骼去去复刻人物姿势。
而Leonardo借鉴(抄袭)了这一点,集成到了自己的产品中,在我们将图片上传到Image to Image后,就能看到Pose to Image,开启他,就能完美复刻人物的动作啦。
7.训练自己的模型
这个应该是Leonardo的王炸了,在其他的任何产品上,训练自己的模型都不是一件容易的事。
Midjouney直接不支持,而Stable Diffusion则需要非常专业的知识,麻烦的要死。
现在,Leonardo提供了极其快捷的方式,去训练我们自己的模型。感兴趣的兄弟们可以去肝一下。创建一个新的模型,准备好训练集,外加20~40张背景干净的图片就可以。把这些训练集给传上去,直接右下角训练模型就好。
In the End
大家想用的话,直接在官网https://leonardo.ai/,点击右上角启动app,然后点击我已在白名单中,直接注册账号,就可以进了。
更多好用功能希望你我共同探索哦,就简单介绍这些吧。太晚了,明天还得上班打工ing。
简单收个尾,总体来说,leonardo可谓是取其精华,其其糟粕,强无敌啊,你还在等什么,快点用起来啦。
清大文森学堂 2023-04-24