文 | 尚恩
编辑 | 邓咏仪
OpenAI悄咪咪的又在半夜整活,这次直接把AI绘画和ChatGPT合并了!
来源:OpenAI
美国时间9月21日凌晨,OpenAI官宣文生图AI工具DALL·E系列迎来最新版本DALL·E 3。相比上一代模型DALL·E 2,DALL·E 3自身的画技不仅提升巨大,还能准确理解语意、细节的细微描述差异。
还记得去年DALL·E 2发布时,带动了一波AI文生图模型热,包括Stable Diffusion在内的众多与AI生图有关的工具、模型都是在当时推出的。
更重要的是,这次OpenAI直接把DALL·E 3和ChatGPT集成到了一起。
来源:OpenAI
简单说就是,新版DALL·E 3,直接省去了提示词工程(Prompt Engineering)这一步,你只管随意发挥想象,词由ChatGPT帮你拓展,画画就交给AI来搞,So Easy。
来源:公开网络
对此,OpenAI联合创始人Greg Brockman直接表示:
很难不爱。
来源:X(原Twitter)
这般操作,也属实是把网友看的一愣一愣的。不少网友都惊呼,这也太绝了!
来源:X(原Twitter)
也有网友在看过DALL·E 3生成的图后,直接表示:“Midjourney拜拜了您内”。
来源:X(原Twitter)
要说这次DALL·E 3发布中,最大的亮点,当属是把AI绘图原生构建在ChatGPT之上。
为啥这么说?对比以前的文生图工具,都是先将文本Prompt转换成图像,即使是 DALL·E 2,也会经常忽略特定的措辞导致出错。现在只需向ChatGPT提出要求,一个简单的句子,AI就能开启头脑风暴改进提示,再也不用为写不出华丽的提示词而头疼
甚至,你还可以在对话过程中,基于生成的图像随时做出修改。
比如官方给出的这个例子,详细的展示了DALL·E 3是如何详尽地将提示词中的每一个场景,生成如下一幅佳作。
一轮满月下洒满街道,熙熙攘攘的行人正享受着夜生活。街角摊位上,一位有着火红秀发,身着典雅天鹅绒斗篷的少女,正与脾气暴躁的老板讨价还价。
来源:OpenAI
除此以外,OpenAI也表示:“DALL·E 3比以往系统更能理解细微差别和细节,让用户更加轻松地将自己的想法转化为非常准确的图像。”
比如,下面这两幅图分别是由DALL·E 3与DALL·E 2生成,同样的一段Prompt「一幅描绘篮球运动员扣篮的油画,并伴以爆炸的星云」,左图 DALL·E 2在细节、清晰度、明亮度等方面显然逊于右图DALL·E 3的。
左:DALL·E 2;右:DALL·E 3
来源:OpenAI
DALL·E 3+ChatGPT配置到底有多绝?这不,OpenAI官方就专门给DALL·E 3搞了一个超可爱的宣传视频,连CEO Sam Altman都忍不住称赞。
来源:X(原Twitter)
根据放出的视频,可以看到用户写了一段提示词「我家5岁宝宝一直在说一个超级向日葵刺猬,它该长什么样?」,ChatGPT同时写了四段不同风格的提示词,直接生成四张风格迥异的图。
来源:OpenAI
接下来选择最后一张图,给小刺猬起个名字,就叫小Larry吧,并为它画一个房子。
来源:OpenAI
另外,DALL·E 3还可以根据图片的风格,生成可爱的贴纸。
来源:OpenAI
最后,让ChatGPT总结一下刚才的内容,生成一个睡前故事。咱就是好家伙,这配合着ChatGPT配件玩,完全可以生成一个电子书了。
来源:OpenAI
目前DALL·E 3还未完全开放,想玩还得等一等,不过可以先来看看OpenAI放出的大量样图,官方也很贴心的给每张图都附上了对应的提示词。
提示词:一个装饰着室内植物的咖啡馆的小地图立体模型,顶部是木质横梁纵横交错,里面有一个冷饮站,上面有小瓶子和玻璃杯。
来源:OpenAI
提示词:一种带有大玻璃窗的现代建筑物,坐落在悬崖上,在日落时可以俯瞰宁静的海洋。
来源:OpenAI
而CEO Altman最喜欢的则是这张“牛油果看医生”。
来源:X(原Twitter)
有网友去试把同样的提示词用在DALL·E 2上的效果,嗯….咱就是说,咋看咋别扭。
来源:X(原Twitter)
这么一对比,可以发现DALL·E 3确实进步了不少。
下面简单梳理了一下DALL系列。
2021年1月6日,OpenAI在其博客发布了两个文本图像的神经网络**DALL·E和CLIP。DALL·E可以基于文本直接生成图像,CLIP则能够完成图像与文本类别的匹配。
2022年4月,DALL·E 迎来升级版本-DALL·E 2。与一代相比,DALL·E 2在生成用户描述的图像时具有更高的分辨率和更低的延迟。并且,二代还增添了一些新的功能,比如对原始图像进行编辑。
来源:OpenAI
目前,DALL·E 3处于研究预览版本,根据OpenAI计划,将于10月份首先向ChatGPT Plus和ChatGPT Enterprise用户发布,独立版在今年秋天晚些时候提供。
随着OpenAI推出DALL·E 3,AI绘画领域只能说是太卷了,其中最大的玩家莫过于估值10亿美元的文生图“扛把子”Midjourney了。
很多网友们也手痒搞事,用同一个提示词在DALL·E 3和Midjourney生成,然后放出来进行比较。
来源:X(原Twitter)
来源:OpenAI、Midjourney
对比看下来,你觉得哪个效果更好呢?
AI生图虽然好玩,但争议也不少,今年初Stability AI和Midjourney就遭到三位艺术家的版权诉讼。
这一次,在版权问题、生图安全这块,OpenAI也是专门下了点功夫。
来源:Artist and Creative Content Owner Opt Out
首先,OpenAI在DALL·E 3上进行了大量工作,包括强化安全措施,以防止生成暴力、色情的图像,或是带有公众人物姓名的图。
另外,为了确保模型的安全性,团队还使用了输入分类器,可以帮助识别图像是否由DALL·E 3生成
此外,OpenAI还允许创作者填写表格,禁止网络爬虫访问艺术家自己的网站。也可以直接发送想要保护隐私的图像,团队就会将其从训练数据中删掉。
长按添加「智涌」小助手入群
👇🏻 添加请备注:公司+职务 👇🏻
来源:公众号【智能涌现】