当前位置:首页|资讯|AI绘画

Differential Diffusion:让AI绘画终于实现像素级精准掌控

作者:AI_Fox发布时间:2024-02-24

Differential Diffusion,一个新的扩散框架,通过差异扩散,为每个像素赋予独特的强度,实现无与伦比的掌控。



是否曾想过精细调整图像的每个部分?现在可以了。这个框架超越传统工具,允许你为每个区域甚至每个像素指定精确的修改程度,为图像编辑和生成打开了无尽可能性。

主要特点:

  1. 精准编辑掌控

    引入“变化地图”概念,使您能够为每个像素或区域指定不同的变化程度。这种掌控超越传统工具,允许更为复杂的图像调整。

  2. 文本引导的图像修改

    使用文本提示引导图像修改,使专业级图像创作对非专业用户也变得轻松。

  3. 软填充技术

    软填充在填补图像空白或修复图像部分时,能够微调周围区域,确保新内容与原图无缝融合。


  1. 强度扇

    可视化不同编辑强度效果的工具,帮助用户直观比较并选择最合适的编辑强度。



  1. 无需训练

    操作仅在推理阶段进行,无需额外的模型训练或微调。

  2. 与现有模型兼容

    与现有的扩散模型(如Stable Diffusion XL、Kandinsky和DeepFloyd IF)无缝集成,增强编辑和生成能力。



来看一个实际的例子:

假设你是个画家,心血来潮想画一副展现四季变迁的画。画面左边是春天的生机,右边是冬天的银装素裹,中间则是夏天和秋天的柔和过渡。

Differential Diffusion如何发挥作用:

变化地图的搞鬼

想象一下,通过变化地图,你能给画里的每一块地方定制不同的“变身强度”。比如,春天的部分几乎不变,冬天的部分狂热变身,而中间区域逐渐加强。这样的变化地图直观地告诉Differential Diffusion系统如何处理画面的各个地儿。

悄悄填坑的技巧

软填充就像画面的润滑油,确保从春到冬的变化过渡自然无迹。举个例子,你要在秋天的地方丢些树叶,软填充就能巧妙地把这些树叶和地面融合得天衣无缝,不会显得突兀。而且,树叶的密度可以按照变化地图的规律,从左到右慢慢减少。

强度扇的玩法

有了强度扇,你可以玩各种不同的编辑强度,看看从春天到冬天的转变有何不同。这样一来,你就能更直观地比较,选出最适合你画面意图的编辑效果。比如,调调秋天的颜色深浅,或者决定冬天雪花的厚度。



这就是Differential Diffusion的魔力,让你的画面变得活灵活现,真切感受四季的变幻。




体验:https://huggingface.co/spaces/exx8/differential-diffusion

项目:https://differential-diffusion.github.io

论文:https://differential-diffusion.github.io/paper.pdf

GitHub:https://github.com/exx8/differential-diffusion





Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1