sd-webui-controlnet重磅更新！Webui上的SD XL 1.0 支持control net了！

sd-webui-controlnet扩展：该扩展已增加了来自社区的多个控制模型的支持。许多新模型与SDXL有关，其中包括几种用于Stable Diffusion 1.5的模型。sd-webui-controlnet 1.1.400是为1.6.0以上版本的webui开发的。

新支持的模型列表：该列表包括了多个模型，如diffusers_xl_canny_full.safetensors、diffusers_xl_depth_full.safetensors等。

此外，这次更新还特别强调了VRAM的使用。所有的方法都已经在8GB和6GB的VRAM上进行了测试，为不同配置的用户提供了更加友好的使用体验。

所有方法都已在8GB VRAM和6GB VRAM上进行了测试。对于8GB vram，推荐的cmd标志是--medvram-sdxl。对于6GB vram，推荐的cmd标志是--lowvram。

Control-LoRAs是来自StabilityAI的控制模型，用于控制SDXL。当这些模型发布时，StabilityAI在官方用户界面ComfyUI中提供了json工作流。

除了上述模型，还有其他模型如Openpose、Recolor (SDXL)、T2I-Adapter、IP-Adapter等。特别地，Ip adapter和reference的双重加持，使得一张参考图也能模仿风格。

同时，还强调了webui版本的control net和comfyUI的区别，生成的效果上有什么不同等。我觉得目前就是各有优势。

我认为这次更新不仅仅是一个版本的迭代，更是整个AI图像生成领域的一个重要里程碑。它不仅提供了更多的控制模型，还为用户提供了更加友好的使用体验。这意味着，未来的AI图像生成将更加真实、有趣和多样。

特邀作者：早稻田大学计算机系在读博士 王军杰