ControlNet 1.1与ControlNet 1.0具有完成相同的体系结构。
ControlNet 1.1包括所有以前的模型,且增加了几个新的型号。
ControlNet 1.1一共有14个模型(11个生产模型和3个实验模型)及42类预处理器的对应关系:
control_v11p_sd15_canny(canny\threshold)
control_v11p_sd15_mlsd(mlsd)
control_v11f1p_sd15_depth(depth_leres\depth_leres++\ depth_zoe)
control_v11p_sd15_normalbae(normal_map\ normal_bae)
control_v11p_sd15_seg(segmentation\oneformer_coco\oneformer_ade20k)
control_v11p_sd15_inpaint(inpaint\inpaint_only)
control_v11p_sd15_lineart(lineart\lineart_coarse\lineart_standard)
control_v11p_sd15s2_lineart_anime(lineart_anime\lineart_anime_denoise)
control_v11p_sd15_openpose(openpose\openpose_face\openpose_faceonly\openpose_full)
control_v11p_sd15_scribble(pidinet_scribble\scribble_xdog\scribble_hed)
control_v11p_sd15_softedge(hed_safe\pidinet\pidinet_safe\pidinet_sketch)
control_v11e_sd15_shuffle(shuffle\clip_vision)
control_v11e_sd15_ip2p
control_v11f1e_sd15_tile(tile_resample\tile_colorfix\tile_colorfix+sharp)
其它未分类五组预处理器(mediapipe_face、color、invert、reference_only、reference_adain、reference_adain+attn)
Depth
control_v11f1p_sd15_depth(depth_leres\depth_leres++\ depth_zoe)
使用深度贴图控制Stable Diffusion。
Normal
control_v11p_sd15_normalbae(normal_map\ normal_bae)
使用标准贴图控制Stable Diffusion。
Canny
control_v11p_sd15_canny(canny\threshold)
使用精确贴图控制Stable Diffusion。
MLSD
control_v11p_sd15_mlsd(mlsd)
使用线条检测控制Stable Diffusion。
Scribble
control_v11p_sd15_scribble(pidinet_scribble\scribble_xdog\scribble_hed)
使用涂鸦控制Stable Diffusion。
Soft Edge
control_v11p_sd15_softedge(hed_safe\pidinet\pidinet_safe\pidinet_sketch)
使用羽化边缘控制Stable Diffusion。
Segmentation
control_v11p_sd15_seg(segmentation\oneformer_coco\oneformer_ade20k)
使用语义分割控制Stable Diffusion。
Openpose
control_v11p_sd15_openpose(openpose\openpose_face\openpose_faceonly\openpose_full)
使用开放式姿势控制Stable Diffusion。
Lineart
control_v11p_sd15_lineart(lineart\lineart_coarse\lineart_standard)
使用线条艺术控制Stable Diffusion。
Anime Lineart
control_v11p_sd15s2_lineart_anime(lineart_anime\lineart_anime_denoise)
使用动漫线条艺术控制Stable Diffusion。
Shuffle
control_v11e_sd15_shuffle(shuffle\clip_vision)
使用内容无序控制Stable Diffusion。
Instruct Pix2Pix
control_v11e_sd15_ip2p
使用Pix2Pix指令集控制Stable Diffusion。
Inpaint
control_v11p_sd15_inpaint(inpaint\inpaint_only)
使用局部重绘控制Stable Diffusion。
Tile
control_v11f1e_sd15_tile(tile_resample\tile_colorfix\tile_colorfix+sharp)
使用细节修复控制Stable Diffusion。
以上是我帮小伙伴们准备的Stable Diffusion——关于control net模型的基本用法的一些总结,感兴趣的小伙伴也可以去咱们国内的Stable Diffusion线上版去体验一下 https://ai.zhizhucloud.com/?inviteKey=MQDXug