本文制作过程前提依赖这个：windows nvidia 显卡安装 conda 和 stable diffusion AI生图过程 - 哔哩哔哩 (bilibili.com)

成品: AI 辅助制作美女视频测试_哔哩哔哩_bilibili

个人感受

非管理员用户打开 powershell 进入 stable diffusion 项目目录

下载支持 windows 的 ffmpeg https://github.com/BtbN/FFmpeg-Builds/releases/download/latest/ffmpeg-master-latest-win64-gpl.zip

也可以直接浏览器访问 https://ffmpeg.org/download.html#build-windows 下载到 "D:\MACMOVEDISK\learn\Windows-SDW"

将 ffmpeg 的 bin 目录写入用户环境变量，针对当前用户使 ffmpeg 可调用

管理员模式打开 powershell 将 ffmpeg 的 bin 目录写入系统环境变量，针对所有用户使 ffmpeg 可调用(可选)

如果需要删除 ffmpeg 用户环境变量，比如 "D:\MACMOVEDISK\learn\Windows-SDW\ffmpeg-master-latest-win64-gpl\bin"

如果需要删除 ffmpeg 系统环境变量就管理员模式打开 powershell ，比如 "D:\MACMOVEDISK\learn\Windows-SDW\ffmpeg-master-latest-win64-gpl\bin"

非管理员用户打开 powershell 或者打开快捷方式 (Anaconda Powershell Prompt.lnk)["C:\ProgramData\Microsoft\Windows\Start Menu\Programs\Anaconda3 (64-bit)\Anaconda Powershell Prompt.lnk"]

安装背景控制插件 https://pypi.org/project/transparent-background/

安装 sd-webui-animatediff adetailer ebsynth_utility sd-webui-controlnet deforum 插件

创建模型目录

下载 cyberrealistic 真人模型 https://civitai.com/api/download/models/372799?type=Model&format=SafeTensor&size=pruned&fp=fp16

也可以直接浏览器访问 https://civitai.com/models/15003?modelVersionId=372799 下载到 D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\models\Stable-diffusion\

下载针对 cyberrealistic 模型的 CyberRealistic_Negative_v3 负面提示词模型 https://huggingface.co/cyberdelia/CyberRealistic_Negative/resolve/main/CyberRealistic_Negative_v3.pt

也可以直接浏览器访问 https://huggingface.co/cyberdelia/CyberRealistic_Negative/blob/main/CyberRealistic_Negative_v3.pt 下载到 "D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\embeddings"

下载 MeinaMix 动漫模型 https://civitai.com/api/download/models/119057

也可以直接浏览器访问 https://civitai.com/models/7240/meinamix 下载到 "D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\models\Stable-diffusion"

下载支持 ControlNet 插件的 control_v11p_sd15_softedge 模型 https://huggingface.co/lllyasviel/control_v11p_sd15_softedge/resolve/main/diffusion_pytorch_model.safetensors

也可以直接浏览器访问 https://huggingface.co/lllyasviel/control_v11p_sd15_softedge/blob/main/diffusion_pytorch_model.safetensors 下载到 "D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\models\ControlNet" 并重命名为 control_v11p_sd15_softedge.safetensors

下载支持 ControlNet 插件的 control_v11p_sd15s2_lineart_anime 模型 https://huggingface.co/lllyasviel/control_v11p_sd15s2_lineart_anime/resolve/main/diffusion_pytorch_model.safetensors

也可以直接浏览器访问 https://huggingface.co/lllyasviel/control_v11p_sd15s2_lineart_anime/blob/main/diffusion_pytorch_model.safetensors 下载到 "D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\models\ControlNet" 并重命名为 control_v11p_sd15s2_lineart_anime.safetensors

下载支持 Deforum 插件的 film_net_fp16 模型 "https://github.com/hithereai/frame-interpolation-pytorch/releases/download/film_net_fp16.pt/film_net_fp16.pt"

也可以直接浏览器访问 https://github.com/hithereai/frame-interpolation-pytorch/releases 下载到 D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\models\Deforum\film_interpolation\

下载支持 sd-webui-animatediff 插件的 mm_sd15_v3 运动模型 https://huggingface.co/conrevo/AnimateDiff-A1111/resolve/main/motion_module/mm_sd15_v3.safetensors

也可以直接浏览器访问 https://huggingface.co/conrevo/AnimateDiff-A1111/blob/main/motion_module/mm_sd15_v3.safetensors 下载到 D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\extensions\sd-webui-animatediff\model\

下载支持 ControlNet 插件的 softedge_hed 模型 https://huggingface.co/lllyasviel/Annotators/resolve/main/ControlNetHED.pth

也可以直接浏览器访问 https://huggingface.co/lllyasviel/Annotators/blob/main/ControlNetHED.pth 下载到 D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\hed\

下载支持 ControlNet 插件的 lineart_anime 模型 https://huggingface.co/lllyasviel/Annotators/resolve/main/netG.pth

也可以直接浏览器访问 https://huggingface.co/lllyasviel/Annotators/blob/main/netG.pth 下载到 D:\MACMOVEDISK\learn\Windows-SDW\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\lineart_anime\

启动 sdwebui 环境启动脚本，由于安装了多个插件，会初始化安装多个 python 模块

需要等待很长时间，保持互联网的畅通你懂的，这个过程我经历了太多折磨，相信我，你不会想经历

观察终端显示 Running on local URL: http://0.0.0.0:7860 启动完成后

浏览器测试访问 http://127.0.0.1:7860 检查插件是否安装

配置 sd-webui-controlnet

观察 powershell 显示 Running on local URL: http://0.0.0.0:7860 说明启动完成

再次通过浏览器测试访问 http://127.0.0.1:7860 检查 Controlnet

使用 cyberrealistic 模型生成真人

启用 ADetailer 修复真人面部

使用 AnimateDiff 生成动态真人视频

非管理员开启新的 powershell 创建 Ebsynth Utility 视频创作目录 "D:\MACMOVEDISK\learn\Windows-SDW\EbSynth-Beta-Win\demo1"

使用 Ebsynth Utility 插件导入素材将真人重绘为动漫

离开浏览器，非管理员用户开启另一个 powershell 窗口，进入目录 "D:\MACMOVEDISK\learn\Windows-SDW"

下载支持 windows 的 EbSynth https://ebsynth.com/EbSynth-Beta-Win.zip

也可以直接浏览器访问 https://ebsynth.com/ 邮件订阅后下载到 D:\MACMOVEDISK\learn\Windows-SDW\

打开资源管理器进入进入目录 "D:\MACMOVEDISK\learn\Windows-SDW\EbSynth-Beta-Win"

使用 EbSynth 工具转换 ebs

返回浏览器生成重绘视频

使用剪映导入两个素材

参考