SDXL 1.0 终于上线了,而且秋葉大佬的整合包也可以直接使用了。可能是因为我的显卡只有8G,开始出现各种问题,一番修改后也终于能稳定跑图了,下面小刚分享下使用方法及可能遇到的问题
一、下载模型:
模型一共有3个,分别是一个基本模型,一个精修模型和一个VAE模型
① 基础模型:https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/tree/main
![](/wp-content/uploads/2023/08/frc-0569f3e6cf016a11bf1ddc1d558db283.png)
② 精修模型:https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0/tree/main
![](/wp-content/uploads/2023/08/frc-5836052485ed2d5a526ce6c30cb8d3d9.png)
③ VAE模型:https://huggingface.co/stabilityai/sdxl-vae/tree/main
![](/wp-content/uploads/2023/08/frc-1cf3cc4e8520c36569d39f60b8101b58.png)
然后将两个6个多G的base和refiner模型放到 modelsStable-diffusion文件夹下;将sdxl_vae.safetensors放到 modelsVAE 文件夹下。
二、更新整合包到最新版本
将秋葉大佬的整合包更新到最新版本,日期是7-27的。旁边的扩展如果有更新的也可以一起更新下。
![](/wp-content/uploads/2023/08/frc-9e32a7647f78d6b7516864c90c4c3429.png)
三、更改高级选项
更改高级选项是为了应对可能因为显存较小可能爆显存或NAN错误(当然你也可以先跑图看看)。主要是两个,一个是显存优化,可以根据你的显存大小修改,如果小于等于8G就选中等显存。另一个是关闭VAE模型半精度优化,这可能是个比较普遍的问题,在C站看到有个模型应该是解决这个问题,如果你跑图的时候报NaN错误可以关闭,也可以下载C站集成了VAE的模型试试看,下载地址:https://civitai.com/models/117188/sdxlfixedvaefp16
另外如果报内存错误可以调整下虚拟内存试试。
![](/wp-content/uploads/2023/08/frc-78c41e7bdabd5e8372e0a56035b5ceed.png)
四、使用 base 模型文生图
完成以上步骤就可以跑图试试了,首先大模型选择 sd_xl_base ,VAE选择sdxl_vae,其他可以用常规SD跑图的设置,尺寸可以直接选择1024*1024,剩下的就是更换提示词抽卡了
五、使用 refiner 模型图生图精修
跑出满意的图就可以发送到图生图就行精修,大模型就需要选择 sd_xl_refiner 要想尽量保持原图就拉低重绘幅度。
![](/wp-content/uploads/2023/08/frc-b7939f3256988e0ca8962b847b635990.png)
下面左图是基础模型生成的,右图是精修模型的,感觉在特写镜头下基础模型的出图都可以直接用了。
![](/wp-content/uploads/2023/08/frc-9b2d42d3f9584e205034fa12624f4f78.png)
![](/wp-content/uploads/2023/08/frc-a955a4e3b811980f66382116eea63f57.png)
![](/wp-content/uploads/2023/08/frc-b9f9975bc1ac40ef811ec94f077fcfbc.png)
![](/wp-content/uploads/2023/08/frc-3b9a2ca265d780f7866a67439ff2d0e6.png)
小总结:
① 感觉画面色彩饱和度和质感真的有提升,有点Midjourney之前版本的感觉了,不过现在的基础模型肯定是赶不上V5的。但是以后在各种底模和LoRA的加持下追赶下MJ还是有可能的。
② 现在的LoRA和插件是不能直接使用的(ControlNet报错,高清修复倒是可以用)。不过现在已经有新的LoRA发布了,但是看竟然有1.27G大小,不知道以后的LoRA是不是都会这么大。貌似使用精修模型时带着LoRA会报错。来回切换模型真的太麻烦了。。
③ 可能是因为现在刚出,感觉对电脑性能的要求太高了,不仅显存,甚至加载模型时内存占用都有30多个G,有点吓人,期待各位大佬们的优化~
ps.另外附几个可以在线体验SDXL 1.0 的网站
吐司:https://tusi.art/
哩布哩布AI:https://www.liblibai.com/
DreamStudio:https://dreamstudio.ai/