SDXL 1.0 终于上线了,而且秋葉大佬的整合包也可以直接使用了。可能是因为我的显卡只有8G,开始出现各种问题,一番修改后也终于能稳定跑图了,下面小刚分享下使用方法及可能遇到的问题

一、下载模型

模型一共有3个,分别是一个基本模型,一个精修模型和一个VAE模型

① 基础模型:https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/tree/main

② 精修模型:https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0/tree/main

③ VAE模型:https://huggingface.co/stabilityai/sdxl-vae/tree/main

然后将两个6个多G的base和refiner模型放到 modelsStable-diffusion文件夹下;将sdxl_vae.safetensors放到 modelsVAE 文件夹下。

二、更新整合包到最新版本

将秋葉大佬的整合包更新到最新版本,日期是7-27的。旁边的扩展如果有更新的也可以一起更新下。

三、更改高级选项

更改高级选项是为了应对可能因为显存较小可能爆显存或NAN错误(当然你也可以先跑图看看)。主要是两个,一个是显存优化,可以根据你的显存大小修改,如果小于等于8G就选中等显存。另一个是关闭VAE模型半精度优化,这可能是个比较普遍的问题,在C站看到有个模型应该是解决这个问题,如果你跑图的时候报NaN错误可以关闭,也可以下载C站集成了VAE的模型试试看,下载地址:https://civitai.com/models/117188/sdxlfixedvaefp16
另外如果报内存错误可以调整下虚拟内存试试。

四、使用 base 模型文生图

完成以上步骤就可以跑图试试了,首先大模型选择 sd_xl_base ,VAE选择sdxl_vae,其他可以用常规SD跑图的设置,尺寸可以直接选择1024*1024,剩下的就是更换提示词抽卡了

五、使用 refiner 模型图生图精修

跑出满意的图就可以发送到图生图就行精修,大模型就需要选择 sd_xl_refiner 要想尽量保持原图就拉低重绘幅度。

下面左图是基础模型生成的,右图是精修模型的,感觉在特写镜头下基础模型的出图都可以直接用了。

小总结:

感觉画面色彩饱和度和质感真的有提升,有点Midjourney之前版本的感觉了,不过现在的基础模型肯定是赶不上V5的。但是以后在各种底模和LoRA的加持下追赶下MJ还是有可能的。
② 现在的LoRA和插件是不能直接使用的(ControlNet报错,高清修复倒是可以用)。不过现在已经有新的LoRA发布了,但是看竟然有1.27G大小,不知道以后的LoRA是不是都会这么大。貌似使用精修模型时带着LoRA会报错。来回切换模型真的太麻烦了。。
③ 可能是因为现在刚出,感觉对电脑性能的要求太高了,不仅显存,甚至加载模型时内存占用都有30多个G,有点吓人,期待各位大佬们的优化~

ps.另外附几个可以在线体验SDXL 1.0 的网站
吐司:https://tusi.art/
哩布哩布AI:
https://www.liblibai.com/
DreamStudio:
https://dreamstudio.ai/