兄弟们,今天聊个大新闻。Stability AI刚开源的SDXL-Turbo直接把实时生成拉到了新高度。相比原版SDXL,它采用蒸馏技术将推理步数从50步压缩到1-4步,在RTX 4090上单张512x512图像的生成延迟低至0.3秒,几乎可以边画边出图。
技术干货来了:Turbo的核心是Adversarial Diffusion Distillation(ADD),用GAN对抗损失+蒸馏损失联合训练,让一步生成的质量逼近50步的教师模型。这意味着你的破笔记本只要带6GB显存,就能跑出不错的效果。
我实测了ComfyUI下的表现:步数设为4,CFG scale=2,生成的图像细节保留度比老版SDXL高30%,但显存占用仅3.8GB。缺点也很明显——高分辨率(1024+)会崩,建议先低分辨率生成再使用ESRGAN放大。
部署建议:下载整合包后用python -m pip install diffusers==0.24.0,然后参考官方示例调整pipeline。如果要玩实时绘画,配合ControlNet的Tile预处理器,效果炸裂。
注意:Turbo对Prompt要求比SDXL更高,建议用“photorealistic, masterpiece, 8k”三连保底。想追求风格化,降低CFG到1.5并增加步数到4就行。
总之,这玩意儿把门槛降到“打开即用”,适合搞实时交互应用或快速迭代设计稿。想折腾的,今晚就能跑起来。 |