AI绘图|最新最快的SDXL Turbo,实时出图,比Prompt输入速度还快

发布时间:2023-12-02 23:20:30 浏览量:454次

前段时间刚出来的LCM(潜在一致性模型),号称可以提速10倍,做到实时文生图。尤其是在Mac机器上,让AI绘图不再变得遥不可及(太慢)。很多人还没有来得及试用呢。这两天又出来一个SDXL Turbo,竟然可以让SDXL做到实时文生图,简直是要逆天了。

这篇文章,一凡sir就带大家来领略下它们的庐山真面目,是真的能上天,还是名过其实呢?

yifan-online.com 有免费的ChatGPT和最新的GPT4-Turbo,更多的AI绘图持续更新。想要体验AI绘图乐趣的同学,也可以来网站上免费画图了。

先上对比的图片,自己体会。

SDXL LCM steps 4

SD1.5 steps 20

SDXL steps 20

SDXL Turbo steps 1

SDXL Turbo steps 4

补充说明一下这次的对比数据。

beautiful landscape scenery glass bottle with a galaxy inside cute fennec fox snow HDR sunset,

全部使用的上面这个Prompts,尺寸为512*512,共4个批次,每个批次5张图片,一次总共20张图片。

LCM模型在steps=1的时候,效果很差,就不拿出来对比了。

下面来看下它们的关键数据对比。

SDXL Turbo(sd_xl_turbo_1.0_fp16

steps=1, Time=14.6s,Memory=8.1G

steps=4,Time=21.5s,Memory=8.1G

SDXL LCM(RealitiesEdgeXLLCM_USELCMEDITION

steps=4,Time=21.7s,Memory=8.1G

SD1.5(cyberrealistic_v40

steps=20,Time=37.6s,Memory=5.2G

SDXL1.0(juggernautXL_version6Rundiffusion

steps=20,Time=59.0s,Memory=8.1G

简单总结

速度上,SDXL Turbo在steps=1的时候最快,不到一秒钟就可以出图。当steps=4的时候,Turbo和LCM的速度一样,也可以做到秒出。另外,常规的SD1.5还是比SDXL要快不少。这里可以看出,steps=1的时候,比SDXL速度要快4倍。至于网上说的10倍提升,这只是在MacStudio上,因为MacStudio运行SDXL实在太慢,这次Turbo带来的提升就非常明显,让几乎不可能玩SDXL的Mac机器成为可能。

内存上,SDXL由于模型文件就非常大,几乎都是要6G以上,更大的会超过13G。而SD1.5的模型只有3G左右,所以,使用SD1.5的模型来进行AI绘图,对于显存较小的机器还是可以玩一玩。而显存低于8G的机器,就不太能跑得动SDXL模型了。这里测试的都是512*512的尺寸,对内存占用方面和速度方面都会快一些。

图片效果上,大家都知道,使用SDXL推荐的尺寸是1024*1024,太大或者太小的尺寸,生成的图片质量都会有明显下降,所以,这里对比看到的SDXL1.0的图片,并没有我之前分享的那些图片那么惊艳。

我也试了将SDXL Turbo和LCM的图片尺寸设置为1024*1024,清晰度会高一些,不过效果也不太满意,参考下面的图片。

尺寸1024*1024,一个批次,一次生成5张图片

SDXL LCM steps 4

SDXL Turbo steps 1


SDXL Turbo steps 4

SDXL Turbo在生成1024*1024图片的效果比LCM要好一些,尤其是steps=4的时候。

但是,SDXL Turbo的sd_xl_turbo_1.0_fp16大模型可能训练图片最佳尺寸是512*512吧,它在1024*1024的时候,出现大量的重复主体,这就很难接受了。

特别注意

在使用SDXL Turbo和LCM的时候,需要选择特别制作的大模型,原来的SD1.5和SDXL大模型是不支持steps=1,steps=4这样的高质量效果的。

在使用SDXL Turbo和LCM的时候,参数1 Sampling method=Euler a,不要使用DPM++ 2M Karras等。参数2 Sampling steps=1-5之间,建议追求速度选择1,想要效果好一些选择4。参数3 CFG Scale=1,不要使用7。

个人推荐用法

出来了SDXL Turbo和LCM这样高效的大模型,是不是真的就实现了实时AI出图呢?

速度上确实可以,但是现阶段的效果还是很一般。

所以,建议在做创意构思阶段,做一些预览图方面,在质量要求低的时候,可以考虑先使用 SDXL Turbo和LCM的大模型来测试、验证。

构思定型之后,就可以把Prompts放在SD1.5和SDXL1.0这些大模型上二次生成,达到最佳的效率和质量了。

感兴趣的同学也可以自己来验证一下吧。欢迎大家来壹梵在线 yifan-online.com 查看更多的图文和Prompts,还可以免费使用智能AI问答和AI绘图。

热门课程推荐

热门资讯

请绑定手机号

x

微信扫码在线答疑

扫码领福利1V1在线答疑

点击咨询
添加老师微信,马上领取免费课程资源

1. 打开微信扫一扫,扫描左侧二维码

2. 添加老师微信,马上领取免费课程资源

同学您好!

您已成功报名0元试学活动,老师会在第一时间与您取得联系,请保持电话畅通!
确定