发布时间:2023-12-02 23:20:30 浏览量:454次
前段时间刚出来的LCM(潜在一致性模型),号称可以提速10倍,做到实时文生图。尤其是在Mac机器上,让AI绘图不再变得遥不可及(太慢)。很多人还没有来得及试用呢。这两天又出来一个SDXL Turbo,竟然可以让SDXL做到实时文生图,简直是要逆天了。
这篇文章,一凡sir就带大家来领略下它们的庐山真面目,是真的能上天,还是名过其实呢?
yifan-online.com 有免费的ChatGPT和最新的GPT4-Turbo,更多的AI绘图持续更新。想要体验AI绘图乐趣的同学,也可以来网站上免费画图了。
beautiful landscape scenery glass bottle with a galaxy inside cute fennec fox snow HDR sunset,
全部使用的上面这个Prompts,尺寸为512*512,共4个批次,每个批次5张图片,一次总共20张图片。
LCM模型在steps=1的时候,效果很差,就不拿出来对比了。
SDXL Turbo(sd_xl_turbo_1.0_fp16)
steps=1, Time=14.6s,Memory=8.1G
steps=4,Time=21.5s,Memory=8.1G
SDXL LCM(RealitiesEdgeXLLCM_USELCMEDITION)
steps=4,Time=21.7s,Memory=8.1G
SD1.5(cyberrealistic_v40)
steps=20,Time=37.6s,Memory=5.2G
SDXL1.0(juggernautXL_version6Rundiffusion)
steps=20,Time=59.0s,Memory=8.1G
速度上,SDXL Turbo在steps=1的时候最快,不到一秒钟就可以出图。当steps=4的时候,Turbo和LCM的速度一样,也可以做到秒出。另外,常规的SD1.5还是比SDXL要快不少。这里可以看出,steps=1的时候,比SDXL速度要快4倍。至于网上说的10倍提升,这只是在MacStudio上,因为MacStudio运行SDXL实在太慢,这次Turbo带来的提升就非常明显,让几乎不可能玩SDXL的Mac机器成为可能。
内存上,SDXL由于模型文件就非常大,几乎都是要6G以上,更大的会超过13G。而SD1.5的模型只有3G左右,所以,使用SD1.5的模型来进行AI绘图,对于显存较小的机器还是可以玩一玩。而显存低于8G的机器,就不太能跑得动SDXL模型了。这里测试的都是512*512的尺寸,对内存占用方面和速度方面都会快一些。
图片效果上,大家都知道,使用SDXL推荐的尺寸是1024*1024,太大或者太小的尺寸,生成的图片质量都会有明显下降,所以,这里对比看到的SDXL1.0的图片,并没有我之前分享的那些图片那么惊艳。
尺寸1024*1024,一个批次,一次生成5张图片
SDXL Turbo在生成1024*1024图片的效果比LCM要好一些,尤其是steps=4的时候。
但是,SDXL Turbo的sd_xl_turbo_1.0_fp16大模型可能训练图片最佳尺寸是512*512吧,它在1024*1024的时候,出现大量的重复主体,这就很难接受了。
在使用SDXL Turbo和LCM的时候,需要选择特别制作的大模型,原来的SD1.5和SDXL大模型是不支持steps=1,steps=4这样的高质量效果的。
在使用SDXL Turbo和LCM的时候,参数1 Sampling method=Euler a,不要使用DPM++ 2M Karras等。参数2 Sampling steps=1-5之间,建议追求速度选择1,想要效果好一些选择4。参数3 CFG Scale=1,不要使用7。
出来了SDXL Turbo和LCM这样高效的大模型,是不是真的就实现了实时AI出图呢?
速度上确实可以,但是现阶段的效果还是很一般。
所以,建议在做创意构思阶段,做一些预览图方面,在质量要求低的时候,可以考虑先使用 SDXL Turbo和LCM的大模型来测试、验证。
构思定型之后,就可以把Prompts放在SD1.5和SDXL1.0这些大模型上二次生成,达到最佳的效率和质量了。
感兴趣的同学也可以自己来验证一下吧。欢迎大家来壹梵在线 yifan-online.com 查看更多的图文和Prompts,还可以免费使用智能AI问答和AI绘图。
热门资讯
想将照片变成漫画效果?这篇文章分享了4个方法,包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图,简单操作就能实现,快来尝试一下吧!
2. AI视频制作神器Viggle:让静态人物动起来,创意无限!
Viggle AI是一款免费制作视频的AI工具,能让静态人物图片动起来,快来了解Viggle AI的功能和优势吧!
3. 华为手机神奇“AI修图”功能,一键消除衣服!原图变身大V领深V!
最近华为手机Pura70推出的“AI修图”功能引发热议,通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗?点击查看!
4. AI显卡绘画排行榜:4090无悬念,最具性价比出人意料
在AI绘图领域,Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现,以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
7. 零基础10分钟生成漫画,教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
8. 10个建筑AI工具,从设计到施工全覆盖!肯定有你从来没听过的
讲述了建筑业比较著名的AI公司小库科技做出的探索,在这儿就不多说了。今天,我们试着在规划设计、建筑方案设计、住宅设计、管道设计、出渲染图、3D扫...
AI技术的快速发展为各行各业带来了许多创新应用,其中之一就是AI小说生成视频。这种技术利用人工智能算法和语言模型,将文本转化为视频剧情,加上配图、...
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
1. 打开微信扫一扫,扫描左侧二维码
2. 添加老师微信,马上领取免费课程资源
同学您好!