输入文字,立刻生成图片!Stability AI推出新模型

发布时间:2023-12-02 13:26:11 浏览量:257次

最近文生图领域各家都开始“提速”,纷纷支持“实时”生成。

图片生成速度最高提升10倍!可以做到“实时”生成!清华推出LCM/LCM-LoRA!

Stability AI 也不甘落后!近日推出了 Stable Diffusion XL Turbo(SDXL Turbo)。

最新的模型采用了“对抗性扩散蒸馏技术(Adversarial Diffusion Distillation)”,据称可以把以前的50步减少为1步,从而达到实时生成的效果!

但是目前只能在非商业下发布许可证,只允许个人,非商业用途。

说了这么多了,可以看一下官方给的效果!

重播
播放
00:00 / 00:00 直播
00:00
进入全屏
50
    点击按住可拖动视频

    官方也提供了性能指标,对比了多个不同的AI模型!

    包括:StyleGAN-T++、OpenMUSE、IF-XL、SDXL 和 LCM-XL。

    下图是对比结果。


    如何实现“实时生图”?

    最新的模型采用了“对抗性扩散蒸馏技术(Adversarial Diffusion Distillation)”,把生图过程缩减为1步,这样就大大降低了所需时间,从而达到了实时的效果。

    对抗扩散蒸馏(Adversarial Diffusion Distillation,ADD)。这种方法的创新点是,它利用了扩散模型的特性,即可以从高维的数据空间逐步降维到低维的噪声空间,从而实现了一种从粗到细的知识蒸馏过程。

    具体来说,它首先在高维空间中生成对抗样本,并将其作为教师网络的输入,然后在不同的降维层次上,将教师网络的输出作为软标签,来指导学生网络的学习,从而使学生网络能够在低维空间中保持对抗鲁棒性。

    这种方法的优势是,它可以有效地减少对抗样本的梯度信息,从而降低对抗攻击的成功率,同时也可以提高学生网络的生成质量和多样性。

    如何使用模型或者深入了解技术?

    官网地址:

    https://stability.ai/news/stability-ai-sdxl-turbo

    模型地址:

    https://huggingface.co/stabilityai/sdxl-turbo

    论文地址:

    https://static1.squarespace.com/static/6213c340453c3f502425776e/t/65663480a92fba51d0e1023f/1701197769659/adversarial_diffusion_distillation.pdf

    热门课程推荐

    热门资讯

    请绑定手机号

    x
    确定