安卓手机「跑」Stable Diffusion 创新纪录，15 秒内出图

一般小丑鱼

机器之心报道
编辑：杜伟
# {0 L6 |+ F. @$ Y$ `" w( S让手机用户也能无门槛体验 Stable Diffusion 的绘图魅力。
我们知道，Stable Diffusion 是一种非常流行的文本到图像生成式 AI 模型，它能够在几十秒内为任何给定的输入文本创建逼真的图像。Stable Diffusion 的参数超过了 10 亿，直到现在，该模型主要在云端运行。
$ N: p; G3 A5 K因此，如何在移动设备端运行 Stable Diffusion 吸引了圈内人士的极大兴趣。此前，有位作者开发了一个应用程序，通过 Stable Diffusion 来生成图像，然后按喜欢的方式编辑。该应用在最新的 iPhone 14 Pro 上生成图片仅需一分钟，使用大约 2GiB 的应用内存。
2 O+ w& j7 c3 n5 c/ W) g% p, o' _甚至苹果亲自下场优化，在 iPhone、iPad、Mac 等设备上以惊人速度运行 Stable Diffusion，在半分钟生成一张分辨率 512x512 的图像。如下为苹果设备上运行 Stable Diffusion 和 Core ML + diffusers 生成的图像。

! @1 O% t$ _1 s* Q! [0 Y
$ Z' h7 |9 i% x6 G; A9 S. c
- ~$ S  Q, G: t) y! D2 T3 i2 L# t! sStable Diffusion 实现最快安卓端运行
- }% S- g! T0 U) u5 t# Q那么安卓手机上能不能也运行 Stable Diffusion 并快速出图呢？今日，高通的一则 Demo 视频演示了：安卓手机端使用 Stable Diffusion 实现了最快本地 AI 图像生成。
在如下 Demo 视频中，Stable Diffusion v1.5 在不到 15 秒的时间内生成分辨率 512x512 的图像。高通虽然没有明确说明是哪款手机，但表示该手机搭载了最新的骁龙 8 Gen2 旗舰芯片组。通过在软件层面进行各种自定义优化，使得 Stable Diffusion 以最佳方式实现了运行。
# J# Z. M# x. y& j
7 S' ?1 X% C1 a! e7 v

8 \% r# e7 C% |高通在其测试设备上生成的一些示例图像如下所示，如「穿着盔甲的、超级可爱的、毛茸茸的猫武士」。
$ ^. @' O8 j! D7 ]! x) ?
# ^# E* s* f2 r/ M$ t% ~8 F  M

在智能手机端以如此快的速度运行 Stable Diffusion，这要归功于高通的全栈 AI 优化方案。该方案显著降低了运行时延迟和能耗，最终实现 Stable Diffusion 安全高效的运行。
! X: W4 C, E! r' Y4 C4 k4 b# E2 G+ V
  e; ^. d# b  d
3 W6 ]$ J: @4 w* _
+ c' b2 d/ K) U其实，在高通发布 Demo 视频之前，已经有开发者展示了在搭载高通骁龙 865 的 8G RAM 索尼 Xperia 5 II 上运行 Stable Diffusion。这位开发者名为 Ivon Huang，其博客中详细介绍了相关教程。不过，生成一张分辨率 512x512 的图像需要 1 个小时。与之相比，高通出图的速度实现了巨大的提升。


$ @* y; ^" i, _2 W+ O
博客地址：
5 {1 Y% {: b9 L0 t& ~; `https://ivonblog.com/en-us/posts/android-stable-diffusion/
! s0 j& w% D) W参考链接：
6 Y1 x6 T8 T- J3 uhttps://www.theverge.com/2023/2/23/23611668/ai-image-stable-diffusion-mobile-android-qualcomm-fastest
https://www.qualcomm.com/news/onq/2023/02/worlds-first-on-device-demonstration-of-stable-diffusion-on-android
/ [  e" t* k# ]) E. z: @ THE END
8 _6 E( P4 @# e/ K6 y转载请联系本公众号获得授权
投稿或寻求报道：content@jiqizhixin.com

zht1984219

有毛用！