|
|
机器之心报道
' O) k* n% F0 g( K* v! k S编辑:杜伟
7 @2 N5 m" f5 \$ S& W* j让手机用户也能无门槛体验 Stable Diffusion 的绘图魅力。
9 @/ F5 ^9 j: x7 D5 n我们知道,Stable Diffusion 是一种非常流行的文本到图像生成式 AI 模型,它能够在几十秒内为任何给定的输入文本创建逼真的图像。Stable Diffusion 的参数超过了 10 亿,直到现在,该模型主要在云端运行。
, ]$ m! y( }" y8 a因此,如何在移动设备端运行 Stable Diffusion 吸引了圈内人士的极大兴趣。此前,有位作者开发了一个应用程序,通过 Stable Diffusion 来生成图像,然后按喜欢的方式编辑。该应用在最新的 iPhone 14 Pro 上生成图片仅需一分钟,使用大约 2GiB 的应用内存。 X# Y0 K4 Z& t! k" ?' j1 f, E
甚至苹果亲自下场优化,在 iPhone、iPad、Mac 等设备上以惊人速度运行 Stable Diffusion,在半分钟生成一张分辨率 512x512 的图像。如下为苹果设备上运行 Stable Diffusion 和 Core ML + diffusers 生成的图像。; s& C! J4 y+ Y+ ~5 z( a) z* g$ Q
}/ X; g* ^: y9 U$ p* B
2 M1 ?/ d- J& ^
9 U7 T2 `( B6 M2 S' S4 xStable Diffusion 实现最快安卓端运行5 s4 N2 q. ~* ]" l8 z
那么安卓手机上能不能也运行 Stable Diffusion 并快速出图呢?今日,高通的一则 Demo 视频演示了:安卓手机端使用 Stable Diffusion 实现了最快本地 AI 图像生成。
2 V/ q$ D) m7 I' _: H/ N. f在如下 Demo 视频中,Stable Diffusion v1.5 在不到 15 秒的时间内生成分辨率 512x512 的图像。高通虽然没有明确说明是哪款手机,但表示该手机搭载了最新的骁龙 8 Gen2 旗舰芯片组。通过在软件层面进行各种自定义优化,使得 Stable Diffusion 以最佳方式实现了运行。" Q7 e7 U# I: @- N* q+ }
. p6 |# n7 s+ a0 \- \8 b
, N, F2 d$ p5 m
. d' ` ~$ y$ j$ z高通在其测试设备上生成的一些示例图像如下所示,如「穿着盔甲的、超级可爱的、毛茸茸的猫武士」。- }, X% i: T- j" f+ v- ~! w
5 ?3 ]) S8 i3 j* v
7 L, P7 I! C: u5 \" V: C% a8 z" q
% ]6 f, u4 ^; ]. i8 O在智能手机端以如此快的速度运行 Stable Diffusion,这要归功于高通的全栈 AI 优化方案。该方案显著降低了运行时延迟和能耗,最终实现 Stable Diffusion 安全高效的运行。
- V9 i1 D: w% ]4 Y1 n" w
; t) O# B, |, Z# F7 l5 m. F% c' Y! b
2 A+ X4 a3 W& W+ b
其实,在高通发布 Demo 视频之前,已经有开发者展示了在搭载高通骁龙 865 的 8G RAM 索尼 Xperia 5 II 上运行 Stable Diffusion。这位开发者名为 Ivon Huang,其博客中详细介绍了相关教程。不过,生成一张分辨率 512x512 的图像需要 1 个小时。与之相比,高通出图的速度实现了巨大的提升。; s( T# _: F2 f2 }! o
3 E3 U/ t i4 M4 B5 q) O5 i% [
- P% F6 W1 m h" ^5 A; F
8 l l, m/ H, ?博客地址:+ }5 Y4 B2 Z& |; @# u) U
https://ivonblog.com/en-us/posts/android-stable-diffusion/
: k& |3 V) X) p1 n* o, v; S参考链接:( J- `' l/ V8 {( E( a; ?2 K0 {
https://www.theverge.com/2023/2/23/23611668/ai-image-stable-diffusion-mobile-android-qualcomm-fastest
. R# o2 K5 P+ x7 o/ `! e) ehttps://www.qualcomm.com/news/onq/2023/02/worlds-first-on-device-demonstration-of-stable-diffusion-on-android
' e" Z2 ^$ k" Y! q L# U; s THE END
9 m; _3 c( `% |4 R" E转载请联系本公众号获得授权$ z& E' ~/ E4 M' w6 z5 Z
投稿或寻求报道:content@jiqizhixin.com |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|