|
|
有天午睡前,我像往常一样点开了我的日推。一首《La vie en rose》结束,我满足地准备睡觉。
0 ]$ ~, P* n/ B
# m" \7 o/ O" ~2 F& i6 V突然,耳机里响起了有节奏的喵喵叫。。。?( `( A6 T0 R% U! J' y3 C
各位可以听一下这首喵喵歌。。。5 w8 E2 L$ g) ~+ B
喵喵歌来自中科院物理所00:0001:59
: z1 ]/ v2 S2 G& g 我
/ B+ T( j( p* G) N2 z* K3 Q
8 U; x. a, C3 `7 e6 o1 t$ A往下一翻,我还看到了令我崩溃的其它类似歌曲。。。/ w. b% o7 p. C
0 C( J% h7 u+ s0 D8 F1 n; w; I
网易云音乐的推荐歌曲7 j- n+ C2 V. e" x# n
所以。。这个软件是怎么了。。。为什么要给我这样一个平时听玫瑰人生的高冷人儿推荐这些歌?3 d& N' h5 t- X9 E
想把算法工程师打一顿的好奇的小编立刻决定起床,一定要把这件事搞清楚。- K3 g- m; u0 F
经过一番调查,我终于发现,电商平台、短视频平台等背后的一切都是类似的。一切都是因为它的推荐系统在作妖。
2 K& G; y$ h& ^( v所以,这些软件到底是怎么给你推荐的?" O/ o! _' O$ m4 n9 z) O" Q3 M+ f
以人为本# i# l% S2 _+ w$ R9 x) S) A
Based on Human
2 m6 ?' D7 }7 ~6 {1 P v6 ^! }这套推荐系统最早来源于亚马逊。当时亚马逊的工程师们厌烦了复杂繁琐的人工推荐,就开发了这样一套系统来做自动购物推荐。
5 R$ _$ K: Y/ Z E; [+ u/ Y7 a! E3 U9 S X2 `3 D) S+ }( W1 \
他们大致贯彻了一个原则——喜好相似的人和人之间有相似的消费模式。喜欢这个东西的人,倾向于也喜欢另一个。
# F7 ]8 n2 W4 L0 g/ P& x- f! s: p . s a5 |, b, e7 @ \
这种算法叫做「协同过滤」,它会依据每个用户的历史数据来推荐其他相似用户曾经接触过的东西。" G4 u _9 R3 }3 H3 T
举个栗子:我和老王都喜欢a, b这两首歌,并且老王还喜欢c这首歌。那么,有比较大的概率我也会喜欢c这首歌。, c e: a( @; e9 \' n F& l/ U8 t

* ]* p. H; x$ A# d7 W# Y1 d协同过滤
. b- T) q; { o( o5 H# n我们可以在亚马逊看到「 浏览此商品的顾客也同时浏览」
( m* k6 y1 E9 K4 ]
2 g9 W/ g$ V0 U: r2 |: Y0 d1 N' x亚马逊网站的推荐0 y: F; o1 n& v# c) ^/ P
或# e7 U* Z! T; L) J
1 S7 N5 [, N6 Q1 M9 B7 s) x X/ O
亚马逊网站的推荐
/ G1 w* g: x7 G$ p豆瓣搜索电影也常常会出现% R3 r2 n( k/ X4 @$ [

" B; k' k5 P6 q9 m% {$ p0 \' B! J豆瓣对电影的推荐" y- ?2 v# }3 h7 e- z( A
这样的推荐系统分析的是用户的口味之间的相似度。
& u, U/ M" N! b* ^4 n) j我们可以把推荐系统想象成一个多维空间,存在很多个不同的标签,每个标签都是一个维度,我们可以把它想象成空间坐标的x, y, z轴。每首音乐都有一个或几个事先加好的标签。用户的感兴趣程度就作为该维度的坐标,比如切掉=-2,收藏=2,单曲循环=4等等。
7 G) x( j9 e" ?. E! F; B于是,用户在系统的眼中就是空间中的一个点,也是由原点指向这个点的向量。不同的用户有不同的喜好,也就有了不同的空间坐标和向量。- f9 p5 m# B u
听到这里,我知道你现在大概是这样的
3 B5 a* }; M3 K, Z$ k z( G
2 s2 b2 _3 m4 T" e* t7 k9 W举个栗子你就懂了。6 L' `& X- o3 w A5 ~ z2 M
假如我和老王都收藏过歌曲a和b,老王还单曲循环过歌曲c。歌曲a具有“纯音乐”的标签,歌曲b具有“钢琴”的标签,歌曲c具有“二次元”的标签。所以,在 (纯音乐,二次元,钢琴) 的三维坐标系中,我的向量是 (2,0,2),而老王的向量是 (2,4,2)。+ k, `5 B5 _" S4 G3 `
假如这个时候又来了个小明,他的向量是(0,4,4)。求我与他俩之间的相似度?- I4 d; Q8 W- X8 |7 u/ a% Y
按照「 英雄所见略同」的常识,发展方向接近的人之间相似度较高。所以,我们可以用向量之间的夹角来衡量相似度。夹角越小,相似度越高。
+ X# U# P8 x! U! }$ o$ ?0 A3 |
& P F0 ^4 J0 A相似度计算示意图' q [! h6 z2 B# |3 T. s5 i' l7 Q
所以,现在问题变成了一道高中数学题:已知向量A、B、C,求三个向量之间的夹角。根据这个夹角,就能够算出你的口味是跟老王更接近还是跟小明更相似,然后根据跟你口味更相似的那个人的歌单,给你推荐歌曲。8 ?& E& A* [( [2 H2 q( P

& I7 Z6 a% O: ]; ?8 v! l R听起来很不错,但仔细想想你就会发现,不管计算出来谁跟你更接近,你都有可能被推荐他们所钟爱的二次元歌曲。但从你以往的听歌历史上根本看不出你有二次元倾向啊。。。1 [% w4 ~. ?- h6 I; z, C
而且,这样单纯而不做作的推荐算法在如今多元化的市场上是会水土不服的,在样本量比较小的情况下精度尤其低。小编就常常怀疑,音乐软件是不是悄悄把我的坐标挪到了“钢铁直男”们附近。。。不然它为什么老是给我推荐喵喵歌?我才不会承认我前一天收藏了一首小黄人的歌呢。5 ^: P) [# Z: t i- c# a0 [: ]
好在后来,程序猿们又开发出了一套基于内容的推荐系统。
5 ~: w! ]( ~' j! n内容为本0 q4 [ T4 Z' w$ c9 b3 `
Based on It4 _" m3 L8 p6 c
这套系统着眼于需要推荐的商品本身,不同的商品会有很多种不同的属性。比如音乐有流派、艺术家、歌词等属性,书籍有文体、出版社等属性,商品有用途、颜色等。
0 Q ^5 e, @$ _+ v" W按照这些属性,我们可以计算两件商品的相似度。推荐系统会使用商品的不同属性作为不同的维度,构建一个属性空间。此时,每件物品就像前面的用户一样,成为算法的研究对象,拥有属于自己的坐标。算法会计算每件物品之间的距离或向量夹角,作为判断它们相似度的依据。
2 c6 U+ I. U. ^5 x3 g4 ]. K) H3 w所以,在一定的方向上或一定的位置上,相似的商品会聚集在一起,也就是「 物以类聚」。2 {5 u3 d% b1 [

1 Y) h1 Q5 z* d1 n- [ F0 |, X相似的会聚集在一起# u3 z( Z9 u9 {/ S. L
推荐算法认为,当你喜欢一个物品时,你会倾向于也喜欢同类型的其他物品。于是,当用户翻牌了其中一首歌,与它相似的那一堆歌曲很快就会亮起来然后被放进推荐中。1 Y+ w4 G$ u- d; u, ]
这个逻辑本身没毛病,但你会发现,这些音乐软件往往都把你想象成一个听歌口味异常专一、收藏歌曲异常慎重而且耐心异常充足的人。
2 R$ d$ _( _8 v但你知道,大多数人听歌心态都比较放松,态度也都比较宽松,并不会对于点红心这件事很慎重。这样导致的后果就是,推荐系统会对你的操作过度解读。一旦发生了过度解读的惨案,你的日推就会像脱缰的野马一样拥有一颗自由自在的灵魂。$ k$ e7 t' U' g- i' Y

3 \# @; V# S! {% z7 }- x小编就常常听到什么歌觉得还可以,就随便点了收藏,然后第二天崩溃地发现自己的日推画风突变了。。。# Y/ D" g8 M" _8 v' z8 d
就在我收藏喵喵歌的第二天,它又给我推荐了欢乐斗地主的歌。。。天知道我点了多少次「 不感兴趣」才脱离日推就此跑偏的深渊。
; O3 O* l, x5 R# O$ v( G * X5 b& V% ], a
所以,如果把音乐比作星星,听歌比较杂的人恐怕经常被推荐整个宇宙。。。, {6 I1 p J6 f) l
现在的推荐系统智能多了
2 I2 W3 M2 H" L+ K5 u为了避免再出现这样蠢蠢的情况,现在的推荐算法一般都是以上「 以人为本」和「 内容为本」两种的结合。
# H3 D' F$ p( F! d e$ y8 j它们对用户口味相似度和商品本身相似度的计算都会更加严格,会加上各种实际情况的限制条件,比如对用户对歌曲的喜好程度的分级:有的软件会采取 单曲循环>分享>评论>收藏>听完>切掉 的顺序,用户不同的操作意味着不同的权重,不同的软件分级策略不一样。: n$ k$ i2 z5 c* [+ f& x
这些限制或附加的条件会让算法更合理,使用起来会让用户自作多情地认为「 它懂我」。这就会大大提升用户体验,从而吸粉。
- w: L" g0 v) O: v0 Y0 u! } & \5 \7 {' A- N8 `& X, O; r4 q
不仅是音乐软件,很多的电商平台、新闻推送软件,包括短视频平台等等,它们也都有着各自的一套复杂的推荐系统,其中不乏深度学习等看似高端的操作和标签二次过滤等。
. t7 t( O* |% f I虽然现在的个性化推荐系统已经发展得比较成熟了,推荐算法也都层出不穷花里胡哨,但因为人的喜好是复杂多变的,想要完全满足人类的需求还是很难。
( D2 }% v& K% i i
9 t- A3 @0 y( A# B4 `总有那么些时候,你会发现,在你买了一双拖鞋甚至已经用了几个月后,某宝仍然能够源源不断持之以恒地给你推荐各种塑料拖鞋、布拖鞋、男士拖鞋、女士拖鞋。。。所以我是干了什么让它觉得我很缺拖鞋。。。
& _; h. C, C6 x- R& }, u 9 D; i' \7 K$ c0 t: q/ p3 w
又有些时候,你突然想听一首歌,而却死活都想不起它的名字歌词和调调时,你也许会突然尝试听同类型歌曲,期盼软件能够把那首歌给你找出来。然而这个时候的推荐系统又常常get不了你的心意。。。
# V. M' Q! ]) v. W9 J今天为了写这篇文章,我又把那首喵喵歌翻出来了。现在我很担心我明天的日推。。。; |* A& e1 S% F E
最后,答应我,千万不要去搜喵喵歌!千万不要!更不要点收藏!0 R' S# Q% k( r: N3 U! S1 I
部分图片来源于网络3 s# D. R6 k2 Y" R8 u& x$ r4 ^# ]4 `
编辑:椒盐猫巨烦
) i# A, Y+ ]3 I6 e+ T1 j6 j
6 S$ @0 y9 P4 {) |
* b `& u" e* z0 [: G' s# {) h
- |! ~( d7 Q3 i8 }. j2 I# `# O N" T$ A; Z1 R4 O
来源:http://www.yidianzixun.com/article/0Lfk7ePh( T# I0 s0 L' |0 k9 [, i6 }- h
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作! |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|