十张图带你领略知乎答案排序算法之美

众所周知,知乎对单个提问下回答的排序采用的威尔逊算法,但这种算法的原理究竟是怎样呢以及这种算法对排序有什么样的影响?本文将会对此进行详细阐述。

首先分析单个知乎单个回答下投票的特点:

1. 只有赞同和反对两个选项。(设赞同数=u,反对数=v,总票数n=u+v)

2. 用户之间投票行为独立。

3. 当投票量增加的时候,样本赞同率p(p=u/n)逐渐趋近总体赞同率(n等于无穷大时候的u/n)。

很显然,用户的投票是二项分布。 根据投票,可以计算出赞同率,并且根据赞同率排序所有回答。

当总投票数较少时,样本赞同率可能与总体赞同率差别较大,直接用样本赞同率排序可能带来一定的误差。

为了更好的修正小样本下的样本赞同率,引入威尔逊公式。经过公式修正后,赞同率将会更加准确。

威尔逊公式:

威尔逊公式

函数共有 u,v,z 三个变量。其中 z 为可调节的参数,u 为赞同数,v 为反对数。

不妨设置 z=1,绘制 score 随 u,v 的变化情况(z对score也有影响,后文将会分析)。

z = 1 时,score 随 u,v的变化情况

由威尔逊公式计算得出的 score,与赞同率(p=u/n)相差多少?


z = 1 时候 score 与 p 的差值,明显展示了修正效果

由图可知:

(1)当总票数较小的时候,获得赞同的答案,得分 score 会迅速增加。总投票数越多,赞同票对得分score的影响越小。同时,投票数较多,得分score较高的答案,开始获得反对票时,得分会快速下降。得分score越低,下降速度越慢。

(2)score 的取值范围为(0,1),且与投票总数无关。(旧算法中,score=加权赞同-加权反对,不同问题之间得分差别较大,无法横向比较)

(3)n 越小,威尔逊算法的修正效果越强

那么威尔逊区间有多宽?


威尔逊区间公式

取z = 10,计算区间宽度。(z 取其他值时,绘制出的图形也类似。)

z = 10 时,威尔逊区间宽度


由图得知,样本数量越小,置信区间就越宽。样本数量越大,置信区间则越窄。

z 对 score 有什么影响?请看对比图。


z = 1 时,u,v 对score的影响


z = 5 时,u,v 对score影响

z=10时,u,v 对score影响。

z=1,5.10时,u,v 对score的影响

z 越大,score 的曲线越平缓,等高线密度越小。对当总票数较小的时候,获得赞同的答案,得分score增加速度将减缓。同时,投票数较多,得分 score 较高的答案,开始获得反对票时,得分下降速度也将减缓。

接下来看 z 不同的情况下,score 与 p 的差值。






总的来说,z 越大,威尔逊算法的修正效果越强。

新算法有什么影响呢?

1. 争议性较强的回答将被抑制。类似的情况包括:

(1)抖机灵爆照但没有帮助

(2)煽动性较强但没帮助

(3)大v用户的低质量回答和攻击性回答

(4)争议性话题下的优质回答。(虽然回答很精彩,引发大量讨论,但由于问题争议性较强,从而得到的赞同和反对都很多。)

对(1)(2)(3)前三者的抑制,有利于整个社区的氛围。 (回答只取决于赞同比,抖机灵却无帮助的回答,自带很多赞同和很多反对。在回答排序上,大v效应不再明显。只要问题没有帮助,就会被放置在靠后的位置上。)

对于(4)类型的回答,按照赞同比排序就未必合理了。举例来说,前几天知乎上很火的一个问题“为什么有的女性讨厌生孩子”下面的一条回答得到了大量的讨论和点赞:评论 1w+,赞同 4w+;这条回答在微博转发 8w+,在当天转发量最大。可是根据知乎的算法,这条引发大量讨论的回答,得到了海量的传播,但却被放置在非常不显眼的位置。而置顶的回答,点赞数和评论数都寥寥无几。

对于这种情况,调节参数z意义似乎不很大:算法排序基于赞同率,就算z再大,这条最火答案也会被放置在不显眼的位置。那么这类问题下回答该怎么样排序呢?这或许又是另外一个问题了。

2. 普通用户也许更愿意答题了。

新算法按照赞同比排序。如果大v的回答没有帮助,即使出场自带500赞,反对票也很快会让答案下沉。这对于认真输出回答的普通用户是一个正向的激励。

旧算法下,辛辛苦苦认真答题的知乎小透明,即使生产出优质的答案,也可能被放置在大v抖机灵答案的后面。而新算法下,赞同率高的答案会随着赞同快速被置顶。

3. 专业领域下大v的作用更明显了。

新算法本就加强了投票对答案排名的影响,高权重大v的投票则会更关键。大v一票可能相当于普通用户N票。权重是分领域的而不是全局权重,而用户在某个问题下的权重,是根据他过去在相关问题下的回答得到的赞同,反对和没有帮助票来计算的。

这增强了专业性领域下问题中端回答的质量,让专业领域下大v的作用更明显。

4. 答案更符合知乎调性了。

通过用户投票筛选回答,能够筛选出更符合符合知乎调性的回答。这让知乎用户更爱看了。

但符合知乎调性,并不一定代表客观。特别是对于一些小众领域、专业领域。符合知乎政治正确却不恰当的回答,可能会被置顶,而正确的回答可能会被放置在不明显的位置。(之前写快手产品分析的时候去知乎查资料,很希望看到一些客观的讨论,但发现符合知乎政治正确,却倾向性非常强的答案放置在顶端,而较为客观又干货满满的回答被放置在底端。)一方面来说,这讨好了更多的用户;但从另一方面来说,又伤害了输出小众专业内容的用户。

总的来说,修改后的算法利大于弊。

参考资料:

基于用户投票的排名算法(五):威尔逊区间                       阮一峰

How Not To Sort By Average Rating                                     Evan Miller

知乎问题:如何评价知乎的回答排序算法?

知乎问题:知乎如何计算用户在某个领域下的权重?

这次,我给知乎点32个赞同——浅析知乎新的回答排序算法        曾加

本文转载自 Phhhy 的微信公众号:巴旦说

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,496评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,407评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,632评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,180评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,198评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,165评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,052评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,910评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,324评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,542评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,711评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,424评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,017评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,668评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,823评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,722评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,611评论 2 353

推荐阅读更多精彩内容

  • 上一篇文章——知乎核心功能:问答 中写到了知乎对单个提问下回答的排序,采用威尔逊算法。但文中缺少对公式的定量分析解...
    Li_fuxu阅读 8,119评论 4 19
  • 这篇已经授权人人都是产品经理微信号+网站转载了~转载日期是2017-02-10 知乎:一个真实的网络问答社区,帮助...
    Li_fuxu阅读 5,677评论 4 37
  • 常常在阅读微信公众号文章时发现有自己想要学习的内容,并且告诉自己过几天写下思维导图,并运用在生活中。 常常在工作中...
    璃诺_Lee阅读 481评论 1 0
  • 你说:你上天堂完了,那里没有病痛也很开心。 我说:天上根本没有天堂,也找不到天使。天上只有人造卫星、飞碟和太空超人...
    堏檾_阅读 223评论 0 0
  • 你不知道吗?哪有经得起试探的人。非要费尽心思去拨开云雾,终究只能让你哆嗦。 最近感觉自己过得好分裂。语不知何起。 ...
    铁皮盒子阅读 314评论 1 1