回复
31
查看
839
收藏
4

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

发表于 2017-6-20 16:56:08 | 显示全部楼层 |阅读模式

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0

本帖最后由 Dionysus 于 2017-6-20 16:56 编辑

之前看过然后感兴趣了解了下,因为只给大家介绍了大概,本来不打算发的,怎奈这次的翻译里面也用到了这篇文章,所以先发出来给大家做个参考,有兴趣瞟一眼就行,看到哪里不对的话欢迎报错。

指南地址:http://steamcommunity.com/sharedfiles/filedetails/?id=846988688

一些说明

嗯这篇指南主要是因为之前有人在STCN问:为什么论坛插件的好评率要低于steam商店的呢?
然后depar给了一篇相关文章,我跟chen就研究了下,稍作翻译/解释以后发到这里来了。
由于原文后半部分主要是介绍计算方法的,我跟chen也不是相关专业学生,所以就不翻译了,有兴趣的可以自己看看。

原文链接(Evan Miller,写于2009/02/06): http://www.evanmiller.org/how-not-to-sort-by-average-rating.html


出现的问题

你是一个编辑网页的程序员,你的网站有一些用户,并且这些用户对你的网站上的一些物品做出了评价。你想将这些物品以评价由高到低的规律进行排列。你需要一些所谓的“评分”标准去整理和排列这些物品。


错误的解决方案①:评分=正面评价总数(好评)-负面评价总数(差评)

为什么这是错的呢?

假设一个物品A有600个好评和400个差评(好评率为60%评分为200);另一个物品B有5500个正面评价和4500个负面评价(好评率为55%,评分为1000)。这个算法导致一个好评率低的物品B的评分反而大于物品A。所以这种算法是错误的。

Urban Dictionary这个网站就犯了这样的错误,见下图:




从图中可知
排名第二的物品有209个好评,50个差评(好评率80.69%,评分为159);而排名第三的物品有118个好评,25个差评(好评率为82.52%,评分为93)。显然排名是十分不准确的,评分无法很好地反映出这个物品的受欢迎程度。


错误的解决方案②:评分=好评率=好评/总数

为什么这个方案也是错误的呢?
如果在总评论基数非常大的情况下,那么用好评率作为评分是比较客观的,但是如果假设一个物品A有两个好评和零个差评(好评率100%),物品B有100个好评和一个差评(好评率约为99%)。这个算法导致了一个有大量好评的物品A的评分小于只有几个好评的物品B,所以这个方法也是不对滴。

亚马逊就犯了这样一个错误,见下图:




从图中可知
排名13的商品仅有一个人评价为5星,而它的综合评分也是5星;而排名14的商品有580人评价,综合评分是4.5星。
那么就引出了问题,要是排名13的商品同样让580人评价,综合评分还会有5星嘛?所以这个排名也是不准确的。



正确解法:评分=威尔森置信区间的左边界。

其实我们已经很接近了,就是因为所谓的好评率在样本数量很大的情况下具有参考性,但是样本总数过小就不具备参考性了。

我们需要做的就是保证如何在样本总量比较少的情况下能估计出物品的真实水准的评分。

那么我们先不得不提到一个东西叫做置信区间。顾名思义,置信区间是一个区间,而且是可信的。对于物品的评价得分而言,就是估计一个范围,这个物品的评分的走势落在这个范围的概率大于95%。举一个例子,在样本少的情况下,就会有误差

假设现在有两个物品A和B:

物品A现在有1个好评和0个差评(好评率100%),估计再有九个人的评价之后(总评价为10的时候),好评率是多少。我列出了所有的结果(好评率可以从10%-100%不等浮动)可以给出一个准确率为100%的置信区间[10%,100%]。这时候你们会说了,哎呀,你这跟没说一样啊,基本上什么都没告诉我们呐。所以说样本容量小的情况下置信区间的宽度太大了,貌似也解决不通呐,所以只能缩小可信度,取得更精确的范围。

好,那我们再看一下物品B,物品B现在有10个好评和1个差评(好评率约为90.0%)同样推算,再经过9人评价之后(总评价数量达到20个的时候),好评率为多少。我同样是列出了所有的结果,得出一个准确率为100%的置信区间为[50%,95%]。也就是说这个范围告诉你,就算再差,这个物品的好评率在多九个人评价之后也能保持50%。

那么,对比一下物品A和物品B的置信区间的宽度,很容易看出物品A的好评率低的风险是要大于物品B的。那么我们取置信区间的下限值,来比较现在的两个物品,10%<50%,那么就不会出现这种1个评价100%好评率的物品被排在10好评1差评甚至是100好评1差评的物品之前这种事了。


相关计算公式(由于之前说的原因,就不过过多展开啦,有兴趣的童鞋可以自己去研究哈):




结论

根据depar所说,目前(2017.1.21)论坛插件的置信概率是95%。

大概意思就是在论坛插件中,你所看到某个游戏评价是在95%的情况下,这个游戏的评价的保底的值,所以比商店的评价要低一些。

评分

参与人数 4体力 +12 蒸汽 +8 收起 理由
Stupid_T + 1 给dalao递体力
fengkeyleaf + 1 优秀资料
pinkgun + 8 + 8 优秀资料
superybq + 2 给dalao递体力

查看全部评分

14

赠楼

1%

赠楼率

0

蒸汽

161

主题

3042

帖子

2129

积分

梦里依旧 明月天涯

发表于 2017-6-20 16:59:14 | 显示全部楼层

社区昵称:BAHAMUT Farmskins.com 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+13/-0

看到公式表示一脸懵逼

3

赠楼

13%

赠楼率

287

蒸汽

26

主题

582

帖子

414

积分

『滴学生卡』

发表于 2017-6-20 17:00:20 | 显示全部楼层

社区昵称:Nikiski 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+11/-0

我只能想到正态分布

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

 楼主| 发表于 2017-6-20 17:02:23 | 显示全部楼层

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0

nikiski 发表于 2017-6-20 17:00
我只能想到正态分布

看文字部分就行

4

赠楼

0%

赠楼率

491

蒸汽

24

主题

3144

帖子

1345

积分

『片十字花瓣』

发表于 2017-6-20 17:02:33 | 显示全部楼层

社区昵称:截图存储 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+1/-0

可能这就是用函数买菜?

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

 楼主| 发表于 2017-6-20 17:03:23 | 显示全部楼层

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0

海陆两栖沼跃鱼 发表于 2017-6-20 17:02
可能这就是用函数买菜?

两个概念吧?

5

赠楼

0%

赠楼率

93

蒸汽

59

主题

934

帖子

705

积分

发表于 2017-6-20 17:03:37 | 显示全部楼层

社区昵称:appvin 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+27/-0

所以。。。我能看懂哪部分

5

赠楼

1%

赠楼率

59

蒸汽

19

主题

321

帖子

819

积分

发表于 2017-6-20 17:03:45 | 显示全部楼层

社区昵称:KiriYa 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

我的妈...看不懂..

9

赠楼

1025%

赠楼率

143

蒸汽

18

主题

796

帖子

1511

积分

CrazyMoon

『滴学生卡』

发表于 2017-6-20 17:11:41 | 显示全部楼层

社区昵称:BK201 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+1/-0

emmmmm.......jpg

46

赠楼

207%

赠楼率

288

蒸汽

74

主题

848

帖子

791

积分

『滴学生卡』

发表于 2017-6-20 17:11:57 | 显示全部楼层

社区昵称:taotie53 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+4/-0

有太长不看版嘛

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

 楼主| 发表于 2017-6-20 17:14:31 | 显示全部楼层

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0


抱歉没有弄

1

赠楼

2%

赠楼率

213

蒸汽

19

主题

216

帖子

384

积分

发表于 2017-6-20 17:16:41 | 显示全部楼层

社区昵称:Los 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+6/-0

除了那条公式其它的看懂了,
但结果还是得靠量

0

赠楼

0%

赠楼率

149

蒸汽

0

主题

1645

帖子

1241

积分

『滴学生卡』

发表于 2017-6-20 17:18:45 | 显示全部楼层

社区昵称:血樱 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

emmm.......我还右上角吧,一脸懵逼

27

赠楼

109%

赠楼率

102

蒸汽

33

主题

479

帖子

338

积分

发表于 2017-6-20 17:21:12 发自移动设备 - 你的掌上 SteamCN 社区 | 显示全部楼层

社区昵称:WindBleak 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+12/-0

智商不够用了。。。

11

赠楼

0%

赠楼率

499

蒸汽

93

主题

2010

帖子

1508

积分

人生不过坐&瓜&微笑

『片十字花瓣』『滴学生卡』

发表于 2017-6-20 17:25:34 | 显示全部楼层

社区昵称:Leo&CS.MONEY 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

厉害了

3

赠楼

13%

赠楼率

287

蒸汽

26

主题

582

帖子

414

积分

『滴学生卡』

发表于 2017-6-20 17:26:12 | 显示全部楼层

社区昵称:Nikiski 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+11/-0


想必你是个算法相关专业的dalao

16

赠楼

2%

赠楼率

81

蒸汽

75

主题

2848

帖子

1537

积分

一只咸鱼~懒得翻身的那种~

『片十字花瓣』『滴学生卡』

发表于 2017-6-20 17:26:32 | 显示全部楼层

社区昵称:Lost Relic 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

前年学的概率论已经忘光光了

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

 楼主| 发表于 2017-6-20 17:28:12 | 显示全部楼层

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0

nikiski 发表于 2017-6-20 17:26
想必你是个算法相关专业的dalao

并不是,我大学这块成绩并不咋地

3

赠楼

4%

赠楼率

216

蒸汽

22

主题

444

帖子

1250

积分

发表于 2017-6-20 17:47:30 | 显示全部楼层

社区昵称:AoyamaDusk 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

看起来很合理的样子
威尔森置信区间是不就是常用的置信区间的洋气说法

0

赠楼

0%

赠楼率

1395

蒸汽

23

主题

928

帖子

1635

积分

发表于 2017-6-20 17:51:34 | 显示全部楼层

社区昵称:Stellaris 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

和steamdb的评分系统一样,都是借鉴的这片文章

0

赠楼

0%

赠楼率

428

蒸汽

4

主题

179

帖子

497

积分

发表于 2017-6-20 17:55:31 | 显示全部楼层

社区昵称:fupolarbear 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

一直有想过这些问题但是没有深入思考…学习了…感谢dalao…

14

赠楼

2%

赠楼率

17

蒸汽

44

主题

1416

帖子

359

积分

发表于 2017-6-20 18:02:23 | 显示全部楼层

社区昵称:Tice 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+7/-0

一脸懵逼,仰望大佬

9

赠楼

1%

赠楼率

43

蒸汽

614

主题

9864

帖子

4019

积分

屁股上的眼睛最能看清一切!

『乐抚其鳞』『滴学生卡』『片十字花瓣』

发表于 2017-6-20 18:03:46 | 显示全部楼层

社区昵称:TryKing@8132 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+18/-0

太麻烦,不思考

28

赠楼

2%

赠楼率

176

蒸汽

530

主题

4360

帖子

1万

积分

反喵司机势力:p

『蒸汽基车』『塔尖圆环』『干渴水滴』『片十字花瓣』『滴学生卡』

 楼主| 发表于 2017-6-20 18:05:21 | 显示全部楼层

社区昵称:SweeTnT[AFK] 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+10/-0

TryKing 发表于 2017-6-20 18:03
太麻烦,不思考

反正知道论坛好评率比steam低就可以了

评分

参与人数 1体力 +2 收起 理由
TryKing + 2 优秀资料

查看全部评分

0

赠楼

0%

赠楼率

568

蒸汽

6

主题

1924

帖子

935

积分

发表于 2017-6-20 18:05:27 | 显示全部楼层

社区昵称:Wars of the Roses 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

大……大佬

1

赠楼

1%

赠楼率

744

蒸汽

69

主题

3840

帖子

1632

积分

『片十字花瓣』

发表于 2017-6-20 18:09:26 | 显示全部楼层

社区昵称:Fresh meat 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+4/-0

本帖最后由 rocket007sos 于 2017-6-20 18:15 编辑

只看差评的路过,如果差评全部都能接受,那就愿望单了,比如没有中文这类评价。
PS  说着,去社区翻出个世嘉游戏,刷了下差评。

55

赠楼

9%

赠楼率

5

蒸汽

71

主题

401

帖子

437

积分

发表于 2017-6-20 18:16:26 | 显示全部楼层

社区昵称:雾雨·魔里沙 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+8/-0

置信区间。。。又想起挂概率论的日子

7

赠楼

0%

赠楼率

321

蒸汽

38

主题

1178

帖子

1118

积分

发表于 2017-6-20 18:19:20 | 显示全部楼层

社区昵称:Stephen Chen 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+167/-0

看完感觉是这样的
a-b 不行
a/b 不行
要这样 a!@#¥%……&*()b

1

赠楼

1%

赠楼率

276

蒸汽

1

主题

87

帖子

235

积分

『滴学生卡』

发表于 2017-6-20 18:55:16 | 显示全部楼层

社区昵称:ubisoft土豆批发员 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

95%置信区间的z=1.96
唯一记得的数据
学渣的悲哀

0

赠楼

0%

赠楼率

224

蒸汽

5

主题

144

帖子

390

积分

发表于 2017-6-20 19:23:54 | 显示全部楼层

社区昵称:猹 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

划着划着看到了公式,然后默默地回复看不懂
您需要登录后才可以回帖 登录 | 注册

本版积分规则

  作为民间站点,自 2004 年起为广大中文 Steam 用户提供技术支持与讨论空间。历经十余载风雨,如今已发展为国内最大的正版玩家据点。

列表模式 · 微博 · 群组 · 贴吧 · QQ群 
SteamCN 蒸汽动力 ©2004-2017 Chinese Steam User Fan Site.
Designed by Lee in Singapore, Powered by Discuz!
推荐使用 ChromeMicrosoft Edge 来浏览本站
广告投放|文字版|SteamCN 蒸汽动力 ( 冀ICP备05004600号 )
GMT+8, 2017-9-22 12:19, PE: 0.409920s , QE: 312, Redis On.
快速回复 返回顶部 返回列表