回复
30
查看
545
收藏
3

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层 |阅读模式

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

本帖最后由 Dionysus 于 2017-6-20 16:56 编辑

之前看过然后感兴趣了解了下,因为只给大家介绍了大概,本来不打算发的,怎奈这次的翻译里面也用到了这篇文章,所以先发出来给大家做个参考,有兴趣瞟一眼就行,看到哪里不对的话欢迎报错。

指南地址:http://steamcommunity.com/sharedfiles/filedetails/?id=846988688

一些说明

嗯这篇指南主要是因为之前有人在STCN问:为什么论坛插件的好评率要低于steam商店的呢?
然后depar给了一篇相关文章,我跟chen就研究了下,稍作翻译/解释以后发到这里来了。
由于原文后半部分主要是介绍计算方法的,我跟chen也不是相关专业学生,所以就不翻译了,有兴趣的可以自己看看。

原文链接(Evan Miller,写于2009/02/06): http://www.evanmiller.org/how-not-to-sort-by-average-rating.html


出现的问题

你是一个编辑网页的程序员,你的网站有一些用户,并且这些用户对你的网站上的一些物品做出了评价。你想将这些物品以评价由高到低的规律进行排列。你需要一些所谓的“评分”标准去整理和排列这些物品。


错误的解决方案①:评分=正面评价总数(好评)-负面评价总数(差评)

为什么这是错的呢?

假设一个物品A有600个好评和400个差评(好评率为60%评分为200);另一个物品B有5500个正面评价和4500个负面评价(好评率为55%,评分为1000)。这个算法导致一个好评率低的物品B的评分反而大于物品A。所以这种算法是错误的。

Urban Dictionary这个网站就犯了这样的错误,见下图:




从图中可知
排名第二的物品有209个好评,50个差评(好评率80.69%,评分为159);而排名第三的物品有118个好评,25个差评(好评率为82.52%,评分为93)。显然排名是十分不准确的,评分无法很好地反映出这个物品的受欢迎程度。


错误的解决方案②:评分=好评率=好评/总数

为什么这个方案也是错误的呢?
如果在总评论基数非常大的情况下,那么用好评率作为评分是比较客观的,但是如果假设一个物品A有两个好评和零个差评(好评率100%),物品B有100个好评和一个差评(好评率约为99%)。这个算法导致了一个有大量好评的物品A的评分小于只有几个好评的物品B,所以这个方法也是不对滴。

亚马逊就犯了这样一个错误,见下图:




从图中可知
排名13的商品仅有一个人评价为5星,而它的综合评分也是5星;而排名14的商品有580人评价,综合评分是4.5星。
那么就引出了问题,要是排名13的商品同样让580人评价,综合评分还会有5星嘛?所以这个排名也是不准确的。



正确解法:评分=威尔森置信区间的左边界。

其实我们已经很接近了,就是因为所谓的好评率在样本数量很大的情况下具有参考性,但是样本总数过小就不具备参考性了。

我们需要做的就是保证如何在样本总量比较少的情况下能估计出物品的真实水准的评分。

那么我们先不得不提到一个东西叫做置信区间。顾名思义,置信区间是一个区间,而且是可信的。对于物品的评价得分而言,就是估计一个范围,这个物品的评分的走势落在这个范围的概率大于95%。举一个例子,在样本少的情况下,就会有误差

假设现在有两个物品A和B:

物品A现在有1个好评和0个差评(好评率100%),估计再有九个人的评价之后(总评价为10的时候),好评率是多少。我列出了所有的结果(好评率可以从10%-100%不等浮动)可以给出一个准确率为100%的置信区间[10%,100%]。这时候你们会说了,哎呀,你这跟没说一样啊,基本上什么都没告诉我们呐。所以说样本容量小的情况下置信区间的宽度太大了,貌似也解决不通呐,所以只能缩小可信度,取得更精确的范围。

好,那我们再看一下物品B,物品B现在有10个好评和1个差评(好评率约为90.0%)同样推算,再经过9人评价之后(总评价数量达到20个的时候),好评率为多少。我同样是列出了所有的结果,得出一个准确率为100%的置信区间为[50%,95%]。也就是说这个范围告诉你,就算再差,这个物品的好评率在多九个人评价之后也能保持50%。

那么,对比一下物品A和物品B的置信区间的宽度,很容易看出物品A的好评率低的风险是要大于物品B的。那么我们取置信区间的下限值,来比较现在的两个物品,10%<50%,那么就不会出现这种1个评价100%好评率的物品被排在10好评1差评甚至是100好评1差评的物品之前这种事了。


相关计算公式(由于之前说的原因,就不过过多展开啦,有兴趣的童鞋可以自己去研究哈):




结论

根据depar所说,目前(2017.1.21)论坛插件的置信概率是95%。

大概意思就是在论坛插件中,你所看到某个游戏评价是在95%的情况下,这个游戏的评价的保底的值,所以比商店的评价要低一些。

评分

参与人数 3体力 +11 蒸汽 +8 收起 理由
fengkeyleaf + 1 优秀资料
pinkgun + 8 + 8 优秀资料
superybq + 2 给dalao递体力

查看全部评分

Steam实用指南合集
欢迎点赞收藏w

12

赠楼

1%

赠楼率

6

蒸汽

124

主题

1954

帖子

1397

积分

今天又可以摸鱼啦

发表于 4 天前 | 显示全部楼层

社区昵称:BAHAMUT xingyun121.com 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+1/-0

看到公式表示一脸懵逼

3

赠楼

24%

赠楼率

220

蒸汽

12

主题

328

帖子

300

积分

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:Nikiski 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+6/-0

我只能想到正态分布

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

 楼主| 发表于 4 天前 | 显示全部楼层

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

nikiski 发表于 2017-6-20 17:00
我只能想到正态分布

看文字部分就行
Steam实用指南合集
欢迎点赞收藏w

4

赠楼

0%

赠楼率

446

蒸汽

24

主题

2883

帖子

1264

积分

不与社会垃圾为伍

『片十字花瓣』

发表于 4 天前 | 显示全部楼层

社区昵称:截图存储 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+1/-0

可能这就是用函数买菜?

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

 楼主| 发表于 4 天前 | 显示全部楼层

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

海陆两栖沼跃鱼 发表于 2017-6-20 17:02
可能这就是用函数买菜?

两个概念吧?
Steam实用指南合集
欢迎点赞收藏w

5

赠楼

0%

赠楼率

26

蒸汽

46

主题

642

帖子

544

积分

发表于 4 天前 | 显示全部楼层

社区昵称:appvin 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+15/-0

所以。。。我能看懂哪部分

5

赠楼

1%

赠楼率

110

蒸汽

18

主题

285

帖子

644

积分

发表于 4 天前 | 显示全部楼层

社区昵称:KiriYa Farmskins.com 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

我的妈...看不懂..

9

赠楼

1025%

赠楼率

253

蒸汽

17

主题

648

帖子

1260

积分

CrazyMoon

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:DOLLARS 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

emmmmm.......jpg

21

赠楼

89%

赠楼率

177

蒸汽

39

主题

565

帖子

433

积分

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:taotie53 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+2/-0

有太长不看版嘛

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

 楼主| 发表于 4 天前 | 显示全部楼层

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0


抱歉没有弄
Steam实用指南合集
欢迎点赞收藏w

0

赠楼

0%

赠楼率

59

蒸汽

9

主题

151

帖子

131

积分

发表于 4 天前 | 显示全部楼层

社区昵称:Los 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+6/-0

除了那条公式其它的看懂了,
但结果还是得靠量

0

赠楼

0%

赠楼率

64

蒸汽

0

主题

1181

帖子

1048

积分

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:血樱 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

emmm.......我还右上角吧,一脸懵逼

9

赠楼

30%

赠楼率

33

蒸汽

10

主题

219

帖子

143

积分

发表于 4 天前 发自移动设备 - 你的掌上 SteamCN 社区 | 显示全部楼层

社区昵称:WindBleak 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+1/-0

智商不够用了。。。

11

赠楼

0%

赠楼率

443

蒸汽

87

主题

1841

帖子

1361

积分

人生不过坐&瓜&微笑

『片十字花瓣』『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:Leo&FxcK->【Farmskins.com】 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

厉害了

3

赠楼

24%

赠楼率

220

蒸汽

12

主题

328

帖子

300

积分

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:Nikiski 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+6/-0


想必你是个算法相关专业的dalao

15

赠楼

2%

赠楼率

377

蒸汽

70

主题

2340

帖子

1346

积分

一只咸鱼~懒得翻身的那种~

『滴学生卡』(永久纪念)『片十字花瓣』

发表于 4 天前 | 显示全部楼层

社区昵称:Lost Relic 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

前年学的概率论已经忘光光了

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

 楼主| 发表于 4 天前 | 显示全部楼层

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

nikiski 发表于 2017-6-20 17:26
想必你是个算法相关专业的dalao

并不是,我大学这块成绩并不咋地
Steam实用指南合集
欢迎点赞收藏w

3

赠楼

8%

赠楼率

132

蒸汽

21

主题

349

帖子

1135

积分

发表于 4 天前 | 显示全部楼层

社区昵称:AoyamaDusk 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

看起来很合理的样子
威尔森置信区间是不就是常用的置信区间的洋气说法

0

赠楼

0%

赠楼率

1318

蒸汽

23

主题

880

帖子

1547

积分

发表于 4 天前 | 显示全部楼层

社区昵称:Stellaris 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

和steamdb的评分系统一样,都是借鉴的这片文章

0

赠楼

0%

赠楼率

361

蒸汽

4

主题

154

帖子

424

积分

发表于 4 天前 | 显示全部楼层

社区昵称:fupolarbear 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

一直有想过这些问题但是没有深入思考…学习了…感谢dalao…

0

赠楼

0%

赠楼率

25

蒸汽

8

主题

366

帖子

121

积分

发表于 4 天前 | 显示全部楼层

社区昵称:Tice 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

一脸懵逼,仰望大佬

9

赠楼

1%

赠楼率

18

蒸汽

569

主题

8341

帖子

3508

积分

屁股上的眼睛最能看清一切!

『滴学生卡』(永久纪念)『乐抚其鳞』『片十字花瓣』

发表于 4 天前 | 显示全部楼层

社区昵称:TryKing 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

太麻烦,不思考

26

赠楼

2%

赠楼率

54

蒸汽

499

主题

4060

帖子

9866

积分

『蒸汽基车』『干渴水滴』『片十字花瓣』『滴学生卡』(永久纪念)

 楼主| 发表于 4 天前 | 显示全部楼层

社区昵称:SweeTnT 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+9/-0

TryKing 发表于 2017-6-20 18:03
太麻烦,不思考

反正知道论坛好评率比steam低就可以了

评分

参与人数 1体力 +2 收起 理由
TryKing + 2 优秀资料

查看全部评分

Steam实用指南合集
欢迎点赞收藏w

0

赠楼

0%

赠楼率

463

蒸汽

4

主题

1461

帖子

758

积分

发表于 4 天前 | 显示全部楼层

社区昵称:Wars of the Roses 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

大……大佬

1

赠楼

1%

赠楼率

621

蒸汽

51

主题

2835

帖子

1273

积分

『片十字花瓣』

发表于 4 天前 | 显示全部楼层

社区昵称:Fresh meat 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+3/-0

本帖最后由 rocket007sos 于 2017-6-20 18:15 编辑

只看差评的路过,如果差评全部都能接受,那就愿望单了,比如没有中文这类评价。
PS  说着,去社区翻出个世嘉游戏,刷了下差评。

29

赠楼

3%

赠楼率

58

蒸汽

42

主题

203

帖子

272

积分

发表于 4 天前 | 显示全部楼层

社区昵称:雾雨·魔里沙 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+4/-0

置信区间。。。又想起挂概率论的日子

7

赠楼

0%

赠楼率

418

蒸汽

38

主题

1063

帖子

1029

积分

发表于 4 天前 | 显示全部楼层

社区昵称:Stephen Chen 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+155/-0

看完感觉是这样的
a-b 不行
a/b 不行
要这样 a!@#¥%……&*()b

1

赠楼

1%

赠楼率

187

蒸汽

1

主题

82

帖子

146

积分

『滴学生卡』(永久纪念)

发表于 4 天前 | 显示全部楼层

社区昵称:ubisoft土豆批发员 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

95%置信区间的z=1.96
唯一记得的数据
学渣的悲哀

0

赠楼

0%

赠楼率

177

蒸汽

3

主题

98

帖子

314

积分

发表于 4 天前 | 显示全部楼层

社区昵称:猹 资料 加好友 聊天 库存 截图 好友 群组 愿望单 评测 信誉+0/-0

划着划着看到了公式,然后默默地回复看不懂
您需要登录后才可以回帖 登录 | 注册

本版积分规则

  作为民间站点,由 2004 年起为广大中文 Steam 用户提供技术支持与讨论空间。历经十年风雨,如今已发展为国内最大的正版玩家据点。

列表模式 · 微博 · 群组 · 贴吧 · QQ群 
SteamCN 蒸汽动力 ©2004-2017 Chinese Steam User Fan Site.
Designed by Lee in Singapore, Powered by Discuz!
推荐使用 ChromeMicrosoft Edge 来浏览本站
广告投放|文字版|SteamCN 蒸汽动力 ( 冀ICP备05004600号 )
GMT+8, 2017-6-24 06:30, PE: 0.381381s , QE: 309, Redis On.
快速回复 返回顶部 返回列表