统计数字会说谎

启发:我们需要从数据挖掘出背后的真实原因,单纯的数据呈现,就有可能出现得到有偏差的结论,甚至导致制定错误的计划。


培根曾经说过:“如果一个人以种种肯定的立论开始,他必将终止于各种怀疑;但如果他愿意抱着怀疑的态度开始,那么他必将获得肯定的结论。”我想对数据资料的判断和接收也是如此。

第一章  内在有偏的样本

耶鲁大学毕业生收入:参与调查的人本身就不能代表全部毕业生。它也仅仅代表了 1924 级耶鲁学生中可以联系到的,并愿意站出来说出所赚数目的这个特殊群体。

记住下面这点是有益的:无形的误差与有形的误差一样容易破坏样本的可信度。也就是说 , 即使你找不到任何破坏性的误差来源,但 只要有产生误差的可能性,你就有必要对结果保留一定的怀疑。

随机样本的检验标准是:总体中的每个名字或事物是否具有相同的几率被选进样本?

第二章  精心挑选的平均数

众数、平均数、中位数

第三章  没有披露的数据

牙膏,小样本,多次实验选择较好的那组

因为他向他们灌输某些观念,特别是将许多普遍存在却未经认可的性行为称为正常。实际上,金西博士只是指出他发现这种行为很普遍,而这便是正常所指,他并没有为这些行为贴上许可的标记,这些行为是否道德也并不属于他的研究范围。

农村接上电。用词模糊,并不是用上电。

平均气温

第四章  毫无意义的工作

记住误差的加减号(比如比较两人的智商)

只有当差别有意义时才能称之为差别

第五章  惊人的统计图形

绘图的手段会给人错觉,比如柱状图、陷入截去下面部分

第六章  平面图形

按照长宽比例,面积会是平方关系,让人感觉的立体物体是立方关系。

第七章  不相匹配的资料

如果你想证明某事,却发现没有能力办到,那么试着解释其他事情并假装它们是一回事。在统计资料与人类思维冲撞所引起的耀眼光芒中,几乎没有人会发现它们的区别。不相匹配的数据是保证你处在有利位置上的武器,而且通常如此。

感冒药杀菌,存在疑点:进入人类就失效,服用前已经被稀释,杀的是什么菌。

数据到底能得出怎样的结论。

交通事故发生的背景、时间段、天气,坐飞机、火车发生的事故。死亡的总人数没有太大意义,要看占总使用人口的比例。

但实际上,公报中的利润仅是实际利润的一半或三分之一,没有报道的利润隐藏在贬值、特殊贬值名目下以应付将来的紧急情况。

如果我每天早上以 99 美分购进一件商品,并在中午以 1美元卖出,那我只获得 1%的收益,但是全年我却获得了投资额的 365%。

这是一个有趣的事实,在考虑某种疾病的发病情况时,使用死亡率或者死亡人数比发病人数更合理__这是因为死亡报道和死亡记录的质量更高。在此例中,明显不相匹配的数据比表面上完全匹配的数据还要好。

第八章  相关关系与因果关系

但这是一个古老的谬误,然而它仍频繁地出现在统计资料中,并被大量让人印象深刻的数据所伪装。这个谬误是:如果 B 紧跟着 A 出现,那么 A 一定导致 B。在上例中,当抽烟与低分同时出现时,人们得到了一个未经证实的假设,抽烟导致低分。难道就不能是相反的解释吗?也许低分促使学生不喝酒而变得爱抽烟。这种说法与前一种一样能得到证据很好的支撑。只是它不能够满足宣传人员的要求。

问题的关键在于,当有许多合理的解释时,你几乎没有权利选择对口味的解释并坚持认为它是正确的。但事实是许多人会这么做。

第九章  如何进行统计操纵

实际上.如果出版一本书的每项成本开支都上升 10%左右,总成本也只爬升了相同的比例,即 1O%。

另一个困惑出现在百分比与百分点之间。如果某年的投资回报率为 3%,而第二年为 6%,你可以很谦虚地描述:增了 3 个百分点。同样,这样的描述也是允许的:增长高达 100%。要了解人们怎样混淆这两种说法,请观察民意选举的投票者。

第十章  对统计资料提出的五个问题

首先要寻找的是偏差

然后,再仔细寻找无意识偏差

“权威人士”掩盖了真实的资料来源。与医药界沾边的任何东西都可以是“权威人士”;科学的实验室也是“权威人士”;大专院校,尤其是大学以及那些在技术方面名列前茅的学校更具有权威性。前几章中那个试图证明高等教育将危及女孩成婚几率的作者,充分地利用了康奈尔大学这个“权威机构”。但请大家注意,虽然数据来自康奈尔大学,结论却完全是作者自己的。康奈尔大学的声望却让你留下了一个错误的印象,“康奈尔大学得出结论⋯⋯”

注意样本的有偏.是由于选择不当,还是像这个例子一样,由刻意挑选有利的样本造成的。问一个我们前几章曾经提过的问题:样本是否足够大到能够保证结论值得信赖?

有时仅给出百分数却缺少原始数据也能造成欺骗。

有时文章中遗漏了引起变化的原因,这容易让读者认为其他的因素才应对变化负责。某年公布的数据试图用今年 4 月的零售额高于去年来证明经济处于复苏阶段。而遗漏的内容是去年的复活节在 3 月而今年在 4 月。

而且,如果你关心死亡总人数更甚于死亡率的话,不要忽略这个事实:现在的人数已远远超过了从前。

如果数据是建立在人们口头的回答(即使有一些听上去十分客观)基础之上,将发生许多怪事。比如说,普查报告显示 35 岁的人数远远多于 34 或者 36 岁的人数。这个数据来源于家庭某个成员填报的其他成员的岁数。对于不确定的年龄,人们往往倾向于取 5 的倍数。获得该数据的准确办法是:询问他的出生年月。

如果你以每月等额分期付款的形式从银行以 6%的利率借了 1OO 美元,应支付的利息是3 美元。但如果是另一种 6%,有时也称为借 100 美元还 6 美元,你就需要偿还前者的 2 倍即 6 美元。大多数汽车贷款采用后一种方法,实在是狡猾。关键在于分期还款时,100 美元你并没有用到一年,6 个月过去后。你已经偿还了一半的贷款。如果采用第二种形式计算利息,即借款额的 6%,你实际承担的利率应该是 12%。

几年前一家大型电器设备公司以出生率不断下降为基础(多年以来,大家都是这么认为的)高效地制定出了战后的生产计划,并将小容量家电设备、公寓式的冰箱确定为生产重点。其中一个计划者突然发现了计划与常识的冲突,他用足够长的图表列举了这样的事实:他本人、他的合作伙伴、他的朋友以及他的邻居甚至以前的同学都有了孩子,甚至还打算要 3~4 个孩子。这样规模的家庭不应算作小规模的。这导致了一些开放式的调查与制图,不久这家公司快速地将它的生产重点转移到大家庭使用的电器上。——因为虽然出生率下降了,但是更多的家庭变成了多子女家庭,出生率和每个家庭的子女数量没有因果关系

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,254评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,875评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,682评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,896评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,015评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,152评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,208评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,962评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,388评论 1 304
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,700评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,867评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,551评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,186评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,901评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,142评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,689评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,757评论 2 351

推荐阅读更多精彩内容

  • 一、内在有偏的样本 1、抽样:只要样本足够大,并且具有代表性,多数情况下,样本的信息可以很好地代表总体。但如果条件...
    IvanHung阅读 1,533评论 0 1
  • 《数据分析的统计基础》的读书笔记 作 者:经管之家、曹正凤 出版社:电子工业出版社 版 次:2015年2月第1...
    格式化_001阅读 9,537评论 1 58
  • 我们常常说性格决定命运,其实,关系也会决定命运,好的人际关系会让我们的工作和生活更加幸福,我们都想要自己拥有良好的...
    Buruila阅读 208评论 0 0
  • 汉初思想以“黄老”为尊,唐初“道”、“儒”、“释”共存,道家地位最尊。强汉与盛唐最开始尊奉的都是老子的思想。而这中...
    默魔麽墨阅读 360评论 0 0
  • 文:歆柔 曾在微博上看到过这样一句话,“喜欢你 大概就是在心里放弃了一千次 只要你回头一次 我就会燃起重新爱你。 ...
    歆柔阅读 281评论 0 0