《赤裸裸的统计学》回顾--(一至三章)

统计数字很容易说谎,但没有它,你就无法在大数据时代找到真相,预测未来。  --查尔斯·慧伦

      曾经何时,我也是极度讨厌数学,无论微积分还是概率论等,正如作者所说,没有人告诉我,这些繁杂机械的公式到底有什么用。

      直至接触到数据分析,才发现数学真的无处不在,其中的规律和应用更是令人着迷。这本赤裸裸的统计学正是通过生活中的一些事例来说明统计学的魅力,从而摆脱那些沉重重的公式和推论枷锁,让你不至于从入门到扔书。

      以上便是我特意再次在这里总结该书的内容的动力,因为我也希望你们也能够真正感受到数学的魅力。

第一章  统计学是大数据时代的最炙手可热的学问

球员效率值

      如果给你一份数据,记载一场NBA比赛上各球员的表现数据,例如命中率、得分、篮板、助攻等,你该如何去评价这场比赛中球员的表现呢?

      命中率高达一百是不是一定最好?或者得分、篮板、助攻均上双是不是一定最好?很明显,大部分时候,如果仅凭这些分散的数据,是很难去评价一个球员表现的好与坏。例如,命中率一百的球员全场只是一投一中,拿到三双的球员命中率极低、持球率极高,显然一般来说这是表现不理想的情况,所以评价球员表现应该从整体数据下手,进而总结成一个数字---效率值。当你有了这个指标,再去评价球员表现就一目了然了,省去在一大堆数据中反复比较的麻烦。

基尼系数

      基尼系数是衡量一个国家的财富(或收入)分配的公平程度,最小为0,最大为1。

      计算基尼系数可以看总资产,也可以看年收入;可以以个人为计算和比较单位,也可以以家庭为单位。家庭财富均等的国家里,基尼系数为0;国家财富集中在一个家庭的国家里,基尼系数为1。所以,在我看来,基尼系数高的国家并不是一个健康的国家。基尼系数的警戒线是0.4,中国近年来一直在0.4~0.5之间,和美国差不多,日本是基尼系数最低的国家之一。

      基尼系数有时候会乘以一百得到一个整数。

描述性数据

      大学里的绩点(GPA)就是一个描述性数据。这一个数据没有反映学生所选课程的难易程度,例如一个绩点为4.5的学生选的都是相对没有挑战性的课,而另一名绩点只有2.9的学生选的尽是微积分、物理这类难度高的课,我们能一口判定孰优孰劣吗?

      但是,描述统计学的存在的意义就是简化,因此不可避免的地丢失一些内容和细节。

抽样大数据

      小朋友,你是否有很多问号?

      有多少无家可归的人在广州街头流浪?已婚人士多久过一次性生活?

      对这两个问题进行全面取样调查的代价都是高昂的,例如流浪汉你能一个一个数吗?性生活的你能挨个问吗?所以,一种重要的统计学做法就是抽样。

概率、风险

      概率游戏对赌场有利时,从长远看,赌场总是能赚到钱,无一例外。

      最不愿意遇到的风险,公司总会对其进行概率评估,虽然都知道是无可避免的,但是公司可以通过商业流程的设计来管理这些风险,将一系列不利因素的出现概率降至可接受范围内,例如通过手段干预将本来是50%的风险降至1%。但风险也只是能降至无穷低而不会消失,2008年的金融危机爆发的部分原因,就是一系列之前被认为极不可能发生的市场事件都变成现实。

那些人最有可能成为恐怖分子

      恐怖分子的行动一般都是带有政治目的,所以只有受过高等教育和家境殷实的人才有最大的动力去改变社会,这些人尤其忍受不了某些部门对自由的压制,从而走向恐怖主义。其他因素相同的情况下,恐怖活动频繁出现在那些实施高压政策的国家。

统计学的意义

      -总结大量的数据

      -做出正确的决定

      -回答重要的社会问题

      -认识并应用模型,卖更多的纸尿片,抓更多的罪犯

      -识别作弊者

      -评价政策、项目和其他创新的有效性。

第二章  描述统计学

      -一件连衣裙售价4999元,先降价25%后升价25%,最终售价是多少?

      ·描述任务第一步是估量某套数据的"中间位置",即找出集中趋势。

      ·四分位数:将数据由小到大分成4份,第一份占25%,以此类推。

      ·十分位数:将数据由小到大分成10份,每份占10%。

      ·标准差:衡量数据相对于平均值的分散程度。例如,两组数据,一组是马拉松运动员的体重,一组是航班乘客的体重,假设两组数据的平均值相等,一般来说,马拉松运动员的体重是相对均匀的,而航班乘客上有大胖子也有婴儿,那么可以推出航班乘客体重数据的标准差是远大于马拉松运动员的,即航班乘客体重数据更加分散。

      ·正态分布:位于平均值一个标准差的范围是68.2%,两个标准差是95%,三个是99.7%。

第三章  统计数据会撒谎

      ·1919年人们的平均时薪是2元,2019年人们平均时薪是5元,你觉得工资水平提高了吗?

      ·我们应该对“他这个人还不错”这句话引起警惕,不是这句话描述错误,而是这句话还有其他的潜台词,诸如这个人曾经坐过牢,上厕所不冲水,所以这句话的用意可能是在掩饰或淡化其他信息。

      -马克·吐温:“谎言有三种,谎言,该死的谎言,统计学”。

      ·“精确”和“准确”有至关重要的区别。精确反映的是我们描述事物的精度,例如“41.6公里”比“大约40公里”要精确,这两个也比“相当长一段路”更精确。假如加油站在西方,“加油在西方400米”是一个精确的说法,但是如果说反了“加油站在东方400米”就是完全不准确的说法。如果一个答案是准确的,那么在这个基础上当然是越精确越好,否则再精确也毫无意义。

      ·美国制造业正在失去大量工作机会;美国制造业产出持续增高。两个说法似乎对立,其实涉及统计学的另一个方面:对优质数据的合理分析能够有效地调和对立的观点。即假设两个说法都是对的,那就要选择一个指标来当作判断标准,是就业还是产出率。

      ·名义数据:没有就通货膨胀做出调整的数字

        实际数据:就通货膨胀做出调整的数字

      ·中位数和平均数一般都是同时出现的,不然就得警惕是否有遮盖的东西。

总结:统计陷阱与数学能力的关系不大。哪怕是令人叹为观止的精确计算也会混淆视听,甚至成为不良动机的掩护。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,186评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,858评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,620评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,888评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,009评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,149评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,204评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,956评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,385评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,698评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,863评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,544评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,185评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,899评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,141评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,684评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,750评论 2 351

推荐阅读更多精彩内容

  • 这是我前天写的回答,我就知道大巴黎必胜!吼吼吼!!! 巴黎圣日耳曼 多特蒙德2-1巴黎圣日耳曼(首轮) 巴黎圣日尔...
    初秋so阅读 161评论 0 1
  • 411:疫情之后,我们如何重启经济的列车? 创建于2020年02月15日 一、马克思:生产力决定生产关系 生产力已...
    倪俊英阅读 128评论 0 0
  • Verilog PLI(Programming Language Interface )是一种Verilog代码调...
    Poisson_Lee阅读 307评论 0 0
  • 雨落北风起, 汀凝潦水寒。 虫鸣夜入户, 落红朝满园。
    北国青骢阅读 185评论 1 3
  • 羞提理想,在我不脚踏实地的个人风格基础上。 仍抱幻想,多半是自娱自乐加不多不少自恋。 亲友生活劝我安稳,我得小心提...
    杜兰豪_025d阅读 119评论 0 1