闲侃数据统计

在大数据时代里,数据统计的作用变得越来越高。某种角度上来说,掌控着数据统计的个体或组织间接地掌控着未来。然而,受制于当前的技术水平与社会发展,数据统计在实际操作当中仍然会碰到一些问题,过大的夸张数据统计的作用还为时过早,无论是进行信息检索,用户心理分析,亦或是实践社会指导,这些都需要积累大量的数据加上超强的分析手段才能够有成果出现。如今利用数据还存在许多问题,下面就以三大块来简单聊一聊。

信息搜集

在具体某一领域进行信息搜集的时候,因为个体的这首边界永远是有限的,所以搜集的时候人们容易想当然的去寻找与结果或规律相关的信息,将大部分的时间花在强联系、大概率的数据上面,忽略掉弱联系、小关联的事件。另外还有一些信息往往很难被个体或是群体预测得到,比如黑天鹅现象,由于黑天鹅现象不可预测、影响重大、事后可解释的三大特点,在相关研究领域的黑天鹅事件及信息很容易被忽略。

行为分析

拥有足够的数据的确可以用来分析用户的习惯与心理,但是在业界能达到这种水平的必定只有顶尖公司,绝大多数一般的公司掌握的信息十分有限,按照目前业界的技术水平,分析用户心理与习惯,这个结论仅仅在宏观上分析才成立,想要达到个体上的微观预测几乎不可能(目前很难)。

数据分析遵从大数法则的原理,长期实践中得来的数据在随机现象的大量重复当中往往会出现几乎必然的规律,这一点的确没错。但从群体上搜集来的数据必然与个体实际行为有所差异,因此如果单纯仅靠宏观数据来预测微观个体,从从逻辑上就有纰漏。要想预测细微的个体行为,就需要长期针对个体的相关数据来进行分析,但是这一点受制于目前的科技水平很难做到。

另外关于这一点,复利效应当中的“达到临界触发点”同样可以应用在这个理论上面。虽然不同领域对应的触发临界点基数不同,但他们都遵从这个规律——只有数据积累达到临界出发点,才会在实际预测当中出现成效。

决策指导

​用相关数据与信息分析来指导决策的时候,还有一项事实容易被人们所遗忘。生活是一个各项条件随机发生的概率分布,历史有可能按照之前的推理进行,也有可能,采取同样的行为,结果却以另外一种方式,来呈现,过去的每一件事情的结果,都是众多可能的结果之一。

即便我们拥有的数据再先进,也应该认识到概率不是固定值,而是动态值。所谓的艺术和科学都是通过人类简化使之具备规律的产物。人们容易编造理由或逻辑关系来将事实的解释和事实混在一起,使其变得容易记忆。大脑天生喜爱拥有逻辑与规律的事物,因此在实际解释事物的时候,我们也容易故意降低事情的复杂性。美化的东西和柏拉图式的讲话东西天生容易被看见,人类天性不愿理解抽象事物,此外,由于人性当中的认知自大,我们往往有一种内在的倾向,以为我们比实际上知道的更多,我们一旦形成观点就很难改变。

另外,还有一些事物本来就具备很大的偶然性。稀有事件分两种:一种是黑天鹅现象,第二种是无人谈及的黑天鹅现象,这两种情况都会极大的掩盖事物背后的真相,让我们产生误解。

在实际操作当中,要想用信息与数据来更好地指导决策,需要从感性和理性两个层面上进行努力。

从理性的角度上面,人们需要不断地提高收集信息的数量及质量,同时应用更开放、更科学的分析方法对数据进行分析、猜想、检验。(比如受启发于贝叶斯定理,对于新事物人们可以先估计一个概率,然后在做这件事情的时候,根据新的信息要反馈来调整原先的估计,从而得到更准确的概率判断)

从感性的角度上来说,我们需要对已有的现象始终保持开放的怀疑态度,不受制于前人的理论研究与个人情感色彩偏见,开放的怀疑与灵活的结论才是人类心智的最高体现

(即使是霍金这种具有巅峰知识水平的个体也会对自己以前的黑洞观点承认错误,即使是亚马逊谷歌这种IT巨头也会承认自己无法用完全依靠引擎搜索来预测流感)

以上便是这三个层面上容易出现的问题。诚然,数据统计在不久的将来一定会爆发出令人难以想象的能量,让世人所侧目。但这一切都需要人类孜孜不求的积累、技术的前进、社会的发展,三者共同来推动。认识到目前手头的不足才能够在不久的将来走得更远。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,491评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,856评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,745评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,196评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,073评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,112评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,531评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,215评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,485评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,578评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,356评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,215评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,583评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,898评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,174评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,497评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,697评论 2 335

推荐阅读更多精彩内容