大数据来了,我们该怎么办?

作者:舍恩伯格

2017年初,人工智能“Master”用连胜60局的战绩横扫了世界围棋界的各路顶尖高手,近日,加拿大和捷克几位科学家的一篇题为《DeepStack:无限注德扑的专业级人工智能玩家》的论文中,介绍了一种能在一对一无限注(任何人在任何时候可下任何数目筹码)德州扑克中击败人类玩家的新算法DeepStack。人工智能本质上是基于大数据的学习和训练,不管理你是否准备好,以大数据为基础的人工智能正以秋风扫落叶之势向人类发起各项挑战。

大数据正对我们的日常生活、工作和思维带来巨大的变革,日常出行有共享单车,公交和地铁出行可以扫码支付和出行,Farecast通过预测机票价格趋势帮助旅客节约机票购买费用,我们平时也可以用携程、去哪等APP软件比较出行和住宿的价格,大数据已经无处不在的影响着我们的生活和工作。

风起于青萍之末,大数据来了,我们该怎么办?


积极拥抱大数据是最好的办法,我们需要从思维、商业和管理上进行变革,才不会被时代所抛弃。

1、大数据时代的思维变革

不是随机抽样,而是全部数据。小数据时代的随机采样,最少的数据可以获得最多的信息,随机抽样的方法一直被我们所采用,比如人口普查,但这只是一条捷径,是在不可收集和分析全部数据的情况下的选择,它本身存在很多固有的缺陷。当人们想要了解更深层的细分领域,随机采样的方法就不可取了。随机采样就像看凤姐,远看身材还不错,近观则不敢恭维。生活中真正有趣的事情经常藏匿在细节之中,而采样分析法却无法捕捉到这些细节。大数据可以发现日本“相扑”界操纵比赛的问题,而随机采样分析法无法发现这个情况。有些时候,我们可以使用样本分析法,毕竟我们仍然生活在一个资源有限的时代。但更多时候,利用手中掌握的所有数据成为了最好也是可行的选择。

不是精确性,而是混杂性。对于小数据而言,最基本、最重要的要求就是减少错误,保证质量。大数据时代要求我们重新审视精确性的优劣,如果将传统的思维模式运用于数字化、网络化的21世纪,就会错过重要的信息。大数据不仅让我们不再期待精确性,也让我们无法实现精确性。我们要做的就是接受这些纷繁的数据并从中受益,而不是以高昂的代价消除所有的不确定性。据估计,只有5%的数字数据是结构化的且能用于传统数据库。如果不接受混乱,剩下的95%的非结构化数据都无法利用,比如网页和视频资源。通过接受不精确性,我们打开了一个从未涉足的世界的窗户。

不是因果关系,而是相关关系。知道“是什么”就够了,没必要知道“为什么”。在大数据时代,我们不必非得知道现象背后的原因,而是要让数据自己“发声”。建立在相关关系分析法基础上的预测是大数据的核心,通过应用相关关系,我们可以比以前更容易、更快捷、更清楚地分析事物。


2、大数据时代的商业变革

大数据时代一切均可量化,文字变成数据(Kindle图书数据化)、方位变成数据、沟通变成数据,世间万物皆为数据。有了大数据的帮助,我们不会再将世界看作是一连串我们认为或是自然或是社会现象的事件,我们会意识到本质上世界是由信息构成的。

大数据的价值来源于它“取之不尽,用之不竭”的数据创新。数据就像一个神奇的钻石矿,当它要的价值被发掘后仍能不断给予。它的真实价值就像漂浮在海洋中的冰山一角,而绝大部分都隐藏在表面之下。

我们现在正处于大数据时代的早期,思维和技术是最有价值的,但是最终大部分的价值还是必须从数据本身中挖掘。


3、大数据时代的管理变革

大数据给我们带来便利的同时,也让我们时刻暴露在“第三只眼”之下:我们购物习惯、我们的网页浏览习惯、我们的微信和微博,大数据不仅窃听了我们心中的“TA”,还有我们的社交关系网。如何掌控大数据,需要我们制订全新的制度来规范,数据使用者是数据二级应用的最大受益者,他们应对自己的行为负责,这样才能保护个人的隐私。我们不能通过大数据预测我们未来可能的行为而作为法律评判的依据,否则就会与无罪推定原则相违背,所以政府只能依据我们过去的真实行为进行追究。未来大数据算法师将成一门新兴而热门的职业,他们会是计算科学、数学和统计学领域的专家,他们将为击碎大数据黑盒子而努力。


结束语:大数据并不是一个充斥着算法和机器的冰冷世界,人类的作用依然无法被完全替代。大数据为我们提供的不是最终答案,只是参考答案,帮助是暂时的,而更好的方法和答案还在不久的未来。这也提醒我们在使用这个工具的时候,应当怀有谦恭之心,铭记人性之本。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,324评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,303评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,192评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,555评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,569评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,566评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,927评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,583评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,827评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,590评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,669评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,365评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,941评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,928评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,159评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,880评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,399评论 2 342

推荐阅读更多精彩内容