大数据从何而来,奔向何方

这几年一直流行“大数据”的概念,几乎让所有生活在城市的人都知道了这个概念。至于农村为什么没有,可能是由于农村的科技水平太低,很多新的概念传导比较慢吧。

百度百科如此定义大数据:大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

照此定义,大数据其实规模上太大,以至于常规的技术模式无法处理,也无法据此做出决策。在这几年全球在大数据处理方面产生了很多新的公司,但我我觉得主要分为以下几种:大数据采集,存储,分析,应用。而目前似乎一些公司在大数据应用上已经尝试,我们也能感受到。比如如果我们在京东或天猫上买了某样商品,然后在我们下次进入页面时,我们就能看到很多与我们之前购买商品相关联的商品推荐,包含竞争品、替代品、互补品等。而这个在5年前是没有的。这是惊喜,也还是惊讶,也是惊恐。恐在什么地方——我们还有隐私吗?据说国外的一些电商网站,已经能根据收集到的你的消费数据,分析出你的消费习惯和消费能力,并据此对你实行歧视定价。即同样一张机票,其他人可能500元买的到,而你由于以前买过两次头等舱,可能对你的价格是最低700元。若果真如此,岂不是太恐怖了。

在分析和应用上能做到此类水平,可能需要庞大的数据库系统,以及很牛逼的技术人员,运用各种算法去分析顾客的消费行为、消费习惯、消费数据,再结合其从其他渠道收集到的个人信息,多相结合,分析推演出来。其实,数据的存储,只要有足够的存储设备、存储空间,都不是问题,或许云也是一种很好的数据存储共享方式。而分析和应用也未必非要大公司才能玩,甚至我们个人也可以根据自己掌握的数据进行一定程度的分析和应用(比如我很勤快地存档了公司自2015年11月开始至今的每日营业业绩数据,我就能通过同比一段时间的营业业绩,了解到公司目前的市场开拓状况如何,是趋好还是趋差)。但是,然而,我们很容易忽视的是数据的采集:采集的手段、采集的时长、采集的数据的准确性、采集的思路是否合理等。

我们不妨去想一个最基本的问题:大数据是否会自动产生?有的人说,数据是客观的 ,不管你在于不在,它都在那里。看起来没错,但是数据不会自动跑到你的w碗里来,需要你发挥主动性去采集´,而你在做出这个决定时是主观的,容易受到他人或外部环境的影响。比如你那天恰好你老婆与你吵架了,你心情不佳,于是就用了比平时更加简单的一种方法去收集的数据,但恰恰是这次简单,让你的数据出现了差错。还有就是目前很多电商做大数据分析时,由于是通过电脑和算法自动收集的,就容易产生误差或误会。比如某天我中了一张十万的彩票,我想反正是白来的,于是就用这笔钱在网上买了两个LV包,电脑有可能就会推荐你奢侈品关联的商品。因为他大概无法判断你购买商品的随机性和不确定性,以及是否是你理性做出的决定,还是你老婆用你的账号买的。

我决不否定大数据的价值,而且我自己也在尝试收集自己能收集到的数据,并愿意和别人共享一部分数据,并在开始使用腾讯云盘为别人提供方便。我z只是觉得我们要考虑清楚:我为什么要收集这些数据,我如何s收集最有效率,我收集的方法是否合理,数据源是否准确。只要有一部分错了那么整个的分析就会错 ,应用也会出错。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,033评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,725评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,473评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,846评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,848评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,691评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,053评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,700评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,856评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,676评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,787评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,430评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,034评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,990评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,218评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,174评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,526评论 2 343

推荐阅读更多精彩内容

  • 个人数据管理标签格式个人数据管理标签格式 以前,我们都是有问题找数据,而大数据时代,其最核心的特质则是“用数据找机...
    hxiaom阅读 1,269评论 0 10
  • 数据智慧给你讲讲:大数据究竟是什么 零、解构大数据 首先,大数据就是互联网发展到现今阶段的一种表象或特征而已,没有...
    戰敭阅读 1,960评论 0 24
  • 这次国庆长假回家,跟妈聊家常,听到这样一件事:大姨的小儿子看见我爸竞然不打招呼。我爸气得都想砸他的车子。我妈气我爸...
    秀发飘飘阅读 98评论 0 0
  • 零下壹度的故事:首次有奖征文https://mp.weixin.qq.com/s/oC9K-VQrzCnriWFd...
    程零下阅读 961评论 17 4
  • 一直都生活在自己小小的壳里,当你从壳里走出来去面对这个社会的时候,才发现并非那么容易,可你没有退路,不能再回到壳里...
    刘姑娘阅读 247评论 0 0