2018-12-23什么是预测性分析

什么是数据分析?


数据分析是利用计算机手段发掘并呈现大数据模式的价值潜力。数据分析的目标是获得结论并辅助决策。数据是历史信息的重要度量尺度,因此数据分析的过程也是对历史信息的一种回顾。数据分析的方法在2005年逐渐变得流行,很大程度上是因为谷歌对于数据分析方式的推崇。但是隐藏在数据分析背后的原理完全不是什么新潮的东西,但是却随着时间的推移逐渐衍生出许多新的展现方式,例如控制论、大数据分析、神经网络、模式学习、大数据统计、知识发掘、数据挖掘技术甚至是数据科学。


数据分析在近些年受到了追捧主要基于以下事实,即有很多组织已经具备了搜集大数据的能力并试图发掘隐藏在数据背后的价值,并很自然的试图利用这些分析结果去提升预测能力、辅助决策过程并最终提升效率。


什么是预测性分析


预测性分析是通过数据挖掘来获得具有价值和意义的结论的过程。数据分析需要遵从很多的原则,其中有一些数据分析模式的发展历史已经超过了100年的时间,包括模式识别、大数据统计、机器学习、人工智能以及数据挖掘。那么预测性分析与这些数据处理模式之间的区别到底在哪里呢?

首先,预测性分析是一种数据驱动的处理模式,这也就意味着相较于其他的数据处理方法,算法而非假定扮演着更为重要的角色。从另一个方面来说,这种模型的建立对数据的依赖程度更高。也正是由于这一原因,这种模型能够展现数据本身更多维度的特征、参数、体量和协同因数,因而也就更为复杂。

其次,预测性分析算法能够实现数据挖掘模式的自动化。有效的预测性分析模型不仅能够提升数据的处理效率和体量,并且能够将数据的价值放大到极致。例如决策树算法,不仅能够判断出达到多种可变目标所需要的最佳候选输入值,还能利用这些可变性结果对未来进行预测。其他的还有些算法能够被用于展示研究结果,利用极限化的算法找到最优输入值组以及相关模型参数。通过发掘出尽可能多的具有价值的变量逐渐减少模型的误差。与此同时,也可以通过同样的方式排除掉对辅助决策缺乏价值的变量。

这种算法存在的另一个便利性在于目前存在很多自动化的软件包和开源程序算法能够满足多变量输入的需要,这些技术也可被有效用于预测性分析模型。例如,如果在一个模型中存在数百种输入变量用于修正模型的精确度,你可以利用简单的预测性分析软件进行一次性的导入而不必手动逐条的输入。

如果给予足够的时间,预测性算法并不能完成其他算法用铅笔和纸张无法实现的功能,但这一算法的强大之处在于无需常识性参数的辅助。设想如果一种监督式学习管理数据库具有50个输入变量,但只具有二进制即0和1的输出结果。例如这种算法我们能够同时判断出到底哪一种变量和每种输出结果具有强相关关系,结果可以用直方图的方式呈现。我们可以将目标变量在直方图上进行叠加,如图1.1。由于有50个输入变量,你需要比较50个直方图之间的数据差异,这种情况在预测性分析中非常常见。


如果某次数据处理任务中需要同时对两个变量进行处理,你可以利用散点图进行分析。如果一个模型具有50个变量,那么它可能的输出散点就能够达到1225个。我们可以建立某种个性化模型对这一情况进行精确模拟,但这需要我们投入大量的时间和精力。但是利用预测性分析模式,你可能仅需要同时面对3个变量,但通过这一过程,你可以同时输出19600个3D散点,从而在三个维度覆盖住所有可能的事件结果。


通过这种方法,你可以覆盖到输入变量尽可能多的组合方式,并可以基于这种方式判断出对于最终输出结果最具有影响价值的变量。而通过这种模式产生的分析结果,想要进行检验和验算无疑也非常简单。我们进一步依据输出的19600个三维散点结果,可以找到最重要的6个参数并可通过权重矫正提升模型的精确度。我们可以设置多个三变量组合取代其它模型中的双变量分析,使得结果更加准确。此时你就可以对得到的散点进行分类了:你可以将近20000个结果分成63类。这就是分析性预测的一个优越性之所在,即可以获得数据分析中不同变量的精确权重。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,542评论 6 504
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,822评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,912评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,449评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,500评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,370评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,193评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,074评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,505评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,722评论 3 335
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,841评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,569评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,168评论 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,783评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,918评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,962评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,781评论 2 354