CDA Level 1 方差分析和一元线性回归分析

CDA level I考试大纲 Part1 数据分析概念与统计学基础 占考试比例的30%; 共分5个知识方向,考试占比分布如下:数据分析概念,方法论 流程 5% 描述性统计分析 12% 推断性统计分析8% 方差分析2% 一元线性回归分析3%;

Part 1的部分前面两个文章已经记录了 25%的考试分布,本次主要记录方差分析和一元线性回归分析,合计考试分布占比5%;

方差分析:

大纲要求熟知:单因素方差分析的基本步骤,总离差平方和(SST)含义和计算,组间离差平方和(SSA)得含义和计算 组内离差平方和 SSE的含义及计算,单因素方差分析的原假设

一,方差分析的相关概念原理:

1,单因素方差分析:将所得数据按某些项目分类后,分析各组数据间有无差异的方法。本质是检验多个总体均值是否想等,计算过程可理解为 变异分解过程。

2,方差分析的基本原理:方差的可加性原则。

二、单因素方差分析的基本步骤,总离差平方和(SST)含义和计算,组间离差平方和(SSA)得含义和计算 组内离差平方和 SSE的含义及计算

1,方差分析的基本假设:

    每个总体都应服从正态分布

    各个总体的方差必须相同

    观察值是独立的

2,单因素方差分析的基本步骤

提出假设:H0:μ1=μ2=μ3,各个水平均值相等,即自变量对因变量没有显著影响

构造检验统计量(F统计量)

统计决策(根据P值)

3,计算F统计量的过程

a,变异分解

总体平方和���

组间平方和

组内平方和

SST = SSA + SSE

b,计算均方

组间均方 MAS=SSA/(k-1)  SSA的自由度为K-1

组内均方 MSE=SSE/(n-k)SSE的自由度为n-k

c,计算检验统计量F

 F=MSA/MSE ~F(k-1,n-k)

d,统计决策

将F 同显著性水平临界值比较.

F>Fα p<α 拒绝原假设

F<Fα p>α不拒绝元假设 有显著性影响。

三,单因素方差的SPSS实现(考试中基本没有此处)

操作流程:分析-比较均值-单因素

界面说明:因变量列表:选入连续变量,可多选,但结果是对因变量逐一进行检验,

                   因子选入 多分类的变量,即 自变量

对比:

多项式:将组间方差平方和分解为不同形式的趋势成分

系数:用于因素不同类别间的检验

两两比较:

方差齐性:

LSD:实际上是t检验的变形,只是在变异和自由度的计算上利用了整体样本的信息,仍然存在放大1类错误的问题

Scheffe:当各组人数不等,或进行较为复杂的比较时,比较稳妥

SNK:运用最广泛的一种两两比较。它采用student range分布进行所有各组均值间的比较

方差不齐:

建议games-howell稍好一点,但最好用非参的方法


简单线性回归分析

大纲要求熟知:相关关系的概念和特点,相关关系与函数关系的区别与联系。相关关系的种类,相关系数的意义,以及利用相关系数的具体数值对现象相关等级的划分,回归分析的概念,主要内容和特点,建立一元线性回归方程条件,应用回归分析应注意的问题,估计标准误差的意义及计算

一。线性相关的概念

由于各类不确定因素,数据点基本落在直线周围,我们称为具有线性相关。

正线性相关


负线性相关


完全线性相关

非线性相关

如果相关系数是根据变量的样本数据计算的,即为了推断总体,那么则称为样本相关系数。即为r,(Pearson相关系数)

r的取值范围为[-1,1],绝对值越接近1则相关性越强,且有以下情况成立:

r=1,完全正相关

r=-1,完全负相关

r=0,不存在线性相关关系

-1<r<0,负相关

0<r<1,正相关

按照习惯对相关强度进行了分级

r绝对值大于等于0.8,高度相关

r绝对值介于0.5-0.8之间,中度相关(含0.5)

r绝对值在0.3-0.5之间,低度相关(含0.3)

r绝对值小于0.3,可视为不相关

我们运用t检验来验证两个变量是否存在线性相关关系

原假设,H0,ρ=0,两变量间无直线相关关系

检验统计量t 

散点图适用条件:

数据间相互独立,变量为连续变量,两边两间关系是线性的。

二、简单线性回归的概念条件,内容,特点。

回归分析可以解决的问题:探索影响因变量的可能因素,利用回归模型进行预测

相关与回归间的关系:相关分析侧重反应散点的疏密程度,回归侧重反应散点的趋势程度

线性回归基本过程:

最小二乘法:希望得到一个一元线性回归方程,使得因变量样本值,到估计值之间的2次距离总和最小,

三、一元线性回归的评价与检验

第一步:总平方和分解


第二步,计算判定系数 r方

r^2=ssr/sst 即平方和占误差平方和的比例。

第三步,残差标准误差

第四步:线性关系检验

提出假设 H0:β1=0,线性关系不显著

设定临界值:确定显著性水平α,并根据自由度,找出临界值Fα

决策 若F>Fα,P<α  拒绝H0,否则不拒绝H0

第五步 回归系数检验

提出假设 H0:β1=0,线性关系不显著

设定临界值 设定显著性水平α 根据自由度n-2,确定临界值tα/2

决策 t的绝对值>tα/2,即p<α,拒绝H0,否则不拒绝H0

四,线性回归模型的假设

线性关系

随机抽样

期望为0

同方差

正态性

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,014评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,796评论 3 386
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,484评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,830评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,946评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,114评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,182评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,927评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,369评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,678评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,832评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,533评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,166评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,885评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,128评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,659评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,738评论 2 351

推荐阅读更多精彩内容

  • 我这么幸福,为什么感受不到,缺了执著,少了遗憾。幸福与外在的名誉及物质无关,属于一切懂生活的人。不懂生活的人也有幸...
    关中人阅读 535评论 1 2
  • 九月是秋天的一场喜剧 依然有似锦的繁花绽放 我从理想国里走出 外面可能藏着所谓的幸福
    清水浮萍阅读 171评论 0 0
  • 2018.1.4 星期五 晴 我和宝爸今天都上班,潞潞淇淇放学后一直没有回家,直到宝爸下班才把他们叫回去。他们...
    大潞小淇阅读 149评论 0 0
  • 今天路过一韩品店看到全场六折的广告,就毫不犹豫的进去扫荡了一圈,买了三支笔,回来就画一幅试个笔!直到晚上零点才完工!
    艺术大观阅读 464评论 6 8