统计学笔记2:数值方法描述

题外话

感觉Markdown和富文本的对比简直是Mac与破系统的对比。
不知道为什么一行的公式图片在网页上显示效果不好。

三个基本概念

样本统计量(sample statistics):如果数据来自样本,计算的度量称为样本统计量。
总体参数(population parameters):如果是数据来自总体,计算的度量称为总体参数。
点估计量(point estimator):统计推断中,样本统计量被称为是相应总体参数的点估计量。

位置的度量

平均数(mean):提供了数据中心的度量。


样本平均数

总体平均数,希腊字母不会打,用u代替,原谅我

加权平均数

中位数(median):对变量中心位置的一种度量。

几何平均数(geometric mean):一种位置的度量,常用于分析财务数据的增长率。可以用于确定过去连续几个时期的平均变化率。


几何平均数

众数(mode):出现次数最多的数据。

百分位数(percentile):提供了数据如何散布在从最大值到最小值的区间上的信息。


第p百分位数位置

数据中含有极端值时,中位数作为中心位置的度量比平均数更加合适,或者可以使用调整平均数(trimmed mean)。从数据中删除一定比例的最大值和最小值,然后计算剩余数据的平均值就能够得到调整平均数。

变异程度的度量

极差(range):数据中最大值与最小值的差。
极差仅以两个观测值为依据,很容易受到异常值的影响。

四分位数间距(interquartile range,IQR):第三四分位数与第一四分位数的差值。可以克服异常值的极差。


四分位数间距

方差(variance):所有数据对变异程度所做的一种度量。
平均数的离差(deviation about the mean):每一个观测值与平均数的差称为平均数的离差。
总体方差(population variance):如果数据来自总体,离差平方的平均值称为总体方差。


总体方差
样本方差

标准差(standard deviation):方差的正平方根。与原始数据的但为量度相同,更容易进行比较。


样本标准差
总体标准差

标准差系数(coefficient of variation):标准差相对于平均数大小的描述统计量称为标准差系数。

平均绝对偏差(MAE):每个观测值与平均数之间的差一绝对值求和再除以所有观测值的个数。

分布形态

偏度(skewness):是分布偏斜方向和程度的度量,是统计数据分布非对称程度的数字特征。左偏的数据,偏度为负;右偏的数据,偏度为正。


偏度

z-分数(z-score):z分数能够真实的反应一个分数距离平均数的相对标准距离。z分数测量实际数据的平均距离。z值提供了对偏离目标的评估。
任何观测值的z-分数都被认为是对数据集中观测值相对位置的度量。


z-分数

切比雪夫定理(Chebyshev's theorem):指出与平均数的距离在某个特定的个数标准差之内的数据值所占的比例。

切比雪夫定理:
与平均数的距离在z个标准差之内的数据值所占的比例至少为
(1-1/square of z)。( z > 1)

经验法则:
对于钟型分布的数据:

  • 大约68%的数据值与平均值的距离在1个标准差之内。
  • 大约95%的数据值与平均值的距离在2个标准差之内。
  • 几乎所有的数据值与平均值的距离在3个标准差之内。

确定异常值:

  • 通过经验法则
  • 通过Q1 ,Q2,IQR


    上限与下限

变量间关系的度量

协方差(covariance):协方差用于衡量两个变量的总体误差。而方差是协方差的一种特殊情况,即当两个变量是相同的情况。协方差表示的是两个变量总体误差的期望。

总体协方差
样本协方差

为了避免协方差的值以来x和y,使用相关系数对两变量间的相关关系进行度量。
相关系数(correlation coefficient):度量两个变量间的线性关系。
皮尔逊积矩相关系数:


Cov(X,Y)为X与Y的协方差,Var[X]为X的方差,Var[Y]为Y的方差

参考及引用资料

本人不会将以下资料用于商业用途并对其于自己的帮助表示由衷的感谢。

  • << Statistics for Business and Econimics>>
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,390评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,821评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,632评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,170评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,033评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,098评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,511评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,204评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,479评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,572评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,341评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,213评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,576评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,893评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,171评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,486评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,676评论 2 335