怎么做好效度分析?

效度分析,简单来说就是问卷设计的有效性、准确程度。

当我们在为研究主题设计问卷时,都会希望问题实际测量到的是我们希望测量的,这样研究的数据才能准确的说明问题。

例如,我们想了解一个班级里学生的综合成绩情况,正式研究中如果仅测试数学一科,然后得出结论,这样的研究有效性可能很低,原因在于实际测量的方向与研究方向之间有很大偏差。


效度分类

效度又可分为内容效度、结构效度和效标效度。

(1)内容效度,指问卷题项对相关概念测量的合理性情况,通常是以文字来说明问卷的有效性。如通过参考文献,或者权威来源说明问卷的权威性和有效性。还有就是通过对问卷前测并结合结果进行题项的修正等工作来充分说明问卷的有效性。

(内容效度并非统计软件进行的统计方法,对于问卷研究来讲,基本上均需要进行内容效度说明。)

(2)结构效度,指测量题项与测量维度之间的对应关系。测量方法有两种,一种是探索性因子分析,另外一种是验证性因子分析。其中,探索性因子分析是当前使用最为广泛的结构效度测量方法。使用探索性因子分析进行效度验证时,应该以量表为准,对变量或者量表分别进行分析。


(3)效标效度,如果以前有一份权威且标准的量表数据,现在依旧使用该量表进行研究,并且收集回来一份数据。以前权威标准数据作为标准,当前数据与前一份数据之间进行相关分析,如果说相关系数值较高,则说明效标效度良好。


SPSSAU整理

案例应用

(1)背景

为测量消费者对某产品的购买意愿及影响因素(共5个分别为:因素产品, 促销, 渠道推广, 价格, 个性化服务),设计了一份问卷。共25题(均为量表题),其中Q1~Q15影响因素对应题项,Q16~Q19为购买意愿对应题项,现希望对量表效度情况进行分析,如果有不合理题项将其进行删除处理。


(2)操作步骤

这里使用的是探索性因子分析以验证问卷效度水平

第一步:在左侧分析方法菜单栏找到【问卷研究】->【效度】

第二步:将变量Q1~Q15拖拽到右侧分析框内

第三步:设置输出因子个数,预期有5个维度,所以设置因子个数为5。如果没有确定预期维度,也可以选择让系统输出。点击“开始效度分析”


SPSSAU效度分析


(3)分析结果


第一步:首先分析KMO值:

KMO值为0.870,大于0.6,意味着数据具有效度。同时,旋转后累积方差解释率为69.708%>50%,说明研究项的信息量可以有效的提取出来。


第二步:分析题项与因子的对应关系;如果对应关系与研究心理预期基本一致,则说明效度良好。

可以看到所有题项的共同度均大于0.4。除Q6与预期维度对应不符以外,其他题项均与预期对应关系一致,且题项的因子载荷系数绝对值均高于0.4。因而删除Q6,再次分析。


题项均已满足预期对应关系,说明效度良好,与专业情况完全相符。


第三步:对分析进行总结。

使用探索性因子分析进行效度分析,15个量表题目共分为5个维度;删除掉Q6共一道题,最终余下14个题项,此14项与维度对应关系情况良好,与专业预期相符。从上表可知:KMO值为0.870>0.6,通过巴特球形检验,累积方差解释率值为69.708%,说明5个维度可以提取出大部分题项信息。因而综合说明研究数据具有良好的结构效度水平。

 

总结

(1)效度分析只针对量表题,如为非量表题可用文字形式进行描述以测量问卷的有效性

(2)如果KMO值过低,可删除共同度较低项,再次分析

(3)效度分析时,很可能需要删除题目,以便于维度和题项对应关系符合预期,最关键的地方在于:维度和题项对应关系是否与专业预期符合;其余指标相应比较容易达标,最核心的是让维度和题项对应关系保持基本一致性

(4)无论如何效度分析均不达标,可考虑以单个维度分别进行分析,有几个维度就分析几次(同一维度的题目一起分析,仅需要删除掉因子载荷系数值低于0.4的题项即可,不用考虑多个维度间的逻辑对应关系)

(5)如果分析过程中删除某题项(即删除该题目及对应的数据),后续所有的分析都要按删除后的问卷作为标准进行分析


更多分析方法的使用说明可到SPSSAU官网查看。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,492评论 6 513
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 94,048评论 3 396
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 166,927评论 0 358
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,293评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,309评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 52,024评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,638评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,546评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,073评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,188评论 3 340
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,321评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,998评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,678评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,186评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,303评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,663评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,330评论 2 358

推荐阅读更多精彩内容