信度分析
信度和效度分析是问卷分析的第一步,也是检验该问卷是否合格的标准之一,所以,我们在做问卷调查的时候第一步就要进行信度和效度的分析,才能确保我们的问卷有意义。
收集回来的数据,不能保证每一个被访问者都认真填写,因此检测问卷的信度和效度尤为重要。如果问卷的信效度检测通过了,恭喜你,可以继续做后面的数据分析了。那么有哪些检测信度的方法呢?有哪些值得注意的问题?
1、重测信度
定义:重测信度是以同一个问卷量表在同一人群中先后调查两次,其测量结果的积矩相关系数或秩相关系数为重测信度。这种信度系数可以表示被调查者在不同的时间两次或多次调查分数的变化情况,故称为稳定性系数。
计算方式:对同一组被调查者先后调查多次,其重测信度可用每两次调查结果的相关系数之平均数来表示。
优点:(1)它最符合重复调查的涵义,是重复调查最简单、明确的方式。(2)首次调查和再次调查只需要一套调查问卷,比编制两套等值调查题目要省力、省时。(3)同一套题目无论施测几次,所测量的属性是完全相同的。
缺点:(1)同一组被调查者对同一个问卷先后两次作答相互之间是不独立的。因为第一次的作答在记忆中的保持,以及第一次作答后对调查内容的了解和相互讨论等,影响第二次作答,使第二次调查得分有系统地增加。(2)如果两次调查的时间间隔较长,在此期间被调查者身心的发展、新知识的获得等因素都会使两次调查结果不相同。
2、复本信度
定义:要求在不同的时间对同一群体实施两次或多次平行调查,以平行调查的相关系数的大小判断经过一段时间后测量结果的稳定程度。相关系数越大,表明复本信度越高,测量结果一致性越可靠。
计算方式:相关系数常用于复本信度估价或重测信度估价。
优点:(1)一个问卷调查有两个或几个复本,这意味着对于测量同一种特质,具有两个或几个行为样本。由于问卷数目的增加,对于所要测量属性相联系的行为总体代表性增强。因此,一个检测的两个复本在两三天至一周对同一组被试施测时,获得的复本信度系数是相当准确的。(2)两个复本在同时连续使用时,可以避免重测信度的一些缺点,如首次调查对记忆、练习效果的影响,间隔期间获得新知识的影响,再次施测的环境不同和被试主观状态不同的影响,以及为了应付调查所作训练的影响等。
缺点:(1)编制两个完全相同的调查问卷是很困难的。如果两个复本过分相似,则变成重测的形式;而过分不相似,又使等值的条件不存在,两个复本调查问卷有可能在某种程度上测量不同的性质,这就会低估问卷的信度。(2)被试连续接受性质相似的两个调查,可能减少完成调查的积极性。(3)虽然两个复本问卷的题目材料不同,但被试一旦掌握题的某一模式,就能触类旁通,有可能失去复本的意义。
3、分半信度法
定义:分半信度就是将每一个被试的调查值按测题分成两部分计分,然后用每一个被试在两个半问卷上得分求出整个调查的信度称为分半信度或折半信度。
计算方式:通常在无复本且不准备重测的情况下,将问卷的调查项目分半,计算分半得分的相关系数,进而估计整个问卷的信度。
优点:和复本信度法优点相同。
缺点:由于把调查问卷分成两半的方法实际上是多种多样的,而采用不同的分半方法所计算出的值一般是不一样的,因此分半法估计信度的一个缺点是它计算出的信度估计值是不唯一的。