问卷调查的可靠性分析
一、概念:
信度是指依据測验工具所得到的结果的一致性或稳定性,反映被測特征真实程度的指标。
一般而言,两次或两个測验的结果愈是一致。则误差愈小,所得的信度愈高,它具有下面特性:
1、信度是指測验所得到结果的一致性或稳定性。而非測验或量表本身。
2、信度值是指在某一特定类型下的一致性,非泛指一般的一致性,信度系数会因不同一时候间、不同受试者或不同评分者而出现不同的结果;
3、信度是效度的必要条件,非充分条件。
信度低效度一定低。但信度高未必表示效度也高;
信度检验全然依赖于统计方法。
信度可分为:内在信度:对一组问题是否測量同一个概念,同一时候组成量表题项的内在一致性程度怎样;经常使用的检測方法是Cronbach’s alpha系数。外在信度:对同样的測试者在不同一时候间測得的结果是否一致,再測信度是外在信度最经常使用的检验法。
二、信度指标:
1.用信度系数来表示信度的大小。信度系数越大。表明測量的可信程度越大。
到底信度系数要多少才算有高的信度。学者DeVellis(1991)觉得,0.60~0.65(最好不要);0.65~0.70(最小可接受值);0.70~0.80(相当好)。0.80~0.90(很好)。由此。一份信度系数好的量表或问卷,最好在0.80以上。0.70至0.80之间还算是能够接受的范围;分量表最好在0.70以上。0.60至0.70之间能够接受。若分量表的内部一致性系数在0.60下面或者总量表的信度系数在0.80下面,应考虑又一次修订量表或增删题项。
2.信度指标多以相关系数来表示:大致可分为三类:稳定系数(跨时间的一致性)、等值系数(跨形式的一致性)和内在一致性系数(跨项目的一致性)。
三、信度分析方法:
1.重測信度法:
用相同的问卷对同一被測间隔一定时间的反复測试。也可称作測试——再測方法。计算两次測试结果的相关系数。非常显然这是稳定系数,即跨时间的一致性。
重測信度法适用于事实性的问卷,也可用于不易受环境影响的态度、意见式问卷。
因为重測信度须要对同一样本试測两次,而被測easy受到各种事件、活动的影响,所以间隔时间须要适当。较经常使用者为间隔二星期或一个月。
2.复本信度法(等同信度法):
复本信度法是让被測一次填写两份问卷复本,计算两个复本的相关系数。因为这样的方法要求两个复本除表达方式不同外,在内容、格式、难度和相应题项的提问方式等方面都要全然一致。所以复本信度属于等值系数。在实际的调查中,问卷非常难达到这样的要求。这样的方法较少被採用。
3.折半信度法:
折半信度法是指将測量项目按奇偶项分成两半。分别记分。測算出两半分数之间的相关系数(实际应用EXCEL软件)。再据此确定整个測量的信度系数RXX。
折半信度属于内在一致性系数,測量的是两半项目间的一致性。这样的方法不适合測量事实性问卷,经常使用于态度、意见式问卷的信度分析。在问卷调查中,态度測量最常见的形式是5级李克特量表。
进行折半信度分析时。假设量表中含有反意题项,应先将反意题项的得分作逆向处理。以保证各题项得分方向的一致性,然后将所有题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(rhh)),即半个量表的信度系数),最后用斯皮尔曼-布朗(Spearman-Brown)公式:rtt=2rhh/(1+rhh),求出整个量表的信度系数rtt。
4.评分者信度:
这样的方法在測量工具的标准化程度较低的情况下进行的。不同评分者的判分标准也会影响測量的信度,要检验评分者信度。可计算一个评分者的一组评分与还有一个评分者的一组评分的相关系数。
5.a信度系数法:
克伦巴赫a信度系数是眼下最经常使用的信度系数。其公式为:a=(k/k-1)*(1-(∑Si2)/ST2)
当中,K为量表中题项的总数,Si2 为第i题得分的题内方差。ST2为所有题项总得分的方差。
从公式中能够看出,a系数评价的是量表中各题项得分间的一致性。属于内在一致性系数。
这样的方法适用于态度、意见式问卷(量表)的信度分析。
在李克特量表法中经常使用的信度检验方法为“Cronbach’s a”系数及“折半信度”.
四、利用SPSS进行信度分析
在SPSS中,专门用来进行測验信度分析的模块为Scale下的Reliability Analysis;使用Data Reduction之下的Factor模块。
Reliability Analysis模块主要功能是检验測验的信度,主要用来检验折半信度、库李及a系数以及Hoyt信度系数值。
至于重測信度和复本信度。仅仅需将样本在二次(份)測验的分数的数据合并到同一数据文件之后,利用Correlate之下的Bivariate求其相关系数,即为重測或复本信度;而评分者信度则就就是使用的Spearman等级相关及Kendall和谐系数。
表1 Reliability Analysis模块的Model选项的參数及相应中文术语
keyword | 功能 |
Alpha | Cronbach a系数 |
Split-half | 折半信度,n是第二分量表的题数 |
Guttman | Guttman最低下限真实信度法 |
Parallel | 各题目变异数同质时的最大概率(maximum-likelihood)信度 |
Strict parallel | 各题目平均数与变异数均同质时的最大概率信度 |
表2Reliability Analysis模块的Statistics部分选项的參数及相应中文术语
keyword | 功能 |
F test | Hoyt信度系数 |
Friedman Chi | Friedman等级变异数分析及Kendall和谐系数 |
Cochran Chi | Cochran’s Q检验,适用于答案为二分(如是非题)的量表 |
Hotelling’s T | Hotelling’s T2检验 |
Tukey’s | Tukey的可加性检验 |
Intraclass | 量表内各题目平均数相关系数 |