第九章信度、效度分析第一节信度分析作好问卷调查后,接下来为了进一步考验问卷的可靠性与有效性,即要做信度分析(ReliabilityAnalsis),它的功用在于检验测量本身是否稳定。信度是可靠性,是指采用同样的方法对同一对象重复测量时所得结果的一致性程度。信度包括稳定性以及一致性;学者Kerlinger认为信度可以衡量出工具(问卷)的可靠度、一致性与稳定性。信度测验信度越高,表示测验结果越可信,但也无法期望两次测验结果完全一致,信度除受测验质量影响外,亦受很多其它受测者因素的影响,故没有一份测验是完全可靠的。信度只是一种程度上大小的差别而已。一致性高的问卷便是只同一群人接受性质相同题型相同目的相同的各种问卷测量后,在各衡量结果间显示出强烈的正相关。稳定性高的测量工具则是指一群人在不同时空下接受同样的衡量工具时,结果的差异很小。二、信度分析的方法检视信度的方法有很多种,其中,最常用的是第四种Cronbachα系数,简介以下四种:1、重测信度法(稳定系数即跨时间的一致性)使用同一份问卷,对同一群受测者,在不同的时间,前后测试两次,求出者两次分数的相关系数,此系数又称为稳定系数(CoefficientofStability)。需注意:相关系数高,表示此测验的信度高,前后两次测验间隔的时间要适当。若两次测验间隔太短,受测者记忆犹新通常分数会提高,不过如果题数够多则可避免这种影响;但若两次测验间隔太长,受测者心智成长影响,稳定系数也可能会降低。特别适用于事实性问卷2、复本信度法(等值系数跨形式的一致性)复本是内容相似,难易度相当的两份测验,对同一群受测者,第一次用甲份测试,第二次使用乙份,两份分数的相关系数为复本系数(CoefficientofForms)或等值系数(CoefficientofEquivalence)。若两份测验不是同时实施,亦可相距一段时间再施测,这样算出的相关系数为稳定和等值系数。复本相关法是测验信度的一种很好方法,但是要编制复本测验相当困难。而且复本相关法并不受记忆效用的影响,对测量误差的相关性也比再测法低。3、折半信度法(内在一致性系数跨项目的一致性)与复本相关法很类似,折半法是在同一时间施测。是指将调查项目分为两半,计算两半得分的相关系数,进而估计整个调查项目的信度。最好能对两半问题的内容性质、难易度加以考虑,使两半的问题尽可能有一致性。一般将全部题项按奇偶或前后分为尽可能相等的两半适合于态度、意见等问卷4、α信度系数克朗巴哈α系数(Cronbachα):1951年Cronbach提出α系数,克服部分折半法的缺点,为目前社会科学研究最常使用的信度。量测一组同义或平行测验总和的信度,如果尺度中的所有项目都在反映相同的特质,则各项目之间应具有真实的相关存在。若某一项目和尺度中其它项目之间并无相关存在,就表示该项目不属于该尺度,而应将之剔除。Cronbachα值在0和1之间大于0.8表示内部一致性极好在0.6-0.8之间表示较好低于0.6表示内部一致性较差Spss操作过程:分析——度量——可靠性分析术语ReliabilityAnalysis模块的Model选项的参数及对应中文术语关键字功能AlphaCronbacha系数Split-half折半信度,n是第二分量表的题数GuttmanGuttman最低下限真实信度法Parallel(平行)各题目变异数同质时的最大概率(maximum-likelihood)信度Strictparallel(严格平行)各题目平均数与变异数均同质时的最大概率信度显示题项间的相关矩阵量表内项目之间0.773表示若删除内向性题,此量表的α值由0.790降到0.7730.802表示若删除支配性题,此量表的α值由0.790上升到0.802第二节效度分析一、效度分析的基本概念效度是指测量的有效性程度,是测量工具能测出所要测量特质的程度,即准确性、有用性。以英文出统计学考题英文作文题目让考生看不懂是科学测量工具最重要的必备条件二、效度分析的方法(一)内容效度(表面效度、逻辑效度)内容效度是指所设计的题项能否代表所要测量的内容或主题内容效度常从表面上以题目分布的合理性来判断,属于命题的逻辑分析,所以,内容效度也称为“逻辑效度”、“内在效度”。内容效度的评价主要通过经验判断进行,通常考虑3方面的问题:其一是项目所测量的是否真属于应测量的领域;其二是测验所包含的项目是否覆盖了应测领域的各个方面;其三是测验题目的构成比例是否恰当。常用的内容效度的评价方法有两种:一是专家法,即请有关专家对问卷题目与原来的内容范围是否符合进行分析,作出判断,看问卷题目是否较好地代表了原来的内容。二是统计分析法,即从同一内容总体中抽取两套问卷,分别对同一组答卷者进行测验,两种问卷的相关系数就可用来估计问卷的内容效度。三是计算某个问题与去掉此问题后总得分的相关性情况,分析是否需要被剔除(敏感性分析)。(二)准则效度也称为效标效度。是根据已经确定的某种理论,选择一种指标或者测量工具作为准则(校标),分析问卷题项与准则的联系,来分析有效性。(三)建构效度是指测量结果体现出来的某种结构与测值之间的对应程度。效度分析最理想的方法是利用因子分析测量量表或整个问卷的结构效度。因子分析的主要功能是从量表全部变量(题项)中提取一些公因子,各公因子分别与某一群特定变量高度关联,这些公因子即代表了量表的基本结构。通过因子分析可以考察问卷是否能够测量出研究者设计问卷时假设的某种结构。在因子分析的结果中,用于评价结构效度的主要指标有累积贡献率、共同度和因子负荷。累积贡献率反映公因子对量表或问卷的累积有效程度,共同度反映由公因子解释原变量的有效程度,因子负荷反映原变量与某个公因子的相关程度。信度与效度之关系效度是信度的充分条件有效度就有信度没有效度未必没有信度信度是效度的必要条件没有信度就没有效度有信度未必有效度