10第十章 信度与效度分析方法

第十章信度与效度分析方法主要内容第一节信度分析方法第二节效度分析方法第一节信度分析方法一、信度的概念二、误差的分类三、信度的种类和计算方法四、影响信度的因素信度（reliability）又称可靠性或精确度，是指在相同条件下，对同一客观事物测量若干次，测量结果的相互符合程度或一致程度，说明数据的可靠性。一、信度的概念二、误差的分类误差是指测量值与“真值”之间差别。误差可分三类：系统误差、随机测量误差和抽样误差。三、信度的种类和计算方法信度评价主要是评价不同的测量者、不同的测量时间、不同的测量工具对数据可靠性的影响。常用的信度估计方法：重测信度、复本信度、内在一致性信度、评分者信度。（一）重测信度重测信度是指用同样的测量方法在不同时段对同一对象进行重复测量，所得结果的一致程度。一致程度越高，则该测量方法稳定性越好，重测信度也就越高。nxxnxxnxxxxr/)(/)(/222221212121例10-1对10名学生在使用人格问卷测试两周后进行第二次测试，两次测试结果得分如表10-1所示。求该测试的重测信度。测试被测对象12345678910第一次测试(x1)24433552442732293538第二次测试(x2)2640375046273328353998.010/3611360910/3591355310/36135913567/)(/)(/22222221212121nxxnxxnxxxxr使用重测信度的注意事项(1)两次测量之间的间隔时间(2)所测试变量的性质(3)测试环境应当一致(二)复本信度复本信度是指两个假定相等（相同）的研究工具同时被用于测试对象的一致性程度。例10-2假设某心理学研究者用A、B两型逻辑推理复本测试初三年级10个学生，两型测试结果得分如表10-2所示。求A、B两型逻辑推理测试复本信度。表10-2测试被测对象12345678910A型测试(x1)19171613111020151614B型测试(x2)181517121292016171394.010/149232110/151237310/1491512341/)(/)(/22222221212121nxxnxxnxxxxr(三)内部一致性信度内部一致性是指组成研究工具的各项目之间的同质性或内部相关性，内部相关性越大或同质性越好，说明组成研究工具的各项目都在一致地测量同一个问题或指标，也就是说明工具的内部一致性越好，信度越高。（1）分半信度（2）克朗巴哈α信度系数（3）库德—理查逊的KR-20值(三)内部一致性信度（1）分半信度：rtt=2rhh/(1+rhh)其中，rhh是分半信度系数，rtt代表测试工具的分半信度。（2）克朗巴哈α信度系数（3）库德—理查逊的KR-20值2211tiSSnn211tiittSqpnnr（四）评分者信度当不同评分者使用相同工具，同时测量相同对象时，需计算评分者间的一致程度，称为评分者信度。12/)(/)(3222NNKNRRWii四、影响信度的因素（一）测试工具本身的影响1.测试题目取样不当、格式不妥2.测量的难度3.测题或指导语用词不当、时限过短（二）测试实施过程的影响1.周围环境2.测试者（主试）方面3.评分不客观、登记分出错（三）被试者（被调查者）的影响1.被试者的动机的影响2.被试者的焦虑、生理因素也会对结果产生影响3.测试经验、学习和教育的影响（四）测试得分的分布范围及测试长度的影响第二节效度分析方法一、效度概述二、效度的种类三、影响效度的因素一、效度概述效度（validity）又称准确度，是用以反映测量结果与“真值”的接近程度。是指一个测量工具是否有效地测定到了它所打算测定的内容，或测定工具的测定结果与预想结果的符合程度。二、效度的种类（一）表面效度：是指测量方法或测试结果所要说明的问题符合专家和公众的共识。（二）内容效度：是根据理论基础及实际经验来对测试工具是否包括足够的项目而且有恰当的内容分配比例所作出的判断。（三）标准关联效度：即以一个公认有效的量表作为标准（通常称为金标准），检验新量表与标准量表测量结果的相关性。（四）结构效度：是指研究工具能说明心理学上的理论结构或概念框架的程度，或者说，结构效度就是根据研究者所构想的量表结构与测试结果吻合程度。三、影响效度的因素（一）测试本身的因素1.测试题中所用词汇、句型难度不能过大2.量表中所提的问题意思应当清楚、测试题不能有额外线索3.测试题要合理编制4.答案不能有规律（或组型）5.测量的数目6.测量的难度要适当（二）测试实施和计分方面（三）被试对象的主观因素（四）样本方面