第五讲 项目分析

第五讲项目分析内容梗概难度区分度猜测问题与猜测率多重选择题的项目分析第一节测验的难度一、难度的定义难度是指测验项目的难易程度。用正确做对一个题目的比率或通过百分比(percentagepassing)表示，记为P。二、难度的计算)(212%2727%21.1HHLLHLNRNRPPPNRP。分别为高分组和低分组的被试和最低的总分最高的三组，排列，分成高、中、低将被试按总分从高到低）极端分组法（）通过率法（二分项目的难度二、难度的计算表示项目的总分均得分表示被试在项目上的平非二分项目的难度maxmax.2xxxxP三、难度的确定1.合适的难度水平取决于测验目的、测验性质和项目形式。2.标准参照测验可不必过多考虑项目难度。3.选拔测验的项目难度应控制在录取率左右。4.通常情况下，应该使整个测验的项目难度呈正态分布，且平均难度为0.50左右。四、难度的等距转换1.以项目通过率表示难度属于顺序变量。2.当样本容量很大时，测验分数接近正态分布。依据正态分布曲线表，将项目P作为正态曲线下的面积，转换成Z分数（等距变量）。3.美国教育测验服务中心（ETS）的难度指标：Δ=13+4×Z五、难度对测验的影响1.影响测验分数的分布形态（1）难度过高，正偏态（2）难度过低，负偏态（3）中等难度，正态分布2.影响测验分数的离散程度（1）难度过高或难度过低，全距较小（2）难度集中在0.50左右，全距较大第二节测验的区分度一、区分度的定义区分度是指测验项目对被试心理特质水平差异的区分程度和鉴别能力。区分度是测验是否有效的指示器，是评价项目质量、筛选项目和主要依据。二、区分度的计算（一）项目鉴别指数法1.计算公式教材78页，公式6.5。2.评价标准教材79页，表6-1。3.分组方法27%，33%，50%二、区分度的计算（二）相关法1.点二列相关2.二列相关3.φ相关4.积差相关三、区分度与难度的关系项目通过率（P）D的最大值1.000.000.900.200.700.600.600.800.501.000.400.800.300.600.100.200.000.00三、区分度与难度的关系1.中等难度水平项目区分度最高。2.较难的项目对高水平的被试的区分度高，较易的项目对低水平被试区分度高，中等难度的项目对中等水平被试的区分度高。3.对被试总体较难或较易的项目，对水平高或低的被试则成了中等难度的项目。四、区分度的相对性1.不同计算方法所得的区分度值不同2.样本容量影响由相关法计算的区分度值3.分组标准影响鉴别指数值4.被试样本的同质性程度影响区分度值第三节猜测问题与猜测率一、猜测误差1.猜相对于不猜的误差2.是否猜对引发的误差二、猜测的校正1.被试群体难度校正：教材86页，公式6.11。2.单个被试分数校正：教材87页，公式6.12。三、关于猜测校正的争论（一）支持的观点1.可避免降低测验的信度2.可反映被试的真实水平3.可培养被试诚实的美德4.比较公平三、关于猜测校正的争论（二）反对的观点1.校正公式的基本假设不成立2.若被试作答所有试题，校正分数无实质作用3.不采用猜测校正对信度无重大影响4.可能导致无法解释的现象5.合理猜测是值得培养的习惯第四节多重选择题的项目分析一、作用1.项目是否具有预期功能？2.项目难度是否恰当？3.项目是否有缺陷？4.诱答选项是否有效？二、具体步骤1.按被试总分从高到低依次排列试卷2.以27%比例分别取高分组和低分组3.分别登记高低分组中各选项的人数4.根据登记结果对选项进行质量分析三、需要注意的反应模式1.正确项被所有人选，说明太容易或太明显。2.错误答案没有被试选择，说明迷惑性不强。3.所有人选择同一错误答案，答案可能有误。4.高分组集中在两个选项上，两者选择率相近，可能存在两个正确答案。5.高分组正确率不高于低分组，项目区分度低。6.未作答人数多或各个备选答案人数差不多，说明题目过难或题意不清。