项目分析2718371597

第二章项目分析本章重点测验项目难度的意义及其计算方法；测验项目区分度的意义及其计算方法；难度和区分度的关系。理解项目特征曲线的意义。引言项目分析就是对组成测验的每个测题进行分析。质的分析指的是内容效度分析，分析项目的内容和形式。量的分析则采用统计方法来分析项目的质量。测验项目的关键特征检验项目需回答的问题：它所测量的属性和其他项目测量的属性是否一致难度测量：有多少人能正确回答这个项目？鉴别力测量：测验中这个项目的反应和另一项目的反应相关吗？迷惑项测量：每个选项上有多少人选择？第一节难度分析定义：测验项目的难易程度。一、估计项目难度的方法（一）二值记分项目1.通过率P：项目的难度；R：答对该题的人数；N：总人数。注意：P值越大，难度越小。RPN一、估计难度的方法2.极端分组法将被试依照测验总分从低到高排列，分成二组，总分高端取27%被试---高分组，总分低端取27%被试--低分组；分别计算高分组和低分组的通过率；求项目难度，计算公式：2HLPPP一、估计难度的方法（二）非二值记分项目计算难度的公式：：全体考生在该题上的平均分；：该题的满分。maxXPXXmaxX估计难度项目难度受机遇影响的矫正对考生由于猜测而答对某些题目致使P值增大的可能性。CP：矫正后的难度；P：未矫正的难度；K：选项的数目。11KPCPK二．测验难度水平的确定（一）测验目的和性质效标参照测验、掌握测验：不考虑难度；选拔测验：难度=录取率；无论是速度测验，还是难度测验，一般都应防止被试得满分，因为满分的意义是不明确的。（二）项目形式对于选择题来说，难度一般应大于猜测概率；CP=0.50时，项目的区分度最大，将其带入上述公式得：P=（K+1）/2K（K：选项个数，P：理想难度）大体而言，难度为0.50时最理想，此时项目具有最大的鉴别力。但在实际操作中，让所有项目难度都到达0.50困难很大，而且也不必要，一般只需使项目的平均难度接近0.50，而各个项目的难度在0.50±0.20之间变化。三、项目难度的转换（一）难度转换的理由难度量表是百分量表，而百分量表是等级量表；难度量表是反序而行，P越大，项目越容易。（二）转换方法最基本方法：Z分数法△法：△=13+4Z（△：项目难度；Z：由P值转换来的标准分数）四、难度对测验的影响（一）测验难度影响测验分数的分布形态难度大，正偏态难度低，负偏态（二）测验难度影响测验分数的离散程度测验过难或过易，分数全距缩小，信度降低。P=0.50时最佳第二节项目的鉴别力对不同水平被试反应的区分程度一、项目鉴别力的意义（一）定义：指的是测验项目对于某种心理特质不同水平的被试反应差异的区分程度。必须指出：评价测验项目区分度高低依赖于对被试水平的准确测量，通常被称为效标分数。（二）项目鉴别力（D）的取值范围：-1.00---1.00D为正值称作积极区分，D越大，项目的鉴别力越好。D为负值称为消极区分（负鉴别力）D为0称无区分作用。鉴别指数项目评价0.40以上很好0.30~0.39良好，修改会更好0.20~0.29尚可，仍需修改0.19以下差，必须淘汰二、项目鉴别力的估计方法（一）项目鉴别指数法：较适合于二值记分项目当效标分数是连续变量时，可将分数从高到低排列，取两端27％被试分别作为高分组和低分组。（二）相关系数指标项目与总分相关项目之间相关HLDPP理想状态下，每个项目应该与测量同一构想的其他项目之间高度相关，并且与测量不同构想的其他项目之间不存在相关。项目1234561--0.610.390.360.740.662--0.110.550.140.083---0.030.010.194--0.320.435--0.726--三、难度和区分度的关系项目通过率PD的最大值1.000.000.900.200.700.600.600.800.501.000.400.800.300.600.100.200.000.00分析：难度越接近0.50，项目潜在的区分度越大，而难度D越接近1.00或0时，项目潜在区分度越小。四、区分度的相对性（一）不同的计算方法，所得区分值不同区分度有几种计算方法？注意：对于同一类型的项目必须采用同一种计算方法，结果才能相互比较。（二）样本容量大小影响相关法区分度值的大小样本越大，区分度越……（三）分组标准影响鉴别指数分组越极端，区分度越……（四）被试样本的同质性程度影响区分度值的大小样本越同质，区分度越……第三节项目反应的实例一、分析步骤选取有代表性的样组，按规定程序预测测验分数：按总分从高到低排序，高分组，低分组各27％同一测题，高分组，低分组通过人数比率分别求出难度，鉴别力分别登记各选项中的人数分布：比较高分组，低分组在每题答案上的反应。根据统计结果修改测题二、例题1题号分组选项A选项B选项C选项DPD1高分组223020.720.26低分组416062高分组918000.560.22低分组31266例题2：下表是一成就测验4道4重选择题的项目分析表，请对测题进行项目分析。题组别选答人数正确答案难度鉴别力ABCD未答PrbD1高分组592120B0.710.520.42低分组2250121602高分组581015161A0.420.330.32低分组2621153623高分组1715282812D0.31-0.04-0.06低分组25111934114高分组14414365C0.120.080.04低分组15610285题组别选答人数正确答案难度鉴别力ABCD未答PrbD1高分组592120B0.710.520.42低分组2250121602高分组581015161A0.420.330.32低分组2621153623高分组1715282812D0.31-0.04-0.06低分组25111934114高分组14414365C0.120.080.04低分组15610285第四节项目特征曲线（itemcharacteristiccurves,ICCs）项目特征曲线描述了效标分数不同的被试在该项目上的通过率。曲线坡度越陡，鉴别力越好，预测的误差越小。率概的目项答回确正1.000.000.50低中高能力鉴别力较好a:区分度参数，b：难度参数，c：猜测参数c（1+c)/2ba低中高能力率概的目项答回确正1.000.000.50低中高能力率概的目项答回确正1.000.000.50鉴别力为负鉴别力较低率概的目项答回确正1.000.000.50低中高能力ABC难度不同的3个项目的ICC（c=0时，P=0.5时对应是横坐标是b）率概的目项答回确正1.000.000.50低中高能力ABC难度不同的3个项目的ICC（三参数模型：P=(1+c)/2时对应是横坐标是b）率概的目项答回确正1.000.000.50低中高能力ABCD多项选择中每个选项的ICC总结：项目特征之间的关系项目分析产生三类信息关于迷惑项的信息关于项目难度的信息关于项目鉴别力的信息迷惑项与难度：项目的难易程度依赖于迷惑项的设置难度和鉴别力：项目难度直接限制了鉴别力迷惑项和鉴别力例题Eg：在200个学生中，答对该项目的人数为120人，则该项目的难度为：P=120/200=0.60；若另一项目，答对学生有100人，则项目难度为P=100/200=0.50总评：第二个项目难度大。例题Eg:有1000名被试参加考试，高分组210答对第一题，低分组80人答对第一题，求第一题的难度？P=（210/270+80/270）/2=0.54