第二章-心理测验的编制程序

第二章心理测验的编制心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书一、确定测验目的明确测量对象明确测量目标明确测量用途1.1明确测量对象就是明确测量哪些个人或团体.通常以年龄、性别、职业、受教育程度、经济状况、民族、文化背景等指标来区分测量对象.1.2测验的用途测验的用途可分两类:显示性测验:是指测验题目和所要测量的心理特征相似的测验.预测性测验:预测一些没被测量的行为的测验.1.3明确测量目标不仅要明确目标,即测量什么心理特质和行为特征,还要把目标具体化,转换成可操作的术语,这个过程称为目标分析过程.目标分析三种情况工作分析对特定概念下定义确定测验的具体内容操作性定义：是指用可感知、度量的事物、事件、现象和方法对变量或指标作出具体的界定说明。第一节测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书二、制定编题计划全面而具代表性的测验内容各个内容点的相对重视程度双项细目表行为目标内容目标记忆理解应用分析综合评价权重一104032120二55322320三55554630四12322010五55332220合计262114151212100双项细目表的用途编题阶段指出应该编多少题目，哪些种类的题目。在编制好题目后进行对照。确定每类题目的百分比。心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书三、编辑测验项目收集测验资料选择项目形式编写测验项目心理测验编制的基本程序三、编辑测验项目收集测验资料选择项目形式编写测验项目(1)资料要丰富。(2)资料要有普遍性。(3)资料要有趣味性。题目的来源已出版的标准测验理论和专家的经验临床观察和记录心理测验编制的基本程序三、编辑测验项目收集测验资料选择项目形式编写测验项目①使受测者容易明了测验方法。②使受测者在完成测验时不会因测验项目的形式不当而作错。③测验过程省时。④计分省时省力。⑤经济。测题的种类及编写要领可分为两大类：提供型（supply）自由应答型或开放式，题目要求被试给出正确答案。选择型（selection）题目要求被试在有限的几个答案中选择正确的答案。选择题由题干和选项两部分构成。四种变式：计算，类比，找不同类，最好理由优缺点编写要领是非题适合对简单观点或知识的了解编写要领匹配题适用于概念与事实之间的关系编写要领填空题与简答题填空题：提出一个不完整的陈述，要求被试把缺少的字词填上，可以空一处，也可以空几处。简答题：提出简单的问题让被试回答。让被试提供一个正确答案。通常只要几个字或一两句话。论文题让被试就某个问题阐述自己的观点或思想。优缺点编写要领应用题叙述一个具体情境，并提出一些有关数据被试解决所提出的问题。适合于测量计算能力、数学和科学推理以及运用知识到新情境中去的能力。心理测验编制的基本程序三、编辑测验项目收集测验资料选择项目形式编写测验项目(1)测验项目的取样应当对欲测心理品质具有代表性。(2)测验项目的取材范围要同编题计划所列项目范围相一致。(3)测验项目的难度应有一定的分布范围。(4)编写测验项目的用语要力求精炼简短，浅显明了。(5)初编题目的数量要多于最终所需要的数量，以便筛选或编制复本。(6)测验项目的说明必须简明。命题的一般原则内容方面文字方面理解方面社会敏感方面内容方面题目内容符合测验目的内容取样要有代表性题目间内容相互独立文字方面使用准确的当代文字语句简单扼要一句话中不要使用两个或两个以上的观念,意义明确,不要暧昧,少用双重否定理解方面应有确切答案,除创造力测验和人格测验外不应具有引起争议的可能题目的内容不要超出受测团体的知识水平和理解能力题目格式不被人误解社会敏感性方面应尽量避开,必须涉及的要鼓励被试作出真实的回答.菲力普的几条策略:命题假定被试具有某种行为命题时假定规范不一致指出该行为是常见的,虽然是违规的.心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书四、预测和项目分析预测项目分析预测应注意的问题(1)预测对象应取自将来正式测验时准备施用的群体，虽然人数不必太多，但要具有代表性。(2)预测的情境应力求同正式测验的情境一致。(3)预测的时限可以适当延长，以便每一受测者都能将题目做完。(4)施测者应对受测者的反应加以记录。项目分析对项目的分析包括质的分析和量的分析两个方面。前者是从内容取样的适当性、题目的思想性以及表达是否清楚等方面加以分析。后者是指项目的统计分析，包括确定项目的难度、区分度、备选答案的适宜性。心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书五、合成测验测验项目的选择测验项目的编排编制复本(1)并列直进式：(2)混合螺旋式：心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书六、测验标准化测验内容施测过程测验评分测验分数的解释心理测验编制的基本程序六、测验标准化测验内容施测过程测验评分测验分数的解释所有受测者必须在相同的条件下施测。其中包括：(1)相同的测验情境。(2)相同的指导语。(3)相同的测验时限。心理测验编制的基本程序六、测验标准化测验内容施测过程测验评分测验分数的解释(1)对反应要及时清楚地记录。(2)要有一张标准答案或正确反应的表格，即记分键。。(3)将受测者的反应与记分键比较，确定受测者反应应得的分数。心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书七、鉴定测验信度效度测验量表与常模心理测验编制的基本程序确定测验目的制定编题计划编辑测验项目预测与项目分析合成测验测验标准化鉴定测验编写测验说明书八、编制测验说明书测验的目的与功用测验的理论依据测验内容及实施方法测验的标准答案和评分方法测验的信度、效度资料的说明常模表第二节测验的项目分析项目分析(itemanalysis)狭义地讲,是指一组分析被试对测验项目的反应的统计方法.广义的项目分析还包括内容效度的分析和项目编写的分析.第二节测验的项目分析每个答案有多少人选择-------诱答分析多少人正确回答了该项目------难度分析该项目的回答与对测验其它项目的回答的联系-------辨别力分析第二节测验的项目分析一、难度二、区分度三、选择题的选项分析四、标准参照测验的项目分析测验的难度难度是指测验项目的难易程度难度的计算难度理解应注意的问题测验难度对测验的影响难度水平的确定影响难度的因素难度的计算二分法记分通过率极端分组法非二分法记分均分法分组法选择题难度校正通过率P代表项目难度N为全体被试数R为答对通过该项目的人数。RpN难度计算二分法记分项目的极端组法式中PH、PL分别表示高分组和低分组的通过率；RH、RL表示高分组和低分组通过该项目的人数；NH、NL分别代表高分组和低分组的人数。2HLPPP1()2HLHLRRPNN1()2HLHLRRPNN非二分法记分的难度计算为被试在某一项目上的平均得分Xmax为该项目满分maxXPXX选择题难度校正公式CP为校正过通过率P为实际通过率K为备选答案数目q=1-p11kpCPK1qCPpk理解难度应注意问题题目难度是通过被试对该题的正确回答情况计算的，相当于通过率或得分率。其数值与题目的实际难度是一种反序关系。难度值是一种等级量表，而不是一个等距量表，它的计算单位是不等的，因此不能进行四则运算。题目难度是具有相对性和具体性的。速度测验可以不考虑题目难度。多重选择题难度要大于被选答案概率。难度对测验的影响影响测验分数分布的形态测验难度过大或过小，都会造成测验分数偏离正态分布；通常，若被试的取样具有代表性，对于中等难度的测验，其分数分布呈现正态分布。影响测验分数的离散程度过难或过易的测验，会使测验分数相对地集中在低分端或高分端，从而使得分数的全距缩小。当难度集中在0.50附近时，分数的分布范围较广。测验难度水平的确定取决于测验的目的的项目形式以及测验的性质。所说的题目难度以0.5为适宜，并不是要求所有题目的难度值都在0.5左右，而是指测验的平均难度。具体每个题目的难度在0.2—0.8之间较合适，使题目难易兼有，以利于测验对个体差异的考查。影响题目难度的因素题目内容的熟悉度考查的层次题目的形式题目的信息量时间限制控制题目难度的措施正确估计被试的知识背景、能力、学习水平等，并结合以往经验确定适当难度水平。要充分利用各种命题技巧，灵活控制题目的难度。在编制大量题目进行测验并对难度进行分析的基础上建立题库。编制测验时可从中提取各种题目组合的平均难度和难度分布范围都理想的测验。二、测验的区分度指测验项目对被试心理品质水平差异的区分能力。反应了一个题目的鉴别能力，又称为题目鉴别度。是评价项目质量、筛选项目的主要指标和依据。区分度的计算1.项目鉴别指数2.相关法3.方差与变异系数1.项目鉴别指数适用范围：二分法记分项目公式：D=PH-PLPH，PL分别为高分组与低分组在该项目上的通过率。假设：如果项目性质良好，高分组通过人数应该高于低分组。鉴别指数评价题目性能的标准D值是鉴别项目测量有效性的指标，D值越高，项目越有效。1965年，美国测验专家R.L.Ebel根据长期经验提出鉴别指数评价题目性能的标准：0.40以上很好0.30～0.39良好、修改会更好0.20～0.29尚可、仍需修改0.19以下差、必须淘汰2.相关法2.1点二列相关适用项目是0、1记分(或二分变量)，而效标或测验总分是连续变量的数量资料。点二列相关公式公式：rPb为点二列相关系数；Xp为通过该项目被试的平均效标分数；Xq为未通过该项目被试的平均效标分数；p为通过该项目被试的人数百分比；q为未通过该项目被试人数的百分比；S为全体被试的效标分数的标准差。pqpbtXXrpqS15名被试在某测验第1题上的作答情况(通过记1分，未通过记0分)与效标分数见表。表15名被试的效标分数与第一题作答情况学生序号123456789101112131415效标分数657031498050351681697855779042第1题得分0101101001101102.2二列相关二列相关适用于连续的测量变量。但其中一个变量因为某种原因被人为分成两类。二列相关公式公式：rb为二列相关系数；Xp为通过该项目被试的平均效标分数；Xq为未通过该项目被试的平均效标分数；p为通过该项目被试的人数百分比；q为未通过该项目被试人数的百分比；S为全体被试的效标分数的标准差。y为正态分布下p与q分割点正态曲线的高度。pqbtXXpqrSy2.3相关适用于两个变量都是二分名义变量。计算公式检验相关的计算公式()()()()ADBCrABCDACBDr∮为的相关系数，A、B、C、D分别为四格表中四项所包含的人次数。A：项目与效标均通过B：项目通过，效标未通过C：项目未通过，效标通过D：项目未通过，效标通过相关的检验X2检验公式：22XNr升学情况升级留级合计通过未通过6（a）2（c）2（b）5（d）8（a+b）7（c+d）8（a+c）7（b+d）15N例题：下面为20名学生高三物理摸底测验第10道选择题词，第5道问答题与20人的物理高考成绩，请计算该选择题与该问答题的区分度是多少