测验的编排和组织一、合成测验(一)选择与审定试题1、选择试题形式在大多数情况下,任何题目都可以有多种形式,关键是如何选择“最优”形式。是纸笔测验还是操作测验,是只要受测者认出正确答案,还是需要他自己做出正确的答案,这是测验编制必须确定的。在选择题目形式时,需要考虑如下三点:(1)测验的目的和材料的性质。如果要考虑受测者对概念和原理的记忆,适用于简答题;要考虑对事物的辨别和判断,适用于用选择题;而要考虑综合运用能力,适合于用论述题。(2)接受测验的的团体的特点。如对幼儿易用口头测验,对于文盲和识字不多的的人不宜采用要求读和写的项目,而对于有言语缺陷的人(如聋哑、口吃)则要尽量采用操作。(3)各种实际因素。例如,当受测者人数过多、测验时间和经费又有限,易用选择题进行笔纸测验;而人数少,时间充裕,又有某些实验仪器和设备时,则用操作测验。2、审定题目在这个过程中,编制者和有关专家要对题目进行反复审查修订;改正意义不明确的词语,取消一些重复的不合理的题目。然后将初步满意的题目汇集起来组成一个预备测验。审定试题要注意如下四个问题:(1)题目的范围与测验计划所列的内容技能双向细目表一致,即材料内容以及所测验的认知技能上的比率与计划相符,必要时亦可适当调整。(2)题目的数量要比最后所需要的书目多一倍至多倍,以备筛选和编制复本。(3)题目的难度必须符合测验的目的。(4)题目的说明必须清楚明白。(5)对测题的审定除考虑题目本身的性质外,还应考虑各类题目的适当比例,再看看每一个备选中的题目叙述是否清楚、是否提供了额外的线索。另外,要检查测题是否适合施测对象和施测条件、题目的难度和区分度是否恰当以及题目是否相对独立,没有重叠。(二)测题的编排测题的编排选出后,必须根据测验的目的与性质,并考虑受测者作答时的心理反应方式,加以合理安排。当然,测验多种多样,编排也会因人因测验而异,但如下三点是应当测验编排的一般原则:第一,测验的难度宜逐步上升。在测验开头应该有一两个十分容易的题目,以使受测者熟悉做大程序,解除紧张情绪,建立信心,进入测验状态。试题总的编排原则是由易到难,这样可以避免受测者在难题上耽搁时间太多,而影响对后面问题的解答。在测验最后可以有少数难度较大的题目,以测出受测者的最高水平。第二,尽可能将同类型的测题组合在一起。这样使每一类型的试题仅需要一次答题说明,使受测者可用相同的反应方式来回答,同时可以简化计分工作和对测验结果的统计分析。第三,注意各种测题本身的特点。如在是非题或选择题中必须避免选择相同选项的测题安排在一起,以免引起受测者的定势反应;在匹配题和重组题中,所有的选项必须安排在同一张纸上;论述题的题目最好与答案纸在同一张纸上,并留有足够的空间。下面是两种常见的测题编排方式:第一,并列直进式。此种方式是将整个测验按试题的性质归为若干个分测验,同一分测验的试题则以其难度由易到难排列,如威克斯勒智力量表就是并列直进式。第二,混合螺旋式。此种方式是先将各类试题以难度分成若干不同层次,再将不同类型的试题予以组合,做交叉式的排列,其难度则渐次升进。如比内西蒙量表。此种排列的优点是,受测者对各类试题循序作答,从而维持做大的兴趣。测题的编排还可以按题目的类型、性质或难度等标准进行。一些研究证明,编排方式对测验的得分不大,因此心理测验的编排者不必过于看重测题的编排问题。二、测验的预示初步筛选出的项目虽然在内容和形式上符合要求,但是否具有适当的难度,,也就是要通过预测进行项目分析,为进一步筛选题目和编排测验听过客观依据。(一)预测项目性能之优势,不能仅凭测验编制者主观臆测来决定,必须将初步筛选出的项目结合成一种或几种预备测验,经过实际的预测而获得客观性资料。预测的目的在于或的受测者对题目如何反应的资料,它既能提供哪些题目意义不大清楚,容易引起误解等质量方面的信息,又能提供关于题目好坏的指标,而且通过预测还可以发现一些原来想不到的情况,如测验时限多长合适在实测中还有哪些条件需要进一步控制等。预测应注意以下四个问题:第一,预测对象应取自将来正式测验准备应用的群体。例如,对于一个学籍测验来说,进行预备测验的学生必须和测验所指定的受测者属于同一个年级,并且具有相同的课程背景。取样时应注意其代表性,人数不必太多,亦不可过少。第二,预测的实施过程与情景应力求与将来正式测验时的情况相近似。第三,预测的时限稍宽一些,最好使每个受测者都能将题目做完,已搜集较充分的反应资料,是统计分析的结果更为可靠。第四,在预测过程中,应对受测者的反应情形随时加以记录,如在不同时限内一般施测者所完成的题量、题意不清楚之处以及其他有关的问题。(二)项目分析对项目的分析包括质的分析和量的分析两个方面。前者是从内容取样的适用性、题目的思想性以及表达是否清楚等方面加以评价;后者是对预测结果进行统计分析,确定题目的难度、区分度、备选答案的适合度等。此外,为了检验所选出的项目性能是否真正符合要求,通常需要再选取同意总体的另一样本再测一次,并根据其结果进行第二次项目分析,看两次分析结果是否一致。如果某个题目前后差距较大,说明该题性能值得怀疑。三、信度和效度考虑编好的测题可在小范围内试用,初步确定该测题是否可用,然后再在较大的范围内试用,进一步检验其信度和效度。(一)信度信度是衡量测验质量的基本指标,因而测验编好后首先要考核测验的信度。如果一个测量工具,多人或一人多次测量结果不一致,说明这一测量工具是缺乏信度的,即其可靠性不高。获得较高的新都,是迈向目标的第一步,是使测验有效的必要条件。(二)效度测验标好后,还必须考察测验的效度。如果一个测验的效度很低,那么,说明该测验所测得的东西不是它所要测的东西。例如,智力测验所要测得的应是智力,假如测得的是知识和人格,那么说明这个智力测验对于测量智力是无效的。信度和效度的考察方法前面已经介绍,这里就不再赘述。四、常模制定测验分数必须与某种参照系统比较,方能显出它所代表的意义。多数心理测验是八个人所得分与代表一般同类的分数相比较,以判别其所得分数的高低。此处的“代表一般人同类型的分数”即为“常模”。建立常模的方法是,再奖励啊使用测验的全体对象中,选择有代表性的一部分人(称标准化样本),对此样本施测并将所得的分数加以统计和整理,得出一个具有代表兴德分数分布,即为该测验的常模。五、编写指导手册编制测验的最后一步,就是编写指导手册,也称测验指导手册。测验指导手册主要是向测验使用者说明如何实施测验,以提高测验结果的信度和效度。同时,测验指导手册也是测验使用者评估心理测验优势的重要依据。测验指导手册的内容有:第一,测验的目的和功用。通常测验指导手册之处测验可用来测量哪种心理结构,是能力倾向还是人格特征,其功用是筛选、诊断还是其他用途。第二,测验编制的理论背景以及测验中的材料是根据什么原则,应用什么方法选择出来的。第三,如何实施测验的说明。这部分主要包括测验分为几个部分、每个部分有多少测题、如何作答、对注册者训练的要求、测验时限及注意事项等。第四,测验的标准答案或计分标准。第五,常模资料。包括常模表、常模试用的团体以及测验分数的解释。第六,测验基本特征。其中包括难度、鉴别力、信度、效度和因素分析的资料以及这些资料取得的条件、情景和调查的样本、时间等。心理测验的编制过程确定目标确定目标的意义和内容明确内容所包含的结构明确具体内容的成分明确结构所包含的具体内容编制反映该结构的项目(即各成分转换为可操作语言)进行小范围的试用,初步确定此工具是否可用对初始中出现的问题进行纠正在实践中试用进行信度、效度、项目区分度检验将不合适的项目删除或替换编制最后的测验在较大范围内取样进行测验对测验结果进行技术分析、明确该测验的信度、效度水平,并进行标准化工作编制出手册,准备使用