第二章教育评价方案的编制与实施第一节教育评价的基本原则第二节教育评价方案的制订第三节教育评价的实施方向性原则•评价必须坚持引导教育工作更好地贯彻国家的教育方针、满足社会和个体发展需要的正确方向,保证教育活动沿着良性、健康的方向发展。公平性原则•在评价活动中,在真理面前人人平等,一视同仁;要秉公办事,不要有私心杂念客观性原则•评价的过程和结果都应符合客观实际、尊重客观事实、实事求是。•这要求我们:1、注重调查研究。2、整理资料时-不夸大或者缩小,恰如其分3、分析资料时-排除个人主观偏见4、作评价结论时-以客观存在为依据科学性原则•进行评价时各个环节都要符合科学要求•贯彻这个原则应该做到•1.遵循教育评价活动的客观规律•2.构建一个科学合理的评价指标体系•3.端正评价态度•4.将定量分析与定性分析想结合•5.教育评价的激励性原则•评价应促使被评对象形成继续努力或在进一步的活动中克服不足之处,增强提高活动效果的动机或期望。这是教育评价要激励评价对象前进、促进其发展的目的所决定的。教育评价的可行性原则•教育评价要在保证正确方向和科学、客观的前提下,尽量使评价简便易行。评价过于繁杂,带来更多的人力物力的浪费和评价对象的负担,会降低评价的实际功效。教育评价的实效性原则•评价要有实际作用,即有指导实际、改进工作的效用。提高评价的实效性是实现评价目的的根本要求。第一节教育评价方案设计概述•一、“教育评价方案”的概念(P31)•在教育评价活动中,为实现一定评价目的•对评价的依据标准、方法途径、实施程序等•所作的设计和安排。•是评价工作的操作指南。第一节教育评价方案设计概述–三、教育评价方案设计的基本内容(P31)•明确评价目的,确定评价对象•确定评价标准,选取合理的评价尺度•确定搜集信息的内容和途径•选用科学合理的方式方法和工具(量表和标准)•评价数据的整理和解释(各类表格)第一节教育评价方案设计概述二、教育评价方案具有以下几个特性–目的性–规范性•规范性就是评价方案具有一定程度的统一性。因而它具有一定的指导性。它要求评价人员严格地按照它所规定的程序、准则、标准对所有的评价对象进行评价。评价方案的规范性,决定了它在一定的范围内能使评价的结果具有可比性。–可操作性•评价方案不能也不应该只有抽象的、原则性的意见,而应该是具体的、可实施的。第二节教育评价方案的制订•一、教育评价方案设计的基本步骤•二、教育评价准则及其设计的基本方法•三、评价标准及其设计的方法•四、评价方案的编写一、教育评价方案设计的基本步骤•1、确定与表述评价目的•2、根据特定的评价目的设计评价准则•3、按照各准则之间的内在逻辑形成分级系统,并依据它们的相对重要性,对各准则赋予相应的权重。•4、确定测定的量表和评价标准,为测量和评价提供作为参考系统的尺度。•5、设计为收集各种信息的表格。表格的设计要本着方便实用的原则,力求精炼、简明、统一。二、教育评价准则及其设计的基本方法•准则(criterion,复数criteria)是对评价活动内容或方面质的规定(即对被评属性的规定)。它是评价方案的核心部分,规定评价活动评什么、不评什么。•目前,在教育评价中,评价的准则通常有两种形式:–指标体系(最常用的表述形式)–概括性问题A-1教师教学工作过程(0.6)B-1规定工作量(0.10)-C-1完成规定工作量(1.0)B-2课前准备(0.12)-C-2课时计划、单元计划(1.0)C-3教学内容(0.23)C-4教学组织(0.23)C-5教学方法(0.28)C-6教学素质(0.26)B-3课堂教学(0.45)B-4作业处置(0.11)-C-7作业布置、批阅、讲评(1.0)B-5课外辅导(0.10)C-8学科培优(0.6)C-9学科补差(0.4)B-6教学教研工作态度(0.12)C-10教学工作态度(0.5)C-11教研工作态度(0.5)A-2教师教学工作效果(0.4)B-7学科考试成绩(0.52)C-12群体提高度(0.6)C-13优生率(0.4)B-8学生学科特长(0.24)B-9教学教研成果(0.24)C-14学科竞赛成绩(0.6)C-15学科实践能力(0.4)C-16课堂教学获奖(0.5)C-17教研成果(0.5)广东实验中学科任教师教学工作评价指标体系(一)指标体系及其设计方法–1、指标体系的概念•把表征各目标的所有指标及及其相应的权重和标准有机地组合在一起,组成的有一定结构和功能的系统。•指标:是根据评价的目标,由评价指标的设计者分解出来的,能够反映评价对象某些方面本质特征的具体化、行为化的主要要素,它是对评价对象进行价值判断的依据。•权重:根据组成事物的要素在整体中的地位和作用不同,而赋予的一定数值。•标准:是衡量评价对象达到评价指标要求的尺度。必达目标期望目标稳定性指标变动性指标从达标水平分从内涵性质分从精确度分硬指标软指标指标P33硬指标:是指达标要求是固定的精确的指标,它强调评价时看“硬件”,包括实物、证件、统计数据、静态资料等。如“教学设备”、“场地”、“获奖情况”、“教师学历”、“学生考试成绩”、“教师队伍年龄结构”等。软指标:是指达标要求伸缩性较大、不精确的指标。它强调评价时看“软件”,常采用定性分析评价,包括对事物的性质特点、变化过程、因果关系的分析评价,如“办学特色”、“教学水平”、“教学思想”、“教改状态”等均属软指标。指标•指标的长处:–便于测量;–便于定量处理,易于获得综合结论;–测量过程误差较小,信度较高;•指导的弱点:–设计较难–较少灵活性,不易反映被评对象的特点和社会多样化的需要–效度相对较低2、指标体系的结构•A、直线式结构•二级指标11•一级指标1•二级指标12•二级指标21•一级指标2•二级指标22•二级指标31•一级指标3•二级指标32B、树状式结构一级指标一级指标一级指标总目标二级指标例:学生主体性的基本结构主体性自主性主动性创造性自尊自信自我调控独立判断决断自觉自理成就动机竞争意识兴趣和求知欲主动参与社会适应性创新意识创造性思维能力动手实践能力3、教育评价指标体系建立的步骤–(1)确定教育评价的对象和目标–(2)分解目标,提出初拟指标–(3)筛选指标与分配权重–(4)理论论证–(5)专家评判–(6)预试修订(一)指标体系及其设计方法•4、指标体系设计的原则•目标一致性•直接的可测性•体系内指标的相互独立性•指标体系的整体完备性•指标的可比性•可接受性(一)指标体系及其设计方法•5、指标设计的基本方法•第一,从内涵分析入手,抓住事物的本质属性,然后把这一属性的现象性外观表现确定为指标。这是一种最简捷、最有效的方法。•第二,从分析事物间的相互联系开始,抓住事物变化后产生的效应,把事物变化所产生的效应确定为指标。•第三,抓住事物的全部属性或相关属性,把因素群作为相关指标。6、初拟评价指标的方法•头脑风暴法–又称集体思考法或智力激励法,是利用头脑积极思维,进行智力碰撞,激发智慧的灵感,从而提出评价指标的一种常用方法。•因素分解法–是一种将评价指标按照评价对象本身的逻辑结构逐级进行分解,把分解出来的主要因素作为评价指标的方法。•理论推演法–即根据有关学科的理论推演出评价指标的方法。•个案研究法–通过对少数典型事例进行研究而设计评价指标的方法。头脑风暴法•又称集体思考法或智力激励法,是指采用会议的形式,如集专家开座谈会征询他们的意见,把专家对过去历史资料的解释以及对未来的分析,有条理地组织起来,最终由策划者做出统一的结论,在这个基础上,找出各种问题的症结所在,提出针对具体项目的策划创意。它于1939年由奥斯本首先提出的,并在1953年将此方法丰富和理论化。•优点:获取广泛的信息、创意,互相启发,集思广议,在大脑中掀起思考的风暴,从而启发策划人的思维,想出优秀的策划方案来。•缺点:1.邀请的专家人数(一般5一12人比较合适)受到一定的限制,挑选不恰当,容易导致策划的失败。2.由于专家的地位及名誉的影响,有些专家不敢或不愿当众说出与己相异的观点。因素分解法•因素分解法是一种将评价指标按照评价对象本身的逻辑结构逐级进行分解,把分解出来的主要因素作为评价指标的方法。•运用因素分解法,应当注意几个问题:•(1)必须使用统一的分解原则。•(2)分解出来的指标上下层次之间必须相应和相等。•(3)因素分解必须遵循由高到低的层次逐层分解。理论推演法•理论推演法是根据有关学科的理论推演出评价指标的方法。•例如:•根据心理学理论,智力是一般的认识能力,包括观察力、注意力、记忆力、思维力、想象力;能力是运用智力解决问题的实际本领,包括运用知识的能力、独立获取知识的能力、创造能力、表达能力、交往能力等。•据此,我们便可以推演出评价中小学生智力、能力的指标。个案研究法(典型研究法)•即通过对少数典型事例进行研究而设计评价指标的方法。它可以下三种类型:•正向研究是通过对成功的典型事例研究,提出评价指标;•负向研究是通过研究失败的典型,提出评价指标;•正负向结合研究是通过成功的典型事例与失败的事例进行比较,提出评价指标。•运用典型事例研究提出评价指标有两点必须注意:(1)选择的事例必须具有典型性和代表性,两者缺一不可。(2)要与理论类推法相结合。7、筛选指标和分配权重的常用方法•20世纪50年代以来,研究工作者开发出许多筛选指标和分配权重的好方法。现介绍几种最常用的方法(P39):–特尔斐法–关键特征调查法–层次分析法特尔斐法•此法是20C50年代美国兰德公司赫尔默开发的一种专家咨询法,即采用“背靠背”的匿名问卷调查的方式,征求专家的意见,通过多轮调查与信息反馈,专家意见逐步趋向收敛,最后可获得一致的意见。特尔斐法:•优点:•采用向局外专家咨询的形式,从而减少了内部人员因有切身利害关系可能带来的偏差;•“背对背”的通讯咨询方式,可以免除权威人士的威望影响和其他干扰;•专家咨询的面更广、权威性也趋向于更高;•有控制地多次反馈,对问题的探讨较为深入,使意见逐步趋向一致;•咨询的结论便于定量处理。关键特征调查法•它是先请调查者从所提供的备择指标中找出最关键、最具特征的指标,再对指标进行筛选,最后确定指标的权重。•下面以对新时期高校干部政治素质评价指标进行筛选为例,说明其操作步聚:调查者根据经验或理论分析为高校干部的政治素质提出了10个备择指标见下表:高校干部政治素质备择指标调查结果备择指标荐贤与知人善任事业心原则性求实精神进取心廉洁性民主性服务性政策水平无派性选择人数228517265389121861178932918选择百分数40.892.547.469.621.615.420.915.958.93.2重要性次序514269783102、关键特征调查法•(1)提出备择指标,并进行调查。•(2)计算人数和百分比,并将其从高到低排出次序。•(3)按一定的规则选取指标。•(4)各指标权重系数的计算若以选择各指标的人数百分比(用T表示)为尺度,将75<T≤100作为第一重要指标,50<T≤75为第二重要指标,25<T≤50为第三重要指标,T≤25予以忽略。那么高校干部政治素质应由下表的5个指标组成。高校干部政治素质各指标权重T指标名称重要性等级权重系数92.5事业心一69.6求实精神二58.9政策水平二47.4原则性三40.8荐贤与知人善任三(4)各指标权重系数的计算;n;tiwttwiin1iiii表示筛选后指标的个数百分比表示选择该指标人数的个指标的权重系数表示筛选后第;(4)各指标权重系数的计算0.30.2998.404.479.586.695.9292.5w1T指标名称重要性等级权重系数92.5事业心一0.3069.6求实精神二0.2258.9政策水平二0.2047.4原则性三0.1540.8荐贤与知人善任三0.13层次分析法(两两比较法)•这是美国学者萨蒂首先引进教育评价领域的。•基本方法是要求有关人员对同一层次的评价指标进行两两比较,并加以评分,区分出各项指标影响目标实现的相对重要程度,重要者记为1分,次重要者记0分;然而分别计算各指标得分之和,再除