第五章编制教育评估方案教学目标•学会编制一个评估方案•学会设计抽样调查方案参考书目•中国广播电视大学教学评估(1997—1999)报告.中央广播电视大学出版社编制教育评估方案1.评估的目的2.评估的原则3.评估对象和范围4.估内容(指标)5.评估的组织6.评估的方法、时间和步骤7.抽样调查方案8.评估的结论和分值1.评估的目的•确定评估目的多少为适当;•目的是否贴近学生的需要;•促改、促上、促发展的目的;•教学中的直接目的。评估的目的(举例)通过考察省级电大高等专科教育的教学工作情况,检查电大的教学过程、教学管理、教学条件以及教学效果等;促进电大更好地利用现代教学手段和多种媒体进行远距离开放教学,充分发挥电大系统教育资源的优势,深化教学改革;加强电大系统的教学指导,提高现代化教学管理水平,促进教学管理的科学化、规范化和正规化;改善教学条件,提高教学质量和效益;使电大高等专科教育更好地为我国经济建设和社会发展服务。2.评估的原则•参照执行的原则;•统一方法的原则;•为达到目的的原则。评估的原则(举例)根据原国家教委关于各类成高等学校评估工作“基本内容和准则”中有关教学工作方面的要求,本次评估结合电大教学的实际,突出远距离教育和开放教学的特点,制定评估方案并组织实施。评估工作坚持导向性、科学性、主要性和客观性的原则;将过程评估、目标评估和条件评估相结合,以过程评估为主;评估指标采用定量和定性相结合,力求简单易行。3.评估对象和范围(1)评估对象•评估结论的对象•评估内容涉及的教育活动者(2)评估内容涉及的有关教育范围;•省级电大——主评省级,观察分校•分校电大——主评分校,观察教学点评估对象(举例)•本次评估的主要对象是省级电大;•评估内容涉及的省级以下电大的教育活动者:学生、教师、管理人员、技术人员等。评估范围(举例)•评估的范围主要是电大高等专科教育的教学和教学管理工作;•抽查部分分校电大,进行实地考察。4.评估内容(指标)•概括说明评估指标内容;•分层、分级介绍指标内容;•详细指标体系放在附件;•调查表放在附件。评估内容(举例)第一部分教学过程多种媒体教材使用、教学支持服务、实践性教学、检查与考试、教书育人;第二部分教学管理制度建设、教学管理、管理手段;第三部分教学条件队伍建设、教学经费、教学设施;第四部分教学效果思想品德、考核成绩、毕业率、社会考级。5.评估的组织•领导小组——确定评估的目的、对象、时间等;•设计小组——设计指标体系、评估方案;•实施小组——专家小组实地评估;•自评小组——被评对象的领导小组,开展自评和接受被评。评估的组织(举例)•评估领导小组组成如下。组长:宋成栋、副组长:孙绿怡陈志龙组员:任为民费玉珍丁兴富•全国电大教学评估领导小组下设电大教学评估工作小组,具体负责评估方案的设计、评估人员的培训以及评估工作的操作、运行和管理。•各省级电大在当地教育主管部门的领导下,成立省电大教学评估领导小组,负责对本省电大评估的组织领导。6.评估的方法、时间和步骤•方法——指标设计及评估操作的方法;•时间——评估的进度;•步骤——方案设计的程序;方案实施的程序。如编制方案、资金筹备、人员组织、方案讨论、评估手段和评估目的的讨论等。评估的方法、时间和步骤(举例)第一步:准备。在全国电大教学评估领导小组指导下,中央电大评估工作小组于1997年上半年完成评估方案------第二步:自评。1998年3月底以前,各省级电大开展自评。--第三步:复评。复评工作是在省级电大自评的基础上,由中央电大负责组织复评小组,分两批于1998年6月和9月进行。------第四步:验收。全国电大教学评估领导小组在国家教委有关部门指导下对省级电大的自评和复评情况进行验收,写出验收报告。--7.抽样调查方案•抽样目的、意义•评估对象和参评对象•样本数•抽样方法•抽样框抽样目的当评估涉及范围广、内容多时,不需向评价对象一一进行评估,也不可能对评价对象全面评估。只有选定一些具有代表性的和能反映总体本质的评估对象或参评对象,从中收集到真实的和可靠性的测量数据,才能由局部的评估推断出全面的教学评估。抽样意义•采用抽样方法可以节省人力、费用和时间,提高评估调查的效果。同时可以获取比较详细的、准确可靠的信息,对教学现状进行检查、修正和控制。•抽样调查是从评估对象和参评对象中抽取部分单位的信息进行分析,对评估对象全体的特征作出具有一定可靠程度的估计和判断。评估对象和参评对象•评估对象是评估结论的对象•参评对象是为评估对象提供信息和依据的•有时两者是统一的评估对象和参评对象(举例)•教学评估的主要对象是省级电大;评估范围主要是电大高等专科教育的教学和教学管理工作。•参评的学生限定为:普通专科生、成人专科生。•参评专业:根据在校生数较多的统计和专业已开办多年的要求,确定计算机应用专业、法律专业、财务会计专业、英语专业共四个专业。•参评年级:94级、95级、96级三届部分学生,其占样本数的比例分别为3:4:3。•参评的教师限定为:省直、市(分)校和工作站相应的专、兼职教师。样本数•少于30个样本为小样本•大于30个样本为大样本•全国范围的抽样调查一般占总调查对象的3~7%样本数(举例)•确定学生调查表每个专业50~200份范围,这样学生的数据即符合正态分布,又能代表学校总体程度;•各系统教师配备是每专业至少2名,所以每专业教师数取小于30的小样本数,确定为教师调查表每个专业最多20份。抽样方法•抽样方法可以综合使用•抽样方法始终一致抽样方法(举例)•学生抽样即按专业分群,按年级分层,对某专业某年级的所有分校进行随机抽取分校、随机抽取教学班,对随机抽取的教学班进行等距抽样。抽样方法(步骤)按专业把本省各市(分)校分成四个群体,即凡是市(分)校近三年开办该专业的,为该专业群体一员。对每专业、每一届的市(分)校进行随机抽样。对步骤2抽样出来的市(分)校的教学班进行随机抽样。对步骤3抽样出来的教学班的学生进行等距抽样,即按学生的学号等距抽样。抽样框抽样框对抽样过程的一个描述,即对分群、分层后的个体进行排列,然后进行随机抽样和等距抽样。抽样框(举例)抽样框(举例——确定专业、年级)开设专业的城市抽样的城市分校的教学班抽样的教学班抽样的学生数1城市1城市分校11班12班12班学生数等距数2城市3城市3城市分校31班32班31班学生数等距数4城市8.评估的结论和分值•结论的目的——利于改进、选拔优秀、解决问题等;•结论的内容——合格、排队、选优;•结论的语言——描述、分值、等级;•结论的类型——合格、整改、复评;•分值的类型——合格分、优秀分。评估的结论和分值(举例)全国电大教学评估领导小组依据省级电大自评、中央电大复评和最后验收的结果,对各省级电大的教学过程、教学管理等作出综合评价,确定省级电大的评估得分和等级;总结报告及评估结果在全国电大教育工作会议期间予以公布;对于教学工作开展较好的省级电大予以鼓励,并在电大系统介绍和推广其经验;对于教学工作开展较差,严重违反电大系统有关规定的学校,提出整改意见,并采取适当的宏观调控措施。评估的分值•评估分值反应对评估结论的理解;•与调查表数据统计值不同;•与学生学习成绩不同。作业3•自选评估主题,设计抽样调查方案。