第六章教学系统设计结果的评价教学设计过程的基本要素教学目标分析学习者特征分析学习环境设计教学设计结果的评价教学模式和策略的选择与设计理解教学评价的概念、分类、功能熟悉教学评价的方法知道教学设计结果评价的内容了解教学效果评价的内容和指标体系了解教学设计成果及其相应的评价指标理解教学设计结果形成性评价的方法和过程了解教学设计结果总结性评价的主要目的本章学习目标与要点第一节教学系统设计结果评价概述第二节教学效果的评价第三节教学设计成果的评价第五节教学系统设计评价案例分析第四节教学系统设计结果的形成性和总结性评价outline第一节教学系统设计结果评价概述一、教学评价概述二、教学系统设计结果评价的内容教学设计结果的评价属于教学评价的范畴一、教学评价概述1.教学评价的概念2.教学评价的功能3.教学评价的分类4.教学评价的方法1.教学评价的概念评价:教学评价:按照一定的标准对客观事物进行价值判断的过程教学评价:是指以教学目标为依据,制定科学的标准,运用一切有效的技术手段,对教学活动的过程及其结果进行测定、衡量,并给以价值判断。2.教学评价的功能(1)反馈调节功能(2)诊断指导功能(3)强化激励功能(4)教学提高功能(5)目标导向功能调整教师的教和学生的学是否达到教学目标的要求激励教师的教和学生的学评价是一种价值判断活动评价本身也是教学活动3.教学评价的分类(1)按评价基准分(2)按评价功能分(3)按评价表达分(4)按评价对象分(5)面向教育技术的评价分类(1)按评价基准分①相对评价:在被评价对象的集合中选取一个或若干个个体为基准,然后把各个评价对象与基准比较,确定每个评价对象在集合中所处的位置。(比较学习者水平的差异)常模参照测验:为相对评价而进行的测验(选拔性考试)②绝对评价:在被评价对象的集合之外确定一个客观标准,把评价对象与客观标准进行比较,从而判断其优劣。(考查学习者有无达到预先规定的标准)标准参照测验:为绝对评价而进行的测验(标准化测试)③自身评价:对被评价对象的过去和现在相比较,或者对其若干侧面进行比较(判断学习的现状和趋势)(2)按评价功能分①诊断性评价:在教学活动开始前,为保证教学活动顺利开展而进行的评价。②形成性评价:在教学活动过程中,为使教学活动效果更好而进行的评价。③总结性评价:在教学活动结束后,为把握教学活动的最终效果而进行的评价。诊断性评价、形成性评价和总结性评价的比较诊断性评价形成性评价总结性评价实施阶段教学前教学中教学后评价目的摸清学生底细以便安排学习了解学习过程调整教学方案检验学习结果评定学习成绩评价方法观察、调查、作业分析、测验经常性测验、作业分析、日常观察考试或考查作用查明学习准备情况和不利因素确定学习效果评定学业成绩(3)按评价表达/方法分①定性评价:对评价资料作质的分析(分析/综合、比较/分类、归纳/演绎)评价结果:描述性材料②定量评价:对评价资料作量的分析(统计分析、多元分析等数学方法)评价结果:数量化材料(4)按评价对象分①面向学习过程的评价(面向学生的评价)②面向学习资源的评价教育技术是为了促进学习,对有关的过程和资源进行设计、开发、利用、管理和评价的理论与实践---AECT94定义(5)面向教育技术的评价分类形成性评价总结性评价学习资源学习过程学习资源的形成性评价学生的形成性评价学生的总结性评价学习资源的总结性评价小结:教学评价的分类分类标准教学评价的种类按评价基准分相对评价、绝对评价、自身评价按评价功能分诊断性评价、形成性评价、总结性评价按评价表达分定性评价、定量评价按评价对象分面向学习过程的评价、面向学习资源的评价4.教学评价的方法I传统教学评价方法II信息化教学评价方法I传统教学评价方法传统教学评价方法测验调查观察了解学生认知目标达成程度最常用的方法(构答题和选答题)通过让有关人员回答预先设计的问题获取所需资料(主要形式:问卷和面谈)在自然教育场景下观察了解对象绩效评估II信息化教学评价方法学习契约学习档案概念地图量规信息化教学评价方法II信息化教学评价方法①学习档案②学习契约③概念地图④绩效评估⑤量规二、教学系统设计结果评价的内容教学设计结果评价的内容教学效果的评价教学设计成果的评价教学设计结果的形成性评价教学设计结果的总结性评价教学设计方案的评价多媒体教学资源的评价功能教学设计的目的教学设计的结果第二节教学效果的评价一、教学效果评价的内容二、教学效果的形成性评价设计一、教学效果评价的内容教学效果评价的内容教学过程教学结果活动参与(态度/热情/氛围)达标程度(知识/能力/情感)课堂教学质量评价表序号评价项目(分值)得分1教学目标明确,符合教学大纲要求(10分)2不照本(屏)宣科,教学内容娴熟,运用自如(15分)3教态亲切自然,精神饱满,语言精炼、通俗易懂(10分)4教学时间分配合理,进度快慢适中(10分)5板书工整,布局有序,教学手段运用得当(或多媒体课件设计合理)(10分)6课堂气氛活跃,能调动学生学习积极性(10分)7讲课思路清晰,内容组织合理,重难点突出(20分)8教学效果总体评价(15分)总分二、教学效果的形成性评价设计教学效果的形成性评价搜集信息资料做出及时反馈测验调查观察校正鼓励帮助第三节教学系统设计成果的评价一、教学系统设计方案的评价二、多媒体教学资源的评价一、教学系统设计方案的评价教学系统设计方案的评价可实施性创新性时间因素环境因素教师因素完整性和规范性学生因素新理念新方法新技术二、多媒体教学资源的评价多媒体教学资源多媒体课件网络课程五性原则科学性技术性教育性艺术性经济性“五性”原则:(1)教育性:能否传递教学大纲规定的教学内容(2)科学性:是否正确反映学科知识或先进水平(3)技术性:传递的教学信息是否达到了一定的技术质量(4)艺术性:是否具有较强的表现力和感染力(5)经济性:是否以较小的代价获得了较大效益二、多媒体教学资源的评价网络课件评价指标P166网络课程评价指标P167多媒体教学资源通用评价指标P165第四节教学系统设计结果的形成性和总结性评价一、教学系统设计结果的形成性评价二、教学系统设计结果的总结性评价在教学设计成果形成的过程中进行的评价,目的在于获得反馈信息当厨师品尝汤时,那是形成性评价;当客人品尝汤时,那是总结性评价。对教学设计的成果作出总结和评定,目的是评定教学设计成果的优劣,为决策提供参考信息一、教学系统设计结果的形成性评价1.教学系统设计形成性评价的方法2.教学系统设计形成性评价的一般过程3.影响教学系统设计形成性评价的因素1.教学系统设计形成性评价的方法自评(DesignReview)一对一评价(One-to-OneReview)专家评议(ExpertReview)小组评价(Small-GroupEvaluation)实地试验(FieldTrial)进行中的评价(OngoingEvaluation)自我评价设计者、开发者或设计团队中的一些成员在将方案呈现给专家或使用者之前对其进行评价。专家评价领域专家:主要评价教学内容的精确性和时新性特定类型学习方面的专家:可以就提高该类型学习效果方面对教学策略提出建议。学习者专家:可以从目标人群的视角和反应看教学,从最终的应用环境来看材料是否合适。专家评价产品层次系统层次过程层次专家评议会说课(教材/教法/学法/教学设想/教学程序)一对一评价目的:确定并改正教学中存在的最明显的不足之处,从学习者那里获得对教学内容最初的使用数据和反馈。评价方法:让3名或者3名以上的具有代表性的学习者分别试用教学材料学习者的选择:知识准备:高于平均水平;中等水平;低于平均水平学习态度:积极态度的;一般态度的;消极态度的工作经历:有10年以上工作经验的;有2到5年工作经验的;工作经验不到一年的一对一评价过程:①设计者向学习者进行必要说明②学习者使用材料③学习者和设计者交流收集数据的途径P171:①观察记录②学习者讨论的记录③教学完成后的问卷④测验小组评价目的:①确定在一对一评价后所作的改动是否有效②确定教学中还存在哪些问题,是否能适用真实的目标人群评价方法:让8-20个目标人群的典型代表试用教学材料小组评价过程:①向学习者作出必要说明和解释②按方案中规定的教学方法和过程组织教学(在整个过程中,尽可能减少评价人员的参与)搜集的信息/目的P172:①教学有效性:学习者前测和后测的成绩对教学的态度②教学可行性:学习者完成学习和测试所需时间在预计环境中实施教学的成本和可行性实施或管理教学者的态度实地试验目的P173:①确定在小组评价之后所作的改动是否有效②在预设的学习环境中教学方案能否实施评价方法:在一个与教学材料最终使用环境尽可能相像的学习环境中进行评价要收集的信息P173:①学习者的态度和成绩②教师的态度和教学过程③时间、费用、空间、设备等资源信息进行中的评价进行中的评价P174:在教学实施之后,就教学对学习者的学习、工作和应用知识解决问题的最终效果所进行的评价。要收集的信息:学习者应用的效果学习者对教学设计成果的改进建议收集信息的途径:现场观察查看工作表现记录问卷调查/访谈学习者工作机构内上级、同事或下级的观点教学系统设计形成性评价的方法自评(DesignReview)一对一评价(One-to-OneReview)专家评议(ExpertReview)小组评价(Small-GroupEvaluation)实地试验(FieldTrial)进行中的评价(OngoingEvaluation)说课/专家评议会3名代表性的学习者试用8-20个学习者组成的小组试用在尽可能与实际教学环境相近的情境中试用实际教学效果的评价2.教学系统设计形成性评价的一般过程P175(1)制定评价计划①确定评价对象和评价目标②设计评价指标体系③确定收集信息的类型和方法以及处理统计数据的技术手段④选择被试并阐明成果的背景条件(2)实施评价计划①收集评价信息②整理评价信息(3)处理评价结果—进行评价成果报告评价报告的内容P176设计成果的名称和宗旨使用的范围和对象试用的要求和过程评价的项目和结果评价结果的分析及修改建议评价参与人员及时间评价报告格式典型的评价报告一般包括以下几部分:I.摘要II.评价目的a.评价目标b.课程描述III.方法a.参与者b.具体方法IV.结果a.分析b.结果V.结论与建议3.影响形成性评价的一些因素(1)环境方面的因素(物理环境/心理环境)(2)学习者方面的因素(知识、能力水平)(3)实施人员方面的因素(教学能力/方案的理解能力)(4)其他条件因素(时间/经费/人员安排等)二、教学系统设计结果的总结性评价总结性评价关注教学系统设计的结果,通过收集教学系统设计实施中、实施后的数据和信息,以证明教学系统设计的有效性及其不足。教学系统设计的形成性评价VS总结性评价形成性评价总结性评价目的确定教学的弱点以便修改记录教学的优缺点以便决定是否采用或继续采用阶段自我评价、专家评价、一对一评价、小组评价、实地试验、进行中的评价专家评价实地试验教学材料一种方案一种方案或多种要比较的方案评估人员设计和开发组的成员完全外部评估人员成果修改教学的具体建议给决策者的报告,记录了所评价的教学的优势和不足第五节教学系统设计评价案例分析P178-190思考题如果让你承担一个十三岁初中二年级男生(性格活泼好动、英语基础较差)的“初中英语”家教,你怎样进行教学系统设计?请具体按要求分项说明。〔要求〕从学习目标、教学内容、学习者、学习策略、学习环境等方面进行分析,具体说明采用的教学方式、方法和手段,选用的媒体和资源,安排的教学活动和教学时间等。并说明如何进行教学评价。复习题1.教学评价的概念(名解)2.教学评价的功能(填空/简答)3.教学评价的类型(填空)4.诊断性评价、形成性评价和总结性评价的区别(简答)依据/标准/技术手段/