第四讲主要内容:•问卷调查法•定量观察法•测量法•教育实验方法•内容分析法1问卷调查法主要内容:•一、编制问卷•二、预调查•三、问卷调查的实施•四、问卷数据的统计与分析3一、编制问卷•(一)制定概念结构图表•(二)编写题目•(三)问卷的组成•(四)问卷的形式要求4制定概念结构图表•举例:中小学教师科研现状研究••5自变量:科研认知科研动机科研能力科研环境因变量:科研参与度科研成绩科研期待控制变量(性别、教龄、任教科目、学校类型)编写题目:开发指标的方法•1)头脑风暴法•2)合作讨论法•3)参阅其它问卷•6编写题目:题目制定准则•1)题目要与研究的问题、假设直接相关•避免“基本情况”部分设置的随意性;•避免题目与研究问题关联不紧密、不清晰••2)题目的选择答案应该是可以穷尽的,选项应具有排他性。•您的教龄为:•[1]5年以下[2]5-10年[3]10-15年[4]15-20年•3)在一个题目中只准包含一个问题。•错误的题目举例:•“你喜欢语文和数学课吗?”•“你喜欢上网并且每天都会上网吗?”•7编写题目:题目制定准则•4)防止使用导向性问题。这些问题常常隐含着假设或期望的结果。•错误的题目举例:•“大多数教育工作者认为体罚有碍于儿童身心发展,你同意吗?”•5)避免那些会对答卷人带来社会或职业压力的问题•举例:•吸毒会带来严重的社会问题,你同意此观点吗?(针对吸毒人员的调查)••6)避免问及一些个人的或微妙的问题。•举例:•“除了正常工资以为,你每个月还有多少收入?”•8编写题目:题目制定准则•7)所提问题应是答卷人能够提供信息的问题。应避免假设性问题。•举例:•假如你有异性朋友……•假如你是教师,你会怎样对待学生?••8)题目要简短明了,避免使用长句和专业性术语,要能使答卷人读懂题目•举例:•你们的雇主或他的代理人是否会以狡诈的手段诈取你们的部分酬劳?(针对工人)•“您认为您的心理品质如何?”(针对小学生)9编写题目:题目制定准则•9)收集定量信息时,要求答出明确的数量而不是平均数。•举例:•你每个星期锻炼几次?•你每周去几次图书馆?••10)尽可能避免使用否定性题目和双重否定的题目。•举例:•您是否认为教师并非不能惩罚学生?•您认为不适合做教师的人的个性是:•[1]随和[2]孤僻[3]知识面广[4]严厉10编写题目:题目制定准则•11)避免出现带有假设偏见的题目•举例:“基础教育课程改革效果的调查”•课改后您的学生学习动机提高的程度:•[1]很高[2]较高[3]稍许••课改后您的学生价值观提高的程度:•[1]很高[2]较高[3]稍许•课改后您的学生创新思维提高的程度:•[1]很高[2]较高[3]稍许11编写题目:题型及答案选项设计•题型分类一:一份问卷总体上的题型分类•1)结构型(封闭型):答案范围是限定的•2)非结构型(开放型):被调查人自由陈述答案•3)综合型:封闭型问题为主,辅助开放型问题••题型分类二:题型的具体分类与答案选项设计•1)填空题•如:您的教龄?()年•编码:直接输入填写的数字12编写题目:题型及答案选项设计•2)是非题和二项选择题•如:您接受过科学教育培训吗?是[1]否[2]•您的性别:男[1]女[2]•编码:“是”记1,“否”记2••3)多项单选•如:您的文化程度:•[1]初中[2]高中或中专[3]大专[4]本科[5]研究生[6]其它••我在工作中感到快乐:•[1]非常符合[2]比较符合[3]说不清楚[4]不太符合[5]完全不符合••编码:取值与选项序号一致•13编写题目:题型及答案选项设计•4)多项限选•如:请选择三个您经常光顾的网站:(请只选三个网站)•[1]淘宝[2]sohu[3]优酷[4]教育网[5]sina[6]腾讯QQ[7]其它••编码:转化为三个“单项选择题”•网站之一是哪个?网站之二是哪个?网站之三是哪个?••转化为6个“是非题”•您经常光顾“淘宝”网吗?是[1]否[2]•您经常光顾“教育网”吗?是[1]否[2]•……14编写题目:题型及答案选项设计•5)多项任选•如:请在您经常光顾的网站前画圈(有几个就画几个)•[1]淘宝[2]sohu[3]优酷[4]教育网[5]sina[6]腾讯QQ[7]其它••编码:转化为6个“是非题”•您经常光顾“淘宝”网吗?是[1]否[2]•您经常光顾“教育网”吗?是[1]否[2]•……•6)多项排序•如:请将以下所列教师的个性特点,按照你认为的重要程度排序:•[1]乐观[2]幽默[3]敬业[4]耐心[5]严谨••编码:转化为多个单项选择题•15编写题目:题型及答案选项设计••7)问答题•如:您认为本课程的最大优点是什么?最大缺点是什么?•您认为当前学校学生管理制度中存在哪些问题?16问卷的组成:•前言:介绍问卷、鼓励作答。包括阐明调查的目的和潜在价值,说明个体作答的重要性;简明扼要地说明问卷的填写。•答卷人的背景信息:如性别、学历、专业、年龄、职业、职务等,要与研究的问题和假设紧密相连。•题目:选择回答型题目放前面,开放型题目放后面•致谢:对答卷人的合作表示感谢。•署名:并附上联系地址、邮箱或电话之类。17问卷的形式要求:••问卷要美观、整洁;•问卷不能太长;排列不要有拥挤感;•内容应在逻辑上相互联系,引起答卷人的兴趣:•题目与页码应标上序号18二、预调查•1、问卷的试测作用:•试测能鉴别出误解、含糊、无用或不充分的题目•试测能发现指导语上存在的问题,发现数据统计上的困难,发现需要增加的题目•避免没有提供信息或只是提供了极少信息的结果•预调查的主要目的进行问卷的效度和信度分析•2、操作:选择少量样本实施调查,并辅助访谈,收集数据,对每一份问卷进行细致分析,同时进行统计分析,修改完善问卷19三、问卷调查的实施•1、确定问卷调查的形式:•团体调查或个体调查;•纸质调查或网络调查;••2、计算问卷回收率:•回收率=总回收量/总发放量(样本容量)•有效回收率=有效回收量/总发放量(样本容量)•有效回收量=总回收量-废卷(部分选项未填的空白卷)••问卷有效回收率一般不应低于70%,否则不可作为研究结论的依据••••20•提高回收率的方法:•1)提高问卷质量;(从形式到内容)•2)写好封面信,与被调查对象进行良好的沟通;(真诚,事先沟通等)•3)选好抽样框;•4)为问卷回答者填写问卷和返还问卷提供方便;•5)跟踪发送信函或电话,或追寄问卷;•6)附赠小礼品21•鉴别不回答的原因•不回答这一现象是不可忽视的,研究者必须知道不回答的原因,确定不回答的原因是很重要的。•1)根据人口统计的信息鉴别•2)与不答卷的样本进行访谈,核对不回答的原因22四、问卷调查数据的统计与分析•(一)描述分析•(二)相关分析•(三)因果-比较分析23测量法主要内容:•一、概述•二、好测验的标准•三、学业成就测验的编制•四、人格量表的编制25一、概述•(一)概念界定•(二)测量的基本要素•(三)测验的类型26概念界定•测量:根据一定的法则把所考察对象的某些属性用数字表示出来的过程。•测验:用于测量的主要工具。是“测量一个行为样本的系统程序”。如对能力测验、学习效果的测验。•自我报告法:对个体进行个性、自我观念、学习方式、倾向、价值、兴趣和其他相关概念进行测量时,通常不要求个体“作出表现”,而只是要求个体报告是否具有题目中所提的特点、想法、感受等。自陈量表是常用形式。•测验、量表在使用时常常不做严格的区分。27测量的基本要素•1)测量对象:测量的人或事物•2)测量内容:测量对象的属性•3)测量工具:法则或规则•4)测量结果:数字或符号28测验的类型:根据测量目的分类•1)智力测验•2)能力倾向测验•3)学业成就测验•4)人格测验29二、好的测验的标准•(一)信度高•(二)效度高•(三)合适的难度•(四)理想的区分度30信度高•1)“信度”的界定•信度是对测量工具可靠性的量度,它是鉴定测量结果的一致性和稳定性的概念。•实质上是以“真实分数”为基础对“测量误差”的估计•2)影响“信度”的因素•A、受试者方面:被试个体的身心健康状况、动机、注意力、持久性、求胜心、作答态度以及被试团体的特性。•B、主试者方面:不按规定实施测量,制造紧张气氛,给予特别协助,评分主观等。•C、测量内容方面:试题取样不当,内部一致性低,题数过少,题目过难或过易、区分度不高、题意模糊等。•D、施测情境方面:测量现场条件,如通风、温度、光线、噪音、空间等31••3)信度估计方法•A、再测信度•用同一种问卷(量表),对同一群对象进行两次测量,两次测量数据的相关系数即为再测信度值,称为“稳定系数”。•B、复本信度•任何测验只是所有可能题目中的一份取样,所以可编制许多平行的等值测验,叫做复本。•根据一群测验对象接受两个复本测验的得分计算相关系数即得复本信度值,这个系数也被称为“等值系数”。•32•C、分半信度•在测验没有复本且只能实施一次的情况下,通常采用分半法估计信度。即将测验题目分成对等的两半,计算受测对象两半测验分数的相关系数即得分半信度。也称“内部一致性系数”•D、评分者信度•对测验的主观题评分时往往出现由评分者引起的较大误差。通过随机抽取相当份数的试卷,由两位评分者按记分规则分别给分,然后根据每份试卷的两个分数计算相关系数,即得评分者信度。33效度高••1)“效度”的界定•是对测量工具有效性的反映,它是指测量的结果能够真正反映测量目的和意图的程度。•一个测验的效度表明,在一组测验分数中,有多大比例的变异数是由测验所测量的变量引起的。34•2)效度的类型•A、内容效度•指测验题目对有关内容或行为范围取样的适当性•确定内容效度的方法:•专家判断(也称逻辑判断)•统计分析(计算复本的相关)•再测法(对团体训练前后进行测试并比较结果)•经验法(根据经验判断内容效度)35•B、结构效度•指测验对某一理论概念或特质测量的程度•如:从一般的智力理论,有以下几个主要假设:•智力随年龄增长;智商是相对稳定的;智力与学业成就有密切关系;智力受遗传与环境的影响•确定结构效度的方法:通过对测验结果进行统计分析,审查其符合相关理论见解的程度。•常用方法:因素分析•测验分数的总变异数中来自有关因素的比例,可作为结构效度的指标。36•C、校标效度(实证效度)•指一个测验对处于特定情境中的个体的行为进行预测时的有效性。•被预测的行为是检验测验效度的标准,简称校标。•根据校标资料收集的时间分类:•同时效度:校标资料和测验分数同时收集•(如在校学业成绩、教师评定的等级等)•预测效度:校标资料是在测验后经过一段时间再收集•(如专业训练成绩、实际工作成果等)37••3)信度和效度的关系•信度高是效度高的前提条件;•信度高效度不一定高;•效度高一般信度也高;•38合适的难度•1)难度指标计算•题目难度指标:答对该题人数与参加测验总人数之比;•测验难度:测验中各题目难度的平均值••2)合适的难度值标准:•测验题目难度:0.2-0.8之间•测验难度:平均值在0.5左右最好39理想的区分度••1)区分度的界定•是指测验项目对所测试对象实际水平或心理特质的区分程度(鉴别能力)。也即项目的效度。••2)区分度的计算举例:•D=PH-PL•3)对区分度的基本要求:0.4以上40三、学业成就测验的编制•(一)明确测验的目的以及分类目标•(二)确定测验的题目类型•(三)选择合适的测验内容41明确测验的目的以及分类目标••1)测验总的目的•如:中小学教师资格考试•目的:检测评价考生是否具备从事教师职业的相关教育学和心理学理论与解决教育实践问题的能力。••2)测验的分类目标•A、内容范围•如教育学考试:课程、教学、师生关系、德育等•B、能力层次•如教育学考试:识记、理解、简单运用、综合运用4243目标内容识记理解简单应用综合应用创见合计生物世界3565120资源利用2332010物质与能量7987233气象2484018宇宙2531011地球222208合计182830213100表1初中学生综合理科双向细目表确定测验的题目类型•1)备择式:•选择题、判断题、匹配题、改错题