5.3ReliabilityandValidityPrecisionandaccuracyareobviouslyimportantqualitiesinresearchmeasurement,andtheyprobablyneednofurtherexplanation.Whensocialscientistsconstructandevaluatemeasurements,however,theypayspecialattentiontotwotechnicalconsiderations:reliabilityandvalidity.A.Reliability.Thatqualityofmeasurementmethodthatsuggeststhatthesamedatawouldhavebeencollectedeachtimeinrepeatedobservationsofthesamephenomenon.Re-measurementreliability(再测信度)Duplicatereliability(复本信度)Foldedreliability(折半信度)B.ValidityValidityreferstotheextenttowhichanempiricalmeasureadequatelyreflectstherealmeaningoftheconceptunderconsideration.Criterion-relatedvalidity(准则效度)isbasedonsomeexternalcriterion.Contentvalidity(内容效度)referstothedegreetowhichameasurecoverstherangeofmeaningsincludedwithintheconcept.Forexample,atextofmathematicalabilitycannotbelimitedtoadditionalonebutwouldalsoneedtocoversubtraction,multiplication,division,andsoforth.Constructvalidity(构造效度)isbasedonthewayameasurerelatetoothervariableswithinasystemoftheoreticalrelationships.RelationsbetweenReliabilityandValiditya.reliablebutnotvalidb.validbutnotreliableC.validandreliableChapter6Questionnaire6.1TypesandStructureofQuestionnaire6.2QuestionnaireConstruction第六章问卷法第一节问卷法及其特点第二节问卷的类型与结构第三节问卷设计中的原则与步骤第四节问题及答案的设计第五节问卷的发放与回收第一节问卷法及其特点资料收集方法有问卷法、访问法、观察法等。问卷法则是运用统一设计的问卷向被调查者了解情况,征询意见的资料收集方法。返回首页所谓问卷,是社会调查中用来收集资料的一种工具。它的形式是一份精心设计好的问题表格,它的用途在于测量人们的行为、态度和特征。问卷法是社会调查中最常用的资料收集方法。问卷法的优点:省时、省钱、省力。问卷法得到的资料便于定量处理和分析。可以避免主观偏见,减少误差。具有很好的匿名性。问卷法的缺点:要求回答者有一定的文化水平。问卷的回收率往往难以保证。资料的质量难以保证。返回第一节第二节问卷的类型与结构问卷的主要类型:问卷大致可分为自填问卷和访问问卷。访问问卷是由访问员根据被调查者的口头回答来填写的事先设计好的调查问卷。自填问卷又分邮寄问卷和发送问卷两种。返回首页TypesandFormatsofQuestionnaire(1)Questionnaire(问卷):adocumentcontainingquestionsandothertypesofitemsdesignedtosolicitinformationappropriatetoanalysis.1.TypesofQuestionnaireSelf-administeredquestionnaireandinterviewer-administeredquestionnaire(自填问卷与访问问卷)Questionnairesmaybecompletedbytherespondentsthemselvesorbyinterviewerswhoreadtheitemstorespondentsandrecordtheanswers.问卷的基本结构:问卷通常包括封面信、指导语、问题及答案、编码等。1、封面信:一封给被调查者的短信。以二、三百字为最好。言简意赅地向被调查者介绍和说明调查者的身份、调查的内容、目的和意义等。赢得信任,争取合作。封面信(身份、内容、目的、选取方法、保密措施、感谢)2、指导语:用来指导被调查者填写问卷的一则说明,也称“填表说明”。它是对填表的方法、要求、注意事项等作一个总的说明,语言要简明易懂,还应考虑到回答者可能从未填写过问卷。亲爱的同志:您好!经济体制改革关系到千家万户的生活,影响每个人的切身利益,它引起人们的普遍关注。为了搞好改革,XX(单位)决定开展全国规模的调查,以了解劳动者的劳动和福利状况,为劳动工资制度改革提供决策依据,使改革能够符合广大群众的意愿。因此,我们诚恳地希望得到您的支持和合作,请将您的真实情况和想法提供给我们。本问卷不记姓名,问卷中问题的答案无所谓对错,您的回答我们将按国家统计法予以保密,请您不必有任何顾虑。占用了您宝贵的时间,向您致以深切的谢意!XXXXXX(单位)XX年XX月XX日指导语:说明填表的方法、要求、注意事项下面每题有七个选项,每个数字所代表的含义对应如下:1.完全符合2.比较符合3.不好说4.比较不符合5.完全不符合请您凭直觉尽快从中选出一个与您的观点或行为相符合的答案,注意选择时尽量避免选4,且请尽量回答每一问题,千万不要遗漏,谢谢!填表说明:①凡符合您的情况和想法的项目,请在答案前面的方框“口”中画√,或在横线中填写。②如果没有特别注明,则问卷中题目一般都是单项选择题,只有一个答案。多个答案的地方,我们会在题目后面注出。③每页右边的一行数字和短横线上的数字是我们编码录人计算机用的,您不必填写。还有些指导语分散在某些较为复杂的调查问题后面,对填答要求、方式和方法进行说明。3、问题和答案。这是问卷的主体部分。问卷中的其他部分如封面信、指导语等都是为问题及答案服务的。开放式、封闭式4、编码及其他资料。所谓编码,是给每一个问题和答案编上数码,这是便于输入计算机进行统计处理和定量分析。返回第二节问题的形式从形式上可划分为封闭式与开放式问题。封闭式问题是指在给出问题的同时,还给出若干个固定的答案,让被调查者根据自己的实际情况选择答案。开放式问题,即不为回答者提供具体答案,只需提出问题,而由回答着自由填答。一般来讲,问卷设计中的问题是以封闭式问题为主。二者都有优缺点。返回首页封闭式:事先对回答作了限制性规定1.您对这种远程学习方式适应吗?1.是2.否2.学校提供的上网服务适合您的需要吗?1.非常适合2.基本适合3.不好说4.基本不适合5.非常不适合开放式:事先未对回答作限制性规定,答卷者可自由回答。1.在学校提供的服务中,哪些您喜欢,哪些您不喜欢,还需要增加哪些服务?2.您为什么要选择开放式学校学习?开放式与封闭式的比较开放式封闭式探索性意外结果(优点)受限定,无新发现创造性回答深入(优点)标准化(优点)适用于小样本(优点)样本大(优点)容易混答、不答混入无关信息回答具体、可信度高(优点)非标准,难以量化比较易于统计分析对比(优点)回答麻烦、易被拒绝易回答,回收率高(优点)案例:调查问卷封面信亲爱的同志:早上/下午/晚上好!我叫,是×××公司的访问员。我们是一家独立的调查公司。我们目前正在做一项关于×××的研究,目的是听取不同人对不同事情的看法。你是否愿意花一些时间回答一些问题呢?×××市场咨询有限公司2005年6月讨论这封封面信是否符合要求?为什么?第三节问卷设计中的原则与步骤一、问卷设计中的原则:适合性原则有效性原则可行性原则返回首页适合性原则问题的数目及难易程度应为被调查者接受和理解;问卷的内容也应适合被调查者。有效性原则问卷的问题必须围绕研究课题和研究假设进行设计,凡是对于研究课题及其理论假设来说是多余的问题,都必须删去,可有可无的问题,一律不列入问卷。可行性原则问卷调查需要被调查者的密切合作,因此,设计的问题必须符合被调查者回答问题的能力和意愿,凡是被调查者不可能了解、不可能理解、不愿意回答的问题都不应提出。二、问卷设计中的步骤初步探索、设计问卷初稿、试用与修改。1、初步探索。在初步探索阶段,首先要确定研究题目,然后提出理论假设,再找出理论假设所涉及的变量以及测量这些变量的指标,这也是将理论假设操作化的过程。2、设计问卷初稿。经过探索性工作,对所要调查的问题的可能的答案有了初步的认识,就可以动手设计初稿了。设计方法:一是卡片法;二是框图法。卡片法(部分到整体)一问题记录到一卡片卡片分类每类卡片排序类型间排序框图法(整体到部分)先分类列出每一类的问题、答案筛选问题、答案并排序3、试用和修改。任何调查问卷是不可能一次设计成功的,往往要经过若干次的修改。试用问卷初稿有两种具体方法:一是客观检验法;回收率、有效回收率、填答不全:填写错误:理解内容上、答题方式上二是主观评价法,专家学者返回底三节第四节问题及答案的设计一、问题的形式1.从形式上可划分为封闭式与开放式问题。2、从内容上可划分为特征问题、态度问题、行为问题。返回首页特征问题指那些用来测量被调查者基本情况的问题。是反应个人的社会特征的资料,也叫静态资料,这是问卷中不可缺少的部分。行为问题指那些用来测量被调查者过去发生的和现在正在进行的某些实际行为和有关事件的问题,也叫动态资料。态度问题,指那些测量被调查者对某一事物的看法、意愿、态度、情感、认识等主观因素的问题。二、问题形式的设计1、填空式。您的民族:——族您有几个孩子?——个您的文化程度?——2、是否式。你是大学生吗?是◿不是◿您有手机吗?有◿没有◿3、多项单选式您的文化程度是:1、小学2初中3高中4中专5大专以上4、多项多选式1.您最喜欢看哪些电视节目?(请从下列答案中选择三项在括号内打√)①新闻节目②电视剧③体育节目④广告节目⑤教育节目⑥歌舞节目⑦少儿节目⑧其他节目(请写明)——2.您及您的家人常去此医院看病的主要理由是(可多选):①医疗技术高②服务好③熟悉此医院的医生④收费合理⑤交通方便⑥舒适的环境⑦其他(若您填的是其他,请您将原因填完整)____5、多项排序式(1)请按您喜欢的程度,将以下面对面的教学方式排序:1.系统讲授2.总结归纳3.讨论4.答疑5.辅导6.其他第一:第二:第三:(2)对下列情况比较而言,您难以忍受的前三种情况依次是:____、_____、_____.1、贫困2、劳累3、误解4、欺负5、无安全感6、无朋友7、挫折8、其他6、矩阵式当询问若干个具有相同答案形式的问题时,我们可以将问题设计成矩阵的形式。你觉得下列现象在你们学校是否严重?(请在每一行适当的格中打√)很严重比较严重不太严重不严重不知道迟到◿◿◿◿◿早退◿◿◿◿◿旷课◿◿◿◿◿您和您父母的文化程度:小学初中高中中专大专以上您自己您父亲您母亲7、表格式是矩阵式的一种延伸,形式类似于矩阵。8、相倚问题在问卷设计时,会遇到这样的情况,有些问题只适用于一部分调查对象,而且这类问题是否适用于某个回答者,要依据他对前面的某个问题的回答而定。1.您的孩子是独生子女吗?()1是的