测量量表的编制和问卷的设计课件.ppt

测量量表的编制测量量表的编制和问卷的设计和问卷的设计中国传媒大学中国传媒大学 调查统计研究所调查统计研究所 柯惠新柯惠新 2006年年11月月主要内容主要内容一、测量的概念一、测量的概念二、常用的测量量表二、常用的测量量表三、对量表的评价三、对量表的评价四、问卷设计技术四、问卷设计技术五、问卷设计示例五、问卷设计示例一、测量的概念一、测量的概念 他的月收入是他的月收入是2700元元 他昨天看了他昨天看了3个小时的电视个小时的电视 他对他对“社区环境社区环境”的满意度评分为的满意度评分为75 一、测量的概念一、测量的概念问题问题1：测量的意义是什么？：测量的意义是什么？“研研究究者者根根据据一一定定的的原原则则，用用符符码码表表现现物物体体、事件或特性事件或特性”（R.D.Wimmer）“测测量量是是根根据据法法则则，对对研研究究对对象象或或事事件件分分配配若干数字若干数字”（S.S.Stevens）。）。符码（符号或数字）、分配、法则符码（符号或数字）、分配、法则 一、测量的概念一、测量的概念问题问题2：变量有哪些类型？有哪些测量级别？：变量有哪些类型？有哪些测量级别？问卷中每一个问答题都对应一个或多个变量问卷中每一个问答题都对应一个或多个变量按作用分（相互关系）：按作用分（相互关系）：自自变变量量-可可以以根根据据研研究究人人员员的的需需要要而而系系统统地地变化或控制的变化或控制的 因因变变量量-研研究究人人员员观观察察和和试试图图解解释释或或估估计计的的对象，其数值可能受到自变量的影响对象，其数值可能受到自变量的影响 中中间间变变量量-既既可可以以当当作作自自变变量量又又可可以以当当作作因因变量的变量变量的变量 一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？按性质分：按性质分：离离散散型型变变量量-只只能能取取有有限限个个数数值值、不能再细分的变量不能再细分的变量 （家家庭庭人人口口数数、性性别别、职职业业、喜喜欢欢收收看看的的电视节目、上网的主要目的）电视节目、上网的主要目的）连连续续型型变变量量-可可以以取取某某个个范范围围内内的的任何数值的变量任何数值的变量 （收入、上网时间长度、满意程度得分）（收入、上网时间长度、满意程度得分）一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？按测量级别分：按测量级别分：1、定定类类变变量量 如如果果所所提提的的问问答答题题的的答答案案只只表表示示类类别别，不不表表示示任任何何数数量量的的顺顺序序或或大大小小，那那么么对对应应的的变变量量就就叫叫做做定定类类变变量量；测测量量的的量量表表就就叫叫做做定定类类量量表表。定定类类变变量量的的取取值值可可以以是是表表示示类类别别的的文文字字，也也可可以以是是数数字字代代码。码。X1=“性别性别”；X1=1(男男)，X1=2(女女)X2=“购物地点购物地点”：X2=1(王府井王府井)，X2=2(西单西单)，.，X2=18(前门前门)适用的统计方法：频数分析、交互分析适用的统计方法：频数分析、交互分析一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？2、定定序序变变量量 如如果果所所提提的的问问答答题题的的答答案案可可以以表表示示重重要要大大小小或或程程度度轻轻重重等等顺顺序序的的先先后后，那那么么对对应应的的变变量量就就叫叫做做定定序序变变量量；测测量量的的量量表表就就叫叫做做定定序序量量表表。定定序序变变量量的的取取值值可可以以是是表表示示顺顺序序的的文文字字，但但一一般般都都是是用用排排序序或或排排名名次的数字形式来表示。次的数字形式来表示。X1=“收入级别收入级别”；X1=1(低低),X1=2(中中),X1=3(高高)X2=“喜欢程度排序喜欢程度排序”：X2=1(第一喜欢第一喜欢)；X2=2(第二喜欢第二喜欢),X2=5(第五喜欢第五喜欢)一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？2、定序变量定序变量 可以指出被访者在顺序评价时给出的相对位置可以指出被访者在顺序评价时给出的相对位置 但是不能判断这些相对位置之间的绝对距离但是不能判断这些相对位置之间的绝对距离 适用的统计方法：频数分析、交互分析、适用的统计方法：频数分析、交互分析、中位数、中位数、百分位数、百分位数、秩相关系数秩相关系数一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？3、定定距距变变量量 如如果果所所提提的的问问答答题题的的答答案案可可以以表表示示绝绝对对数数值值的的大大小小，那那么么对对应应的的变变量量就就叫叫做做定定距距变变量量；测测量量的的量量表表就就叫叫做做定定距距量量表表。定定距距变变量量的的取值用数字形式表示。取值用数字形式表示。X1=“温度温度”；X1=20(度度)；X1=0(度度)；X1=-2(度度)X2=“喜欢程度得分喜欢程度得分”X2=1(很不喜欢很不喜欢)，X2=2(不太喜欢不太喜欢)，X2=3(一般一般)，X2=4(比较喜欢比较喜欢)，X2=5(非常喜欢非常喜欢)一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？3、定距变量定距变量 不但可以指出被访者在评价时给出的相对位置不但可以指出被访者在评价时给出的相对位置 还能判断这些相对位置之间的绝对距离还能判断这些相对位置之间的绝对距离 零点位置不是固定的零点位置不是固定的适用的统计方法：不涉及比值计算的所有统计方法适用的统计方法：不涉及比值计算的所有统计方法一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？4、定定比比变变量量 如如果果所所提提的的问问答答题题的的答答案案可可以以表表示示绝绝对对数数值值的的大大小小，而而且且零零点点也也是是有有意意义义的的话话，那那么么对对应应的的变变量量就就叫叫做做定定距距变变量量；测测量量的的量量表表就就叫做叫做定比量表定比量表。X1=“收入收入”:X1=1200(元元),X1=800(元元),等等 X2=“上网时间上网时间”:X2=90(分分),X2=60(分分),X2=0(分分),等等一、测量的概念一、测量的概念问题问题2：变量有哪些类型？：变量有哪些类型？4、定比变量定比变量 具有定类、定序和定距量表的所有性质具有定类、定序和定距量表的所有性质 除此之外，还具有绝对的零点除此之外，还具有绝对的零点 所有的统计方法，都适用于定比量表。所有的统计方法，都适用于定比量表。一、测量的概念一、测量的概念问题问题3：什么是概念和构造？：什么是概念和构造？概概念念（concept）是是指指对对具具体体现现象象作作普普遍遍性性的的抽象解释抽象解释媒介使用媒介使用(media usage)、可读性可读性(readability)、经济地位经济地位(economical level)、人格人格(personality)现代化现代化(modernization)、创造性创造性(creativity)女性魅力女性魅力(charm)、一、测量的概念一、测量的概念问题问题3：什么是概念和构造？：什么是概念和构造？构构造造(construct)是是为为特特殊殊的的研研究究目目的的而而设设计计的的高高度度抽抽象象的的、一一般般无无法法直直接接观观察察到到的的概概念念。构构造造是是概念的组合，可以分解成较低层次的不同概念。概念的组合，可以分解成较低层次的不同概念。社会阶层社会阶层（经济地位、政治地位、社会地位）经济地位、政治地位、社会地位）对奥运会的态度对奥运会的态度（民族意识、经济观念、个人生活）（民族意识、经济观念、个人生活）现现代代化化（竞竞争争意意识识、时时间间意意识识、效效率率意意识识、求求知知意意识识、自主意识、创新意识）自主意识、创新意识）女女性性魅魅力力（容容貌貌、发发型型、服服装装、饰饰品品、体体态态、声声音音、气气味、健康、修养、成就）味、健康、修养、成就）-中国美容时尚报中国美容时尚报社长：张晓梅社长：张晓梅开放性开放性 （接受新事物？学习？参与？、。）（接受新事物？学习？参与？、。）一、测量的概念一、测量的概念问题问题4：如何测量抽象的概念或构造？：如何测量抽象的概念或构造？并不是所有的概念或构造都可以直接测量的并不是所有的概念或构造都可以直接测量的 并不是所有事物都能量化的并不是所有事物都能量化的测量概念测量概念 将抽象的定义转化为操作性定义将抽象的定义转化为操作性定义 以具体的方式来表达抽象的概念以具体的方式来表达抽象的概念测量构造测量构造 将构造分解成几个较低层次的不同概念将构造分解成几个较低层次的不同概念一、测量的概念一、测量的概念问题问题4：如何测量抽象的概念或构造？：如何测量抽象的概念或构造？操作性定义实例操作性定义实例二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？1、李克、李克特特量表（量表（Likert scale）也叫做累加量表也叫做累加量表(Summative scale)最常用的定距量表最常用的定距量表 常用于测量观念、态度或意见常用于测量观念、态度或意见 需要构造大量的陈述或说法需要构造大量的陈述或说法(statement)用用5级记分的方式来测量同意的程度级记分的方式来测量同意的程度 “非常同意非常同意”、“同意同意”、“说不准说不准”、“不同意不同意”、“很不同意很不同意”二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表问题问题5-1 构造李克量表的主要步骤和要点是什么？构造李克量表的主要步骤和要点是什么？收集和编写大量围绕研究问题的陈述或说法收集和编写大量围绕研究问题的陈述或说法 各种陈述和说法应当比较分散，以覆盖所研究问题的各种陈述和说法应当比较分散，以覆盖所研究问题的 一个足够宽的范围一个足够宽的范围 应当有一定的把握使大部分被访者不至于只选中间点应当有一定的把握使大部分被访者不至于只选中间点 有些说法是正向表述的，有些是负向的；在需要计算累有些说法是正向表述的，有些是负向的；在需要计算累 加的态度总分时，需要对负向说法的得分作逆向处理加的态度总分时，需要对负向说法的得分作逆向处理 随机地抽取一个小样本进行试调查随机地抽取一个小样本进行试调查 根据试调查的数据进行量表的信度和效度分析根据试调查的数据进行量表的信度和效度分析 根据分析的结果，去除影响信度和效度的陈述或说法，根据分析的结果，去除影响信度和效度的陈述或说法，从而得到有较高信度和效度的李克量表从而得到有较高信度和效度的李克量表二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、舍史东量表（、舍史东量表（Thurstone scale）也叫间隔均等出现量表也叫间隔均等出现量表 （Equal-appearing interval scale）是一种定距量表是一种定距量表 主要用于测量被访者对特定概念的态度主要用于测量被访者对特定概念的态度二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表问题问题5-2 构造舍史东量表的主要步骤和要点是什么？构造舍史东量表的主要步骤和要点是什么？收收集集和和编编写写大大量量与与所所测测概概念念有有关关的的陈陈述述或或说说法法（至至少少100种），其表述应有正向的、中间的和负向的种），其表述应有正向的、中间的和负向的 选选定定25 50位位评评分分者者或或裁裁判判，按按照照11级级的的定定距距量量表表给给出出他他们们对对每每一一种种说说法法的的的的赞赞成成程程度度的的得得分分，其其中中1表表示示“最最不不赞赞成成”、11表表示示“最最赞赞成成”，得得分分越越高高，赞赞成成该该说法的程度就越强说法的程度就越强 计计算算每每种种说说法法的的平平均均得得分分和和标标准准差差，按按平平均均值值的的大大小小分分布布将将这这些些说说法法分分成成若若干干组组，有有些些学学者者建建议议要要分分成成20 30组；有些认为可以少一些组；有些认为可以少一些二、常用的测量量表二、常用的测量量表问题问题5-2 构造舍史东量表的主要步骤和要点是什么？构造舍史东量表的主要步骤和要点是什么？从从每每一一组组中中筛筛选选出出一一种种说说法法，原原则则是是评评分分差差异异较较小小的的（标标准准差差小小）能能代代表表某某种种态态度度的的说说法法；同同时时这这些些说说法法的的平平均均得得分分之之间间的的差差异异间间隔隔是是相相近近的的。例例如如可可考考虑虑取取平平均均得得分分分分别别接接近近1.5,2.0,2.5,3.0,10.5的的20种种说法说法 以以筛筛选选出出来来的的说说法法组组成成新新的的定定距距量量表表，其其中中每每一一种种说说法法对对应应一一个个“同同意意”的的得得分分（“不不同同意意”对对应应0分分），被被访访者者只只需需选选出出其其同同意意的的说说法法，则则所所有有说说法法得得分分的的平平均均值值即即为该被访者对所测概念的态度得分为该被访者对所测概念的态度得分二、常用的测量量表二、常用的测量量表问题问题5-2 构造舍史东量表的主要步骤和要点是什么？构造舍史东量表的主要步骤和要点是什么？优点：优点：使用定距量表测量使用定距量表测量 方便被访者回答方便被访者回答缺点：缺点：编制太麻烦编制太麻烦 在社会调查研究中较少应用在社会调查研究中较少应用 多用于心理学和教育学的研究多用于心理学和教育学的研究二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、古古特曼量表（特曼量表（Guttman scale）也叫做累积量表（也叫做累积量表（Cumulative scale）可看成是一种定距量表或定序量表可看成是一种定距量表或定序量表 也要通过相当复杂的程序才能编制成功也要通过相当复杂的程序才能编制成功二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、古古特曼量表特曼量表（Guttman scale）的特点的特点 按被访者的态度强度来排列各种说法的次序按被访者的态度强度来排列各种说法的次序 如果某位被访者同意或接受某种说法如果某位被访者同意或接受某种说法 那么也会同意或接受该说法之前那么也会同意或接受该说法之前(之后之后)的说法的说法 被访者的答案呈阶段型或金字塔型被访者的答案呈阶段型或金字塔型二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、古古特曼量表（特曼量表（Guttman scale）举例举例 电视剧中的不良情节对社会有害无益电视剧中的不良情节对社会有害无益 不应该让儿童观看有不良情节的电视剧不应该让儿童观看有不良情节的电视剧 电视台不应该允许播放有不良情节的电视剧电视台不应该允许播放有不良情节的电视剧 政府应该禁止电视台播放有不良情节的电视剧政府应该禁止电视台播放有不良情节的电视剧 二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、古古特曼量表（特曼量表（Guttman scale）编制和测试十分复杂编制和测试十分复杂 一般性的社会调查研究中很少使用一般性的社会调查研究中很少使用 在社会学和人类学的研究中比较常用在社会学和人类学的研究中比较常用二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？、语意差别量表、语意差别量表 （Semantic differential scale）是定距量表是定距量表 用于测量某种事物、概念或实体在人们用于测量某种事物、概念或实体在人们 心目中的形象心目中的形象 一份报纸、一个电台、一个电视台、某个电视节目、一份报纸、一个电台、一个电视台、某个电视节目、某个广告、某个明星、某个机构某个广告、某个明星、某个机构/部门、某种概念部门、某种概念二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表问题问题5-3 构造语意差别量表的主要步骤和要点是什么？构造语意差别量表的主要步骤和要点是什么？确确定定描描述述、判判断断或或评评价价所所研研究究对对象象时时使使用用的的重重要要属属性性。例例如如，评评价价报报纸纸的的主主要要属属性性可可能能包包括括客客观观、公公正正、诚诚实实、时时效效、好好看看，等等等等。尽尽量量确确保保既既不不遗遗漏漏重重要要的的属属性性、又又不不包括与所测概念无关的属性包括与所测概念无关的属性 确确定定若若干干对对描描述述这这些些属属性性的的语语意意相相反反的的形形容容词词，例例如如客客观观的的/主主观观的的、公公正正的的/偏偏袒袒的的、诚诚实实的的/欺欺骗骗的的、及及时时的的/过时的、有意思的过时的、有意思的/乏味的，等等乏味的，等等 将将各各对对形形容容词词分分别别置置于于一一系系列列有有七七个个刻刻度度的的标标尺尺的的两两端端，将将正正反反形形容容词词之之间间的的差差距距分分成成七七个个等等级级，中中间间的的那那一一级级表表示态度中立示态度中立 被被访访者者按按照照对对所所测测对对象象的的第第一一印印象象，在在每每一一个个标标尺尺上上勾勾选相应的答案选相应的答案二、常用的测量量表二、常用的测量量表、语意差别量表、语意差别量表优点：优点：编制和使用都相对比较简单编制和使用都相对比较简单 可以清楚地、有效地描绘和比较形象可以清楚地、有效地描绘和比较形象缺点：缺点：确定形容词的反义词常常并不是容易的事确定形容词的反义词常常并不是容易的事二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？5、形容词核对名单、形容词核对名单 （Adjective Check List）是定类量表（生成二分数据）是定类量表（生成二分数据）用于测量某种事物、概念或实体在人们用于测量某种事物、概念或实体在人们 心目中的形象心目中的形象 一份报纸、一个电台、一个电视台、某个电视节目、一份报纸、一个电台、一个电视台、某个电视节目、某个广告、某个明星、某个机构某个广告、某个明星、某个机构/部门、某种概念部门、某种概念二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表问题问题5-4 使用形容词核对名单的主要步骤和要点？使用形容词核对名单的主要步骤和要点？确定描述、判断或评价所研究对象时使用的重要属性。确定描述、判断或评价所研究对象时使用的重要属性。例如，评价工作的主要属性可能包括难易性、趣味性、例如，评价工作的主要属性可能包括难易性、趣味性、安全性、报酬、价值、社会评价、等等。尽量确保既安全性、报酬、价值、社会评价、等等。尽量确保既 不遗漏重要的属性、又不包括与所测概念无关的属性不遗漏重要的属性、又不包括与所测概念无关的属性 确定若干描述这些属性的形容词，每一个属性可以用确定若干描述这些属性的形容词，每一个属性可以用 一个或几个形容词一个或几个形容词 被访者按照对所测对象的第一印象，勾选相应的答案被访者按照对所测对象的第一印象，勾选相应的答案二、常用的测量量表二、常用的测量量表 5、形容词核对名单、形容词核对名单 优点：优点：编制和回答都相对简单编制和回答都相对简单 可以包含大量的形容词可以包含大量的形容词缺点：缺点：只知道是否选择了某个形容词，不知道只知道是否选择了某个形容词，不知道 该形容词描述形象的程度（二分数据）该形容词描述形象的程度（二分数据）二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？6、斯塔普量表（、斯塔普量表（The“Stapel”Scale）是定距量表是定距量表 用于测量某种事物、概念或实体在人们用于测量某种事物、概念或实体在人们 心目中的形象心目中的形象 一份报纸、一个电台、一个电视台、某个电视节目、一份报纸、一个电台、一个电视台、某个电视节目、某个广告、某个明星、某个机构某个广告、某个明星、某个机构/部门、某种概念部门、某种概念二、常用的测量量表二、常用的测量量表-问题问题5：社会调研中常：社会调研中常用的量表有哪些？构造这些量表的主要步骤和要点是什么？用的量表有哪些？构造这些量表的主要步骤和要点是什么？二、常用的测量量表二、常用的测量量表问题问题5-5 使用斯塔普量表的主要步骤和要点？使用斯塔普量表的主要步骤和要点？确定描述、判断或评价所研究对象时使用的重要属性。确定描述、判断或评价所研究对象时使用的重要属性。例如，评价工作的主要属性可能包括难易性、趣味性、例如，评价工作的主要属性可能包括难易性、趣味性、安全性、报酬、价值、社会评价、等等。尽量确保既安全性、报酬、价值、社会评价、等等。尽量确保既 不遗漏重要的属性、又不包括与所测概念无关的属性不遗漏重要的属性、又不包括与所测概念无关的属性 确定若干描述这些属性的形容词，每一个属性可以用确定若干描述这些属性的形容词，每一个属性可以用 一个或几个形容词一个或几个形容词 被访者按照对所测对象的第一印象，针对每一个形容词，被访者按照对所测对象的第一印象，针对每一个形容词，根据其符合所评价对象的程度，从根据其符合所评价对象的程度，从1到到7中选择一个适当中选择一个适当 的数字，数字越大，符合程度越高的数字，数字越大，符合程度越高二、常用的测量量表二、常用的测量量表 6、斯塔普量表、斯塔普量表 优点：优点：不需要正、反义词不需要正、反义词(与语义差别量表相比与语义差别量表相比)可以提供更高质量的数据可以提供更高质量的数据(与形容词核对名单相比与形容词核对名单相比)缺点：缺点：比较复杂比较复杂三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题6：如何评价所设计的量表？：如何评价所设计的量表？信度（信度（reliability）若重复进行测量，产生相同结果的准确程度若重复进行测量，产生相同结果的准确程度 测量的可靠性、稳定性和预测性测量的可靠性、稳定性和预测性 测量的精确度测量的精确度 反复测量结果的稳定性或一致性可能很高反复测量结果的稳定性或一致性可能很高 但却可能是不准确的但却可能是不准确的 用零点没有调整在中心的秤来测量重量用零点没有调整在中心的秤来测量重量 采用有明显导向性的问答题组成的量表测量态度采用有明显导向性的问答题组成的量表测量态度三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题6：如何评价所设计的量表？：如何评价所设计的量表？效度（效度（validity）所测量的是不是研究者所想要的所测量的是不是研究者所想要的 在多大程度上给出了他在多大程度上给出了他/她所想要的她所想要的例如，研究者希望测量电视广告的传播效果例如，研究者希望测量电视广告的传播效果目的：目的：了解广告能否引起目标消费群的购买欲望了解广告能否引起目标消费群的购买欲望 消费者的购物决策是否与观看的电视广告相关消费者的购物决策是否与观看的电视广告相关如果：如果：最终测得的不是广告对消费者购物决策的影响最终测得的不是广告对消费者购物决策的影响 而主要是消费者对广告艺术感染力的评价而主要是消费者对广告艺术感染力的评价结论：结论：所用量表是无效的或是效度很低的所用量表是无效的或是效度很低的三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题6：如何评价所设计的量表？：如何评价所设计的量表？信度高时效度不一定高信度高时效度不一定高 但效度高时信度一定高但效度高时信度一定高三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？从三个方面来分析测量的信度从三个方面来分析测量的信度 稳定性稳定性(stability)内在一致性内在一致性(internal consistency)等价性等价性(equivalency)三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？1、稳定性分析、稳定性分析 也叫做测验也叫做测验-再测验法再测验法目的：目的：考察对于同样的问答题（或测试）考察对于同样的问答题（或测试）对同一组被访者或受测试者对同一组被访者或受测试者 前后两次测量的结果是否基本一致前后两次测量的结果是否基本一致三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？1、稳定性分析、稳定性分析方法：方法：用用“再测信度再测信度”来测量稳定性来测量稳定性再测信度：再测信度：两次测量结果间的相关系数两次测量结果间的相关系数 相关系数越接近相关系数越接近 1，表示稳定性越好，表示稳定性越好三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？1、稳定性分析、稳定性分析缺点：缺点：一般应用中很难真正实现一般应用中很难真正实现（人力、财力、时间）（人力、财力、时间）再测信度的应用有局限性再测信度的应用有局限性 第一次的测量可能会影响到第二次第一次的测量可能会影响到第二次（信度偏高）（信度偏高）两次测量间客观的情况可能有变化两次测量间客观的情况可能有变化（信度偏低）（信度偏低）三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析 目的：目的：检验多项目量表中各个项目的一致性检验多项目量表中各个项目的一致性 可信的量表的项目必须具有内在一致性可信的量表的项目必须具有内在一致性三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析方法之一：折半法方法之一：折半法 (split-half technique)将量表中的项目分成两半将量表中的项目分成两半 计算这两部分的总得分的相关系数计算这两部分的总得分的相关系数rh 如果量表具有较高的内在一致性如果量表具有较高的内在一致性 那么这两部分应该是高度相关的那么这两部分应该是高度相关的三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析方法之一：折半法方法之一：折半法 (split-half technique)优点：不需要重复的测量优点：不需要重复的测量常用分法：按项目号的前后顺序分常用分法：按项目号的前后顺序分 或按项目号的奇偶性分或按项目号的奇偶性分计算公式：计算公式：ru=2rh/(1+rh)三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析方法之一：折半法方法之一：折半法 (split-half technique)注意：需先将量表中的反意题作逆向处理注意：需先将量表中的反意题作逆向处理 再分别计算两部分的总得分再分别计算两部分的总得分前提假设：前提假设：两半题项得分方差大致相等两半题项得分方差大致相等 否则可能会低估信度系数否则可能会低估信度系数三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析方法之二：方法之二：alpha信度系数法信度系数法 克朗巴哈提出用克朗巴哈提出用系数来测量累加量表的信度系数来测量累加量表的信度 =K(1-i2/T2)/(K-1)K K 量表中题（项目）的总数量表中题（项目）的总数 i i2 2 第第i i个题（项目）得分的题内方差个题（项目）得分的题内方差 i i2 2 K K个题项的方差之和个题项的方差之和 T T2 2 总得分（所有题项得分之和）的方差总得分（所有题项得分之和）的方差信度系数是评估量表内部一致性的比较常用系数信度系数是评估量表内部一致性的比较常用系数三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析方法之三：平均相关系数法方法之三：平均相关系数法缺点：偏重于项目之间的相关缺点：偏重于项目之间的相关 而不是整个量表的信度而不是整个量表的信度 项目越多，平均相关系数就可能越高项目越多，平均相关系数就可能越高提高信度的方法之一：提高信度的方法之一：增加量表中的测量项目增加量表中的测量项目 因为各个项目的随机误差可能会相互抵消因为各个项目的随机误差可能会相互抵消 三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？2、内在一致性分析、内在一致性分析小结：小结：信度的高低既依赖于项目的内在一致性信度的高低既依赖于项目的内在一致性 也依赖于量表的长度也依赖于量表的长度因此：因此：一方面尽量设计内在相关性更高的项目一方面尽量设计内在相关性更高的项目 另一方面也可以考虑适当增加项目的数量另一方面也可以考虑适当增加项目的数量三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析A 当当使使用用两两种种不不同同的的量量表表去去测测量量同同一一概概念念时时，这这两种量表是否等价？两种量表是否等价？方方法法：在在同同一一时时段段中中，让让同同一一组组被被访访者者接接受受两两种种量量表表的测试；计算两组得分之间的相关，用于评价信度的测试；计算两组得分之间的相关，用于评价信度B 当当两两个个评评分分者者（或或编编码码员员）判判断断同同一一现现象象时时，评价结果是否一致？评价结果是否一致？方方法法：计计算算两两个个评评分分者者评评分分之之间间的的相相关关；或或计计算算两两个个编码员编码结果一致的比例，用于评价信度编码员编码结果一致的比例，用于评价信度三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析 前前一一种种应应用用A比比较较少少见见（构构造造等等价价的的量量表表非常困难）非常困难）后一种应用后一种应用B比较常见，也称为比较常见，也称为 评分者内在信度评分者内在信度 (inter-rater reliability)编码员间信度编码员间信度 (inter-coder reliability)三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析在内容分析中，要评价编码员间信度在内容分析中，要评价编码员间信度 编码：编码：将分析单位（如单词、符号、主题等）将分析单位（如单词、符号、主题等）置于各种内容类别中置于各种内容类别中 不同的编码者独立地编码不同的编码者独立地编码 如果能得到比较一致的结果如果能得到比较一致的结果 则信度较高则信度较高三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析-编码者间信度的计算公式编码者间信度的计算公式霍斯提霍斯提(Holsti)公式公式 假假定定两两个个编编码码员员分分别别同同时时做做了了m1和和m2个个单位的编码，其中一致的编码数为单位的编码，其中一致的编码数为m，则则 编码者间信度编码者间信度=2m/(m1+m2)三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析-编码者间信度的计算公式编码者间信度的计算公式霍斯提霍斯提(Holsti)公式公式优点：计算简单、易于操作优点：计算简单、易于操作缺点：信度的大小可能与编码时所用的类别的数目有关缺点：信度的大小可能与编码时所用的类别的数目有关 类别的数目越少，由于偶然性而造成一致的可能性就越大类别的数目越少，由于偶然性而造成一致的可能性就越大 编码问题都是两个类别时，随机的编码也可能有编码问题都是两个类别时，随机的编码也可能有50%的信度的信度 在五个类别的情况，随机的编码就只可能有在五个类别的情况，随机的编码就只可能有20%左右的信度左右的信度三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析-编码者间信度的计算公式编码者间信度的计算公式史考特史考特(Scott)指数指数编码员间信度编码员间信度=(o-e)/(1-e)=(o-e)/(1-e)oo：观测到的观测到的一致性或叫实际一致性（一致性或叫实际一致性（用用霍斯提公式霍斯提公式计算）计算）ee：纯粹由于纯粹由于偶然性偶然性而造成的一致性或叫期望一致性而造成的一致性或叫期望一致性 （等于每个类别出现的相对频率的平方和）等于每个类别出现的相对频率的平方和）三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪些常用的方法？：信度分析有哪些常用的方法？3、等价性分析、等价性分析-编码者间信度的计算公式编码者间信度的计算公式 利用霍斯特公式计算时，一般信度在利用霍斯特公式计算时，一般信度在90%90%或以上或以上 利用史考特公式计算时，信度大都是利用史考特公式计算时，信度大都是75%75%或以上或以上考察编码员内考察编码员内(intra-coder)(intra-coder)信度时信度时 让同一个编码员在不同的时间内对同一个资料编码两次让同一个编码员在不同的时间内对同一个资料编码两次 然后借助以上公式计算编码然后借助以上公式计算编码-再编码信度再编码信度 将上式中对应两个编码员的数据，将上式中对应两个编码员的数据，改为同一编码员的两次数据改为同一编码员的两次数据 三、对量表的评价（信度、效度）三、对量表的评价（信度、效度）问题问题7：信度分析有哪