心理测量学(4).ppt

《心理测量学(4).ppt》由会员分享，可在线阅读，更多相关《心理测量学(4).ppt（26页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、第四讲第四讲 测验的效度测验的效度主要内容主要内容主要内容主要内容一一一一 效度的概念效度的概念效度的概念效度的概念二二二二 效度评估的方法效度评估的方法效度评估的方法效度评估的方法三三三三 效度的功能效度的功能效度的功能效度的功能四四影响效度的因素影响效度的因素影响效度的因素影响效度的因素五五信度和效度的关系信度和效度的关系信度和效度的关系信度和效度的关系一一 效度的概念效度的概念（一）效度的定义（一）效度的定义 在心理测验中，效度是指所测量的与所要在心理测验中，效度是指所测量的与所要测量的心理特点之间的符合程度，或者简测量的心理特点之间的符合程度，或者简单地说是指一个心理测验的单地说是指一

2、个心理测验的准确性准确性。在测验理论中，效度被定义为在一组测量在测验理论中，效度被定义为在一组测量中，与测量目标中，与测量目标有关的真实方差有关的真实方差（或称有（或称有效方差）与总方差的比率。效方差）与总方差的比率。r r2 2xyxy=S=S2 2V VS2X总方差总方差S2X真实方差真实方差S2T误差方差误差方差有关的方差有关的方差 S2V无关的方差无关的方差 S2IS S2 2T T=S=S2 2V V+S+S2 2I IS2X=S=S2 2V V+S+S2 2I I+S+S2 2E Er r2 2xyxy=S=S2 2V V/S2X注：r2xy=代表测量的效度系数，代表测量的效度系数

3、，S2X代表总方差。代表总方差。S2E（二）（二）效度的性质效度的性质1.1.效度具有相对性效度具有相对性 任何测验的效度都是针对一定的目标而任何测验的效度都是针对一定的目标而言。言。(指测量什么有效或没效指测量什么有效或没效)2.2.效度具有连续性效度具有连续性 只有程度上的不同，没有只有程度上的不同，没有“全有全有”或或“全无全无”的区别。的区别。(有效度较高或较低有效度较高或较低)测验效度是测验效度是测验结果测验结果的有效性程度。的有效性程度。二二 效度评估的方法效度评估的方法(一一)内容效度内容效度(二二)构想效度构想效度(三三)效标效度效标效度(一一)内容效度内容效度（Content

4、 Validity)1.1.什么是内容效度什么是内容效度 指的是测验题目对有关内容或指的是测验题目对有关内容或行为取样行为取样的的适用性，从而确定测验是否是想测量的行为领适用性，从而确定测验是否是想测量的行为领域的域的代表性取样代表性取样。这种测验的效度主要与测验内容有关，故而这种测验的效度主要与测验内容有关，故而得名。得名。编制效度较高的量表需要编制效度较高的量表需要:明确概念明确概念;划定行为划定行为;查阅资料查阅资料;方法方法:观察法与访谈法观察法与访谈法取样要有代表性取样要有代表性同质问题同质问题 (强调同质的量表与不必强调同质的量表强调同质的量表与不必强调同质的量表)2.2.内容效度

5、的评估方法内容效度的评估方法 (1)(1)专家判断法专家判断法 专家判断也称专家判断也称“逻辑效度逻辑效度”请专家审阅请专家审阅定义好测验内容的总体范围；定义好测验内容的总体范围；编制双向细目表，确定内容和技能的具体细节各自所占编制双向细目表，确定内容和技能的具体细节各自所占的比例；由每位评判者在评定量表上作出判断。的比例；由每位评判者在评定量表上作出判断。(2)(2)统计分析法统计分析法计算两个评分者之间评定的一致性（评分者信度）计算两个评分者之间评定的一致性（评分者信度）两个测验复本上得分之相关（复本信度）两个测验复本上得分之相关（复本信度）再测法也可用于内容效度的评估（测验再测法也可用于

6、内容效度的评估（测验-学习学习-再测验）再测验）(3)(3)经验推测法经验推测法 这种效度是通过实践来检验效度这种效度是通过实践来检验效度 3.内容效度的特性内容效度的特性 内容效度与所有效度一样，并非普遍适用。内容效度与所有效度一样，并非普遍适用。只有编制者与使用者定义的内容范围相同，只有编制者与使用者定义的内容范围相同，编制者报告的内容效度对使用者才有意义。编制者报告的内容效度对使用者才有意义。内容效度也有时间上的特定性。内容效度也有时间上的特定性。内容效度内容效度(专家的评价专家的评价)与表面效度与表面效度(外行对外行对测验的检查测验的检查)不同。不同。(二二)构想效度构想效度（Cons

7、truct Validity)1.什么是构想效度什么是构想效度 是指测验能够测量到是指测验能够测量到理论上的构思或特质理论上的构思或特质的程度的程度，即测验的结果是否能证实或解释，即测验的结果是否能证实或解释某一某一心理理论心理理论的假设、术语或构思，解释的假设、术语或构思，解释的程度如何。的程度如何。2.2.构想效度的评估方法构想效度的评估方法(1)(1)对测验本身的分析对测验本身的分析 测验的内容效度的可以作为构想效度的证据测验的内容效度的可以作为构想效度的证据 测验的内部一致性指标可以推断测验是测量单一特测验的内部一致性指标可以推断测验是测量单一特质还是测量多种特质。质还是测量多种特质。

8、分析被试者对题目的反应特点也可以作为构想效度分析被试者对题目的反应特点也可以作为构想效度的证据的证据(2)(2)测验间的相互比较测验间的相互比较 相容效度相容效度(成熟测验与研究测验的相关成熟测验与研究测验的相关)是构思效度的一个证是构思效度的一个证据据 区分效度区分效度(测验此有效必然测验彼无效测验此有效必然测验彼无效)是构思效度的又一个是构思效度的又一个证据证据 因素分析法因素分析法也是建立构思效度的常用方法也是建立构思效度的常用方法(3)(3)实验法和观察法证实实验法和观察法证实(三三)效标效度效标效度1.1.什么是效标效度什么是效标效度 亦称实证效度，反映的是测验预测个体在某种情亦称实

9、证效度，反映的是测验预测个体在某种情境下行为表现的有效程度。境下行为表现的有效程度。被预测的行为是检验效被预测的行为是检验效度的标准度的标准,简称为效标简称为效标.由于这种效度是测验对效标由于这种效度是测验对效标预测得如何预测得如何,所以叫效标效度所以叫效标效度.效标资料是否与测验同时获得效标资料是否与测验同时获得,分为分为 同时效度：同时效度：如智力测验以学业为效标如智力测验以学业为效标 预测效度：预测效度：职业测验以职业能力为效标职业测验以职业能力为效标好效标所具备的条件好效标所具备的条件第一第一.效标本身必须有效；效标本身必须有效；第二第二.效标必须具有较高的信度，不随时间等效标必须具有

10、较高的信度，不随时间等因素而变化；因素而变化；第三第三.效标可以客观地加以测量，可用数据或效标可以客观地加以测量，可用数据或等级来表示；等级来表示；第四第四.效标测量的方法简单，省时省力，经济效标测量的方法简单，省时省力，经济实用。实用。2.2.效标效度的评估方法效标效度的评估方法 (1)(1)相关法相关法：相关法是评估效标效度最常用的方法，它是求测验分相关法是评估效标效度最常用的方法，它是求测验分数与效标资料间的相关，这一相关系数称为效度系数。数与效标资料间的相关，这一相关系数称为效度系数。(2)(2)区分法区分法 ：分析高分组与低分组分布的重叠量分析高分组与低分组分布的重叠量.计算每一组内

11、计算每一组内得分超过（或低于）另一组平均数的人数百分比得分超过（或低于）另一组平均数的人数百分比(a)(a)，或者计算两组分布的共同区的百分比或者计算两组分布的共同区的百分比(b)(b)。重叠量越大，。重叠量越大，说明两组分数差异越小，即测验的效度越差。说明两组分数差异越小，即测验的效度越差。(3)(3)命中率法命中率法：命中率法是当测验用来做取舍的依据时，命中率法是当测验用来做取舍的依据时，用其正确决定的比例作为效度指标的一种方法。用其正确决定的比例作为效度指标的一种方法。三三 效度的功能效度的功能(一一)预测误差预测误差(二)预测效标分数预测效标分数(三三)预测效率指数预测效率指数(一一)

12、预测误差预测误差1.1.效度预测误差的表达方式：效度预测误差的表达方式：r rxyxy2 2 效度系数的表达式是效度系数的表达式是r rxyxy2 2，它表示能够正确预测或，它表示能够正确预测或解释效标的测验分数的方差占总方差的比例。解释效标的测验分数的方差占总方差的比例。如效度是如效度是0.80,0.80,测验的总方差中有测验的总方差中有64%64%的方差是的方差是有关方差有关方差,即测验分数正确预测的比率是即测验分数正确预测的比率是64%,36%64%,36%无法作出正确预测无法作出正确预测.2.2.效度预测误差的表达方式：效度预测误差的表达方式：估计标准误估计标准误 估计标准误估计标准误

13、，简写为，简写为SestSest，它是指所有具有某一测验分数，它是指所有具有某一测验分数的被试其效度分数分布的的被试其效度分数分布的标准差标准差，是对真正分数估计的误，是对真正分数估计的误差大小。差大小。估计标准误估计标准误计算公式：计算公式：注：注：S Sy y为效标成绩的标准差为效标成绩的标准差 r r2 2xyxy=1=1时，时，SestSest=0=0，测验分数可完全代替效标；，测验分数可完全代替效标；r r2 2xyxy=0=0时，时，SestSest=S Sy y ，这种情况下测验无异于猜测；，这种情况下测验无异于猜测；大多数情况下，预测误差介于两者之间。大多数情况下，预测误差介于

14、两者之间。关于估计标准误的解释估计标准误的解释同其他标准误的解释一样真正效标分数落在预测效标分数的 1Sest的范围内，有68%的可能性 1.96Sest的范围内，有95%的可能性 2.58Sest的范围内，有99%的可能性 68.26%95.44%99.73%99.99%sest4S-4S-3S-2S-1S1S2s3S(二二)预测效标分数预测效标分数 在测验工作中，人们感兴趣的是从测验分数预测在测验工作中，人们感兴趣的是从测验分数预测效标成绩，因此最常用的是效标成绩，因此最常用的是Y Y对对X X的回归方程（参考的回归方程（参考p365p365）。）。(三三)预测效率指数预测效率指数 预测效

15、率指数预测效率指数的大小表明使用测验比盲目猜测能的大小表明使用测验比盲目猜测能减少多少误差（参考减少多少误差（参考p366p366）。）。四四 影响效度的因素影响效度的因素(一一)测验本身的因素测验本身的因素(二二)测验实施中的干扰因素测验实施中的干扰因素(三三)样本团体的性质样本团体的性质(四四)效标的性质效标的性质(一一)测验本身的因素测验本身的因素 为了提高效度，要做到：1.1.测验材料必须对整个内容具有代表性；测验材料必须对整个内容具有代表性；2.2.测题设计时应尽量避免容易引起误差的题测题设计时应尽量避免容易引起误差的题型（如是非题）；型（如是非题）；3.3.测题难度要适中，具有较高

16、的区分度；测题难度要适中，具有较高的区分度；4.4.测验长度要恰当，即要有一定的测题量；测验长度要恰当，即要有一定的测题量；5.5.测题的排列按先易后难顺序。测题的排列按先易后难顺序。(二二)测验实施中的干扰因素测验实施中的干扰因素1.1.主试的影响因素主试的影响因素 主试不符合标准化要求的任何做法主试不符合标准化要求的任何做法2.2.被试的影响因素被试的影响因素 兴趣、动机、情绪、态度和健康状况等。兴趣、动机、情绪、态度和健康状况等。(三三)样本团体的性质样本团体的性质1.1.样本团体的异质性样本团体的异质性 异质性越高，分数分布范围大，测验效度异质性越高，分数分布范围大，测验效度越高。越高

17、。(1)(1)如果只以选拔出来的被试为样本团体参如果只以选拔出来的被试为样本团体参加研究，会降低测验的效度。加研究，会降低测验的效度。(2)(2)选拔标准太高，样本团体的同质性增加，选拔标准太高，样本团体的同质性增加，会降低测验的效度。会降低测验的效度。2.2.干涉变量干涉变量 包括年龄、性别、教育水平、智力、动机、包括年龄、性别、教育水平、智力、动机、兴趣、职业等。兴趣、职业等。美国心理学家吉塞利（美国心理学家吉塞利（E.E.GhiselliE.E.Ghiselli）寻）寻找干涉变量的方法：找干涉变量的方法：(1)(1)用回归方程求每个人的预测效标分数与用回归方程求每个人的预测效标分数与实际

18、效标分数相比较；实际效标分数相比较；(2)(2)根据样本团体的组成，设立对照组，分根据样本团体的组成，设立对照组，分别计算效度。别计算效度。(3)(3)根据显而易见的干涉变量将其分为预测根据显而易见的干涉变量将其分为预测性高和预测性低的两个亚团体。性高和预测性低的两个亚团体。(四四)效标的性质效标的性质 效标与测验分数之间是否呈线性关系效标与测验分数之间是否呈线性关系(一一次函数关系次函数关系)是很重要的因素。皮尔逊积差是很重要的因素。皮尔逊积差相关系数的前提是假设两个变量的关系是相关系数的前提是假设两个变量的关系是线性的分布。线性的分布。效标测量本身的可靠性如何亦是值得考效标测量本身的可靠性如何亦是值得考虑的问题。虑的问题。五五 信度和效度的关系信度和效度的关系信度是效度的必要而非充分条件信度是效度的必要而非充分条件 效度高，信度必然高；当信度高时，效度不效度高，信度必然高；当信度高时，效度不一定就高。所以说，信度是效度的必要而非充一定就高。所以说，信度是效度的必要而非充分条件分条件。效度是受信度制约的效度是受信度制约的 在同一测验里其信度必然高于效度，至少相等。在同一测验里其信度必然高于效度，至少相等。可见，效度是受信度制约的。可见，效度是受信度制约的。