信度与随机误差讲稿.ppt

《信度与随机误差讲稿.ppt》由会员分享，可在线阅读，更多相关《信度与随机误差讲稿.ppt（26页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、信度与随机误差信度与随机误差第一页，讲稿共二十六页哦l误差与测量的准确性和稳定性误差与测量的准确性和稳定性 误差就是在测量中与目的无关的因素所产生的误差就是在测量中与目的无关的因素所产生的不准确或不一致的效应。不准确或不一致的效应。 准确性与一致性的关系：准确性与一致性的关系：一. 测量的误差第二页，讲稿共二十六页哦l误差的种类误差的种类: : 随机误差 系统误差 抽样与测量误差l误差的来源误差的来源:( :(编制过程中编制过程中,测题本身存在的误差测题本身存在的误差) 测量自身引起的误差测量自身引起的误差 题目取样时,题量少,或无代表性 其他编制过程 Eg:句子意义不明确,题目太难,测验时间

2、设定不对 施测过程引起的误差施测过程引起的误差: : 物理环境 测试时间 主试因素 意外干扰 评分记分 被试引起的误差被试引起的误差: : 应试动机 测验焦虑 测验经验 练习效应 反应倾向 生理因素第三页，讲稿共二十六页哦l真分数真分数 指的是在测量没有误差时所得到的真值。指的是在测量没有误差时所得到的真值。 在测量学中在测量学中, ,真分数是一个很重要的概念。真分数是一个很重要的概念。 定义化 假设 X = T + EX = T + E (Gullikson,1950)：lX=观测分数(你的实得分数) 1 对一个人测量无数lT=真分数(构想分数) 次,其平均误差为0,lE=误差分数(猜测,疲

3、劳); 即E=0 误差是一种随机的、 2 真分数与误差没有 正态的偏离 关系,即rTE=0 3 不同测量上的误差 没有关系,即rE1E2=0 如果进行无数次测量如果进行无数次测量,X,X的平均值等于的平均值等于T T第四页，讲稿共二十六页哦l对于一个团体来说对于一个团体来说,实得分数、真分数实得分数、真分数 和测量误差之间有如下关系和测量误差之间有如下关系: : S SX2 2 = S = ST2 2 + S + SE2 2 即实得分数的变异数S SX2 2等于真分数的变异数S ST2 2加上误差变异数S SE2 2 而真分数变异数可分成与测量目的有关(有效)的变异数S SV2 2和与测量目的

4、无关但却稳定的变异数S SI2 2 S ST2 2 = S = SV2 2 + S + SI2 2最后二式合并可得 S SX2 2 = S = SV2 2 + S + SI2 2 + S + SE2 2第五页，讲稿共二十六页哦l稳定性稳定性 可靠性可靠性 一致性一致性 你的观测分数在多大程度上反映了你的“真实”分数？ 在不同时间测验同一个人获得的结果是一致吗？l人们通常把测量结果的可靠性称为信度人们通常把测量结果的可靠性称为信度,即测即测量结果的一致性或可信性程度。量结果的一致性或可信性程度。l信度的意义信度的意义 1.信度指实测值和真值相差的程度 2.信度指统计量与参数之间的接近程度 3.信

5、度是指一种测验对相同的应试者再次测验时引起 同样反应的程度二二. 测量信度测量信度第六页，讲稿共二十六页哦l信度定义一信度定义一: : 信度乃是一组测验分数中真分数的变异信度乃是一组测验分数中真分数的变异数与实得分数的变异数之比。数与实得分数的变异数之比。 即即 rXXXX=S=ST T2 2/S/SX X2 2第七页，讲稿共二十六页哦l信度定义二信度定义二: : 信度乃是一个测验信度乃是一个测验X X与它的任意一个平与它的任意一个平行测验行测验XX的相关系数。的相关系数。 即即 r rXXXX= =XXXX第八页，讲稿共二十六页哦l信度定义三信度定义三: : 信度乃是一组测验分数中真分数与实

6、信度乃是一组测验分数中真分数与实得分数的相关系数的平方。得分数的相关系数的平方。 即即 r rXXXX= =2 2TXTX第九页，讲稿共二十六页哦实测分数对真分数的回归图第十页，讲稿共二十六页哦l1.1.稳定性系数稳定性系数( (重测信度重测信度) )l2.2.等值性系数等值性系数( (复本、分半信度复本、分半信度) )l3.3.等值稳定性系数等值稳定性系数( (复本、分半信度复本、分半信度) )l4.4.内部一致性系数内部一致性系数( (同质性信度同质性信度) )l5.5.评分者的信度系数评分者的信度系数估计信度的方法估计信度的方法第十一页，讲稿共二十六页哦重测信度重测信度(Test-Ret

7、est Reliability)(Test-Retest Reliability)l定义定义: : 同一量表同一量表, ,同一被试群体同一被试群体, ,在不同在不同 时间时间, ,两次施测两次施测, ,求其相关。求其相关。l实质实质: : 表示测验结果的稳定性。故称之表示测验结果的稳定性。故称之 为稳定性系数为稳定性系数(Coefficient of (Coefficient of Stability) Stability) l形式形式: : 施测施测适当时间适当时间再施测再施测 计算公式参见教材P4343第十二页，讲稿共二十六页哦时间间隔的把握l间隔时间越长间隔时间越长, ,稳定性系数越低。

8、适宜时间间隔依照测验目的稳定性系数越低。适宜时间间隔依照测验目的、性质及被试特点而定。几分钟至几年。、性质及被试特点而定。几分钟至几年。l年幼儿童年幼儿童, ,间隔要小；年长群体间隔要小；年长群体, ,间隔可大。智力测验的间间隔可大。智力测验的间隔不能太短隔不能太短, ,成就测验的间隔不能太长。成就测验的间隔不能太长。 l一般间隔时间不超过六个月。一般间隔时间不超过六个月。( (既不能让被试记住上一次测验既不能让被试记住上一次测验的内容的内容, ,又不能让其特质发生变化又不能让其特质发生变化, ,或对所学知识产生遗忘或对所学知识产生遗忘) )第十三页，讲稿共二十六页哦复本信度复本信度(Alte

9、rnate-form raliability)l因为任何测验只是所有可能题目中的一份取样因为任何测验只是所有可能题目中的一份取样( (行为样本行为样本), ),所以可编制许多平行的等值测验所以可编制许多平行的等值测验, ,叫做叫做复本。复本。l复本等值要符合下列条件复本等值要符合下列条件: : 1.1.各份测验测量的是同一种心理特性。各份测验测量的是同一种心理特性。 2.2.各份测验具有相同的内容和形式。各份测验具有相同的内容和形式。 3.3.各份测验的题目不应重复。各份测验的题目不应重复。 4.4.各份测验题目数量相等各份测验题目数量相等, ,难度和区分度大体相同。难度和区分度大体相同。 5

10、.5.各份测验的分数分布各份测验的分数分布( (平均数和标准差平均数和标准差) )大致相等。大致相等。 6.6.复本编好后复本编好后, ,应再测一次应再测一次, ,以确保各份测验的等值。以确保各份测验的等值。第十四页，讲稿共二十六页哦计算方法: 两个复本施测同一被试群体,求其相关。l等值性系数等值性系数: :同时连续施测同时连续施测, ,反映内容变异。反映内容变异。l形式形式: :复本复本A A最短时间最短时间复本复本B Bl稳定性与等值性系数：稳定性与等值性系数：l时间间隔施测时间间隔施测, ,内容变异重测信度误差内容变异重测信度误差l形式形式: :复本复本A A适当时间适当时间复本复本B

11、B 第十五页，讲稿共二十六页哦分半信度分半信度(Split-Half Reliability)l定义定义: : 在测验没有复本且只能实施一次的情况在测验没有复本且只能实施一次的情况下下, ,可将测验项目分成对等的两半可将测验项目分成对等的两半, ,根据被试在根据被试在这两半测验中所得的分数计算相关系数这两半测验中所得的分数计算相关系数, ,即得即得分半信度。分半信度。 l计算分半信度先要对测验分半。不同的分半法计算分半信度先要对测验分半。不同的分半法可能会得到不同的信度值。可能会得到不同的信度值。第十六页，讲稿共二十六页哦l为了使两半基本等值为了使两半基本等值, ,可将项目按由易到难的顺序排列

12、编号可将项目按由易到难的顺序排列编号, ,然然后按奇数和偶数序号将项目分半。要注意使那些性质相同、联后按奇数和偶数序号将项目分半。要注意使那些性质相同、联系紧密的项目分在相同的一半系紧密的项目分在相同的一半, ,否则会使信度值偏高。否则会使信度值偏高。l由于分半信度实际上只是半个测验的信度由于分半信度实际上只是半个测验的信度, ,测验越长、项目测验越长、项目越多越多, ,两半分数的相关就越高。因此两半分数的相关就越高。因此, ,对长度不同的测验对长度不同的测验, ,要用要用校正公式。校正公式。 l计算公式参见教材P P35363536 斯皮尔曼斯皮尔曼布朗校正公式布朗校正公式 弗朗那根公式弗朗

13、那根公式 卢伦公式卢伦公式第十七页，讲稿共二十六页哦同质性信度同质性信度(Homogeneity Reliability)l同质性指测验的所有题目测量的是同一种心同质性指测验的所有题目测量的是同一种心理特质理特质, ,表现为各个题目得分之间有较高的表现为各个题目得分之间有较高的相关相关, ,相关越高则同质性越强。相关越高则同质性越强。 l因素分析的思路因素分析的思路l计算公式: 参见教材P P36373637 基本公式 库德理查逊公式 克伦巴赫系数第十八页，讲稿共二十六页哦评分者信度评分者信度(Scorer ReliabilityScorer Reliability)l评分者信度是指不同评分者

14、之间在测验结果计评分者信度是指不同评分者之间在测验结果计分上的一致性。分上的一致性。l在心理测验中在心理测验中, ,评分者信度的计算评分者信度的计算, ,通常是随机通常是随机抽取若干份试卷抽取若干份试卷, ,由至少两位受过训练的评分由至少两位受过训练的评分者按计分规则分别判分者按计分规则分别判分, ,然后计算它们的相关然后计算它们的相关。几个评分者的评分越一致。几个评分者的评分越一致, ,评分者信度越高评分者信度越高。第十九页，讲稿共二十六页哦l评分者信度评分者信度最简单的估计方法就是随机抽最简单的估计方法就是随机抽取若干份答卷取若干份答卷, ,由两个独立的评分者打分由两个独立的评分者打分,

15、,再求每份答卷两个评判分数的相关系数。再求每份答卷两个评判分数的相关系数。这种相关系数的计算可以用积差相关方法这种相关系数的计算可以用积差相关方法, ,也可以采用斯皮尔曼等级相关方法。也可以采用斯皮尔曼等级相关方法。l如果评分者在三人以上如果评分者在三人以上, ,而且又采用等级记而且又采用等级记分时分时, ,就需要用肯德尔和谐系数来求评分者就需要用肯德尔和谐系数来求评分者信度。信度。l计算公式: 肯德尔和谐系数肯德尔和谐系数W第二十页，讲稿共二十六页哦各种信度系数相应误差变异的来源信度系数的类型信度系数的类型误差变异的来源误差变异的来源再测信度再测信度复本信度（连续施测）复本信度（连续施测）复

16、本信度（间隔施测）复本信度（间隔施测）分半信度分半信度同质性信度同质性信度评分者信度评分者信度时间取样时间取样内容取样内容取样时间与内容取样时间与内容取样内容取样内容取样内容的异质性内容的异质性评分者间的差异评分者间的差异第二十一页，讲稿共二十六页哦假设对假设对100100个六年级学生以两个月的时间间隔个六年级学生以两个月的时间间隔先后施测一个创造力测验的先后施测一个创造力测验的ABAB两个复本两个复本, ,所得的所得的l等值性与稳定性系数为等值性与稳定性系数为0.700.70。l根据被试对每个复本的反应计算出分半信度为根据被试对每个复本的反应计算出分半信度为0.80(0.80(先计先计算每个

17、复本的分半相关系数。将二者平均后再用斯皮算每个复本的分半相关系数。将二者平均后再用斯皮尔曼尔曼- -布朗公式校正）。布朗公式校正）。l同时同时, ,我们让另一个评分者随机抽取我们让另一个评分者随机抽取5050份卷子另外评分份卷子另外评分, ,得得到评分者信度为到评分者信度为0.920.92。l然后然后, ,我们对这三种方法所产生的误差变异进行分析。我们对这三种方法所产生的误差变异进行分析。第二十二页，讲稿共二十六页哦这个假想测验的误差变异来源分析信度类型信度类型误差变异量误差变异量误差变异来源误差变异来源复本信度（间隔施测复本信度（间隔施测)1-0.70=0.30时间与内容取样时间与内容取样分

18、半信度分半信度1-0.80=0.20内容取样内容取样上述二者差异上述二者差异0.30-0.20=0.10 时间取样时间取样评分者信度评分者信度1-0.92=0.08评分者差异评分者差异误差变异总和误差变异总和0.20+0.10+0.08=0.38真实变异真实变异1-0.38=0.62第二十三页，讲稿共二十六页哦这个假想测验的误差变异来源分析真实变异真实变异误差变异误差变异时间上的稳定性，复本时间上的稳定性，复本之间的一致性，评分者之间的一致性，评分者之间的一致性之间的一致性 内容取内容取样误差样误差时间取时间取样误差样误差评分者评分者间差异间差异62%20%10%8%第二十四页，讲稿共二十六页

19、哦l信度的作用信度的作用 反映了测量过程中所存在的随机误差大小 可以用来解释个人测验分数的意义 可以帮助进行不同测验分数的比较l影响信度的因素影响信度的因素: : 被试的样本样本团体的异质程度与平均水平 测验的长度一般说来,测验越长,信度值超高 测验的难度测验难度水平使测验分数的分布 范围最大时,信度才最高(此难度水平为0.5)第二十五页，讲稿共二十六页哦测量的随机误差控制测量的随机误差控制l测量标准误与信度测量标准误与信度 具体计算方法及例证：P40l影响测验信度的随机误差来源影响测验信度的随机误差来源 被试因素 主试因素 测试情境 测量工具本身 测试时间间隔l控制随机误差提高测量信度的常用方法控制随机误差提高测量信度的常用方法 适当增加测验长度 尽量保证测验题目内容的同质性 控制试题的难度分布第二十六页，讲稿共二十六页哦