《测量的信度》PPT课件.ppt

East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 测量的信度测量的信度East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 第一节第一节 信度概述信度概述定义：测验结果一致性的判断定义：测验结果一致性的判断 在实测分数中真分数所占的比率在实测分数中真分数所占的比率 （真分数理论）（真分数理论）实测分数实测分数=真分数真分数+误差误差East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 信度可以用相关系数来表示，也就是真分数与实信度可以用相关系数来表示，也就是真分数与实测分数相关的平方测分数相关的平方公式公式East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 第二节第二节 误差及误差的来源误差及误差的来源定义：与测量目的无关的因素造成了测定义：与测量目的无关的因素造成了测 验结果的验结果的 不一致或不准确不一致或不准确 种类：种类：1 随机误差：随机误差：方向和大小完全是随机方向和大小完全是随机 的，没有规律性的，没有规律性 2 系统误差：系统误差：稳定地存在于每一次测稳定地存在于每一次测 量中，有规律可循量中，有规律可循 3 抽样误差：由抽样变动而引起的抽样误差：由抽样变动而引起的East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 误差来源误差来源 1.测验内部引起测验内部引起 1）题目取样误差）题目取样误差 2）题目用词模棱两可）题目用词模棱两可 3）题目太难）题目太难 4）规定的测验时间太短）规定的测验时间太短 5）题型的原因）题型的原因East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 2 测验过程引起的测验过程引起的 1）物理环境）物理环境 2）主试方面）主试方面 3）意外干扰）意外干扰 4）计分）计分East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 3 被试引起的被试引起的 1）动机）动机 2）焦虑）焦虑 3）练习）练习 4）经验）经验 5）生理因素）生理因素East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 第三节第三节 估计信度的方法估计信度的方法一一、稳定系数稳定系数（重测信度）（跨时间的一致性）（重测信度）（跨时间的一致性）对同一个测验前后做两次，然后计算两次对同一个测验前后做两次，然后计算两次测测 验结果的一致性。验结果的一致性。公式：公式：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 测测验验被被 试试12345678910 1112 13 14 15x116 15 1313 13 1110 10 10 998876x216 15 1614 12 1113 12 10 1111910 87测验测验xx xx 2Sxx1 1x x2 2x x1 1158178410.532.831946x x2 2199214711.672.65East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 被试被试数学数学x阅读阅读yxyx2y2xy14117+1-4116-423828-2+7449-1434822+8+1641843216-8-564254053418-6-33691863615-4-616362474124+1+319384320+3-191-394723+7+2494141040270+60360 40021000244186864021East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 二二 等值系数等值系数（复本信度）（复本信度）（跨（跨形式的一致性）形式的一致性）一个测验有一个测验有A，B两个版本，对一组两个版本，对一组被试测试，被试测试，求取两个测验结果的一致求取两个测验结果的一致性性East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 三三 内在一致性系数内在一致性系数 以一次测验的结果来估计测以一次测验的结果来估计测验的信度验的信度East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 分半信度分半信度 把一次测验的结果人为地分成对等的两半，把一次测验的结果人为地分成对等的两半，然后计算两半分数之间的相关。然后计算两半分数之间的相关。分半信度只是半个测验的信度，所以需加以分半信度只是半个测验的信度，所以需加以校正。校正。校正公式：校正公式：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 库德库德理查逊估计法理查逊估计法库德库德理查逊理查逊1937年提出了一种分析题目间一致年提出了一种分析题目间一致性来估计信度的方法，即应用项目统计量来避免性来估计信度的方法，即应用项目统计量来避免任意的两半分法导致产生的误差。任意的两半分法导致产生的误差。公式：公式：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 稳定系数（克伦巴赫稳定系数（克伦巴赫 系数）系数）公式：公式：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 二个评分者分别对一组被试的测验结果加以二个评分者分别对一组被试的测验结果加以评分，然后求取两组人分数的一致性。评分，然后求取两组人分数的一致性。三个以上评分者对一组被试的测验结果评分，三个以上评分者对一组被试的测验结果评分，其一致性的求取采用肯特尔和谐系数。其一致性的求取采用肯特尔和谐系数。公式：公式：四四 评分者信度评分者信度三个教师给三个教师给6篇作文评分篇作文评分将分数值转换为得分等级（最高为将分数值转换为得分等级（最高为1）然后）然后求出每一篇作文所得等级之和（求出每一篇作文所得等级之和（Ri）教师教师123456A253027202832B222621202530C152018142122123456A524631B425631C534621 Ri147131883 Ri 14+7+13+18+8+363 Ri2811K3N=6被评对象在被评对象在3-7人时，直接查表，人时，直接查表，w值大于表中数值大于表中数值说明信度是高的，如被评对象超过值说明信度是高的，如被评对象超过7人，则可人，则可计算计算 2值，作值，作 2检验。检验。2k(N-1)w df=N-1East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 第四节第四节 影响信度的因素影响信度的因素测验分数分布的范围对信度的影响测验分数分布的范围对信度的影响 分数分布的范围越大，信度就越分数分布的范围越大，信度就越高，分数分布的范围越小信度就越低。高，分数分布的范围越小信度就越低。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 用异质团体的信度来推测同质团体的信度用异质团体的信度来推测同质团体的信度公式：公式：例：例：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 二二 测验的长度对信度的影响测验的长度对信度的影响测题数量越多信度就越高测题数量越多信度就越高以已有测题数量所得信度来预测达到某种信度水以已有测题数量所得信度来预测达到某种信度水平需增加的题数平需增加的题数公式：公式：例：例：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 以增加题目的数量来推测所能达到的信度以增加题目的数量来推测所能达到的信度公式：公式：例：例：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 进一步增加题数可达到的信度水平进一步增加题数可达到的信度水平题数题数1050100200300400500相关系数相关系数0.500.830.910.950.968 0.976 0.98East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 三三 测验的难度对信度的影响测验的难度对信度的影响 难度间接影响信度。难度间接影响信度。即难度影响测验分数的分布，然即难度影响测验分数的分布，然后影响信度。后影响信度。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 第五节第五节 测量的标准误差测量的标准误差定义：误差分数分布的标准差定义：误差分数分布的标准差标准误也可用来判断一个测验的稳定性程度。标准误也可用来判断一个测验的稳定性程度。信度系数是估计整个样本的误差程度，而标信度系数是估计整个样本的误差程度，而标准误则是用来估计个人分数中的误差水平。准误则是用来估计个人分数中的误差水平。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 标准误的计算公式标准误的计算公式East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 标准误的用途标准误的用途确定分数的有效区间确定分数的有效区间 例：一个儿童做韦氏智力测验测得智商例：一个儿童做韦氏智力测验测得智商120，已，已知韦氏测验的标准差为知韦氏测验的标准差为15，信度是，信度是0.95。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 公式：公式：以以95%的置信水平来确定这个儿童智商分数的置信水平来确定这个儿童智商分数的有效区间，那么真分数有的有效区间，那么真分数有95%的可能性会落在的可能性会落在X+/-1.96 Se的范围内，的范围内，即即120+/-1.96 3.35=113-127。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 评价两个不同测验分数是否有明显的差异。评价两个不同测验分数是否有明显的差异。例：一个儿童的韦氏言语智商是例：一个儿童的韦氏言语智商是102，操作智商，操作智商为为108，操作智商是否显著地高于言语智商呢，操作智商是否显著地高于言语智商呢？以标准误来检验，先算出差异分数的标准？以标准误来检验，先算出差异分数的标准误误公式：公式：East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 4.741.96=9.29 两个分数差异大于两个分数差异大于9分以上才有显著性差别，分以上才有显著性差别，现在现在108-102=6，所以这个儿童的两种智力没有，所以这个儿童的两种智力没有差异。差异。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 以图形也可来辨认两种分数的差以图形也可来辨认两种分数的差异。如果置信区间有重叠，尤其是一异。如果置信区间有重叠，尤其是一半以上重叠，那就不能说一个分数比半以上重叠，那就不能说一个分数比另一个高。另一个高。East China Normal UniversityEast China Normal University 陈国鹏陈国鹏 East China Normal UniversityEast China Normal University 陈国鹏陈国鹏