提高信度的方法.ppt

六、提高信度的方法六、提高信度的方法1、信度系数、信度系数信度系数以多大为宜？信度系数以多大为宜？学科测验学科测验0.9以上以上智力测验智力测验0.8以上以上品德测验品德测验0.6以上以上2、误差的来源、误差的来源（1）测验本身引起的误差）测验本身引起的误差（2）测验实施引起的误差）测验实施引起的误差（3）被试引起的误差）被试引起的误差3、提高测验信度的方法、提高测验信度的方法（1）增加题目数量）增加题目数量（2）难度适中）难度适中（3）内容同质）内容同质（4）程序统一）程序统一（5）时间充分）时间充分（6）评分客观）评分客观应试者本身的动机水平、积极性以及身体的应试者本身的动机水平、积极性以及身体的疲劳程度等也会影响测验的信度。疲劳程度等也会影响测验的信度。七、信度的特殊问题七、信度的特殊问题速度测验的信度速度测验的信度标准参考测验的信度标准参考测验的信度分测验的信度分测验的信度差异的信度差异的信度第二节第二节效度效度效效度（度（validity）指的是一个测验或量表实际指的是一个测验或量表实际能测出其所要测量的特性的程度能测出其所要测量的特性的程度，记为，记为rxy。顾名思义，效度就是一次测量的有效程度。顾名思义，效度就是一次测量的有效程度。对可靠结论的追求对可靠结论的追求测验题目的不同代表水平测验题目的不同代表水平效度的统计定义效度的统计定义X=真实分数真实分数+误差误差X=V+I+E效度的分类效度的分类根据美国心理学会教育与心理测量的标准根据美国心理学会教育与心理测量的标准一书将效度分为：内容效度、效标关联效度和一书将效度分为：内容效度、效标关联效度和结构效度。结构效度。1、内容效度：测量工具对所测范围的内容取、内容效度：测量工具对所测范围的内容取样的代表程度。样的代表程度。2、效标关联效度：测量分数对于学生在一外、效标关联效度：测量分数对于学生在一外部效标上成绩的预测程度。部效标上成绩的预测程度。3、结构效度：经验性证据能证实某种结构确、结构效度：经验性证据能证实某种结构确实存在的程度以及测量工具能准确测量这一结构实存在的程度以及测量工具能准确测量这一结构的程度。的程度。（一）内容效度含义与应用范围（一）内容效度含义与应用范围内容效度就是测验题目样本对于应测内容与内容效度就是测验题目样本对于应测内容与行为领域的代表性程度。行为领域的代表性程度。考察测验题目样本的代表性，首先对应测内考察测验题目样本的代表性，首先对应测内容与行为领域有明确的界定，有比较清楚组织结容与行为领域有明确的界定，有比较清楚组织结构。构。内容效度主要适合于教育测量两的情境中，内容效度主要适合于教育测量两的情境中，也适合于某些用于选拔和分类的职业测验。也适合于某些用于选拔和分类的职业测验。（二）内容效度的分析方法（二）内容效度的分析方法1、逻辑分析逻辑分析法法即依靠有关专家对测验题目与即依靠有关专家对测验题目与应测内容范围的吻合程度作出判断。应测内容范围的吻合程度作出判断。2、量化分析法量化分析法即对内容效度进行量化的分析即对内容效度进行量化的分析方法。方法。内容效度内容效度的的特点特点内容内容效度的效度的应用与评价应用与评价（1）量化方法表）量化方法表（2）效标关联效度）效标关联效度效标关联效度测量分数对于学生在以外部效效标关联效度测量分数对于学生在以外部效标上成绩的预测程度。效标即衡量测验有效性的标上成绩的预测程度。效标即衡量测验有效性的参照标准。效标关联效度分为参照标准。效标关联效度分为同时效度同时效度和和预测效预测效度度。A、同时效度同时效度同时效度是指测验与当前效标之间的关联程同时效度是指测验与当前效标之间的关联程度，同时效度的效标资料可以和测验分数同时收度，同时效度的效标资料可以和测验分数同时收集。集。同时效度常用的效标资料包括在校学业成绩、同时效度常用的效标资料包括在校学业成绩、教师评定的等级、临床检查等。教师评定的等级、临床检查等。B、预测效度预测效度预测效度是指测验与将来效标之间的关联程预测效度是指测验与将来效标之间的关联程度，预测效度的效标资料需要一段时间才可以收度，预测效度的效标资料需要一段时间才可以收集到。集到。预测效度常用的效标资料包括专业训练成绩、预测效度常用的效标资料包括专业训练成绩、实际工作的成果等。实际工作的成果等。（3）结构效度）结构效度A、定义定义所谓结构，是指心理学或社会学上的一种理所谓结构，是指心理学或社会学上的一种理论构想或特质，如智力、焦虑、成就、动机等。论构想或特质，如智力、焦虑、成就、动机等。结构效度则指的是测验能够测量到理论上所结构效度则指的是测验能够测量到理论上所定义的某一心理结构或特质的程度。定义的某一心理结构或特质的程度。B、结构效度验证的结构效度验证的四个步骤四个步骤1、提出有关理论结构的说明，并据此设计测、提出有关理论结构的说明，并据此设计测量用的试题。量用的试题。2、提出可验证该理论结构是存在的假设说明。、提出可验证该理论结构是存在的假设说明。3、采用各种方法收集实际的资料，以验证第、采用各种方法收集实际的资料，以验证第二步提出的假设的正确性。二步提出的假设的正确性。4、收集其他类型的辅助证据，淘汰与理论结、收集其他类型的辅助证据，淘汰与理论结构相反的试题，或修正理论，重复第二和第三步，构相反的试题，或修正理论，重复第二和第三步，直到上述的假设得到验证。直到上述的假设得到验证。C、结构测度范围和验证范围结构测度范围和验证范围结构效度所涵盖的范围包括内容效度和效标结构效度所涵盖的范围包括内容效度和效标关联效度，所以其评价方法都可以用来作为分析关联效度，所以其评价方法都可以用来作为分析结构效度的证据。结构效度的证据。结构效度的验证方法：结构效度的验证方法：测验内部寻找证据法测验内部寻找证据法、测验之间寻找证据法测验之间寻找证据法和和考察测验的实证效度法考察测验的实证效度法。