心理测量第十章.ppt

《心理测量第十章.ppt》由会员分享，可在线阅读，更多相关《心理测量第十章.ppt（32页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、心理测量第十章心理测量第十章现在学习的是第1页，共32页目标参照测验概述目标参照测验概述心理测量工作者的要求心理测量工作者的要求 目标参照测验的信度与效度目标参照测验的信度与效度目标参照测验的项目分析目标参照测验的项目分析测验分数的解释测验分数的解释 现在学习的是第2页，共32页第一节第一节 目标参照测验概述目标参照测验概述一、目标参照测验的产生一、目标参照测验的产生（一）常模参照测验的发展及其局限（一）常模参照测验的发展及其局限 2020世纪初，世纪初，“相对能力相对能力”的测量的测量 此后，测量的一个基本出发点就是度量与比较个体间的此后，测量的一个基本出发点就是度量与比较个体间的差异，以被

2、试在团体中的相对位置来评价和解释测验结差异，以被试在团体中的相对位置来评价和解释测验结果。逐渐发展出了常模参照测验。果。逐渐发展出了常模参照测验。并非所有测验都只关心个体间的差异。有些测验目的在于了解并非所有测验都只关心个体间的差异。有些测验目的在于了解和界定个体在测验内容上掌握的绝对水平。和界定个体在测验内容上掌握的绝对水平。现在学习的是第3页，共32页（二）目标参照测验的兴起（二）目标参照测验的兴起 19621962年，年，戈莱赛戈莱赛和和克劳斯克劳斯首先提出目标参照测验首先提出目标参照测验的概念。的概念。现在学习的是第4页，共32页二、目标参照测验的定义二、目标参照测验的定义 主要目的主

3、要目的在于了解个体在所规定的测量内容上在于了解个体在所规定的测量内容上的行为水平，因此其的行为水平，因此其出发点出发点是个体本身的是个体本身的绝对绝对水平水平。目标参照测验目标参照测验，是根据某一明确界定的，是根据某一明确界定的内容范围内容范围而缜密编制的测验，并且，被试在测验中所得而缜密编制的测验，并且，被试在测验中所得结果，也是根据某一明确界定的结果，也是根据某一明确界定的行为标准行为标准直接直接进行解释的。进行解释的。现在学习的是第5页，共32页三、目标参照测验的应用三、目标参照测验的应用 常模参照测验适用于选拔性考试和总常模参照测验适用于选拔性考试和总结性评定。结性评定。目标参照测验适

4、用于诊断和发现学生目标参照测验适用于诊断和发现学生的不足，从而为改进教学提供反馈信的不足，从而为改进教学提供反馈信息。息。现在学习的是第6页，共32页第二节第二节 目标参照测验的项目分析目标参照测验的项目分析一、内容范围的确定一、内容范围的确定 一个测验的内容范围包括所欲测量特质中蕴涵一个测验的内容范围包括所欲测量特质中蕴涵的全部行为。的全部行为。内容范围的共同特点：内容范围的共同特点：1.具有边界 2.具有结构。每一内容范围均可分为几类，每一类中又可以分为更小的类。现在学习的是第7页，共32页 特定测验目的的确定为内容范围的界定提供依据。特定测验目的的确定为内容范围的界定提供依据。界定的结果

5、常常以双向细目表形式呈现。界定的结果常常以双向细目表形式呈现。命题细目表由命题细目表由3 3个要素构成：考查目标、考查内个要素构成：考查目标、考查内容和比重。容和比重。现在学习的是第8页，共32页识记识记理解理解 应应用用 分析分析 综合综合 评价评价合计合计唐唐诗诗8 88 84 44 42 22 22828文言文文言文6 64 46 64 42 22 22424新新诗诗8 86 64 44 42 22 22626散文散文6 64 46 62 22 22 22222合计合计28282222202014148 88 8100100现在学习的是第9页，共32页二、测验项目的内容效度分析二、测验项

6、目的内容效度分析 检验题目与测验内容范围所要求的内容与目标的检验题目与测验内容范围所要求的内容与目标的一致性。一致性。通常采用专家评定法。通常采用专家评定法。现在学习的是第10页，共32页三、测验项目的难度和区分度分析三、测验项目的难度和区分度分析（一）测验的预测（一）测验的预测预测方法：预测方法：前测前测-后测方法后测方法已接受教学组已接受教学组-未接受教学组方法未接受教学组方法1.1.对照组方法对照组方法现在学习的是第11页，共32页（二）测验项目的（二）测验项目的难度难度分析分析 目标参照测验的项目难度计算与常模参照测验目标参照测验的项目难度计算与常模参照测验相同，一般以通过率来表示。往

7、往并不必要。相同，一般以通过率来表示。往往并不必要。目标参照测验项目难度的计算，大多情况下只目标参照测验项目难度的计算，大多情况下只是作为项目区分度分析的基础。是作为项目区分度分析的基础。现在学习的是第12页，共32页（三）测验项目的（三）测验项目的区分度分析区分度分析 1.1.难度差值难度差值 （1 1）掌握组）掌握组未掌握组鉴别指数（未掌握组鉴别指数（D D）D=PD=PA A-P-PB B D D的大小，可以直接反映出该项目在多大程度上的大小，可以直接反映出该项目在多大程度上对未掌握者和掌握者作出了区分。对未掌握者和掌握者作出了区分。D D值从值从-1.00-1.00到到+1.00+1.

8、00之间变化，越接近于之间变化，越接近于+1.001.00，题目区分度越高，说明题目越有效。，题目区分度越高，说明题目越有效。现在学习的是第13页，共32页（2 2）个人获得指数（）个人获得指数（DIGDIG）采取前测采取前测-后测法，可获得在前测中错误回答某项后测法，可获得在前测中错误回答某项目而在后测中能够正确回答的被试人数比例，即该目而在后测中能够正确回答的被试人数比例，即该项目的个人获得指数。项目的个人获得指数。其值在其值在0+10+1之间，其大小直接反映了教学活动之间，其大小直接反映了教学活动后收益的被试比例。后收益的被试比例。现在学习的是第14页，共32页2.2.相关系数相关系数

9、以项目得分和测验总分之间的一致性以项目得分和测验总分之间的一致性程度作为项目区分度的指标。程度作为项目区分度的指标。现在学习的是第15页，共32页第三节第三节 目标参照测验的信度与效度目标参照测验的信度与效度一、信度及其估计一、信度及其估计 信度是指测量结果的一致性或稳定性。信度是指测量结果的一致性或稳定性。常模参照测验的信度评估中，通常是以常模参照测验的信度评估中，通常是以相关系数相关系数作为信度指标。作为信度指标。目标参照测验不适合以相关系数来表示信度。目标参照测验不适合以相关系数来表示信度。现在学习的是第16页，共32页（一）分类一致性信度（一）分类一致性信度 目标参照测验在分数解释上最

10、常见的做法就是目标参照测验在分数解释上最常见的做法就是将被试分类，根据某一分数分界点将被试分为将被试分类，根据某一分数分界点将被试分为掌握和未掌握两类。掌握和未掌握两类。对测验的分类一致性的度量指标，称作对测验的分类一致性的度量指标，称作分类一分类一致性信度致性信度。考察被试在同一测验的两次施测中。考察被试在同一测验的两次施测中或两个复本的施测中是否被分在同一类。或两个复本的施测中是否被分在同一类。现在学习的是第17页，共32页测验测验A A及格及格不及格不及格测验测验B B 及格及格a ab b不及格不及格c cd dp p0 0=(a+d)/N=(a+d)/N，式中，式中，N=a+b+c+

11、dN=a+b+c+d现在学习的是第18页，共32页评价评价：优点是计算简单，意义直观易懂。优点是计算简单，意义直观易懂。缺点与再测法和复本法相同。缺点与再测法和复本法相同。现在学习的是第19页，共32页影响因素影响因素：测验长度测验长度被试分数分布被试分数分布测验分数分界点的确定。测验分数分界点的确定。现在学习的是第20页，共32页（二）方差分析方法（二）方差分析方法荷伊特信度荷伊特信度 按照荷伊特的观点：一组测验分数的总变异数可划按照荷伊特的观点：一组测验分数的总变异数可划分为三个来源：人与人之间的差别，题目之间的差分为三个来源：人与人之间的差别，题目之间的差别以及人与题目之间的交互作用的差

12、别。别以及人与题目之间的交互作用的差别。r rxxxx=1-MS=1-MS人人题题 /MS/MS人人现在学习的是第21页，共32页二、效度及其估计二、效度及其估计（一）内容效度（一）内容效度 评价任一测验的内容效度，都依赖两个条件：评价任一测验的内容效度，都依赖两个条件：（1 1）测验有明确界定的内容范围）测验有明确界定的内容范围 （2 2）对测验每一题目的内容效度的分析）对测验每一题目的内容效度的分析现在学习的是第22页，共32页（二）效标关联效度（二）效标关联效度 目标参照测验以目标参照测验以“决策效度决策效度”来评估校标关联效来评估校标关联效度。度。计算步骤：计算步骤：依据分数分界点将测

13、验结果分为及格与不及格 选用“是否接受过相应教学活动”或教师评定结果为校标，将被试分为掌握组和未掌握组；计算掌握组在测验中及格人数占总人数的比例和未掌握组中不及格人数占总人数的比例；两个比例相加结果为决策效度。现在学习的是第23页，共32页第四节第四节 测验分数的解释测验分数的解释 分数分界点的确定分数分界点的确定 目标参照测验结果的解释是参照分数分界点进行目标参照测验结果的解释是参照分数分界点进行的。的。就目标参照测验本身而言，分数分界点并非必需。就目标参照测验本身而言，分数分界点并非必需。从理论上说，并不存在可以清晰辨别的掌握者和从理论上说，并不存在可以清晰辨别的掌握者和非掌握者。非掌握者

14、。在目标参照测验的实际应用中，分数分界点的确定在目标参照测验的实际应用中，分数分界点的确定却是无法逃避的问题。却是无法逃避的问题。现在学习的是第24页，共32页一、专家判定法一、专家判定法 这种方法是在测验的内容范围明确界定的基础上，这种方法是在测验的内容范围明确界定的基础上，由专家来判断处于由专家来判断处于临界水平的被试临界水平的被试在每一题目上在每一题目上正确回答的可能性，进一步以此为标准确定分数分正确回答的可能性，进一步以此为标准确定分数分界点。界点。临界水平的被试临界水平的被试是指那些由未掌握水平转入掌是指那些由未掌握水平转入掌握水平的被试。握水平的被试。现在学习的是第25页，共32页

15、（一）（一）NedelskyNedelsky方法方法 针对由多重选择题组成的测验，由专家判断处针对由多重选择题组成的测验，由专家判断处于临界水平的被试在每一题目上有能力排除的于临界水平的被试在每一题目上有能力排除的错误选择项，从而计算其正确回答的可能性，错误选择项，从而计算其正确回答的可能性，再求出每一题上正确回答的可能性之和，即为再求出每一题上正确回答的可能性之和，即为测验分数分界点。测验分数分界点。现在学习的是第26页，共32页（二）（二）AngoffAngoff方法方法 由专家直接判断处于临界水平的被试在某测验由专家直接判断处于临界水平的被试在某测验中对每一题目正确作答的可能性（记为中对

16、每一题目正确作答的可能性（记为P Pi i），），设每一题的满分为设每一题的满分为F Fi i，则该测验的分数分界点，则该测验的分数分界点为：为：=FFi iP Pi i现在学习的是第27页，共32页二、效标组预测法二、效标组预测法（一）临界组法（一）临界组法 由专家判定和选择一组正处于临界水平的被试由专家判定和选择一组正处于临界水平的被试接受测试，计算他们的平均成绩，以此作为测接受测试，计算他们的平均成绩，以此作为测验分数临界点的估计值。验分数临界点的估计值。现在学习的是第28页，共32页（二）对照组法（二）对照组法专家判定和选择两组被试，一组为掌握专家判定和选择两组被试，一组为掌握组，另一组为未掌握组，对其施测，组，另一组为未掌握组，对其施测，两组测验成绩原始分数分布图的交叉两组测验成绩原始分数分布图的交叉点即为测验分数分界点。点即为测验分数分界点。现在学习的是第29页，共32页现在学习的是第30页，共32页 以上方法都可看出，标准参照测验中以上方法都可看出，标准参照测验中确定合格分数都十分重视利用专家经确定合格分数都十分重视利用专家经验。验。现在学习的是第31页，共32页Thank You!现在学习的是第32页，共32页