教育测量与评价的质量特性.ppt

《教育测量与评价的质量特性.ppt》由会员分享，可在线阅读，更多相关《教育测量与评价的质量特性.ppt（18页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、教育测量与评价的质量特性现在学习的是第1页，共18页主要内容n教育测量与评价的信度n教育测量与评价的效度n教育测量与评价中题目（项目）的难度n教育测量与评价中题目（项目）的区分度现在学习的是第2页，共18页教育测量与评价的效度n一、效度的定义测量的有效程度一个测验或量表实际能测出其所要测量的特性的程度记为：效度的统计定义X=T+E，TVI，即：XVIE有则：2222EIVXxyr222Xvxyr根据统计定义，可知道效度与信度的哪些关系？根据统计定义，可知道效度与信度的哪些关系？现在学习的是第3页，共18页教育测量与评价的效度n二、效度的类别内容效度：侧重于测验题目取样的代表性，考查这些题目对所

2、欲测量的内容和行为反应测量的有效程度结构效度：侧重于一个测验的能够测量到心理学和教学理论上的抽象概念和特质的程度效标效度：侧重于测验分数预测我们所关心的外在行为的准确程度现在学习的是第4页，共18页教育测量与评价的效度n二、效度的类别内容效度：侧重于测验题目取样的代表性，考查这些题目对所欲测量的内容和行为反应测量的有效程度结构效度：侧重于一个测验的能够测量到心理学和教学理论上的抽象概念和特质的程度效标效度：侧重于测验分数预测我们所关心的外在行为的准确程度现在学习的是第5页，共18页三、各类效度的验证方法n1.内容效度的验证方法逻辑分析法（定性的方法）n依据教材内容、教学大纲的范围以及教学目标分

3、析测验内容，检查测验内容究竟在体现教材内容和教学目标方面达到多大程度n对每一道题目逐一进行审查，以此形成“题目双向细目表”n与“命题双向细目表”加以对照，以确定试卷的效度统计分析法（定量的方法）n克龙巴赫法（两套测验试题，对相同被试实施测试后，计算得分的相关系数）n评分一致性考查法（不同评分者之间评分的一致性程度，即考查评分者信度）n前后测对比法（根据前后两次测验的差异显著性，确定测验的内容效度）现在学习的是第6页，共18页三、各类效度的验证方法n2.结构效度的验证方法建立理论框架从理论框架出发，提出各种假设根据假设编制测验以逻辑及实证的方法，检验结果是否符合心理学的理论框架及其假设比如：中学

4、生数学能力的研究n数学能力由分析能力、综合能力、归纳和演绎能力、运算能力、空间想象能力构成；数学能力与早期教育有关；数学能力与智力正相关。n编制测验，施测并收集测验结果n分析测验结果，考查测试的结构效度，考查测验结果是否支持理论构想现在学习的是第7页，共18页三、各类效度的验证方法n3.效标效度的验证方法效标：检验测验效度的外在的、客观的标准，即效度的标准效标效度，也称为效标关联效度，也称为实证效度验证方法是指一个测验对处于特定情境中的个体行为进行预测时的有效性例：n高考成绩预测大学学习成绩n能力倾向测验预测工作成效分类：n同时效度：测验分数与效标资料的取得约在同一时间内连续完成，这两种资料的

5、相关系数即为同时效度目的：诊断现状n预测效度：测验分数取得一段时间后才获得效标资料，计算这两种资料间的相关系数目的：预测某个个体将来的行为现在学习的是第8页，共18页效标效度的估计方法n相关法直接计算测验分数与效标分数的相关系数n积差相关、等级相关、二列相关等n显著差异法根据效标测量将被试分为两个极端组，检验这两个组测验分数是否具有统计学上的差异显著性n命中率当测验用作取舍决策时，常使用命中率相关概念：总命中率、正命中率、负命中率总命中率高，则测试的效度高例：n70人参加的考试，通过测验选取了50人，淘汰了20人；选出的人中有40人合格，淘汰的人中有8人不合格。该测验的总命中率、正命中率和负命

6、中率分别是多少？现在学习的是第9页，共18页教育测量与评价中题目（项目）的难度n一、难度的含义难度是指测验项目的难易程度，记为 P在教育测量中nP正确回答试题的人数/参加测验的总人数n二、难度的计算客观试题（二分法记分）：nPR/N R：答对该题的人数；N：参加测验的总人数n对选择题的解答，因被试可猜测，故需对难度系数加以校正CP=(KP-1)/(K-1)CP：校正后的难度值；P：实际得到的通过率；K：选项数目例：一个题目的难度值为0.75，分别计算此题有四个选项、三个选项、两个选项时大的难度值现在学习的是第10页，共18页教育测量与评价中题目（项目）的难度n二、难度的计算客观题的极端分组法n

7、根据测验分数按高低排序，用两个极端组在某项目上的平均通过率表示项目的难度nP（PHPL）/2n步骤：按测验总分由高到低排序从高分段向下选出全部试卷的27作为高分组从低分段向上选出全部试卷的27作为低分组按照上述公式计算项目难度值n例：100人参加某测验，高分组与低分组各取27人，其中第一题高分组20人答对，低分组10人答对。这道题的难度系数是多少？现在学习的是第11页，共18页教育测量与评价中题目（项目）的难度n二、难度的计算主观题的平均数法主观题的极端分组法nXH：高分组所得总分；nXL：低分组所得总分；H：该题最高分；L：该题最低分；N：考生总人数的25WXP)(2)2(LHNNLXXPL

8、H X f fxX f fx 高分组10 10 100低分组10 0 08 8 648 5 407 6 42 7 8 565 1 55 2 104 0 0 4 10 40试题分析表现在学习的是第12页，共18页教育测量与评价中题目（项目）的难度n三、难度的转换难度指出的仅仅是题目的相对难度，不能客观地指出题目难度之间差异大小P向Z的转换n假定每个试题所要测量地潜在特质或能力是呈正态分布的，可将P值作为正态曲线下的概率面积，以此转换成Z分数例：Z向 的转换：z413现在学习的是第13页，共18页教育测量与评价中题目（项目）的区分度n一、区分度的概念区分度是测验对被试实际水平的区分程度是测验项目分

9、析的重要内容是作为评价项目质量、筛选项目的主要指标与依据通常用D表示，取值范围为1.00至1.00D越高时，试题的质量越好现在学习的是第14页，共18页教育测量与评价中题目（项目）的区分度n二、区分度对测验的影响1.区分度与难度的关系难度（P）区分度（D的最大值）1.000.000.900.200.700.600.501.000.300.600.100.200.000.00现在学习的是第15页，共18页教育测量与评价中题目（项目）的区分度n二、区分度对测验的影响2.区分度与信度的关系D的平均值信度0.12250.000.160.420.200.630.300.840.400.9150.500.

10、949现在学习的是第16页，共18页教育测量与评价中题目（项目）的区分度n三、区分度计算方法极端分组法n客观性试题区分度的计算公式：DPHPL按测验总分从高到低排序确定测验总分最高的27的被试作为高分组，最低的27的被试为低分组分别求出这两组被试通过试题的百分比将算得的有关数据带入上公式n主观性试题区分度的计算公式：说明：nXH：高分组所得总分；XL：低分组所得总分；H：该题最高分；L：该题最低分；N：考生总人数的25步骤：n按测验总分由高到低排序；分别确定测验总分的25、25作为高低分组；列出试题分析表；将数据带入以上公式加以计算)(LHNXXDLH现在学习的是第17页，共18页教育测量与评价中题目（项目）的区分度n三、区分度计算方法相关法n考虑中间数据n以项目分数与效标分数（效标分数不易得到时，以测验总分代替）的相关作为项目区分度的指标n相关越高，区分能力越好n具体方法：积差相关法点二列相关二列相关相关现在学习的是第18页，共18页