《如何做考试质量分析.ppt》由会员分享,可在线阅读,更多相关《如何做考试质量分析.ppt(34页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、一、为什么要做试卷质量分析一、为什么要做试卷质量分析n(一)测验质量有助于测验科学化的实现(一)测验质量有助于测验科学化的实现n1 1、有助于编制测验的技能、技巧的提高。、有助于编制测验的技能、技巧的提高。n2 2、能为进一步修改试题提供依据。、能为进一步修改试题提供依据。n3 3、有助于提高测验的信度、效度。、有助于提高测验的信度、效度。n4 4、有助于题库的建立。、有助于题库的建立。n(二)测验质量分析有助于提高教学质量(二)测验质量分析有助于提高教学质量n1 1、有助于教学的改进。、有助于教学的改进。n2 2、有助于测验结果的合理解释。、有助于测验结果的合理解释。-二、试卷质量分析分析什
2、么二、试卷质量分析分析什么n(一)考试信度(一)考试信度n(二)考试效度(二)考试效度n(三)考试难度(三)考试难度n(四)考试区分度(四)考试区分度n(五)考试分数分布图(五)考试分数分布图-(一)信度(一)信度n1.1.含义含义:n信度是指测量结果的稳定性或可靠性的程度。信度是指测量结果的稳定性或可靠性的程度。n一般是指实测值和真值相差的程度一般是指实测值和真值相差的程度-2.2.信度系数以多大为宜信度系数以多大为宜n信度系数究竟以多大为宜,没有明确的标准,要信度系数究竟以多大为宜,没有明确的标准,要看测验的目的和类型。看测验的目的和类型。n对于学科测验,信度系数要求达到对于学科测验,信度
3、系数要求达到0.90.9以上以上n智力测验要求达到智力测验要求达到0.80.8以上以上n品德测验能达到品德测验能达到0.60.6以上以上n一般的教师自编测验的信度要低。一般的教师自编测验的信度要低。-3.3.提高测验信度的方法提高测验信度的方法n(1 1)适当增加测验题目的数量)适当增加测验题目的数量n(2 2)测验的难度要适中)测验的难度要适中n(3 3)测验的内容应尽量同质)测验的内容应尽量同质n(4 4)评分要尽量做到客观化、减少评分误差)评分要尽量做到客观化、减少评分误差-(二)效度的概念(二)效度的概念1 1 1 1、效度的含义、效度的含义、效度的含义、效度的含义测测测测量量量量结结
4、结结果果果果的的的的准准准准确确确确性性性性和和和和有有有有效效效效性性性性的的的的程程程程度度度度,测测测测量量量量是是是是否否否否达到了预期的目的。达到了预期的目的。达到了预期的目的。达到了预期的目的。对对对对任任任任何何何何一一一一种种种种测测测测量量量量来来来来说说说说,效效效效度度度度都都都都比比比比信信信信度度度度更更更更为为为为重重重重要要要要。-2 2、效度系数以多大为宜、效度系数以多大为宜内内内内容容容容效效效效度度度度越越越越大大大大越越越越好好好好,越越越越大大大大说说说说明明明明考考考考试试试试内内内内容容容容和和和和大大大大纲相符合程度高。纲相符合程度高。纲相符合程度
5、高。纲相符合程度高。内容效度通过逻辑分析等方法得到。内容效度通过逻辑分析等方法得到。内容效度通过逻辑分析等方法得到。内容效度通过逻辑分析等方法得到。-3.3.提高测量效度的方法提高测量效度的方法n n(1 1 1 1)精心编制量表)精心编制量表)精心编制量表)精心编制量表n n首先,测验内容要确实能反映测验目的。首先,测验内容要确实能反映测验目的。首先,测验内容要确实能反映测验目的。首先,测验内容要确实能反映测验目的。n n其次,题目表述必须清楚、简明。其次,题目表述必须清楚、简明。其次,题目表述必须清楚、简明。其次,题目表述必须清楚、简明。n n再次,题目难度合适,有足够的区分度。再次,题目
6、难度合适,有足够的区分度。再次,题目难度合适,有足够的区分度。再次,题目难度合适,有足够的区分度。n n最最最最后后后后,试试试试卷卷卷卷印印印印制制制制清清清清楚楚楚楚,无无无无错错错错误误误误和和和和遗遗遗遗漏漏漏漏,并并并并力力力力求精美。求精美。求精美。求精美。n n(2 2 2 2)评评评评分分分分时时时时务务务务必必必必遵遵遵遵循循循循评评评评分分分分标标标标准准准准,仔仔仔仔细细细细登登登登记记记记,避免错误。避免错误。避免错误。避免错误。n n(3 3 3 3)适当增加测验的长度。)适当增加测验的长度。)适当增加测验的长度。)适当增加测验的长度。-(三)难度的概念(三)难度的概
7、念n n1 1、含义、含义n n在在教教育育测测量量中中,难难度度一一般般用用正正确确回回答答试试题题人人数数与与参参加加测测验验总总人人数数之之比比值值作作为为指指标,即通过率。标,即通过率。-2.2.测验的适宜难度测验的适宜难度n难度值的取值范围为:难度值的取值范围为:0,1 0,1 n在在常常模模参参照照性性测测验验中中要要求求试试题题难难度度适适中中,即即大大多数题目的难度在多数题目的难度在0.3-0.70.3-0.7之间之间n整个试卷的平均难度为整个试卷的平均难度为0.50.5左右(左右(0.45-0.45-0.550.55之间)。之间)。-3 3、控制题目难度的基本方法、控制题目难
8、度的基本方法n n(1 1 1 1)考查知识点的多少。)考查知识点的多少。)考查知识点的多少。)考查知识点的多少。n n(2 2 2 2)考查能力的复杂程度或层次的高低。)考查能力的复杂程度或层次的高低。)考查能力的复杂程度或层次的高低。)考查能力的复杂程度或层次的高低。n n(3 3 3 3)命题的技巧性。)命题的技巧性。)命题的技巧性。)命题的技巧性。-(四)区分度(四)区分度n n1 1 1 1、含义:、含义:、含义:、含义:n n区分度是指测验对区分度是指测验对区分度是指测验对区分度是指测验对被试被试被试被试实际水平的区分程度。实际水平的区分程度。实际水平的区分程度。实际水平的区分程度
9、。-2 2、区分度的评价标准、区分度的评价标准n n区分度区分度 评价评价n n0.400.40以上以上 非常良好非常良好n n0.30-0.390.30-0.39良好,如能改进更好良好,如能改进更好n n0.20-0.290.20-0.29尚可,用时需做改进尚可,用时需做改进n n0.190.19以下以下差差,必必须须淘淘汰汰或或改改进进以以提提高区分度后方可使用高区分度后方可使用 -3 3、提高区分度的方法、提高区分度的方法 n(1 1)使题目的难度适中,使整个考试难度适中)使题目的难度适中,使整个考试难度适中n(2 2)着重考察复杂的学习结果)着重考察复杂的学习结果 -(五)考试分数分布
10、图(五)考试分数分布图1.1.考试分数分布的决定因素考试分数分布的决定因素n(1 1)不同功能的测验形态不同)不同功能的测验形态不同n选拔性测验期望学生的测验分数呈现正态选拔性测验期望学生的测验分数呈现正态分布分布n合格水平测验希望学生成绩的分布呈现负合格水平测验希望学生成绩的分布呈现负偏态分布偏态分布-(2 2)学生整体水平不同形态不同学生整体水平不同形态不同n整体水平比较接近,根据测验难度呈偏态分布。整体水平比较接近,根据测验难度呈偏态分布。n测验难度一定时,如整体水平较高,则测验成绩测验难度一定时,如整体水平较高,则测验成绩的分布多呈负偏态分布;的分布多呈负偏态分布;n整体水平较低,则多
11、呈正偏态分布。整体水平较低,则多呈正偏态分布。-(3 3)教师和学生的积极能动性)教师和学生的积极能动性n师生双方都积极努力测验成绩可能会出现负偏态师生双方都积极努力测验成绩可能会出现负偏态n如果教师只关注优秀生,忽视中等生或学生缺乏如果教师只关注优秀生,忽视中等生或学生缺乏努力,那么学生成绩可能会出现严重离散的正态努力,那么学生成绩可能会出现严重离散的正态分布,甚至会出现正偏态分布。分布,甚至会出现正偏态分布。-(4 4)学生群体规模的大小)学生群体规模的大小n群体内学生人数足够多,且具有一定的异群体内学生人数足够多,且具有一定的异质性和随机性,那么他们的测验成绩可能质性和随机性,那么他们的
12、测验成绩可能会出现正态分布。会出现正态分布。n群体规模较小,那么会因为学生人数少而群体规模较小,那么会因为学生人数少而使测验成绩可能出现偏态分布,而非正态使测验成绩可能出现偏态分布,而非正态分布。分布。-(5 5)学生的学习时间和学习效率)学生的学习时间和学习效率n如果给予学生充足的学习时间,提高全体如果给予学生充足的学习时间,提高全体学生的学习效率,能使测验成绩呈负偏态学生的学习效率,能使测验成绩呈负偏态分布。分布。n学生学习时间紧张,中下等学生的学习效学生学习时间紧张,中下等学生的学习效率不高,那么测验成绩则可能形成正态或率不高,那么测验成绩则可能形成正态或正偏态分布。正偏态分布。-2 2
13、、如何利用参数进行考试分数控制、如何利用参数进行考试分数控制n(1 1)原始分数的平均分数的控制)原始分数的平均分数的控制n平均分数应该控制在平均分数应该控制在73-8073-80之间之间n考前命题考前命题,应参考上次考试成绩的平均分数应参考上次考试成绩的平均分数,适当作出调整适当作出调整-(2 2)标准差的控制)标准差的控制n标准差又称离散率标准差又称离散率,它反映了被考群体中高分与低它反映了被考群体中高分与低分之间的差距。分之间的差距。n标准差应该控制在标准差应该控制在8-158-15之间。之间。如果高出这个范围如果高出这个范围,说明试卷中的难题太难了说明试卷中的难题太难了,大部分大部分被
14、考无法作答被考无法作答低于这个范围低于这个范围,说明考题太容易了说明考题太容易了,试卷的分数无法拉试卷的分数无法拉开距离。开距离。n同样在考前命题时同样在考前命题时,应参考上次考试成绩的标准差应参考上次考试成绩的标准差,适当作出调整。适当作出调整。-三、考试质量怎么分析三、考试质量怎么分析n n(一)试卷质量的定性分析(一)试卷质量的定性分析n n1 1、分析测验目的的适宜性、分析测验目的的适宜性n n2 2、核检双向细目表、核检双向细目表n n3 3、评价试题编制质量、评价试题编制质量n n4 4、检查试题编排、试卷印刷和测验实施的、检查试题编排、试卷印刷和测验实施的质量。质量。-(二)试卷
15、质量的定量分析(二)试卷质量的定量分析n n1 1 1 1、对测验质量进行项目分析、对测验质量进行项目分析、对测验质量进行项目分析、对测验质量进行项目分析n n分析测验项目的难度、区分度以及对多重选择题分析测验项目的难度、区分度以及对多重选择题分析测验项目的难度、区分度以及对多重选择题分析测验项目的难度、区分度以及对多重选择题各选择项质量的分析等,并提出相应的改进策略。各选择项质量的分析等,并提出相应的改进策略。各选择项质量的分析等,并提出相应的改进策略。各选择项质量的分析等,并提出相应的改进策略。-2 2、对整个试卷质量作综合分析、对整个试卷质量作综合分析n分析测验平均分数、标准差;分数分布
16、曲线;效度、分析测验平均分数、标准差;分数分布曲线;效度、信度系数等。其中最重要的是对效度、信度的分析信度系数等。其中最重要的是对效度、信度的分析并提出相应的改进策略。并提出相应的改进策略。-教育系本科考试质量分析报告教育系本科考试质量分析报告n?学年第学年第1 1学期学期 教学单位:教学单位:教教 育育 系系 n任课教师:任课教师:?开课教研室:开课教研室:教育学教研室教育学教研室 n一、考试基本信息一、考试基本信息n课程名称:教育测量与评价课程名称:教育测量与评价 课程代码:课程代码:14021081402108n课程性质:专业必修课课程性质:专业必修课 考试班级:考试班级:0707级教育
17、学专业级教育学专业n总总 学学 时:时:5656学时学时 学学 分:分:2 2学分学分 n考试日期:考试日期:20082008年年1 1月月1616日日 考试人数:考试人数:4040人人n卷面总分:卷面总分:100100分分 考试类型方式:闭考试类型方式:闭 卷卷-二、考试成绩分析二、考试成绩分析(一)基本数据统计(一)基本数据统计 成成 绩绩 分分 析析分数分数段段人人数数比例比例90-1 12.50%85-111127.50%80-101025.00%75-7 717.50%70-4 410.00%65-4 410.00%60-1 12.50%55-2 25%合合计计4040100100标
18、准差:标准差:9.69.6(二)成绩分布情况分析(二)成绩分布情况分析n学生人数:及格人数,优秀人数,不及格人数,学生人数:及格人数,优秀人数,不及格人数,最高分,最低分,平均分,标准差。最高分,最低分,平均分,标准差。n从成绩分布图分析,主要原因。从成绩分布图分析,主要原因。-三、项目分析三、项目分析(一)项目基本情况(一)项目基本情况题题 号号一一单选题单选题二二判断题判断题三三简答题简答题四四论述题论述题 五五计算题计算题满满 分分20201010202020203030平均分平均分19.519.58.48.417.4517.459.0759.07523.9523.95最高分最高分202
19、01010191914143030最低分最低分18186 68 80 03 3难难 度度0.9750.9750.840.840.8730.8730.4540.4540.7980.798区分度区分度0.2780.2780.0920.0920.6720.6720.5990.5990.7940.794(二)项目质量分析(二)项目质量分析n1.1.单项选择题:满分,平均分,最高分,最低分,单项选择题:满分,平均分,最高分,最低分,难度、区分度较低。难度、区分度较低。n原因原因-四、试卷的质量分析四、试卷的质量分析n n(一)试卷的信度(一)试卷的信度n n(二)试卷的内容效度(二)试卷的内容效度n n(三)试卷的设计(三)试卷的设计n n(四)试卷的印刷(四)试卷的印刷n n(五)试卷的评阅(五)试卷的评阅-五、教学改进措施五、教学改进措施n n(一)(一)根据测验的质量分析结果,有针对根据测验的质量分析结果,有针对性地改进试题编制的质量性地改进试题编制的质量n n(二)根据测验的质量分析结果,有针对(二)根据测验的质量分析结果,有针对性地改进教学性地改进教学-
限制150内