课程考试试卷分析报告(共16页).doc

精选优质文档-倾情为你奉上0709课程考试试卷分析报告2007年12月 东北财经大学网络教育学院一、 我院14套试卷的试卷定量统计指标数据统计及定性分析本次课程考试答题卡科目的成绩数据应筛选（试卷考试人数大于85人），最后确定对11门课程的14套试卷进行指标数据分析，如下表所示：序号课程名称卷别命题教师试卷统计指标(1)试卷统计指标(2)试卷人数及格率平均分优秀率标准差难度信度区分度效度1大学体验英语（基础教程）A张秋艳99892%7512%120.750.790.280.312大学体验英语1A21494%710%60.710.430.150.183大学体验英语2A99896%730%70.730.630.160.194大学体验英语3A12985%690%110.690.780.250.275基础会计A张捷99891%7815%140.780.450.300.236基础会计BC99892%8234%140.820.480.300.267工程造价管理A余明99898%772%80.770.590.170.178工程造价管理B15494%723%80.720.560.190.189工程项目管理A张振东62199%8645%90.860.780.200.2010工程项目管理B8587%7727%140.770.860.340.3411建设工程经济（一级建造师）AB刘禹33594%8131%140.810.900.290.2612建设工程项目管理（一级建造师）A24195%732%130.730.910.250.2313建设工程法规及相关知识（一级建造师）A9591%758%130.750.890.290.2714工程进度与质量控制A何杨214100%764%70.760.480.170.17指标平均值93%7613%110.760.680.240.23指标为优秀的参考区间90%100%70808%25%6120.70.80.80.30.414套试卷的各项指标平均值中，区分度、信度指标平均值略低于优秀参考区间，位于良好区间，效度指标平均值远低于优秀参考区间，位于较差区间，其他指标平均值都在正常优秀参考区间内。下面对14套试卷的各项指标逐一分析其分布情况：1. 及格率：14套试卷的及格率分布在85%100%之间，其中有86%的试卷落在“优秀”区间；平均及格率为93%，也介于“优秀”参考区间90%100%。评定：（最优是：，以下同）2. 平均分：14套试卷的平均分分布在6986之间，其中有72%的试卷落在“优秀”区间；平均的平均分76分，也介于“优秀”参考区间7080。评定：3. 优秀率：14套试卷的优秀率分布在0%45%之间，其中仅有21%的试卷落在“优秀”区间，58%试卷落在“较差”区间，可见虽然能有好的及格率，但是优秀的成绩并不多。平均优秀率为13%，也介于“优秀”参考区间8%25%。评定：4. 标准差：14套试卷的标准差的分布是在614之间，其中有50%的试卷落在“正常”区间，剩余50%均落在“较大”参考区间，可见学生总体看还是成参差不齐，分布范围广。平均标准差为11，也介于“正常”参考区间612。评定：5. 试卷难度：14套试卷的试卷难度的分布是在0.690.86之间，其中有72%的试卷落在“优秀”区间，平均难度为0.76，也介于“优秀”参考区间0.70.8。评定：6. 试卷区分度：14套试卷的试卷区分度的分布是在0.150.34之间，其中仅有21%的试卷落在“优秀”区间：3，而79%的试卷落在“良好”区间。区分度没有优秀的原因大致是试题难度偏低，致使区分度不高，另外部分真题出现在模拟试题中，也等于变相降低试题难度。平均区分度为0.24，介于“良好”参考区间0.150.3。评定：7. 试卷信度：14套试卷的试卷信度的分布是在0.430.91之间，其中仅有29%的试卷落在“优秀”区间：0.8，42%落在“较差”区间0.6，试卷信度偏低，说明测试结果的可靠性不高，随机误差较大。影响信度的因素主要是测试人数多少，试题的难度、区分度大小，再有就是受到测验题目数量的影响，题目数越多，信度才会越高。平均信度为0.68，介于“良好”参考区间0.60.8。评定：8. 试卷效度：14套试卷的试卷效度的分布是在0.170.34之间，其中没有试卷落在“优秀”区间，仅有14%落在”良好”区间0.30.4，剩余86%的试卷均落在“较差”区间0.3，试卷效度较差说明试卷不能够很好的测量出它所要测量的目标，即测试出学生的真实水平。对于测验的测量目标是什么、对于所要测量的目标能测到什么程度都不能够很好的体现。影响试卷效度的因素有试题本身的质量（关系到试卷命题规范）；考场纪律是否良好，学生是否能够独立作答；试卷命题是否考虑成人特点等。平均效度为0.23，介于“较差”参考区间0.3。评定：9. 成绩分布：14套试卷中，3套试卷呈正态分布，2套试卷呈双波峰分布，其他9套试卷成绩分布都呈现负偏态。10.A、B卷分析比较：14套试卷中，基础会计、工程造价管理以及工程项目管理三个科目针对A、B两套试卷分别进行比较分析：课程名称A、B卷综合评述题型题量试卷统计指标1（平均分、及格率、优秀率、标准差）试卷统计指标2（难度、信度、区分度、效度）基础会计一致B卷较多B卷除优秀率高出A卷外，其他指标基本一致所有指标基本一致A、B卷存在一定差距，相对而言B卷更优试题统计指标（1）和（2）模非模所有真题难度：基本一致区分度：B卷略好难度：A卷略好区分度：B卷较好难度：A卷略好区分度：B卷较好工程造价管理题型题量试卷统计指标1（平均分、及格率、优秀率、标准差）试卷统计指标2（难度、信度、区分度、效度）A、B卷存在一定差距，相对而言B卷更优。较其它两门课程两套试卷差距最小一致一致基本一致基本一致试题统计指标（1）和（2）模非模所有真题难度：B卷略好区分度：B卷略好难度：B卷略好区分度：A卷略好难度：B卷略好区分度：B卷略好工程项目管理题型题量试卷统计指标1（平均分、及格率、优秀率、标准差）试卷统计指标2（难度、信度、区分度、效度）A、B卷存在一定差距，相对而言B卷更优一致一致A卷前三项指标高于B卷，最后一项低于B卷A卷第一项指标高于B卷，其他三项低于B卷试题统计指标（1）和（2）模非模所有真题难度：B卷略好区分度：B卷略好难度：B卷较好区分度：B卷更好难度：B卷较好区分度：B卷较好二、 我院14套试卷的试题定量统计指标数据统计及定性分析试题定量指标数据分析主要是针对试卷中各题目的难度和区分度指标分布结构的统计及分析，试卷中的真题分为两种情况，“被用作模拟试题”和“非用作模拟试题”，被用作模拟试题的真题因为学生可以提前复习到，所以测量结果的参考价值不如非用作模拟试题的真题测量结果大，难度偏低、区分度较差。下面依照两种体现形式分别对各题目的难度和区分度指标分布结构进行分析说明：第一种：是将试卷所有真题按照是否用作模拟试题分别统计其难度和区分度指标的分布结构（表1）第二种：是将所有真题作为一整张试卷，综合所有题目分析难度和区分度指标的分布结构（表2）：专心-专注-专业序号课程名称卷别试题统计指标（1）试题总数用作模拟题真题（以下简称模） （%）非用作模拟题真题（以下简称非模） （%）占总题数占总分值难度区分度占总题数占总分值难度区分度偏低适中偏高较差尚可较好非常好偏低适中偏高较差尚可较好非常好1大学体验英语（基础教程）A4540%46%94%6%0%100%0%0%0%60%54%33%48%19%4%11%11%74%表12大学体验英语1A4160%51%100%0%0%75%25%0%0%40%49%10%60%30%40%30%12%18%3大学体验英语2A4152%45%100%0%0%100%0%0%0%48%55%29%36%36%44%5%20%31%4大学体验英语3A4160%51%92%0%8%22%57%12%8%40%49%10%54%36%40%6%0%54%5基础会计A4546%48%90%5%5%88%5%2%5%54%52%51%37%12%20%29%31%20%6基础会计BC5350%50%92%4%4%68%26%6%0%50%50%74%19%8%19%8%25%49%7工程造价管理A4544%45%100%0%0%100%0%0%0%56%55%52%28%20%28%44%16%12%8工程造价管理B4542%43%95%5%0%68%21%11%0%58%57%46%35%19%42%23%15%19%9工程项目管理A5046%46%96%4%0%100%0%0%0%54%54%85%11%4%26%26%19%30%10工程项目管理B5044%44%91%5%5%73%14%9%5%56%56%50%43%7%14%14%18%54%11建设工程经济（一级建造师）AB8075%70%97%3%0%60%27%8%5%25%30%40%55%5%5%0%25%70%12建设工程项目管理（一级建造师）A8075%70%85%3%12%68%18%12%2%25%30%25%55%20%20%0%20%60%13工程进度与质量控制A4547%46%95%5%0%95%5%0%0%53%54%33%46%21%38%25%17%21%14建设工程法规及相关知识（一级建造师）A8075%70%92%8%0%68%7%3%22%25%30%20%40%40%40%15%15%30%指标平均值54%52%94%3%2%78%15%5%3%46%48%40%40%20%27%17%17%39%参考区间40%60%部分真题因被用作模拟题，因而分析难度和区分度指标得出测量结果一般是“偏低”和“较差”，所以并不能很好测量试题本身的难度和区分度，因而也就无所谓真正意义上的“优秀”参考区间。60%40%35%55%50%40%15%5%0%10%10%20%60%50%30%20%序号课程名称卷别表2试题统计指标（2）所有题目难度分布 （%）所有题目区分度分布 （%）偏低适中偏高较差尚可较好非常好模非模合计模非模合计模非模合计模非模合计模非模合计模非模合计模非模合计1大学体验英语（基础教程）A38%20%58%2%29%31%0%11%11%40%2%42%0%7%7%0%7%7%0%44%44%2大学体验英语1A60%4%63%0%24%24%0%12%12%42%19%61%15%12%27%0%5%5%0%7%7%3大学体验英语2A52%14%66%0%17%17%0%17%17%52%21%73%0%2%2%0%10%10%0%15%15%4大学体验英语3A55%4%59%0%22%22%5%15%20%13%16%29%34%2%37%7%0%7%2%24%27%5基础会计A41%28%69%2%20%22%2%7%9%40%11%51%2%16%18%1%17%18%0%13%13%6基础会计BC46%37%83%2%9%11%2%4%6%34%9%43%13%4%17%1%14%15%0%25%25%7工程造价管理A44%29%73%0%16%16%0%11%11%44%16%60%0%24%24%0%9%9%0%7%7%8工程造价管理B40%27%67%2%20%22%0%11%11%29%24%53%4%18%22%4%9%13%0%11%11%9工程项目管理A44%46%90%2%6%8%0%2%2%46%14%60%0%14%14%0%10%10%0%16%16%10工程项目管理B40%28%68%2%24%26%2%4%6%32%8%40%6%8%14%4%10%14%2%30%32%11建设工程经济（一级建造师）AB73%10%83%3%14%16%0%1%1%45%1%46%20%0%20%6%6%13%4%18%21%12建设工程项目管理（一级建造师）A64%6%70%3%14%16%9%5%14%51%5%56%14%0%14%9%5%14%1%15%16%13工程进度与质量控制A44%18%62%2%24%27%0%11%11%44%20%64%2%13%16%0%9%9%0%11%11%14建设工程法规及相关知识（一级建造师）A69%5%74%6%10%16%0%10%10%51%10%61%5%4%9%3%4%6%16%8%24%指标平均值51%20%70%2%18%20%1%9%10%40%13%53%8%9%17%3%8%11%2%17%19%参考区间35%55%50%40%15%5%0%10%10%20%60%50%30%20%（一）试题难度数据分析1. 测算试题难度有以下三个主要用途：计算试卷难度；判断试卷所有题目的难度分布结构是否合理：如果试卷难度不合理，可作为修改试题难度的依据。2. 试卷难度指标只能在最终结果上直观判断试卷难度是否合理，但是试卷所有试题的难度分布结构也是一个重要的指标，只有在难度分布结构和试卷难度值都达到“优秀”时，才能判定一套试卷的难度是合理的。以下是试题难度分布结构指标分析：参考区间试题难度分布偏低适中偏高35%55%50%40%15%5%3. 凡是被用作模拟题的真题，无论试题本身难度如何，在命题试卷所需要计算试卷难度指标时，应该直接将用作模拟试题的真题难度默认成“偏低”，并在此基础上，与其他非用作模拟试题的真题求难度指标的加权平均数，作为整个试卷的难度指标。4. 以下是用作模拟试题、非用作模拟试题、所有真题三种情况下，试题难度分布比较：以上三图经过比较明显得出：（1）用作模拟试题的真题难度普遍都非常低，但仍有个别试卷的个别试题的难度出现良好和偏高，可能的原因是模拟试题只公布主观题的答题要点，客观题不公布答案，学习中心没有很好组织学生进行模拟试题参考答案整理，同时学生也没有重视模拟试题的复习。（见表1）（2）非用作模拟试题的真题的难度分布相对比较合理些，不过，只有1套试卷（蓝色）完全落在参考区间内，4套试卷（紫色）较靠近参考区间。剩余9套试卷中，2套试卷（黄色）落在参考区间之下，即偏易，7套试卷（绿色）落在参考区间之上，即偏难。（见表1）（3）所有真题难度分布图，是将以上俩图区分度进行综合，显然更不够理想，主要问题是“偏难”一档基本上能落在参考区间，但是“偏低”和“适中”分布不能很好落在参考区间，而是“偏低”居多、“适中”偏少，致使试卷整体难度偏低。具体来看，没有试卷完全落在参考区间，4套试卷较靠近参考区间，剩余10套试卷中，落在参考区间之下，即偏易（见表2）。5. 再分析表2，难度指标各层次分布结构中，用作模拟题的真题与非用作模拟题的真题比例由易到难依次呈现下降趋势：² “偏低”一档用作模拟题的真题与非用作模拟题的真题比例平均为2：1² “适中”和“偏高”两档，用作模拟题的真题与非用作模拟题的真题比例平均为1：10各层次难度用作模拟题的真题与非用作模拟题真题比例如下图所示：偏 低低适 中低偏 高低（二）试题区分度数据分析1. 原则上我们要求试题的区分度越高越好，但事实上，因为受到试题难度及其分布结构的影响，每道试题不可能都做到区分度非常好，因此对于试题区分度指标的分布结构也有一个大致的参考区间：参考区间试题区分度分布较差尚可较好非常好0%10%10%20%60%50%30%20%2. 以下是用作模拟试题、非用作模拟试题、所有真题三种情况下，试题区分度布比较：14套试卷中非用作模拟题的真题的区分度区间分布图4%40%44%40%20%19%28%42%26%14%5%20%38%40%11%30%5%6%29%8%44%23%26%14%0%0%25%15%11%12%20%0%31%25%16%19%18%25%20%17%15%74%18%31%54%20%49%12%19%30%54%70%60%21%30%15%0%10%20%30%40%50%60%70%80%90%100%大学体验英语（基础教程）A大学体验英语1A大学体验英语2A大学体验英语3A基础会计A基础会计BC工程造价管理A工程造价管理B工程项目管理A工程项目管理B建设工程经济（一级建造师）AB建设工程项目管理（一级建造师）A工程进度与质量控制A建设工程法规及相关知识（一级建造师）A较差尚可较好非常好以上三图经过比较明显得出：（1）用作模拟试题的真题区分度分布不尽合理，有4门试卷所有试题的区分度都落在“较差”区间，个别试卷的个别试题因受到难度指标影响，落在“尚可”区间，而“非常好”和“较好”区间的试题廖廖无几。（见表1）（2）非用作模拟试题的真题的区分度分布相对比较合理些，不过仍不够理想，只有2套试卷（蓝色）完全落在参考区间内，3套试卷（紫色）较靠近参考区间。剩余9套试卷中，4套试卷（黄色）试题区分度为“非常好”和“较好”不足40%，5套试卷（绿色）试题区分度为“非常好”和“较好”不足50%。（见表1）（3）所有真题区分度分布图，是将以上俩图区分度进行综合，显然更不够理想，没有试卷完全落在或较靠近参考区间。14套试卷中，8套试卷区分度为“非常好”和“较好”低于30%以下，4套试卷试题区分度为“非常好”和“较好”接近40%，仅有2套试卷试题区分度为“非常好”和“较好”接近50%（见表2）。3. 再分析表2，区分度指标各层次分布结构中，用作模拟题的真题与非用作模拟题的真题比例由差到好依次呈现下降趋势：² “较差”一档用作模拟题的真题与非用作模拟题的真题比例平均为4：1² “尚可”一档用作模拟题的真题与非用作模拟题的真题比例平均为1：1² “较好”一档用作模拟题的真题与非用作模拟题的真题比例平均为1：3² “非常好”一档用作模拟题的真题与非用作模拟题的真题比例平均为1：8各档难度用作模拟题的真题与非用作模拟题真题比例如下图所示：四、存在问题及改进意见通过以上相关指标的数据分析结果，得出目前存在的问题及如下改进意见：1. 试卷难度需再小幅增大，试题难度分布结构需调整：增加“适中”难度的试题比例，降低“偏低”难度的试题比例，控制“偏高”难度的试题比例。2. 试卷区分度偏低有待提高，试题区分度分布结构不合理也需调整。由于学院组织的课程考试面向对象的特点以及考试的性质，决定试卷命题的难度在0.70.8为宜，而难度与区分度关系非常密切，难度越高，区分度相对越低，我们既要保证难度控制在合理范围内，同时还要具备较高的区分度，这对于教师规范、合理命题就提出较高要求，因此学院应该加强对教师的命题技巧的相关培训。3. 试卷信度、效度非常低，即数据测量的可靠性和有效性非常低，这说明测量考试比没有很好的测量出预期目标。提高考试信度和效度的方法有：² 试卷题目数量适当（至少60道），不能过少；² 测量学生人数不能过少，应该达到一定规模(100人以上为宜)，使学生成绩分布范围尽量广；² 在充分了解学生特点前提下，紧密围绕教学大纲和教学目标组织命题，体现成人特点；² 命题内容应该尽量全面，并能有效代表学生应该掌握的知识领域；² 题目类型不可单一，应该多元化；合理分配试题难度分布结构，使测验分数的分布范围尽量广，提高测量稳定性；² 避免出现偏题、怪题，以重点知识为命题内容；² 加强巡考人员考场纪律监控力度，确保考试能够顺利、有效、公平进行。4. 建议学习中心加强对学生的考前辅导工作，尤其是水平低下的学生给予适当的辅导，可以是以考前串讲的形式组织辅导，也可以就模拟试题组织系统辅导；同时学院应加强推进及做好考前值机答疑，缩小学习差与学习好的同学之间的差距，能够在保证较高及格率的基础上同时提高优秀率。5. 降低或调节用作模拟题的真题比例，由原来可以达到60%，限制到最高不能超过50%。6. 将试卷分析结果作为依据，继续修订及完善试卷及论文命题规范。