试卷与试题分析方法简介.ppt

试卷与试题分析方法简介试卷的编制2.组织命题确定三种题目的比例（基础题、能力题、拓展题）命题蓝图与双向细目表审题3.组织阅卷4.试卷评价1.测试目标与命题一.试卷质量 二.试题质量 试卷评价1.考试目的（通过性、选拔性、两者兼有）适宜性分析2.试卷内容的有效性分析3.试卷编排的合理性分析 试卷质量定量分数段定性-覆盖面定量-目标关联效度试题应由易到难定性-内容效度、结构效度试题质量1.试题的区分度与难度3.选择题项目的选答比率分析 5.答题的典型错例分析 2.试题的信度与效度4.试题特征曲线1.考试目的（通过性、选拔性、两者兼有）适宜性分析观察试卷总得分的分数段07年初三语文总分分数段分数段 频数 百分率 累极百分率0-49 34 0.52 0.52 50-59 17 0.26 0.77 60-69 43 0.65 1.43 70-79 97 1.47 2.90 80-89 263 3.99 6.89 90-99 658 9.98 16.87 100-109 1508 22.88 39.75 110-119 2342 35.53 75.27 120-129 1454 22.06 97.33 130-139 174 2.64 99.97 140-150 2 0.03 100.00 Total 6592 100 高三语文分数段 人数 百分率 累计百分率0-49 172 2.80 2.80 50-59 15 0.24 3.04 60-69 68 1.11 4.15 70-79 296 4.81 8.96 80-89 1005 16.34 25.30 90-99 1999 32.50 57.80 100-109 2015 32.76 90.55 110-119 538 8.75 99.30 120-129 41 0.67 99.97 130-139 2 0.03 100.00 Total 6151 100.00 100.00 初三高三初三高三高三数学分数段 人数 百分率 累计百分率0-49 388.00 6.31 6.31 50-59 174.00 2.83 9.14 60-69 251.00 4.08 13.22 70-79 398.00 6.47 19.69 80-89 528.00 8.58 28.27 90-99 715.00 11.62 39.90 100-109 954.00 15.51 55.41 110-119 1104.00 17.95 73.35 120-129 918.00 14.92 88.28 130-139 490.00 7.97 96.24 140-150 231.00 3.76 100Total 6151.00 100.00 100.00 07年初三数学总分分数段分数段 频数 百分率 累计百分率0-49分 358 5.43 5.4350-59分 104 1.58 7.0160-69分 136 2.06 9.0770-79分 206 3.13 12.2080-89分 293 4.44 16.6490-99分 470 7.13 23.77100-109分 901 13.67 37.44110-119分 1169 17.73 55.17120-129分 1376 20.87 76.05130-139分 1258 19.08 95.13140-149分 314 4.76 99.89150分 7 0.11 100.00Total 6592 100 初三高三初三高三07年初三外语总分分数段分数段 频数 百分率 累极百分率0-49分 373 5.66 5.66 50-59分 190 2.88 8.54 60-69分 215 3.26 11.80 70-79分 253 3.84 15.64 80-89分 326 4.95 20.59 90-99分 358 5.43 26.02 100-109分 539 8.18 34.19 110-119分 755 11.45 45.65 120-129分 1200 18.20 63.85 130-139分 1623 24.62 88.47 140-149分 759 11.51 99.98 150分 1 0.02 100.00 Total 6592 100 高三外语分数段 人数 百分率 累计百分率0-49 309.00 5.02 5.02 50-59 185.00 3.01 8.03 60-69 278.00 4.52 12.55 70-79 514.00 8.36 20.91 80-89 695.00 11.30 32.21 90-99 879.00 14.29 46.50 100-109 986.00 16.03 62.53 110-119 1087.00 17.67 80.20 120-129 897.00 14.58 94.78 130-139 312.00 5.07 99.85 140-150 9.00 0.15 100Total 6151.00 100.00 初三 高三初三高三选拔为目的1.确定选拔的分数范围例1:初三能进入普高约为全体考生的60%语文总分百分位表中60%处的分数为125分2.作频数分布表和图作语文总分在125分以上 每隔2-3分的频数分布表和图3.观察各分数段的人数和百分率 能否达到选拔的要求初三语文在115分以上分数段 人数 百分率 累计百分率0-114 3777 57.30 57.30 115-116 490 7.43 64.73 117-118 460 6.98 71.71 119-120 474 7.19 78.90 121-122 383 5.81 84.71 123-124 343 5.20 89.91 125-126 250 3.79 93.70 117-128 175 2.65 96.36 129-130 116 1.76 98.12 139-141 63 0.96 99.07 131-132 40 0.61 99.68 133-134 13 0.20 99.88 135-136 6 0.09 99.97 137-138 1 0.02 99.98 145-146 1 0.02 100.00 Total 6592 100 100初三例2:高三我区能进入本科约为考生的64%语文百分位表在该处分数是95分作95分以上的频数分布表和图语文96分以上分数段 人数 百分率 累计百分率0-94 2436 40.69 40.69 95-96 436 7.28 47.98 97-98 454 7.58 55.56 99-100 470 7.85 63.41 101-102 468 7.82 71.23 103-104 480 8.02 79.25 105-106 381 6.36 85.62 107-108 280 4.68 90.29 109-110 191 3.19 93.48 111-112 139 2.32 95.81 语文96分以上分数段 人数 百分率 累计百分率113-114 104 1.74 97.54 115-116 72 1.20 98.75 117-118 32 0.53 99.28 119-120 28 0.47 99.75 121-122 4 0.07 99.82 123-124 4 0.07 99.88 125-126 3 0.05 99.93 127-128 2 0.03 99.97 129-130 1 0.02 99.98 131-132 1 0.02 100.00 Total 5986 100.00 高三效 度一.内容效度二.目标关联效度三.结构效度试卷与课程标准的符合情况 测试分数与能够体现测试目标的效标分数 之间的一致程度对双向细目表进行分析测试内容与预定要测的目标的一致性程度测验分数在多大程度上测量或解释了某种理论构想试卷各题得分与总分 的相关度作定量分析初三07年1月 语文1 语文2 语文3 语文4 语文5 语文6 语文7语文总语文总Pearson Correlation0.66 0.49 0.54 0.46 0.71 0.74 0.77 1Sig.(2-tailed)0 0 0 0 0 0 0N 6592 6592 6592 6592 6592 6592 6592 6592Pearson 相关系数越大其效度越高初三07年1月 数学1数学2数学3数学4数学5数学6数学7数学8数学9数学10数学11数学总数学总Pearson Correlation0.85 0.64 0.53 0.54 0.74 0.72 0.80 0.77 0.66 0.78 0.49 1 Sig.(2-tailed)0 0 0 0 0 0 0 0 0 0 0 N 6579 6579 6579 657965796579 657965796579657965796579初三07年1月 外语1外语2外语3外语4外语5外语6外语7外语8外语总外语总Pearson Correlation0.91 0.89 0.89 0.81 0.86 0.94 0.90 0.88 1 Sig.(2-tailed)0 0 0 0 0 0 0 0 N658665866586658665866586658665866586 07模拟考语文 07中考语文07模拟考语文 Pearson 1 0.6995279 显著性（双侧）0 N 5311 5311 07模拟考数学 07中考数学07模拟考数学 Pearson 1 0.8501468 显著性（双侧）0 N 5311 5311 07模拟考英语 07中考英语07模拟考英语 Pearson 1 0.9021569 显著性（双侧）0 N 5310 5309某次测试与另一次测试的效度(模拟考与中考)试题难度=1实得分满分初三年月 难度语1 0.095 语2 0.151 语3 0.147 语4 0.446 语5 0.331 语6 0.357 语7 0.228 语总0.265 初三年月 难度数一0.16 数二0.22 数三0.06 数三0.10 数三0.15 数三0.10 数三0.29 数四0.18 数四0.43 数四0.36 数四0.88 数总难度0.27 初三年月 难度英 0.18 英 0.23 英 0.28 英 0.21 英 0.19 英 0.20 英 0.47 英 0.26 英总难度0.25 试题的区分度 区分度=高分组得分率低分组得分率高分组:由总分的前31%的学生组成低分组:由总分的后31%的学生组成某试题的区分度=高分组学生在该题的平均得分率 低分组学生在该题的平均得分率试题的区分度 区分度=高分组得分率低分组得分率初三年月 区分度数一（1）0.29 数二（2）0.31 数三（3）0.17 数三（4）0.26 数三（5）0.48 数三（6）0.32 数三（7）0.64 数四（8）0.49 数四（9）0.83 数四（10）0.69 数四（11）0.30 区分度的评判标准区分度 评价.以上 非常良好.良好.尚可.以下 差区分度与难度的关系区分度 难度0 1.0.90.6 0.71 0.50.6 0.30.2 0.10 0初三年月 区分度数一0.29 数二0.31 数三0.17 数三0.26 数三0.48 数三0.32 数三0.64 数四0.49 数四0.83 数四0.69 数四0.30 初三年月 难度数一0.16数二0.22数三0.06数三0.1数三0.15数三0.1数三0.29数四0.18数四0.43数四0.36数四0.88信 度信度是指测试结果的准确程度或可信程度(外在信度与内在信度)外在信度:不同时间进行测试时的一致程度 如:重测信度:求同一测验的两次测试的相关系数 一般要求信度系数在0.7以上 常用肯德尔和谐系数来分析评分者的信度评分者信度:不同评分者对实际得分的影响例:有A B C 三为教师给6篇作为评分N 1 2 3 4 5 6A 25 30 27 20 28 32B 22 26 21 20 25 30C 15 20 18 14 21 22将分数转换为等级N 1 2 3 4 5 6A 5 2 4 6 3 1B 4 2 5 6 3 1C 5 3 4 6 2 1Ri 14 7 13 18 8 3肯德尔和谐系数.常用Cronbachs Alpha 来计算内在信度例:初三英语(07年1月)的系数=0.934高三英语(07年1月)的系数=0.927内在信度测试各题之间的内在一致性的程度内在信度系数在0.8以上,表示其一致性程度高nn1(SD2SD2i)SD2N测 验 题 的 数量SD2 测验分数的方差SD2每道题方差之和信度和效度的关系信度是效度的必要条件,效度高，信度一定高；但信度高,效度不一定高 在数值上效度不会大于信度的平方根效度最大值信度选择题项目的选答比率分析 题号 正确选项选项分布率（）空1 92 0.97 3.57 3.64 2 1.21 2.5 12.29 84 3 0.57 6.57 90.21 2.64 4 5.14 73.43 2.21 19.14 0.075 17.93 6.36 71.29 4.21 0.21第1题:B项迷惑性过弱第2题:A项迷惑性过弱第3题:A项迷惑性过弱第4、5题反应正常试题特征曲线按总分得分由低分组到高分组 在该题的得分率做曲线例:07年1月高三化学第5、7题的特征曲线作试题特征曲线的方法1.作该试卷总分的百分位表 按由低分到高分分成10组2.统计上述10组学生在各试题的平均得分率编号 百分位 化5得分率 化7得分率1 0-9%0.05 0.03 2 10-19%0.72 0.47 3 20-29%0.74 0.55 4 30-39%0.77 0.62 5 40-49%0.78 0.67 6 50-59%0.79 0.71 7 60-69%0.81 0.77 8 70-79%0.83 0.83 9 80-89%0.83 0.88 10 90-100%0.86 0.94 3.作曲线图偏度:指分布不对称的方向和程度 0分布为右偏或正偏 0分布为左偏或负偏峰值：分布形态徒缓程度 分布图形尖销或峰突程度 0高峰度，比较尖 0低峰度，比较平坦谢 谢