《量化评价方法》PPT课件.ppt

第五章第五章 量化评价方法量化评价方法第一节第一节 量化评价方法概述量化评价方法概述一、量化评价方法含义量化评价方法含义 量化评价方法是一种运用数学、统计学工具，量化评价方法是一种运用数学、统计学工具，收集、处理评价对象资料，通过数量化的分析收集、处理评价对象资料，通过数量化的分析和计算，进而对评价对象作出价值判断的评价和计算，进而对评价对象作出价值判断的评价方法。方法。二、量化评价方法的类型二、量化评价方法的类型n（一）观察法（一）观察法 n观察法是评价者通过自身的感官或借助于一定的观察法是评价者通过自身的感官或借助于一定的科学仪器，有目的、有计划地对教育评价对象科学仪器，有目的、有计划地对教育评价对象的自然活动状态进行系统、深入地观察，以获的自然活动状态进行系统、深入地观察，以获得评价对象准确客观资料的方法。得评价对象准确客观资料的方法。n三个要素：观察的手段、观察的对象和观察对象三个要素：观察的手段、观察的对象和观察对象的状态。的状态。（二）调查法（二）调查法n调查法是在科学方法论和教育评价理论的指调查法是在科学方法论和教育评价理论的指导下，通过运用问卷、访谈、测验等科学方导下，通过运用问卷、访谈、测验等科学方式，有目的、有计划、系统的收集有关教育式，有目的、有计划、系统的收集有关教育评价的信息与资料的方法。评价的信息与资料的方法。（三）实验法（三）实验法n实验法是指研究者运用科学实验的原理和具体实验法是指研究者运用科学实验的原理和具体方法来研究教育现象和教育问题，并试图揭示方法来研究教育现象和教育问题，并试图揭示教育活动规律的方法。教育活动规律的方法。（四）（四）测量法测量法n测量法是指借助测量法是指借助一定的测量工具一定的测量工具对人的知识、对人的知识、技能和能力以及某些心理特征进行测量，从技能和能力以及某些心理特征进行测量，从而获得评价信息和资料的方法。而获得评价信息和资料的方法。第二节第二节 教育测量与评价教育测量与评价n测验测验是包括多个问题所构成的用来鉴别能力或是包括多个问题所构成的用来鉴别能力或性格个别差异的性格个别差异的工具。工具。n测量测量是指根据某种标准，将是指根据某种标准，将实施测验结果化为实施测验结果化为分数分数，用以表达受试者对所测问题了解多少的，用以表达受试者对所测问题了解多少的一种一种工作历程工作历程。n评价评价：指有系统地收集学生学习行为的资料，：指有系统地收集学生学习行为的资料，加以分析处理后，在根据预定的教学目标给予加以分析处理后，在根据预定的教学目标给予价值判断价值判断的历程。的历程。一、教育测量与评价的关系一、教育测量与评价的关系n教育测量教育测量是根据一定的理论、规则，运用一定的测量是根据一定的理论、规则，运用一定的测量工具对教育现象进行量化的方法和过程。工具对教育现象进行量化的方法和过程。n联系联系：教育测量是教育评价的基础，教育评价要在教教育测量是教育评价的基础，教育评价要在教育测量所获得的客观信息的基础上进行。同时，教育育测量所获得的客观信息的基础上进行。同时，教育测量的结果要通过评价才能获得实际意义，否则它只测量的结果要通过评价才能获得实际意义，否则它只是一堆抽象的数字而已，很难成为决策者有参考价值是一堆抽象的数字而已，很难成为决策者有参考价值的信息。的信息。区别：区别：1、方方法法不不同同，教教育育测测量量强强调调数数量量化化的的方方法法与与结结果果；教教育育评价强调价值判断。评价强调价值判断。2、实实施施过过程程不不同同，教教育育测测量量突突出出客客观观性性；教教育育评评价价是是客客观性与主体性的统一。观性与主体性的统一。3、实实施施任任务务不不同同，教教育育测测量量是是事事物物量量的的认认识识；教教育育评评价价反反映映的的既既是是该该事事物物的的过过程程和和终终点点，又又是是新新的的认认识识和和实实践活动的起点践活动的起点。二、教育测量的信度与效度二、教育测量的信度与效度n信度信度，是指可靠性或一致性程度。测验的信，是指可靠性或一致性程度。测验的信度，是指测验结果的可靠性或一致性程度。度，是指测验结果的可靠性或一致性程度。n效度效度是指有效性程度。测验的效度，是指测是指有效性程度。测验的效度，是指测验实际测量出其所要测量的特质的程度。验实际测量出其所要测量的特质的程度。第三节第三节 标准化测验标准化测验 n标准化测验标准化测验是指测验全过程的标准化。测验全过程包括是指测验全过程的标准化。测验全过程包括试卷编制过程、施测过程、评分记分过程、分数合成与试卷编制过程、施测过程、评分记分过程、分数合成与分数解释过程，每一个过程都有严格规定和要求。分数解释过程，每一个过程都有严格规定和要求。n标准化测验一般由专家编制，建有题库，根据一定的理标准化测验一般由专家编制，建有题库，根据一定的理论抽选试题，同时试题都是经过预测的。这些被抽选的论抽选试题，同时试题都是经过预测的。这些被抽选的试题所组成的测验在信度和效度上都有数量指标作为证试题所组成的测验在信度和效度上都有数量指标作为证据。测验的实施误差受到严格控制，测验的分数解释也据。测验的实施误差受到严格控制，测验的分数解释也有确定意义。标准化测验的目的就在于尽量减少测量误有确定意义。标准化测验的目的就在于尽量减少测量误差，使测验结果能更准确地反映学生的知识和能力的水差，使测验结果能更准确地反映学生的知识和能力的水平。平。一、标准化测验的特点一、标准化测验的特点n（一）测验水平代表性强（一）测验水平代表性强n（二）测验对象受限较小（二）测验对象受限较小n（三）测验分数稳定可靠（三）测验分数稳定可靠n（四）测验题型全面有效（四）测验题型全面有效n（五）测验程序科学可控（五）测验程序科学可控二、标准化测验的设计与实施二、标准化测验的设计与实施n（一）标准化测验的设计（一）标准化测验的设计n 1、命题计划设计、命题计划设计n 测验内容与目标关系双向细目表测验内容与目标关系双向细目表测验内容、目标与题型双向细目表测验内容、目标与题型双向细目表测验题型与难度、内容双向细目表测验题型与难度、内容双向细目表2、测验试题的设计、测验试题的设计n（1）试题的分类）试题的分类n客观性试题客观性试题n主观性试题主观性试题（2）客观性试题的编制）客观性试题的编制n客观题主要包括了填空题、填图题、判断题、客观题主要包括了填空题、填图题、判断题、改错题、选择题等。改错题、选择题等。选择题选择题n1、选择题的结构、选择题的结构n选择题是由一个题干和几个选项组成。选择题是由一个题干和几个选项组成。n题干一般是提出问题，或是待完成的句子。题干一般是提出问题，或是待完成的句子。n选项是供被试选择的几个真假不明的答案。选项是供被试选择的几个真假不明的答案。2、选择题的优缺点、选择题的优缺点n 优点优点n（1）可以用来测量学生各种不同层次的学习结果）可以用来测量学生各种不同层次的学习结果n（2）评分标准统一、客观）评分标准统一、客观n（3）可以加大试题容量）可以加大试题容量n（4）有利于考察被试思维的敏捷性和准确的判断力）有利于考察被试思维的敏捷性和准确的判断力n（5）结果可以用来进行诊断）结果可以用来进行诊断 缺点缺点n（1）编制费时而且需要技巧）编制费时而且需要技巧n（2）选择题难以考核推理、综合等能力）选择题难以考核推理、综合等能力n（3）无法考察被试的思考过程）无法考察被试的思考过程n（4）被试可以猜测）被试可以猜测3、选择题的类型、选择题的类型n（1）单项答案选择）单项答案选择n（2）最佳答案选择）最佳答案选择n（3）复式答案选择）复式答案选择n（4）多项答案选择）多项答案选择4、选择题的编制原则、选择题的编制原则n（1）题干意义完整并能表达一个确定的问题）题干意义完整并能表达一个确定的问题n（2）题干简明）题干简明n（3）少用否定结构，尽可能采用正面陈述）少用否定结构，尽可能采用正面陈述n（4）诱答项具有似真性）诱答项具有似真性n（5）不能有暗示线索）不能有暗示线索n（7）选项力求简短精炼）选项力求简短精炼n（8）尽量避免）尽量避免“以上皆是以上皆是”、“以上都不是以上都不是”选项选项 是非判断题是非判断题n是非题是要求学生对一则陈述的命题给予是非题是要求学生对一则陈述的命题给予是是非（正误）判断非（正误）判断的一种试题形成，也叫正误的一种试题形成，也叫正误题或判断题。题或判断题。n 是非题的是非题的优点优点是：编写相当容易，回答和评分都是：编写相当容易，回答和评分都很方便，取样范围较广，可以有效地测量学生对一很方便，取样范围较广，可以有效地测量学生对一些知识点的掌握情况。些知识点的掌握情况。n 是非题的是非题的缺点缺点是：第一，是非题测量的常常是一是：第一，是非题测量的常常是一些较低水平的细节性的知识点，而不易测量一般原些较低水平的细节性的知识点，而不易测量一般原理或对知识的应用、分析、综合、评价等。第二，理或对知识的应用、分析、综合、评价等。第二，是非题的猜测正确的概率是是非题的猜测正确的概率是50%50%，因此，它的可靠性，因此，它的可靠性较差。较差。是非题的编写原则是非题的编写原则n（1）考核的内容必须是重要的知识）考核的内容必须是重要的知识n（2）题目应多侧重理解能力）题目应多侧重理解能力n（3）一个题目中只能一个中心或一个正确答案）一个题目中只能一个中心或一个正确答案n（4）试题应该做到是非界限分明）试题应该做到是非界限分明n（5）题目陈述应该简单明了）题目陈述应该简单明了n（6）排列合理）排列合理 填空题填空题n填空题是要求学生在一个留有空白的未完成句填空题是要求学生在一个留有空白的未完成句子中填上适当的子中填上适当的词或短语词或短语以构成一个完整的句以构成一个完整的句子。子。n填空题可以用来考察被试对知识的记忆和理解填空题可以用来考察被试对知识的记忆和理解能力，特别适用于诊断性测验能力，特别适用于诊断性测验n评分比较客观，被试猜测的概率小评分比较客观，被试猜测的概率小n偏重于考察记忆能力偏重于考察记忆能力 编写原则编写原则n（1）题意明确，限定严格，应填答案唯一）题意明确，限定严格，应填答案唯一n（2）空白处填写的应该是关键词语，并且与上下文）空白处填写的应该是关键词语，并且与上下文有密切的联系有密切的联系n（3）题目中空白不能太多，不利于理解题意）题目中空白不能太多，不利于理解题意n（4）尽量将空白放在句子的后面或中间）尽量将空白放在句子的后面或中间n（5）所有的空白处线段长度一致）所有的空白处线段长度一致n（6）若答案是数字，应当指明单位和数字的精确程）若答案是数字，应当指明单位和数字的精确程度度（3）主观性试题的编制）主观性试题的编制n简答题简答题n1、简答题的特点、简答题的特点n（1）简答题适合用来测量被试对基本知识、概念和）简答题适合用来测量被试对基本知识、概念和原理的掌握、记忆情况原理的掌握、记忆情况n（2）编制简单、灵活）编制简单、灵活n（3）不受猜测因素影响）不受猜测因素影响n（4）无法考察综合、分析、评价等能力）无法考察综合、分析、评价等能力n（5）评分不够客观）评分不够客观2、简答题的类型、简答题的类型n（1）简释题，即名词解释题）简释题，即名词解释题n（2）直接回答题）直接回答题n（3）列举题）列举题n（4）简述题）简述题3、简答题的编制原则、简答题的编制原则n（1）问题叙述要明确）问题叙述要明确n（2）答案唯一、简短、具体）答案唯一、简短、具体n（3）避免只考机械记忆题，应注重知识应用）避免只考机械记忆题，应注重知识应用n（4）在考察公式的应用时，不要给太复杂的数）在考察公式的应用时，不要给太复杂的数据据n（5）尽可能直接提问）尽可能直接提问n 论文式试题论文式试题n 论文式试题是指要求学生用文字论述方式回答的题论文式试题是指要求学生用文字论述方式回答的题目，其目的在于评价学生的表达能力、组织能力以及目，其目的在于评价学生的表达能力、组织能力以及对各种不同领域的知识的综合能力。对各种不同领域的知识的综合能力。n 论文式试题的优点是：论文式试题的优点是：第一，提出问题很容易而第一，提出问题很容易而且很迅速，不像客观测验题需要很长时间去考虑和设且很迅速，不像客观测验题需要很长时间去考虑和设计；第二，可以使教师去评价学生对所学知识的组织计；第二，可以使教师去评价学生对所学知识的组织和分析、综合、评价等较高级的认知能力，而不仅仅和分析、综合、评价等较高级的认知能力，而不仅仅是对知识的简单记忆。是对知识的简单记忆。n论文式试题也有许多缺点：论文式试题也有许多缺点：n首先，论文式试题的最大缺点是评分困难，费时太多。首先，论文式试题的最大缺点是评分困难，费时太多。n其次，论文式试题评分主观性较强，信度较差。其次，论文式试题评分主观性较强，信度较差。n再次、论文式试题的取样范围较窄，只能涵盖教学内再次、论文式试题的取样范围较窄，只能涵盖教学内容中较小的百分比。容中较小的百分比。n如何编写论文式试题的建议：如何编写论文式试题的建议：n1.1.论文题的用语必须简单、清楚、明确。论文题的用语必须简单、清楚、明确。n2.2.标出每一问题的分值和限定回答的时间。标出每一问题的分值和限定回答的时间。n3.3.事先拟出每题的答案要点和评分标准。事先拟出每题的答案要点和评分标准。n4.4.对同一试题的评分集中一次完成。对同一试题的评分集中一次完成。n5.5.评分时不看学生的姓名。评分时不看学生的姓名。作文题作文题n1、作文题的类型、作文题的类型n根据提供的题目或材料的角度作文题分为命题作根据提供的题目或材料的角度作文题分为命题作文和条件作文。文和条件作文。n根据问题可以分为记叙文、说明文、议论文和应根据问题可以分为记叙文、说明文、议论文和应用文等。用文等。n根据对所提供材料的处理方式可分为缩写、改写、根据对所提供材料的处理方式可分为缩写、改写、扩写、续写等。扩写、续写等。2、作文题的编制原则、作文题的编制原则n根据考试的目的和需要确定考试作文的文体根据考试的目的和需要确定考试作文的文体要求。要求。n根据社会的需要、现实生活和学生的实际设根据社会的需要、现实生活和学生的实际设计命题。计命题。n具有针对性、公平合理。具有针对性、公平合理。n拓展发挥的空间。拓展发挥的空间。3、测验试卷的编辑、测验试卷的编辑n试题的选择试题的选择n试题的排列与分类试题的排列与分类n编写答题说明编写答题说明n编写试题的答案及评分标准编写试题的答案及评分标准n复查复查（二）标准化测验的实施（二）标准化测验的实施n 施测施测 评分评分 检验检验三、标准化测验结果的解释标准化测验结果的解释n如何使测验分数具有意义如何使测验分数具有意义n如何将测验分数报告给当事人如何将测验分数报告给当事人