计算机辅助教育评价.ppt

《计算机辅助教育评价.ppt》由会员分享，可在线阅读，更多相关《计算机辅助教育评价.ppt（80页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、1现在学习的是第1页，共80页本章简介 教育评价教育评价是现代教育管理与指导现代教育管理与指导的主要手段，其应用与研究的发展速度很快。计算机辅助教育的评价计算机辅助教育的评价是规范计算机辅助教育发展的重要手段。2现在学习的是第2页，共80页 本章主要介绍计算机辅助教育评价的计算机辅助教育评价的基本概念、评价方法基本概念、评价方法、评价内容与标准评价内容与标准及评价的实施评价的实施过程。通过计算机辅助教育的评价，可以引导教育软件教育软件系统更好地向有效性有效性、兼容兼容性性和共享性共享性方面发展。3现在学习的是第3页，共80页内容目录一、CBE评价的概念二、评价方法二、评价方法三、评价内容与标准

2、三、评价内容与标准四、评价的实施四、评价的实施4现在学习的是第4页，共80页学习要点 l.计算机辅助教学系统中的关键部分是教学软件教学软件，它是一种教育技术产品教育技术产品，因而对其评价是为了决定这种产品的价值，特别是判断判断它们的教育价值教育价值。2.计算机辅助教育软件的好坏和成败完全取决于设计人员的能力、知识和素质。某种程度上可以认为对于计算机辅助软件的评价实际上就是对于设计计算机辅助软件的评价实际上就是对于设计人员的设计思路、技术水平、合作能力的综合评人员的设计思路、技术水平、合作能力的综合评价价，因为计算机辅助教育软件是设计人员知识能力的一种整合性成果。5现在学习的是第5页，共80页

3、3.计算机辅助教学的评价中，最引起人们关注的问题是评价什么，依据什么来给出综合评分，这就是评价内容与标准评价内容与标准的问题。有了这些，任问组织与个人都可以自己来选择评价。4.了解评价内容与标准可以使开发者在开发中可以努力避免不允许、不赞同的条款，开发适应于标准的计算机辅助教学系统。6现在学习的是第6页，共80页一、一、CBECBE评价的概念评价的概念（一）评价（一）评价 评价是指由一些组织或机构对于评价是指由一些组织或机构对于某些事物、产品或过程的优点和价某些事物、产品或过程的优点和价值的判断过程。值的判断过程。7现在学习的是第7页，共80页 评评价价是泛指衡量人物与事物的价值，价值的解释是

4、指事物的用途和积极作用。美国教育学家斯克里汶指出：评评价价是“决定事物、产品或过程的优优点点和价值价值的过程。”8现在学习的是第8页，共80页评价的分类评价的分类 依据不同的分类标准，可以对教学评价种类作不同的划分。按评价基准的不同，可分为相对评价和绝对评价；按评价功能的不同，可分为诊断性评价、形成性评价和总结性评价；按照评价方法的不同，还可分为定性评价与定量评价。9现在学习的是第9页，共80页评价基准评价基准：绝对评价(absolute evaluation)相对评价(relative evaluation)对比绝对位置相对位置（百分制、职称评定）（标准分、指标机制）对比评价基准评价基准10

5、现在学习的是第10页，共80页相对评价：相对评价：是在被评价对象的群体中建立基准(通常以该群体的平均水平作为这一基准),然后把该群体中的各个对象逐一与基准进行比较,以判断该群体中每一成员的相对优劣。绝对评价绝对评价：是将教学评价的基准建立在被评价对象的群体之外（通常以教学大纲规定的教学目标为依据来制定这一基准），再把该群体中每一成员的某方面的知识或能力与基准进行比较，从而判定其优劣。11现在学习的是第11页，共80页评价内容评价内容：过程评价 成果评价各个环节、阶段取得的成果分析方法分析方法：定性评价 定量评价做出定性结论定性结论评价的方法等级法 评定法做出数量化结果数量化结果的评价方法 评语

6、定量法 加权定量评定法12现在学习的是第12页，共80页评价时间和任务：评价时间和任务：诊断性评价形成性评价总结性评价学习过程学习过程前测确定妨碍学习的原因总结起点指导及时调整、矫正教学评定、鉴定动态性过渡性13现在学习的是第13页，共80页1.诊断性评价 诊断性评价诊断性评价也称“教学前评价教学前评价”，一般是指在某项教学活动开始之前对学生的知识、技能以及情感等状况进行的预测。通过这种预测（前测前测）了解学生的知识基础和准备状况，以判断判断他们是否具备实现当前教学目标所要求的条件实现当前教学目标所要求的条件，为实现因材施教提供依据。14现在学习的是第14页，共80页2.形成性评价（Forma

7、tive Evaluation）形成性评价是指在所评价的事物、过程与产品的发展和设计过程过程中对其所做的评价。评价的主要目的目的是发现对象的不足之处发现对象的不足之处和可以改进之处和可以改进之处，以调整其过程的进行方式或修改设计，完善和提高它的价值。例如:课堂教学中采用的小测验小测验是一种形成性评价形成性评价。通过小测验，了解学生接收情况和教学效果。15现在学习的是第15页，共80页3.总结性评价（Summative Evaluation）总结性评价总结性评价是指评价对象（过程、产品与事物）完成或制作出来后所进行的评价。这类评价的主要目的目的是判断与衡量评判断与衡量评价对象的推广与应用价值价对

8、象的推广与应用价值，以便向社会公众和潜在应用人员介绍，促进其在适当范围内得到适当应用。例如，入学测验入学测验是一种总结性评价总结性评价分数说明对知识掌握的情况，名次反映该生的相对水平。16现在学习的是第16页，共80页（二）计算机辅助教育的评价（二）计算机辅助教育的评价计算机辅助教育的评价是衡衡量量和估估计计计算机辅助教育的活动过程或是计算机辅助教育系统产品的教教育育应应用用价价值值的过程。17现在学习的是第17页，共80页 教育评价的常用方式教育评价的常用方式实验组控制组外界条件相似教学测量采集数据分析处理教学测量采集数据分析处理成绩差异价值判断CAI教学传统教学（1 1）实验研究方式）实验

9、研究方式18现在学习的是第18页，共80页优缺点：优缺点：客观公正的判断评价结果 有价值出发点可行的实验数据与实验方法科学理论作指导大量的人力，物力支持来进行实验设计、测试观察取得数据适用范围：不可能广泛使用于各种中小型课件的评价，只是在大型计算机辅助教育课题的评价中才使用。19现在学习的是第19页，共80页美国教育考试中心（ETS)对有代表性的CAI系统PLATO进行评价：五个校区每个校区300名学生被试四名有经验的评价专家组织计划五个校区五个学科30名教师参加评价实验态度问卷调查教师学生兴趣学习成绩测试现场观察记录结论：PLATO系统对学生的成绩没有明显的正面或反面的持续影响分 析 处 理

10、评 价 报 告11项正影响4项明显12项负影响1项明显23项问题中20现在学习的是第20页，共80页 由一些有经验的计算机辅助教育评价人员，通过检查文档资料、观察与记录课件运行状况、依据预定的目标体系与自己对许多课件应用的观察体验，衡量和估计课件的教育应用价值。优点：主要由评价专家参加，人力物力比较节省。优点：主要由评价专家参加，人力物力比较节省。（2）专家评价方式）专家评价方式21现在学习的是第21页，共80页将产品推荐给用户，用户使用一段时间后提出意见或建议。一般情况下用户出具有关使用证明。(3)用户调查方式22现在学习的是第22页，共80页（三）CBE的评价过程 CBE的评价过程如框图所

11、示。23现在学习的是第23页，共80页CBE的评价过程24现在学习的是第24页，共80页（四）CBE评价的作用+1.帮助决策，促使教育行政部门对课件的认可，帮助教师、家长如何选择课件和使用课件。+2.帮助推广应用，选择课件的依据。+3.提高产品质量，进行形成性评价形成性评价有效地保证系统的质量；总结性评价总结性评价将指导今后课件的开发。25现在学习的是第25页，共80页二、评价的实现方法二、评价的实现方法 计算机辅助教育评价工作的进行方式多种多样，但它们都是一个系统过程，包括以下几个阶段：收集信息阶段分析处理信息阶段判断及报告阶段 26现在学习的是第26页，共80页(一)信息收集的方法从开发者

12、处收集信息 在试验运行中收集信息 从现场教学中采集信息 教学活动后采集信息27现在学习的是第27页，共80页1.从开发者处收集信息从开发者处收集信息评价组织从开发者处可得到：程序、使用说明书评价组织从开发者处可得到：程序、使用说明书及其它文档资料，及其它文档资料，评价组织让开发者填写登录表：使用领域、适应评价组织让开发者填写登录表：使用领域、适应学生水平、教学方式、目标、先行条件、内容简学生水平、教学方式、目标、先行条件、内容简述等。述等。这些信息可供评价人员判断开发者的开发目标这些信息可供评价人员判断开发者的开发目标与实施情况是否相符，以作出教育价值判断。与实施情况是否相符，以作出教育价值判

13、断。表1 一个典型的教育软件登录表28现在学习的是第28页，共80页29现在学习的是第29页，共80页2在试验运行中收集信息在试验运行中收集信息 试验运行是由少数专业评价人员对某一计算机辅助教育系统，按其所假定环境与学生情况进行环境设置，模拟学生运行该系统并进行人机会话，观察计算机所显示的内容对学生输入的判断及反馈教学内容呈现的顺序等等，进行分析记录。30现在学习的是第30页，共80页3从现场教学中采集信息从现场教学中采集信息 让一批真正的学生在实际教学环境中使用CAI系统，并收集有关信息。信息采集的方式信息采集的方式有以下两种：(1)观察记录法 (2)联机结果记录法 31现在学习的是第31页

14、，共80页(1)观察记录法观察记录法 观观察察记记录录法法就是在现场应用的自然情境中观察师生的应用情况，并且记录能反映教育价值的表现与行为。32现在学习的是第32页，共80页观察的内容主要有：各个使用者运行该系统各段及总体所耗时间所遇到的难点在何处，为什么有这些困难，是否要求教师帮助使用者在运行中的情感反映和学习态度上的表现，等等。33现在学习的是第33页，共80页(2)联机结果记录法 联机结果记录法联机结果记录法是利用CAI系统中的人机会话活动来采集有用的信息，从而实时、客观、准确地记录教学活动进行的情况，帮助评价其教育价值。34现在学习的是第34页，共80页4教学活动后采集信息教学活动后采

15、集信息 在让师生使用某些CAI系统后，由评价人员对使用该系统的师生进行调查，或是让学生进行后测试等，收集对评价有用的信息。35现在学习的是第35页，共80页(1)调查法由调查人员预先拟定一份调查问卷，分发给参与现场教学的师生填写，或是与他们逐个面谈，并且作好记录。表5.4(2)测试法 与按常规方法进行教学活动的一批学生进行对比，看看有否差异，差异是正向的(用系统的学生掌握得好些)、还是负向的(用系统的学生掌握得差些)，这就是测试法。36现在学习的是第36页，共80页(二)信息处理方法 1非数据类型信息的处理 主要处理办法是归归纳纳整整理理列出一系列清单，分类保管，以利于查询：.文档资料清单.必

16、须改正的错误清单.修改建议清单.应用建议清单37现在学习的是第37页，共80页2数据类型信息的处理 数据类型信息数据类型信息包括：各题(各单元)花费的时间错误回答次数错误率数据型信息分析流程数据整理核查录入处理38现在学习的是第38页，共80页数据处理方法加权累计法加权累计法第j个评价人对CBE系统的评判分：评价小组给CBE系统的综合评判分：39现在学习的是第39页，共80页三、评价内容与标准 什么叫评价内容体系？把笼统的教育价值细分为一系列可以观察或测量的、便于处理、判断的信息分量，从而评价人员可以从各个方面来观察、衡量教育价值，并以此为依据得出综合判断。这种CBE系统的教育价值的结构化体系

17、称为CBE评价内容体系。40现在学习的是第40页，共80页（一）评价内容体系的建立 1评价体系建立的基本原则(1)完备性(2)合理性(3)可操作性 （1）完备性 建立的评价内容体系应该完整反映教育价值的各个阶段、各个层次与各个方面。（2）合理性 应该科学地反映教育价值的本质属性 各项不应有相互冲突的现象 不应有明显有利于某类型、某些学习阶段、某些学科内容、某种教育领域或某种教学模式的应用等倾向 41现在学习的是第41页，共80页(3)可操作性各评价项目应是可以观察或记录下来的现象和行为表现，不能有含意不明、难以判断的项目。评价项目应该相当精细而不繁琐，一方面可以观察判断，同时又不会造成评价人员

18、过多的工作量。收集的信息应该便于分析处理，要特别注意各项之间的相互独立性，避免各项相关性而造成某一因素在总价值中地位上升的现象 42现在学习的是第42页，共80页2建立评价内容体系的系统方法(1)调查综合法 这是一种自底向上的体系建立方法。首先，由调查人员通过书面征求意见、面谈、座谈会等方式，了解教师、学生、管理人员、计算机辅助教育研究开发人员等各类人员对计算机辅助教育的价值衡量特征的意见。然后进行综合分析，得出体系结构。43现在学习的是第43页，共80页(2)系统分析法 这是一种从“顶”向下的体系建立方法。这个“顶”就是计算机辅助教育的任务。首先由一些专家讨论计算机辅助教育的评价应有几个方面

19、，列成清单；然后看清单上各项是否可以观测、评定处理；如果没有一般化内容，就可以检查完备性；否则，对于不易于观测的一般化内容，应进一步讨论如何划成可操作性内容，如此重复。这样从粗到细的分析方法得出的评价体系是一种层次式的结构。44现在学习的是第44页，共80页（二）一些有代表性的评价体系（1）美国数学教师协会软件评审表（2）Micro SIFT(教师用微机软件及资料)课件评价表（3）电子学习杂志课件评价表（4）美国软件行业协会测评表（5）中华学习机教育软件评审标准45现在学习的是第45页，共80页（5）中华学习机教育软件评审标准a评价指标及分值评价指标及分值：1.功能性 50分2.可靠性 10分

20、3.使用性 20分4.程序设计技巧 10分5.软件商品化的程度 10分46现在学习的是第46页，共80页教育软件合格的标准：总分60分；功能性的“教学目标”栏8分；功能性的“科学性”栏8分。47现在学习的是第47页，共80页（三）各种评价体系主要评价内容道德法规教学目标编程技术48现在学习的是第48页，共80页（四）我国的中小学教育软件审查标准1.教学性要求(55分)(一级指标)1.1 教学目标(15分)（二级指标）1.2 教学内容(20分)1.3 教学过程(20分)2.技术性要求(35分)2.1 程序运行(10分)2.2 信息呈现(10分)2.3 用户界面(15分)3.文档资料要求(10分)

21、49现在学习的是第49页，共80页（五）我国申报电子教材及课件评议标准1.教学性指标(40分)1.1 教学内容水平(14分)；1.2 科学思想水平(14分)；1.3 交互反馈水平(6分)；1.4 媒体规范水平(6分)2.软件指标(30分)2.1 软件运行水平(15分)；2.2 软件操作水平(6分)2.3 辅助功能水平(9分)3.媒体指标(30分)3.1 媒体质量水平(12分)；3.2 整体设计水平(10分)3.3 智能化水平(8分)4.附加分(10分)50现在学习的是第50页，共80页1.教学性指标(40分)1.1 教学内容水平(14分)(1)教学适应性(4分)：符合本学科或课程要求，教学目标

22、明确，取材合适，深度适宜，分量适度。(2)认知规律性(4分)：符合学生认知规律，逻辑性强，富有启发性，便于学生学习，有利于能力培养。(3)结构合理性(4分)：教学内容组织及其结构合理，学习路径明确，知识关联清晰。(4)生动趣味性(2分)：表达知识生动趣味，能引起和保持学习者的学习兴趣和注意力。51现在学习的是第51页，共80页1.教学性指标(40分)1.2 科学思想水平(14分)(1)科学先进性(7分)：能反映本学科国内外科学研究和教学研究的先进成果。(2)思想正确性(7分)：符合辩证唯物主义，弘扬民族文化精华，无政治性和政策性错误。52现在学习的是第52页，共80页1.教学性指标(40分)1

23、.3 交互反馈水平(6分)(1)教学交互性(3分)：人机交互性强，学习进度可控，学习路径可选，交互参数可设。(2)评价反馈性(3分)：习题和思考题质量高，题型适当，设计水平高，操作简便，具有较好的学习评价和反馈。53现在学习的是第53页，共80页1.教学性指标(40分)1.4 媒体规范水平(6分)(1)文字与图标(3分)：文字表达规范，字体、字号和色彩适合阅读，图表清晰准确，符号、公式和计量符合国标。(2)音视频素材(3分)：讲解、配音和对白的教学水平高，标准普通话播音，视频的制作符合电教片规范。54现在学习的是第54页，共80页2.软件指标(30分)2.1 软件运行水平(15分)(1)软件运

24、行(5分)：软件安装方便，运行正常，可靠性高，兼容性强，退出与中断后恢复原系统状态。(2)软件性能(5分)：功能能正确无误，划分明确合理，响应速度快。(3)软件容错性(5分)：软件对错误输入和错误操作的容错性强。55现在学习的是第55页，共80页2.软件指标(30分)2.2 软件操作水平(6分)(1)用户指导(3分)：附有用户手册，内容完整，表述简明，便于使用。(2)操作使用性(3分)：操作界面友好，步骤明确，使用简便。56现在学习的是第56页，共80页2.软件指标(30分)2.3 辅助功能水平(9分)(1)求助与管理(3分)：求助功能强，具有一定的管理功能。(2)性价比(4分)：教学软件的教

25、学性能价格比高。(3)开发扩展性(2分)：具有较好的内容调制、组合、更新、和补充等开放性和扩展性功能。57现在学习的是第57页，共80页3.媒体指标(30分)3.1 媒体质量水平(12分)(1)界面设计(5分)：界面设计简明，布局合理，色彩协调，美观大方，重点突出。(2)素材质量(7分)：音效质量高，图片、录像清晰，动画生动准确，技术指标高。58现在学习的是第58页，共80页3.媒体指标(30分)3.2 整体设计水平(10分)(1)媒体选择(3分)：根据教学内容优选图、文、声、像等媒体类型。(2)媒体优势(3分)：解决教学重点和难点的水平高。(3)教学设计(4分)：多媒体教学设计水平高。59现

26、在学习的是第59页，共80页3.媒体指标(30分)3.3 智能化水平(8分)(1)检索书签功能(3分)：检索、学习记录和书签功能较强。(2)智能性(3分)：具有较好的人工智能性和专家系统性。(3)媒体辅助功能(2分)：具有多种媒体的学习提示，交叉参考，导航和定位等辅助功能。60现在学习的是第60页，共80页4.附加分(10分)附加分(10分)：有显著特色与创新，显著提高教学效率，受益面广。61现在学习的是第61页，共80页四、评价的实施 评价工作人员的组织与培训 评价的实施过程 撰写报告62现在学习的是第62页，共80页（一）评价工作人员的组织与培训 1.实施评价的工作组织 2.评价人员的选择

27、 3.评价人员的培训63现在学习的是第63页，共80页课件评价人员的组织结构评价计划组评价计划组计划安排选拔人员培训组织外界联系人员组成人员组成计划人员行政人员课件管理组课件管理组登录、筛选、分类、保管、评后综合分析、信息发布准备人员组成人员组成软件管理人员统计分析人员初评人员课件评审组课件评审组各学科课件评审人员组成人员组成评价专家（可以是兼职人员）64现在学习的是第64页，共80页（二）评价的实施过程 1形成型评价的实施系统需求分析系统设计实现评价设计评价系统实现分析评价开发过程评价过程65现在学习的是第65页，共80页初步合格未完完不合格2.总结型评价的实施 筛选信息采集所有情况完了准备

28、文件(描述)设置学生情况归纳与记录综合评价试用与观察停止登录准备报告66现在学习的是第66页，共80页（三）基于网络的评价实施方案数据库数据库服务器服务器端系统管理员Web服务器Internet客户端CAI软件评价员CAI软件开发商普通用户其他身份验证培训请求评价请求E-mail查询请求67现在学习的是第67页，共80页（四）教学软件评价核心指标体系软件名称生产厂商科目（打）（小学/初中/高中）（语文数学/英语/历史/地理/化学/物理/等）软件类型（打）（个别指导/练习与操练/教学游戏/模拟/问题解答/备课/课堂演示/等）评价日期 年 月 日评 价 者姓名职称电话对以下认为需要评价的项目进行评

29、价，认为不需要的项目画去支持材料ABCD可靠性教学内容教学目标信息呈现过程控制数据管理68现在学习的是第68页，共80页（四）CAI软件评价基本框架 CAI软件评价基本框架如图5所示。69现在学习的是第69页，共80页70现在学习的是第70页，共80页CAI 软件评价基本框架规定的评价过程 首先评价组织要了解CAI 软件的一般特征，包括其类型、科目、教学目标等，将明显不合格的软件剔除。在制订评价计划阶段，评价组织的主要工作是根据被评软件特征选择合适的评价人员，针对被评软件特征及评价人员类别构造适当的指标体系。71现在学习的是第71页，共80页 由于不同人员专业领域及兴趣点的不同，他们对决定软件

30、质量的诸多因素看法不一，因此相应的指标体系应各有侧重。在人员及其各自适用的指标体系确定之后，评价组织制订教学软件评价的进度计划。实施评价计划阶段的主要任务是培训评价人员并监督他们的具体评价过程，那些已经多次参与过教学软件评价的人员可以不参加培训。72现在学习的是第72页，共80页然后进入具体的评价实施阶段。评价人员在接受培训之后，首先亲自试用软件，然后利用评价组织构造的具有针对性的指标体系对被评软件评定等级。在此基础上，确定是否有必要观察学生的使用情况。若没有必要，可提交初步评价的结果；若有必要，则观察学生的使用情况，并通过问卷或者访谈等方式获取学生的态度信息。然后向评价组织提交评价结果，同时

31、建议是否需要进行教学实验。73现在学习的是第73页，共80页 评价组织根据收集的评价结果及建议，确定是否需要对被评软件进行教学实验。一般来说，只有在欲将某软件进行大面积推广时，才有必要采用教学实验以确定其教学效果。这是因为虽然实验能提供有关软件质量的客观数据，但牵扯的人力、物力多，耗时耗资，故不可能对每个软件都一一采用。74现在学习的是第74页，共80页 如果需要进行教学实验，则首先由评价组织选择试点学校，然后评价组织、评价人员以及实验学校三方面合作共同完成实验。通过针对被评软件特征设计试卷并进行前测、让学生使用软件进行学习、后测等多个步骤，测量学生在使用软件学习后，在多大程度上掌握了软件所欲

32、教授的知识与技能，以获取有关软件教学效果的数据。75现在学习的是第75页，共80页 如果不需要进行教学实验，则直接由评价组织总结评价结果总结评价结果即可。总结评价结果阶段的工作主要有汇总各阶段评价结果、分析处理数据、撰写评价结果报告等。此外，评价结果中还可能包含有普通用户使用软件后的一些反馈信息。76现在学习的是第76页，共80页 如果评价组织根据被评软件特征选择的评价人员包括学生这一特殊类别，那么学生的具体评价过程只包括试用软件和指标体系评定两个阶段，而且这个指标体系是专门为他们设计的，只包括那些应当由他们进行评定的指标如软件的易用性、动机激发等。77现在学习的是第77页，共80页 通过这样安排，就可以针对不同类型、科目和教学目标的软件采取不同的评价人员与评价方法的组合，进行灵活而客观的评价。同时，软件评价的结果应采取适当渠道公布于众，给软件用户及开发者提供决策支持信息。78现在学习的是第78页，共80页作业：1计算机辅助教育的作用？2信息收集的方法？3.我国的中小学教学软件审查标准？4.比较课件评价、教材评价以及计算机软件测试，分析其异同处？5.什么叫评价内容体系？79现在学习的是第79页，共80页 THE END 80现在学习的是第80页，共80页