心理与教育测验的编制讲稿.ppt

心理与教育测验的编制第一页，讲稿共三十六页哦对测验编制者的忠告：不是任何时候都要自己编测验！n心理测验的编制是一门科学，又是一门艺术。需要依靠统计分析，又要用逻辑推理。n1、在很多情况下，测验只是获得所需资料的几种方法之一。n2、可以用公认的有效出版的测验，不一定非自己编。第二页，讲稿共三十六页哦第一节第一节 编制心理与教育测验的编制心理与教育测验的基本程序基本程序 一、编制测验的一般原则一、编制测验的一般原则 目的性、典型性、灵活性、科学性原则二、编制测验的基本程序二、编制测验的基本程序 一般要经过以下几个步骤：确定测验目的。制定编题计划。编辑测验项目。预测与分析。合成测验。测验标准化。鉴定测验。编写测验说明书。第三页，讲稿共三十六页哦编制测验的流程图（供参考）编制测验的流程图（供参考）第四页，讲稿共三十六页哦（一）确定测验目的（一）确定测验目的n在这一步主要要解决3个问题：1、明确测量对象n2、明确测量目标 目标分析（用外显行为将测量目标的具体化和操作化）n3、明确测量用途 描述、选拔、诊断、验证假设。第五页，讲稿共三十六页哦例如:工作任务分析nWhether or not some construct is unidimensional depends on the purpose to which you want to put the measurements.Being good at school workgood at Englishgood at mathgood at sciencespeakinglisteningwritingreading第六页，讲稿共三十六页哦目标分析：目标分析：“大学生非智力因素测验大学生非智力因素测验”的编制的编制n定义非智力因素：我们知道非智力因素是指除智力因素外的影响智力活动的个性心理因素包括：个性倾向性（需要、动机、兴趣、价值观、理想、信念）、气质、性格（认知特征、态度特征、情绪特征、意志特征）。n基本逻辑：与智力因素相互作用，同时又对大学生的学习产生影响。n原则：要测量的心理特质不是所有的非智力因素，而是在智力活动中起重要作用的因素，与智力因素相互作用；这些因素对大学生现在的学习及将来的学习都会产生影响，而不是现在起作用将来不起作用了；而且这些因素在优秀生身上有多方面的优异发展，能与一般学生甚至差生区分开来。n按照以上原则，通过查阅文献、参考他人研究，咨询专家，对大学生访谈等，最后确定了十一个因素：1、学习热情 2、学习计划 3、考试焦虑4、情绪稳定 5、专业兴趣 6、好胜心 7、成就动机 8、自尊心 9、自律性10、独立性 11、有恒性。第七页，讲稿共三十六页哦（二）制定编题计划（二）制定编题计划n编题计划是编制测验的总体构思。编题计划要明确的信息主要有两个方面：一是全面而具代表性的测验内容，不致使测题偏离了应测的范围；二是对各个内容点的相对重视程度，通常用百分比来标明。编题计划主要有两个用途：编题计划主要有两个用途：编题计划指明了应该编哪些方面的测验项目以及编多少项目，因此，测题编制结束后，可比照计划核对测验项目是否反映了所要的测量的领域。在记分可按计划中百分比确定每类测验项目的分数标准。第八页，讲稿共三十六页哦编题计划构思的途径n（1）分解中心概念，构建问卷框架。例如上例中讲到的需要概念的分解。再如考察中学生的素质教育现状，可把中心概念“素质”分解为思想道德素质、心理素质、身体素质、文化科学素质等方面进行研究。n（2）以理论为根据，构建问卷框架。例如我国有学者研究人生价值观，就是根据著名心理学家（Rokeach）把“价值观分为工具性价值观（实现人生价值的手段）和终极性价值观（实现人生价值的目的）”的观点，而构建其问卷结构的。n（3）设计开放性问题，作试探性的小规模调查，构建问卷框架。例如研究社会生活价值观，通过开放性问卷，可归纳出人们对待生活的态度主要有：享乐性、事业性、沉溺性等13类，以这13类构建问卷的框架。n此外，还可通过文献查阅、个案研究方式收集资料，构建问卷框架。第九页，讲稿共三十六页哦（三）编辑测验项目（三）编辑测验项目1 1、收集测验资料、收集测验资料 收集测验资料应该遵循的原则：n资料要丰富。n资料要有普遍性 n资料要有趣味性 第十页，讲稿共三十六页哦2 2、选择测验材料的方法、选择测验材料的方法n（1）理论法：理论推演法的特点是以理性的逻辑或已知的人格理论作为测验编制的基础。测验者根据要测的人格概念，找出有关的行为、情绪状态、信念等，编成具体项目。然后，再依据试测的结果与理论假设是否一致，对初始量表进行项目分析、修改、并建立常模。n典型例证：爱德华个人偏好量表（EPPS）、显相焦虑量表（MAS）第十一页，讲稿共三十六页哦n（2）经验效标法：以经验效标法编制人格测验，对要测的人格特质，并不需具有既定的理论基础或假设。编者对测验项目的选择完全是以实证资料为依据，即只保留那些能够将效标组与控制组分开的项目，而不管其内容看起来是否合理。n典型的经验效标法量表有：明尼苏达多相人格调查表（MMPI）；加洲心理量表（CPI）第十二页，讲稿共三十六页哦n（3）因素分析法：这种方法的理论假设是，如果一项人格测验能真正测量要测的特质，那么它包含的各测验项目必须具有显著的内部一致性。使用此法编制测验时，编制者要根据对某一问题已有的各方面知识，编制大量项目，施测于大样本，然后将所得资料进行因素分析，最后得到的一个或几个因素即代表这些项目所测的人格结构。编制者可将具有显著因素负荷量的项目保留，进行因素命名，并组成一个人格测验。n因素分析量表的典型代表：16PF和EPQ。第十三页，讲稿共三十六页哦3、选择项目形式 n廖世承、陈鹤琴早在几十年前曾提出的几条原则 n使受测者容易明了测验方法。使受测者在完成测验时不会因测验项目的形式不当而作错。测验过程省时。计分省时省力。经济。第十四页，讲稿共三十六页哦n优点：优点：内容取样全面；编写简易性；评分简易性。n缺点：缺点：强调机械记忆；依赖于绝对判断；容易引起猜测n编写原则：编写原则：n题目应能测量重要的教学目标；n每题只包含一个观念。避免有两个以上观念造成题目的似是而非、半对半错；n是非题的答案必须是明确的而非有争议的n叙述要简单明了，避免语言复杂导致阅读能力的干扰；n应尽量避免使用否定词n避免使用具有暗示性特殊词汇、模棱两可的、定性的词汇；n正确答案与错误答案比例相当，且随机排列n测题要多，至少要3050个。（1）是非题（正误题）编写原则：第十五页，讲稿共三十六页哦n优点：优点：适合测量多种目标；书写量减少；评分客观；可有多个答案，考察学生的辨别能力；有多项答案，减少猜测成分。n缺点：缺点：命题费时，编写困难。n编写原则：编写原则：n选项要多些，避免被试的猜测（4-5个），最好是多项选择题。n同一测验每题后的答案个数要相等n题目选项要么都简单，要么都详细，要一致n每题的备选答案要以简短为宜，必要的叙述、相同的词句放在题干中n少用“以上皆是”或“以下皆非”的答案n对错答案随机排列，使被试无法猜测。n（2）选择题编写原则第十六页，讲稿共三十六页哦n优点：优点：编制相对简单；消除猜测；题量可以增加n局限性：局限性：计分困难；主要测查机械记忆。n编写题目注意的问题编写题目注意的问题：n每句话缺得是重要字句，且和上下文有密切联系。n只有唯一答案，最好只能用一个词填n空格不宜过多。不要因留下空格而丧失题意的完整性n不应照抄原句，助长学生死记硬背的学风n空白放在句子的后边，不宜放在前边n空白长度大小要一致n（3）填空题（简答题）编写原则第十七页，讲稿共三十六页哦n优点：能测量组织材料的能力、综合能力、文字表达能力、评价、创造能力、发散性思维等多种能力；准备简单，题目少；不允许被试猜测和死记硬背；允许自由作答；实用性强；出题节约时间。n缺点：取样不广且不均匀，缺乏代表性；评分主观不一致；评分易受无关因素的影响；测查知识面有限，费时n原则原则：n一般情况下，当能用客观题时就不用论文题的形式n任务明确，使被试了解要求n题目不宜太多n编写题目是就有一个理想的答案（4）论文题编写原则第十八页，讲稿共三十六页哦n刺激项目与反应项目位置清楚，一般反应项目在右边。n匹配项目不宜过多或过少，最好使用不完全匹配。615个项目，反应项目多2-3个。n匹配方法要有明确规定和说明n同一组的题干与选项最好印在同一页。（5）匹配题（只测量简单记忆力）选题原则）匹配题（只测量简单记忆力）选题原则第十九页，讲稿共三十六页哦（6）操作测验题选题原则）操作测验题选题原则n明确操作所测量目标，将其具体化。n指导语简单明确。n记分方法确定。第二十页，讲稿共三十六页哦4、编写测验项目 这是一个反复的过程：包括订正意思不明确的语句；删改重复不当的项目；增加有用的题目等。n在编写测验项目时要注意在编写测验项目时要注意：1.取样应当对欲测心理品质具有代表性。比例适当。2.取材范围要同编制计划所列项目范围相一致。3.难度应有一定的分布范围。4.用语力求精炼简短，浅显明了。5.初编题目的数量要多于最终所需要的数量，以便筛选或编制复本。6.测验项目的说明必须简明。7.项目互相独立，互不暗示。8.除非另有目的，项目不应该包含对答案有暗示或提示性的信息。9.避免歧视性或伤害性语言，包括不当的涉及社会禁忌和个人隐私。10.便于施测，评分简洁，格式不要引起误解。第二十一页，讲稿共三十六页哦（四）预测与项目分析（四）预测与项目分析 1 1、预测、预测 预测的目的在于获得被试对测验项目做何种反应的资料。它既能提供那些题目意义不清、容易引起误解等质的信息，又能提供测验项目优劣的量的指标。预测应注意的问题是预测应注意的问题是：n预测对象应取自将来正式测验时准备施用的群体，虽然人数不必太多，但要具有代表性。n预测的情境应力求同正式测验的情境一致。n预测的时限可以适当延长，以便每一受测者都能将题目做完。n施测者应对受测者的反应加以记录。2 2、项目分析、项目分析 第二十二页，讲稿共三十六页哦（五）合成测验（五）合成测验 1、测验项目的选择n测验的性质n项目的难度n项目的区分度 2、测验项目的编排n并列直进式 n混合螺旋式 3、编制复本 第二十三页，讲稿共三十六页哦（六）测验标准化（六）测验标准化 标准化是指测验的编制、施测、评分以及解释测验分数的程度是一致性。(按照一定的方法和程序去编制和使用的心理测验，叫标准化测验)1、测验内容 2、施测过程 n相同的测验情境 n相同的指导语 n相同的测验时限 3、测验评分 4、测验分数的解释 第二十四页，讲稿共三十六页哦（七）鉴定测验（七）鉴定测验n测验编好后,必须对其可靠性和有效性进行鉴定，以便确定该测验是否可用。对测验的鉴定，主要是确定其信度系数和效度系数。第二十五页，讲稿共三十六页哦（八）编写测验说明书（八）编写测验说明书n测验说明书向测验使用者说明如何使用该测验，依次才能保证测验的信度和效度。说明书应包括下列内容：n0 0.一般情况，标题名称、作者、实测形式、记录形式1.本测验的目的与功用。2.本测验的理论依据。3.测验内容及实施测验的方法，包括何种测验；内容分几部分；每部分有多少测验项目；如何作答等等。4.测验的标准答案和评分方法。5.关于测验的信度、效度资料的说明。6.常模表，即如何依据常模解释测验结果。包括常模取得的条件、时间等。第二十六页，讲稿共三十六页哦第二节第二节 测验的实施测验的实施 n一、一、测验的实施过程测验的实施过程（一）施测前的准备工作 n（二）指导语 n（三）测验情境 n（四）测验焦虑 n（五）与受测者建立良好的协调关系 n（六）评分技术 第二十七页，讲稿共三十六页哦二、测验分数的解释二、测验分数的解释一、如何看待测验分数的意义一、如何看待测验分数的意义1 1、综合解释测验分数、综合解释测验分数n合格的施测者会结合三个方面的因素对测验分数作解释，对同一分数可作出不同解释。一是测验本身（信度、效度、难度、常模代表性）二是受测者的情况（文化程度、职业、是否接触过测验中的问题等）三是测验时的情境（是否有干扰、被试有无情绪波动、身体不适等）2 2、高德漫的三维度解释模型、高德漫的三维度解释模型n资料的来源：测验、非测验资料n资料处理的方法：机械、非机械处理材料n测验分数的类型：叙述、溯因（诊断）、预测、评价n将此三个维度加以组合，可有422=16种不同的解释方式。第二十八页，讲稿共三十六页哦3.解释测验分数应遵循的原则n主试应充分了解测验的性质与功能n对导致测验结果的原因的解释应慎重，谨防片面极端 n必须充分估计测验的常模和效度的局限性 n解释分数应参考其他有关资料 n对测验分数应以“一段分数”来解释，而不应以“特定的数值”来解释 n对来自不同测验的分数不能直接加以比较（测验等值）第二十九页，讲稿共三十六页哦二、如何将测验分数的意义告诉给受测者 n1.使用当事人所理解的语言 n2.要保证当事人知道这个测验测量或预测什么n3.如果分数是以常模为参考的，就要使当事人知道他是和什么团体在进行比较n4.要使当事人认识到分数只是一个估计n5.要使当事人知道如何运用他的分数 n6.要考虑测验分数将给受测者带来什么影响 n7.测验结果应向无关的人员保密 n8.对低分者的解释应谨慎小心 n9.报告测验分数时应设法了解当事人的心理感受，并采取适当的措施加以引导 第三十页，讲稿共三十六页哦测验分数的解释 返回第三十一页，讲稿共三十六页哦指导语的内容:n1、向被试说明测验的目的，消除其顾虑。n2、向被试说明如何对项目进行反应（打勾或口答）n3、例题n4、时间限制n5、如何记录反应（答卷纸还是录音）n6、指出如果被试不能确定正确反应，应怎样做。n 返回第三十二页，讲稿共三十六页哦测验等值：n一、测验等值来自测量实践的需要n二、测验等值的实质n 就是通过对考核同一种心理品质的多个测验形式作出测量分数的转换，进而使得这些不同测验形式的测验分数之间具有可比性。n三、测验等值的条件n同质性、等信度、公平性、可递推性、对称性、样本不变性返回第三十三页，讲稿共三十六页哦标准化心理测量的基本条件标准化心理测量的基本条件n一、取样（Sampling）心理测验作为衡量某一心理品质的标尺产生于样本，人的心理活动千差万别，故取样要有代表性。取样的代表性取决于以下两方面：1、问卷项目的有效性：按照测验的性质、目的，选择足以代表所要测定的心理特征或行为特征的的问题。如智能测定时，分析智能这一心理机能，考虑如何作最能使其在行为中表现出来，抓住要素，并具体给以作业或问题来进行测定。根据取样结果来使测验标准化，该样本就是测验的标准化样本。2、样本的适用性：即样本与被试情况是否相应。一般来说，要考虑样本的年龄、性别、地区、民族、教育程度、职业等基本特征。如果是临床量表，还应有疾病诊断、病程及治疗等背景。被试情况与样本相应，所测量的结果与样本才有可比性。二、常模（norm）根据对被试群体的标准化样本的测试,而后对取得的分数结果予以统计处理,所求出的一个具有代表性的正常平均分值。它可为我们提供一个比较的标准，以便对测验结果做出解释。标准化样本群体得分均数通常被视为常模参照分数。心理测验中不同的标准化要求可以产生不同的常模。通用常模包括：均数、标准分数、百分等级、划界分等。三、信度（reliability）信度是指测验结果的可靠性或一致性程度。它既包括在时间上的一致性，也包括在内容和不同评分者之间的一致性。信度用系数（coefficient）来表示。一般来说，系数越大，一致性就越高，所测分数也就更可靠。确定信度的方法通常有重测信度、正副本相关和分半相关。第三十四页，讲稿共三十六页哦 n四、效度（valility）效度是指测量的真实性、准确性程度。也就是指测验是否能够真实地反应所要测定的东西。测验的效度越高，从而表示它所测量的结果越能代表所测行为的真实特征。心理测验中要估计的量表效度有：校标效度、内容效度和结构效度。n五、方法的标准化任何的标准化心理测验都要有统一的实施办法、标准指导语、实施时间及明确的计分标准、以保证测量结果不受时间、地点、人员等的影响。back第三十五页，讲稿共三十六页哦补充内容：心理测验题库建设n一、题库的定义和功能n大量性能已经查明的合格试题的有序存储，目的是为高效成批生成具有指定性能的优良试卷服务。n功能：存储性、工具性（专家命题的手段）、生成性（生成试卷的基础）n二、入库试题和全库结构的要求n三、题库建设的工作过程n1、理论基础n2、过程：第三十六页，讲稿共三十六页哦