4编制教育测验的一般原理与方法

编制教育测验的一般原理与方法第一节测验题目类型与测量功能一、客观性试题的特点及其编写技巧•选择题•匹配题•供答题•选择题1.结构：“题干”+“选项”2.优点–可以用来测量学生各种不同层次的学习结果，应用广泛；–评分标准统一、客观，不受评分人主观因素和答卷人提出的意料之外的答案等影响，可利用电脑迅速评卷；–可以加大试题容量，抽取广泛有效的代表性样本，使试题覆盖的知识范围广–有利于考查被试思维的敏捷性和准确的判断力；–采用大量的似真选择项使结果易于诊断3.缺点–编制良好的选择题较花费时间，且要有专门的命题技巧–难以考核被试完全的推理能力、综合运用所学知识的能力、有效的总结能力、严密的表述能力和写作能力，对被试的发散思维能力则更是如此；–无法测量被试的思维（解题）过程；–被试能仅凭猜测而选中正确答案，对考试的信度有一定的影响4.类型（1）辨识选择（2）阅读选择（3）最佳选择（4）图解选择（5）归类选择（6）承接选择（7）排序选择（8）填空选择5.编写原则（1）题干意义完整并能表达一个确定的问题例：比较下面两题，哪一题“题干”较为合适？1.一个命题双向细目表2.当拟订一个成就测验的编制计划时，使用细目表的主要目标是A.指出一个测验如何用来促进学习B.可提供一个更平衡的内容取样C.须依据教学目标重要的顺序来排列D.确定一个所使用的计分方法A.减少所需的时间B.改进内容的取样C.使试题编制更容易D.增强测验的客观性（2）题干简明例：“当缺乏与中心观念有关联的似真但非正确的选项时，则在编制下述哪一类型的试题时会遇到困难？”“编制哪类试题时，如果缺乏似真而非正确的选项时，会遇到最大的困难？A.简答题B.是非题C.选择题D.论述题(3)题干不要滥用否定结构，要尽可能地采用正面陈述例：在耳的下列结构中，哪种与听力无关？在耳的下列结构中，哪种有助于保持平衡？A.鼓膜B.卵形窗C.半规管D.耳蜗(4)诱答项应具有似真性例：在下列元素中，那一种元素存在于蛋白质中，而不存在于碳水化合物或脂肪中？A.二氧化碳B.氧C.水D.氮增加干扰选项似真性的具体方法有：a.使用学生共同的错误观念或过失来作为诱答项。b.以学生惯用的模糊性用语叙述诱答项。c.在正确选项和诱答项中使用同样的“精确的”、“重要的”等堂皇的用语来描述。d.诱答项长度和措辞的复杂性与正确性选项相似。e.在诱答项中使用额外的线索。如固定的用词，具有科学味道的答案，以及和题干有语义上的联系等。f.保持选项之间的同质性。（5）不能对正确答案有任何暗示避免：语法结构上的不一致、各选项在逻辑上不同、答案的长度有明显差异、各题正确答案在选项中有一定的规律等（6）同一测验中，每一个测验试题之间应相互独立，避免牵连（7）选项的文字表述力求简短精练（8）应尽量避免“以上皆是”“以上皆非”的选项•是非题（二项选择题）这类题通常用于测量被试对基本概念、性质、原理、原则的认识和判断区别事实与观点、认识事物因果关系，以及一些简单的逻辑推理能力1.优点–编制容易，可适用于各种教材–记分客观，取样广泛2.缺点–仅能测量知识层次中最基本的结果，而无法测量高层次的学习结果–受猜测因素的影响很大3.编写原则（1）考核的内容应是重要的知识，应有考核价值；（2）题目应多时测量理解能力，而不应测验记忆性的知识；（3）一个题目中只能有一个中心问题，或一个重要概念；（4）试题应做到是非界限分明，用词准确，避免模棱两可的语句；（5）题目陈述应简单明了，避免使用复杂的句子结构；尽量采用正面叙述，避免用否定和双重否定的语句；（6）正句和误句的排列要随机化，且数量应大致相等。•填空题填空题可用来考查被试对知识的记忆和理解能力，在诊断性测验中特别适用。1.优点–受被试猜测的影响小，评分比较客观；2.缺点–填空题偏重于测量被试的知识记忆程度，使用过多容易养成被试死记硬背的习惯。3.编制原则（1）题意要明确，限定要严密，空白处应填的答案是唯一的；例：只有，才能在考试中获得好成绩（2）空白处所填写的应是关键词语，并且要和上下文有密切的关系，使被试不至于填写困难。例：1996年我国科技界有新发明。（3）题目中空白地方不能太多，以免句子变得支离破碎，不利于被试理解题意。例：连接市与的是河（4）尽量将空白放在句子的后面或中间，而不要放在句子开头。例：发明了蒸汽机（5）所有空白处的线段长度应当一致，不能随正确答案文字的多少而长短不一，以免产生暗示作用。（6）若答案是数字，应指明单位和数字的精确程度。•简答题较适合于测量被试被基本知识、概念和原理的掌握、记忆情况。1.优点–编制较为简单、灵活；–增加知识考核的准确度和深度；–不受猜测因素的影响2.缺点–无法用来考核综合、分析、评价等高层次的教学目标；–评分不够客观3.类型（1）简释题（名词解释）（2）直接问答题（3）列举题（4）扼要说明题4.编制原则（1）问题的叙述要明确，要确实能使被试用简单的语言来回答；（2）问题的答案应该只有一个，并且答案要简短具体；（3）避免出只考机械记忆的题，应注重知识的应用；（4）在考查某公式的应用时，不要给太复杂的数字，以免给计算带来麻烦（6）尽可能使用直接问句来提出问题•解释性测验题–在典型选择题的基础上，经教育测验专家改良后，发展成解释性测验题（interpretive-exercisequestion)。解释性测验题一般是先提供一段文章、一幅图画、一种情境、一张表格等引导性材料，然后以此为基础提出一系列客观性问题。–比较适合测量富有结构的知识、理解能力以及比较复杂和高层次的认知能力。1.优点强化学生解释、分析、应用资料的能力；测量较复杂和高层次的认知能力；诊断复杂学习结果的认知过程；变主观性为客观性；把问题设计得更加符合测量目标2.缺点不能测量创造性思维能力和文字统整与表达能力3.编制原则（1）选择与教学目标或考试目标关系紧密的引导资料；（2）选择适合学生学习经验与阅读能力的引导资料；（3）选择新的但又不是太另类的引导资料；（4）选择简短而又有信息量的引导材料；（5）问题设计要明确，容易作答；（6）问题的测量目标要符合测验目的；（7）问题要测量有意义的学习目标，不考无关紧要的内容；（8）问题数量要适当，而且每个问题不要互相提示二、主观性试题的类型及其编写要领•论述题•作文题•表现性测验题•论述题较好地测量被试的组织、归纳和综合所学知识的能力，运用掌握知识解决问题以及探讨问题和创新的能力1.优点–用来进行高层次的、复杂的学习结果的测量，可以用在各种学科领域，特别适用于社会科学、人文科学等；–可以增进学生的思考、应用及解决问题的能力，对于被试的学习态度和学习方式可以产生积极的影响；–可以增进学生的写作能力；–试题的编制比较容易，受猜测因素的影响很小2.缺点–取样范围比较小且不均匀，所使用的试卷无法有效地代表学科的全部主要，所测结果无法真正代表被试的学习成就，从而影响测验的效度；–评分的主观性强；–因被试回答过于自由，回答方向又不尽相同，难于测得预期结果，重点容易失控；–被试作答和评分阅卷都相当费时3.编制原则（1）试题应该用来测量较高层次的教学目标（2）要明确而系统地陈述问题，使被试能清楚地了解题目的要求（3）一般应采用答案具有统一定论的试题（4）当有多个论述题时，可以设置一个必答的论述题，剩下的题目可允许被试选择作答（5）最好在题目中能给出回答本题所需的参考时间•作文题对人的逻辑思维、形象思维、书面表达等多种能力的一种综合考查1.分类（1）根据提供题目或提供材料的角度，可分为命题作文和供料作文（或称条件作文）；（2）根据文体可以分为记叙文、议论文、说明文、应用文等；（3）根据所供材料的处理方式可以分为：缩写型、改写型、撮写型、填空型、续写型。2.编制原则（1）根据考试目的、考试对象来确定作文文体和要求；（2）根据社会需要、现实生活和学生实际设计命题，作文命题要直接测量语文素养和书面表达能力；（3）作文命题不能过于抽象，要让学生有话可说，有内容可写，有思路可走，有发挥的余地；（4）避免材料或话题出现测验偏倚，在确定选材和写作意图时，要考虑对所有被试都是公平的，并且试题应符合被试的心理特征。•表现性测验题所谓表现性测验题（performancetest),是指以行动、作品、表演、展示、口头回答、操作、写作、科学研究、制作等更真实的行为表现，来测量与评价学生在真实情境或模拟真实情境下的所知与所能的一种测验类型。1.分类–纸笔的表现性测验–辨认的表现性测验–结构化的表现性测验–模拟情境的表现性测验–工作样本的表现性测验2.编制原则（1）测验材料和要求应与日常教学内容和目标有关联，关注重要的学习结果（2）将考查重点放在测量负责和高层次能力上（3）将干扰测验目的的无关困难降到最低（4）测验尽可能选择真实性的情境或问题（5）提供必要的操作指导语，让学生了解作业任务和期望内涵（6）指导语简单清晰，向被试明确说明实际的情境、任务以及评价的标准（7）确定科学合理的计分方法第二节测验目标与教育目标研究一、教育目标与测验目标•教育目标的意义–教育目标是人类社会根据自身的需要确定的教育活动的标准、方向和要求，亦就是人们在教育活动之前，预先设想和确定的关于教育活动最终期望达成的结果。–广义的教育目标是在学校、家庭、社会三个方面的教育环境作用下取得的关于学生的行为变化；狭义的教育目标特指教学目标–当教育目标用于教育测量和评价时，教育目标就转换成测量目标和评价目标•教育目标的表述–以学生为行为主体–表述明确、具体–反映学习结果的层次性–表达教育工作者的意图中程教育目标终极教育目标具体教育目标二、教育目标分类研究•布卢姆的教育目标分类–认知领域–情感领域–动作技能领域（辛普森的分类）•我国关于教育目标分类的研究–李秉德“教育目标分类的三维结构模型”第三节测验蓝图设计与测验编制要领一、设计测验的基本考虑1.确定测验的目的2.确定测验的属性3.明确测验的性质与用途4.明确测验的对象5.分析测验的目标二、设计测验蓝图1.确定测验内容要目（双向细目表）2.确定该科目应考查的目标层次3.确定各项测验内容要目下的权重4.形成命题双向细目表三、测验的编制与组织1.选定测验的材料a途径：（1）把测验所涉及的内容逐步分解到课程标准或教学大纲所规定的知识点，然后选择适量的、重要的知识点作为测验的材料；（2）对测验可能涉及的原始知识点进行聚类分析，根据知识点间的相关系数，依次进行合并，再利用适当的阀值将测验目标分成恰当的类，以确定测验的材料b注意点（1）测验材料要适合测验目的（2）测验材料要能够代表该教材的全部内容（3）测验材料要有普遍性，要以统一的课程标准或教学大纲或统编教材为选材依据（4）测验材料要适合学生的程度并能鉴别学生的学习水平（5）测验材料要富有进取性并切合社会需要2.编写测验试题（命题）（1）试题的内容取样应有代表性（2）试题的数量要恰当（3）试题的难度要合适（4）各个试题之间应保持互相独立（5）试题的表述必须清楚明白（6）题型应多样化（7）评分标准应合理，命题应有利于制定清晰可辨、公平合理的评分标准3.试测与题目分析（1）试测：鉴别测验性能的优劣注意点：•试测对象应取自将来正式测验准备施用的群体•试测应力求按正规的要求进行，使其与将来正式测验的情境一致•试测的实施，应使被试有足够完成作业的时间，以便搜集充分的反应资料使得统计分析结果可靠•在试测的过程中，应就被试的反应情况随时加以记录（2）题目分析4.合成测验（组卷）（1）先易后难（2）同类组合（3）讲究测验题目编排的方式5.编写复本复本的关键是等值（1）各份测验具有相同的测验目标与测验内容，但题目不应有重复（2）各分测验题型相同，题目数量相等，并且有大体相同的难度和区分度6.编写测验手册（1）本测验的目的和功能（2）测验编制的理论背景和试题选择的依据（3）测验的实施方法、时限与注意事项（4）测验的标准答案和评分标准的规定（5）测验分数解释的依据（6）测验的信度、效度资料，包括信度、效度系数以及这些数据是什么情况下得到的—完—双向细目表