资源简介 课件75张PPT。试题设计和试卷设计海南省教育研究培训院孙孝武E-mail: sunwu22@163.net内容提要一、关于学业测试的有关问题;二、试题、试卷的质量标准;三、试题设计;四、试卷设计。一、关于学业测试的有关问题。(一)为什么要进行学业测试? 1、诊断学生的发展水平; 2、评价教师的教和学生的学,以便提出改进建议; 3、每次测试都给学生提供了一次更加有效的学习机会,激发教与学的热情; 4、选拔、研究等需要。(二)命题应注意的问题1、对于单元测试,期中、期未考试,要注意避免“一步到位”的命题倾向,不能对能力有过高要求,要把单元目标与学段目标区分开来;2、常模参照与标准参照。前者注意区分度和成绩的正态分布(如高考标准分);后者则关注学生掌握知识的量的多少,是否达到约定的标准,而不管区分(如毕业、资格考试等);3、命题要从经验性走向科学性。二、试题、试卷的质量标准效度信度难度区分度教育性可推广性稳定性自洽性1.效度 是指针对考试的目标和要求,考试结果的准确和有效的程度; 如果高分学生进入高一级学校后,成绩比低分的好,说明考试有较高的效度。效度标准要点:体现学科课程标准所规定的学习要求。关注内容覆盖(某知识点不能考太多)、结构覆盖和难度要求;有利于学生展示自己的学习成就;考虑整卷的语言、图形、文字,试题背景的公平性、阅读量;题型使用得当,无“小题大做”或“大题小做”情况;试题陈述无科学性错误;评分标准合理;不能存在造成高分低能的可能性(大题没有陈题)。2 .信度是指考试结果的可信程度,保证水平高的学生得高分,水平低的得低分。 (1)复本信度:指同一批考生在两个平行(等值)试卷上得分的相关系数(有时分单、双号题)。(2)评分者信度:指评分者评分的稳定性和可靠性,反映了评分能够稳定地反映考生的真实知识和能力水平的程度。 多个评分者评分信度如何保证? A、平衡彼此之间的主观因素的影响 B、通过讨论来减少分歧信度标准要点:陈述试题的语言简明、易懂、无歧义;对学生容易疏忽的地方,有提示语(或者警示语),不能出现容易导致学生产生无意错误和试题跨页现象;非开放性试题的评分标准合理,评分标准预见性好。 3.难度是指学生在思考和解决试题的过程中出现困难的程度。 分预估难度和实际难度,通常用通过率或得分率来度量。即 难度的计算:P =R / N 难度分反映难度和内在难度。A.反映难度及影响因素所谓反映难度,是指根据被试的学生的反映所确定题目的难度。通常以被试学生的得分率作为这种难度的指数;主要影响因素:被试的状态,例如,被试的生理周期和心理周期、生活与学习环境的改变、强烈刺激所引起的无意注意等,都有可能影响被试的反映难度;反映难度所反映的是题目对于被试学生的难度,完全由被试的反映确定。B .内在难度及影响因素所谓内在难度,是指根据题目所蕴涵的完成题目解答所要求的知识面、知识深度、思维强度和思维深度所确定题目的难度。通常以题目的内在逻辑联系来确定;影响题目内在难度的因素有:题目的陈述方式、题型、知识点数、所要求的思维类型;难度分析的SOLO模型:前结构水平;单一结构水平;多重结构水平;关联结构水平;拓展抽象水平。难度标准要点:从被测的学生生理、心理、知识和能力的实际水平出发,选用图表、图片和漫画等多种考生喜闻乐见的形式陈述题目;不是繁题;不是难题(指反映难度低于0.20的试题) ;不超出教学大纲(或课程标准)的要求。试题难度水平的确定 依赖于考试的目的和性质 :对于具有选拔功能的考试(常模参照);对于评价学业水平的考试(标准参照)。4.区分度 是指考试和试题能否鉴别不同水平学生的优劣程度。 区分度好的,能把不同水平的考生明显地加以区别,拉开它们的得分差距。 (如果容易题目太多,个别题的区分度可能出现负数)区分度标准要点: 试题具有适当的区分度,有能区分达到学科课程标准所规定的毕业水平的题目,能区分不同学习成绩水平的题目(合格以上有3—5个水平区分);试题的评分标准合理,封闭题不同解法之认知水平的等价性(一题多种解法的思维水平)。5 .教育性标准的要点:体现素质教育的理念,有利于推进学校实施素质教育;有利于培养学生学习的兴趣,引导学生探索学科王国的奥妙;具有时代性,体现时代特性;贴近生活,引导考生关注社会;注意叙述题目语言的价值取向,等等。例如:语言渗透的价值观 一道题目所给出的材料提出“随着社会经济的转型,人们的价值取向日趋多元化”的观点,并列举了三种价值观:“见义不为”、“见义勇为”、“见义巧为”。但在表述时采用了蕴涵三种价值观的叙述方式:在表述“见义不为”时,使用了“令人寒心”等词语;在表述“见义勇为”时,使用了“遗憾”、“令人痛心”等词语;在表述“见义巧为”时,使用了“令人欣慰”等词语。6.可推广性标准的要点:题目所考查直接问题可推广的程度(题目内涵是否直接指向所考查的知识点);题目所考查直接目标能代表其所表现的一般性目标的程度(考查的直接目标与该目标之直接上位目标的关系)。7.稳定性标准的要点:在试卷中增加新的符合考试要求的题目后,考生考新的试卷其成绩将不受影响;8.自洽性试卷内部融洽、和谐一致,各题目的考查目标、教育导向不自相矛盾。试卷中要有一组题目间具有相互校正随机测量误差功能的题目(重点知识、技能、思想方法)。三、试题设计试题的功能、结构和质量要求;命题规则;几种常见题型及功能分析。(一)试题的功能、结构和质量要求;试题的功能:试题是试卷的细胞,是用来检测学生对某一学科知识和技能的掌握程度。即能体现考什么?考到何程度?试题与练习题:试题具有层次性和综合性,练习题集中、专一,有模仿性和重复性。试题的结构:由题设、提问组成。 1、题设应具有明确性、准确性、简洁性、相容性、独立性、恰当性和条理性。 2、提问要指令明确、要求恰当、问题可解 (表述尽可能友善、客气)。试题的质量要求:试题的科学性(没有错误)。试题的适纲性(符合大纲)。试题的有效性(无法替代)。试题的针对性(重、难点)。试题的严谨性(无漏洞)。试题的公平性(针对背景)。试题的新颖性(有但不能多)。试题的优美自然(简洁、流畅)。(二)命题规则题型的规划本学科常用题型。各类试题的特点。选择题填空题计算题作图题…各类试题在不同内容和目标上的分布内容分数题号命题的方法选题、改编题、新编题;试题改编的常用方法: 1、设置新的问题情景; 2、转换题型;选择、填空、解答题的相互转换,旧的封闭题改编为各种新式题型。 3、重组整合; 4、改变立意。题型运用分析的框架题目的编制方法举例(三)几种常见题型及其功能分析第二类题型:材料分析题;实验题;设计题;论述题;写作题;探究题;开放性题。第一类题型:选择题;限制性试题;长试题;扩展式试题。第一类题型选择题:务必使题干能把问题交代清楚;题干中要包含尽可能多的试题内容,选项要尽可能短;题干中只包含具体阐明问题所需的材料;题干中不要滥用否定结构;尽可能用新的材料来编写试题,以测量理解的程度和应用某些原理的能力;答案必须明确无误;错误的选项应似是而非,起干扰作用;不能提供答题的暗示或线索。 限制性试题(填空、简答):要使试题涉及的是重要的内容,不要去考琐碎的东西;所提的问题完整,含义清楚;答案应是明确无误的;语言应贴切、准确;填空题不能留过多的空白,留空处应是关键的词、词组所在之处;填空题的空白最好不要留在句首。 长试题(计算题):试题的情景和需要学生计算的问题必须交代清楚试题必须包含学生解题所需要的全部信息试题使用的符号必须是标准的或常用的试题的文字不能有歧义,必须是标准的书面语言试题必须有明确的无歧义的解答使用错误的方法不能求得与正确答案相同的结果扩展式试题(问答):明确你所要考查的是什么能力,试题是否一定需要这些能力才能解答;要用新的材料或新的方式来编写试题;题目的任务要求十分明确;答案的长度及复杂程度应适应学生的发展程度;要考虑是否有可能对所提出的问题给出一个科学的答案或论证。第二类题型1、材料分析题(1)界定 要求考生在对题目所提供材料(简称为题给材料)进行分析的基础上,完成发现问题、提炼观点、制订行动方案中的一种、两种或三种等的题目。(2)题型的结构要求 由题给材料和解答要求两部分构成。题给材料是材料分析题型的核心部分。解答要求部分包括对考生分析的依据、范围,结果的最终状态和表述形式提出明确具体的要求。(3)功能考查结果与考查过程并重;能够考查考生的阅读能力;能够考查考生分析问题,发现问题和解决问题的能力;能够考查考生的归纳和综合信息的能力;能够考查考生书面表达的能力;题目自身对考生的提示小,在解答过程中考生有较大地自由发挥余地;能有效控制凭猜测作答;事先较难制定完备的评分标准,评分结果部分受评分者专业素质影响。(4)注意 设计的题给材料应该满足:材料总体具有内在的结构、意义突出,或绝大部分材料存在共同的优先问题;材料本身所蕴涵的信息只有具备一定分析能力的考生才能发现;材料应该具有实际意义,切忌人为编造;叙述材料的语言流畅、准确、直截了当,不玩文字游戏和绕口令,符合考生年龄的阅读特点;图文匹配;材料有利于考生综合运用所考学科的知识解决实际问题。 2、实验题(1)界定 要求考生按照提供的仪器和实验材料(简称为题目自给材料),根据实验规则(简称为实验操作要求),亲自完成既定的实验,获得规定的实验数据或产品的题目。(2)题型的结构要求 由实验材料、实验结果和和实验操作要求三部分构成。实验材料是实验题的核心组成部分,包括实验用的设备、实验用的消耗材料和实验的辅助材料。实验结果是实验题的重要组成部分,实验结果可以是数据、新产品方面的明确要求,也可以是同时对数据和新产品提出明确具体的要求。实验操作要求类似于解答要求,是实验题所特有的对考生完成实验题过程的操作限制,包括题目所特有的特殊操作要求和题目所在学科实验的一般要求两个组成部分。(3)功能考查结果与考查过程并重;能考查考生的动手操作技能;能够考查考生发现实际问题,分析实际问题和解决实际问题的能力;能够考查考生收集和整理信息的能力;题目自身对考生的提示知识方面的提示较大,但在实验过程中考生有较大地自由发挥余地;能有效控制凭猜测作答;能够考察考生实事求是的科学态度与习惯;评分结果部分受评分者专业素质影响。 (4)注意题目自给材料要满足:从理论上能保障获得实验题所需要的结果;提供的实验消耗材料,特别是药品要在有效期内,并有一定的多余;提供的实验仪器完好;辅助实验材料齐备;有应急用的实验设备、实验消耗材料和实验辅助材料。实验结果的表述要满足:表述准确、科学,无知识性错误;能对实验结果要求实现与否,实现程度如何进行测量和比较;实验结果紧密依赖实验操作,有利于强化考查考生实验操作的过程。实验操作的要求要满足:实验操作的表述要简明易懂,考生容易理解所规定的操作要领;内容能保证实验过程的安全、可靠;要求可行,具有可操作性;不同考生之间的实验操作的科学性程度能进行测量和比较。 3、设计题(1)界定 要求考生根据题目提出的主题、课题、实验材料等设计体现主题方案(简称为主题设计)、研究方案(简称为研究设计)、实验方案(简称为实验设计)等。考生提供的设计方案是评定考生成绩的主要依据。(2)题型的结构要求主题设计 通过设计来揭示主题,提供使主题变得形象、直观的具体方案称为主题设计。由主题、设计原则和表述要求三部分构成。主题是主题设计的关键部分。主题既可以是一种理念,也可以是一个明确的任务。设计原则是评价主题设计优劣的重要依据。原则反映题目对考生揭示主题的期望和应该注意的问题。表述要求也是评价主题设计活动的依据。它包括表述主题设计结果的格式和应该注意的问题。研究设计 称通过呈现一个研究方案来展示解决问题的思路、途径和手段,并论证所提出的思路、途径和手段可行的活动为研究设计。研究设计题型由问题、解决要求和表述要求三部分构成。问题既是研究设计的起点也是评价研究设计优劣的重要依据。问题是一个待解决的问题。设计原则是评价主题设计优劣的重要依据。原则反映题目对考生揭示主题的期望和应该注意的问题。表述要求也是评价主题设计活动的依据。它包括表述主题设计结果的格式和应该注意的问题。实验设计 由任务、实验材料(简称为题给实验材料)、设计原则和表述要求四部分构成。任务,指所设计实验需要成功解决的问题。能否完成任务是评价考生实验设计完成与否的主要标准。实验材料,指题目陈述的实验名义材料,主要是限制考试解答路径,使设计具有针对性。题目陈述的实验材料分为三种:第一,给定实验材料,必须用所给定的全部材料进行设计;第二,给定范围,只要选用其中的部分进行设计;第三,无范围限制,由考生自己提供名义实验材料进行设计,相当于研究性设计。设计原则是评价主题设计优劣的重要依据,一般指按照实验解决问题过程应该遵循的实验原则。表述要求也是评价实验设计活动的依据。它包括表述实验设计结果的格式和应该注意的问题。(3)功能考查结果与考查过程并重;研究设计能考查考生综合运用所学知识解决实际问题的能力,进行科学研究的能力;主题设计能够考查考生的想像力、文化背景、文化积累;实验设计能考查想像和运用实验解决问题的能力;能够考查考生收集和整理信息的能力;能有效控制凭猜测作答;能够考察考生实事求是的科学态度与习惯;能考查考生的创新能力;主题设计的评分结果受评分者专业素质影响大,研究设计的评分结果受评分者专业素质影响较大,实验设计的评分结果基本不受评分者专业素质影响大。 (4)注意主题设计题目给出的主题要满足:内涵确定,外延具有不确定性;主题的表述概括、精炼;给考生留有充分的想像和发挥个性的空间。设计原则要满足:表述准确,语言简明,易于理解;原则之间应该具有一致性;紧密联系主题,有助于考生完成主题设计。表述要求应满足:要求内容明确、具体,具有可操作性;按照要求表述主题设计结果应该有助于考生完全表达自己的设计理念和思路;有助于规范考生表达设计结果的形式。实验设计实验设计的任务要满足:明确具体,小而可行;考查考生运用理论知识、实验知识解决实际问题的能力;考查考生想像和操作实验的能力;复述教材上已有的实验过程不能完成实验设计。实验材料要满足:材料与蕴涵在材料中的知识的统一,利于通过运用材料情况考查学生掌握蕴涵在材料中的知识;针对性强,考查考生运用材料的指向集中;如果给定实验材料或范围,那么所给材料与所要求的任务要配套;给定的材料名称规范。设计原则满足:除了实验本身所涉及的对实验过程的要求是当然要求之外,如果另有要求,应该专门说明。特殊的要求不能与实验自身的一般要求相矛盾。表述要求满足:语言简明、直接、准确、易懂;中心突出,突出的中心是给考生判定考试成绩的依据之一。 研究设计题目给出的问题要满足:具有可探索性,考生需要探索才有可能发现解决问题的路径;挑战性,考生不进行创新性的思考,照搬过去的经验难于解决;具有实际意义,非人为编造。设计原则满足:原则与解决问题一致;语言准确、明了,要求明确;突出作为评判考生成绩依据的要求。表述要求部分的格式要规范,能体现设计者前期的工作、设计者的思想、设计者的策略、设计者解决问题的路径与方法、设计者的可行性论证的合理性等。4、论述题(1)界定 要求考生就某个主题(简称为题给主题),依据所考学科的基本思想、原理和法则,结合辩证逻辑法则和形式逻辑法则,分析其观点、提出自己观点、为自己观点提出论据,并论证自己观点的题型。 论述题包括传统作文题中的论说文。(2)题型的结构要求由题给主题和解答要求两部分组成。题给主题有如下两种形式:其一,提出一个当前有定论的主题;其二,提出一个当前有争论的主题;解答要求部分包括对考答题的原则性要求,和注意事项。(3)功能考查过程与考查结果并重;能考查考生综合运用所学知识分析和解决实际问题的能力;能考查考生的辨证思维和表达辨证思维的能力;能考查考生的形式逻辑推理能力和表达逻辑推理的能力;能考查考生的创新能力;能考查考生思维的深度、广度和严密性;能够考察考生实事求是的科学态度与习惯;能有效控制考生凭猜测作答;评分结果受评分者专业素质影响很大。 (4)注意题给主题要满足:如果是有定论的主题,要直接、简明的给出;如果是目前有争论的主题,要扼要给出关于主题的主要分歧之处;主题陈述要采用中性叙述,字里行间不能渗透命题者自己的主张。解答要求要满足:有明确的答题注意事项;有明确的答题原则性要求。特别地,对于目前没有定论的主题,要明确将来评判考生解答本题成绩的依据。5、写作题(1)界定 要求考生按照指定的文章体裁和文字记载有关问题、说明有关问题、宣传某种主张、表达某种思想(统称为题给任务)等方面的题目。(2)题型的结构要求由题给任务和写作(解答)要求两部分构成。题给任务有下列几种形式:其一,习惯意义上的命题作文;其二,习惯意义上的半命题作文;其三,习惯意义上的给材料作文;其四,习惯意义上的看图作文;其五,习惯意义上的改写;其六,习惯意义上的续写;其七,情景作文;其八,如公函、告示、通讯、各类报告、总结等日常应用文写作;其九,无题目、只给原则性要求作文。写作要求部分包括文章体裁、字数限制、写作注意事项等方面的具体要求。 (3)功能偏重于考查结果;能考查考生运用中文或外文书面表达思想的能力;能考查考生运用中文或外文书面表达现实问题的技能;能考查考生关于任务方面的积累;能考查考生综合运用所学知识分析和解决实际问题的能力;能考查考生的形式逻辑推理能力和表达这种逻辑推理的能力;能考查考生的创新能力;能考查考生思维的深度、广度和严密性;能有效控制考生凭猜测作答;评分结果受评分者专业素质影响很大。 (4)注意题给任务要满足:任务明确;考生有话可写,完成写作任务的方式多样,考生可以自由发挥;如果是根据材料作文,要注意材料内在的丰富性和阅读量不增加考生的阅读负担;如果是情景作文,所给的情景要真实、内涵丰富;如果有图,要注意图文匹配;除日常应用文写作外,其余写作任务鼓励学生通过有创意的写作来完成;除与考试对应的任职资格背景有关外,与考生其他背景没有联系。 解答要求要满足:文章体裁要求具体明确(除日常应用文写作有文体要求外,一般不宜作文体要求);字数限制应该明确范围,并指出超出范围对评分的影响;写作注意事项对写作要达到的目的提出具体要求,例如,思想性和写作技巧方面的要求。 6、探究题(1)界定 要求考生完全根据题给条件将题给不确定性结论先确定,再给出确定依据或理由的题型。因解题者首先必须通过探究提出不确定性结论的确定情况而命名。 (2)题型的结构要求包括题给条件、题给不确定问题和解答要求三部分。题给条件,指题目给出的得出题目结论的充分条件,它是考生解题的出发点。包括以下几种条件形式:给出呈现规律条件,要求解答者发现结论;给出结论,但缺少充分条件;给出结论的特例,要求通过归纳、猜测来找到一般结论;先呈现一个完整研究的问题,然后提出改变条件情形或改变结论情形下对原问题进行讨论;题给不确定问题,是题目有意将确定性问题不确定化后形成的、形式上具有多种可能性的问题。解答要求,指题目对解答的形式和内容提出的要求,包括解题说明和注意事项等。(3)功能兼顾考查过程与考查结果;能考查考生分析问题、发现问题,提出合理猜想并证明猜想的能力;能考查考生的形式逻辑推理能力和表达这种逻辑推理的能力;能考查考生思维的灵活性、深度和严密性;非存在性探究题(存在性探究题指确定是否存在类型问题的探究题)能有效控制考生凭猜测作答;评分结果受评分者专业素质影响较大。(4)注意题给条件要满足:条件足以推出结论;条件之间不矛盾;条件无科学性和知识性错误;达到任职资格要求的考生能完全领会条件的意义;叙述准确、简明。题给不确定问题要满足:形式不确定本质确定;结论具有隐蔽性,考生由条件不能直接得出确定的结论;考生解答的过程体现“猜想——证明”的思维过程;叙述没有提示考生解题策略和突破口方面的信息;问题紧密联系题给已知条件;如果题给条件是结论和结论成立的部分条件,要求探究结论成立的充分条件,那么,在这种情况下,题给条件是题目结论的充要条件。解答要求满足:与评判考生解答题目成绩的依据一致;语言简练、通俗易懂。 7、开放性题(1)界定 指考生需要在题给条件或结论基础上,再添加部分条件或补充部分结论才能完整解答的题目。(2)题型的结构要求 题给问题具有问题解决者本位、对问题指向只有原则性要求、一题多题(即一个开放性问题可以转化为多个封闭型问题),具有以下几种表现形式。条件开放题。称没有确定已知条件的开放性问题为条件开放题。特征:问题所需补充的条件不是得出结论的必要条件。结论开放题。称没有确定结果的开放性问题为结论开放题。特征:缺确定的结果,而且,所给条件不是结论的充分条件。条件和结论同时开放题。称既没有确定结果形式又没有确定条件形式的开放性问题为条件和结论开放题。特征:缺确定的结论和条件,所给条件往往是解答者完成解答所要遵循的要求(这个要求是明确的)。 (3)功能 除具备探究性问题的功能外,还具有以下独特的功能:能考查被试构造问题的能力;不反对试题本身对解题者的暗示;协助并鼓励解答者从自己的实际出发作出令自己满意的解答;受评分者专业素质水平影响很大。(4)注意题给条件要满足:如果是条件开放题,那么需补充的条件不是得出结论的必要条件,即所需补充的条件不能由已给结论推出;如果是结论开放题,那么需补充的结论不能将已给条件转化为充要条件,即所需补充的结论不能由已给条件用等价方式直接推出;如果涉及资料,资料应该具有丰富含义,能反映不同水平和不同背景考生的阅读和分析材料的习惯;原则性要求要概括,不要过于具体。 解答要求满足:陈述的解答要求与评判考生解答题目成绩的依据一致;语言简练、通俗易懂。 四、试卷设计试卷的结构;试卷质量标准;试卷设计的一般方法和程序。(一)试卷的结构外观结构(显见的): 框架与题型内在结构(隐藏的): 知识、能力与难度 (易、中、难题的比例:6 : 3 : 1)(二)试卷质量标准效度:强调结构效度兼顾内容效度;信度:强调试卷规范、题型结构合理;难度:测重考虑反映难度;区分度:满足考试目的对区分度的要求;教育性:引导教育、促进教育、优化教育;可推广性:考试结果能推广到所考科目;稳定性:考虑所选题目的代表性;自洽性:试卷内部融洽、和谐一致,不自相矛盾。(三)试卷的一般设计方法和程序明确测验目的;确定考试类型;确定测验目标;制定命题原则。根据所确定测验类型和确定的测验目标,结合一般意义上的编制测验原则,对命题技术和流程提出针对性的要求,以解决题目自身的科学性问题;编制测验方案。包括确定测验用的题型、选定知识载体、确定考试时间,编制双向细目表几项主要工作;拟订试题与评分标准;组卷;试答;编制标准答案,规定评分标准。注1:试卷的设计与编制流程图注2:双向细目表的结构注3:试卷常见的试题排列方式 方式1:并列直进式。依据试题材料的性质,将题目分为若干分测验;处于同一分测验的试题,从易至难排列(如按三类题型排列);方式2:混合螺旋式。先将各类试题依据不同的难度分成若干层次,再将不同性质的试题予以组合,作交叉排列,其难度则循序渐进 (如两考合一时的第一、二卷)。注4:评分标准参考解答必须没有错误、不超出课程标准的要求,给分点(或扣分点)要明确,要有好的教学导向不要重复给分或重复扣分应对不完全按照参考解答回答的情况有所规定论述题应从回答的整体情况和资料、论点的细节两方面确定评分标准开放性试题的参考解答要特别慎重,评分标准要可操作,不致引起过大的误差 谢谢倾听 欢迎交流 展开更多...... 收起↑ 资源预览