好文档就是一把金锄头!
欢迎来到金锄头文库![会员中心]
电子文档交易市场
安卓APP | ios版本
电子文档交易市场
安卓APP | ios版本

多项选择题的设计原则与干扰模式_戴曼纯.pdf

5页
  • 卖家[上传人]:wt****50
  • 文档编号:44518507
  • 上传时间:2018-06-09
  • 文档格式:PDF
  • 文档大小:339.37KB
  • / 5 举报 版权申诉 马上下载
  • 文本预览
  • 下载提示
  • 常见问题
    • 外语界1996年第2期(尝津6 2期 )多项选择题的设计原则与干扰模式湖南大学戴受纯多年来,我 国各级各类英语考试中广泛使用的多项选择题,对教师的教学和学生的学习方法与态 度产生了不容忽视的影 响,尤其是大型 的全国性考试包含的多项 选择题比例大,参考人数 多,影响面大多 项选择题 的命题质量高低决定着试题的效度、信度 和区分度,或者说,成胁着多 项选择题存在的合法性国内有不少 学者(张颖,1 988;喻爱 菊,1 9 93,郭浩儒,1994 )从不 同角度探讨过多项选择题,但尚未涉及其命题原则,特别是干扰项 的设计模式笔者希望 本文能填补这一 空 白,对更有效地利用这种题型起到有益 的指导作用一、争议中的多项 选 择题本世 纪6 0年代,语言测试受听说法 和结构主 义语言学的影响,告别了以往非科学 的方法,引进了心理 测量 学—结构主 义语言 学 测试法Lado及其追随者认为语言是一套由形式、意 义和不同层次的结构构成的系统,语言可以分解成若干项,取其有代表性的样本便可准确估计考生 的语言能力(Fa rhady,197 9)多 项选择 题 就是在这种背景 下产生的新 形势下 的语言 测试采用分离式试题(d iscr ete一Po int ),主要是 多项选择题。

      对于它 的理论依据和实用价值,学者们颇有争议反对者(Olle r,1975:Car roll,1961;Spolsky,1973:张颖,1988 )认为回答单个的题目不符合语 言 运用实际,脱离上下 文,对衡量 整体语言交际能力意义不大,它只测量 了考生的语言接受能力、识别能力、推理猜测能力等这种测试在一定程度上牺牲效度来取得信度(王振亚,1 99 4)但是,也曾有人将分离式测试和综合性测试(i nteg ra tiv et es t )进行对比研究,发现 两者在测量的内容和结果方面基本上没有区别,综合性渊试似 乎只在理论上而不是在统计上和实践 中占有一定的优 势(Fa rhady,19 79),因而两者是互补的,亦即:多 项选 择题 便于考查听力和阅读能力,与语 言运 用实际情况比较 接近,而口语和 写作则非用综合性试题不 可,否则测试 也达不 到 预期 的目的值得一提的是,多项 选择 题在 评卷工作中明显优于其它测试 形式,其特 点是快捷方便、客观公正由此可见,在没有找到 更科学的方 法之前,多项 选择题将依然广泛 用于大规模语言测试为保 证试题质 量,我们不能不对其 设计 原 则进行严谨的探讨。

      二、设计原 则为了保证 测试 的信度,多项选择题通常要经过命题、预 测、项 目分析、筛选、组题等复杂的过程,其中,命题 是第一大关,因为如果题目设计不 当,以后的工作将失 去 意义下 面的设计原 则将有助于命题人把关第一,确保试题的效度众所周知,语言 运用中并没有多项 选择,因而多项 选择题的表面效度(f ac eva l id it y)低,但是,如果试题检查了教学(或考试)大纲规定的学习内容、有效地衡量 了考生的语言水平,那么它便具有了内容效度(c ont en tva l id ity)或至少有标准效度怀r i t e r ionva li di明例如,如果学生只 学了大学英语第一册,而期末课程考试试卷却考查了第二册中尚未 学习的语法规则,那么这 道题便不 具有内容效度因此,C ET一4和CE T一6等试卷 的多项 选择部分 应严格遵照教学大纲或考试大纲中规定测试 要掌握的词汇、句型以及语言技能范围第二,注 意 经济原则设计多项选择题时题干和 选择项必须简洁,减少不 必要的词语,特别是 选择项 中不 应在同一结构位置重复使用 同样的表 达式,这样可以节省 篇幅和读 解时间例l和例2的措词不完全简洁,完全 可以将选择 项 中的 a t和wh il e移到题干部分。

      例i:Heha sn,tshownuP界t,butl,meX Peetinghimtoa rrive_.A)ato二etimeB)atanytimeC)atthistimeD)atthetime例2:Bob,5leggothurt_thepurp leMou ntains.A)whilehe15climbinguPC)whileweelimbeduPB)whileheelimbeduPD)whilewewereelimb ing第三,题干部分应提供充分的语境题 干不 同于干扰项,不 应对考生产生 干扰,而 应该在不违背经济原则的条件下措辞清楚明了、准确无误一 道题目的区分能力差有时是题目不清楚,使学生产生不 同的理解例3的语境不充分,无法区分考生对这些情态 动词的掌握情况例3:S he_ha ve句muststud iedvery hard.B)hastoC)shouldD)ougl;tto第四,题目不 应有任何暗示 或提示有的人在设计选择项时没有保持长度 和(或)结构上的基本一致,正确答案往往较长有时题 干部分的措辞 也有可能包含某种暗示会猜的考生受此影 响提高了命中率,因此降低了区分度。

      例4中的A)和B少两个选择用了 同样两个词,暗示着答案就在它们之中例4:SanFraneiseo15usu allye o ol inthesum mer,butLo sAogele s_ __.匀15r a r elyB)ra r ely isC)ha rdlyisD夕15seare ely第五,每道 选择题只允许有一 个正确答案或最佳答案出现一个以上 的正确 答案 往往是由于命题 人没有考虑 到题目的可能语境,这种 现象在要求考生选 出最佳答案的多项选择题 中尤为突出例5:Bei jingha seutitsb irth一rate_almost60 Pere entinthePa st20 yea rs.A)toB)byC夕f orD)with由于语境不充分,限定性不 强,孤立地从该句结构和 意义来看,闰和B)都可接受,出现两 个正确答案,用A)表示“·,·⋯降低到 几乎百分之六十,”用B)则 指“⋯⋯降低了几 乎百分之六十这道 题显 然对不了解北京出生率变化情况的考生不利第六,为便于 分析考生掌握某一规则或语言现象的情况,每道题最好只集 中 考查某一点在一道语法题中不 宜 同时考查句型、搭配、词 汇用 法等,否则,无法一致统计干扰 项所反映的语 言 点 的掌握程度。

      当然,要真 正做到所有 选择 项(特别是完形填空的选 择项)只考查一 个语 言现象绝非 易事,命题人要精益求精,切不 可满足于“还可以”下 面例6同时测试 了时态 与倒装例6:Ne v erbef orethatnight_thee xtentofmyownPower.A)hadl 几ltB)1f e ltqdid1f eelD)1hadf e lt选C)反映时态没学好,选D)则说明倒装没掌握,不便于 对测试结果 进行干扰分 析第七,设计干扰项时不 宜生造 语法 结构、词的搭配等语法 题的干扰 项最好合乎语法,虽 然不适 合此题,但应确实存在于其它 上下 文,因为生 造有可能暗示 出正确答案或降低 题 目的难度义外,错误的信息使学生形成错误的假设,妨碍以后的学习(戴曼纯,1 9叨)例7:M:.Smithady卫s edustowithdraw_.A)50thattogetnotinvo lvedB)50astonotgetiolvedC)50asnottogetinvolvedD)50thatnottogetinv olv edB)的词序属生造,A)和D)显然是生造 的语法结构值得注 意 的是,C ET一4试卷 中有不少干扰项是生造 的语法结构、搭配或词序等。

      下面 几例供读者同仁揣摩例s:The二atehwa se ane elledbe eaus emostofthemembers_amateh、ith-outastandarde ourt.A)ob je etodtohavingB)ob jeetedtohav eC)we r eob je etedtohav eD)wer eob je etedtohav ing例9:P呈ekmeuPat80,eloek.I_mybathbythen.A)w ill hav ehadB)willbehav in gC)e anhavehadD)mayhave例一 f oryourla zine ss,youeouldhav ef inishedthea ssign x nentb yno w.A )Haditnotbe enC)We ren,titB)ItwerenotD)Hadnotitbe en第八,题目难度(包括题干的文字和选择项的设计)应符合测试的要求和目的目前最突出的向题是地区性(由省教委考试 中心负责)C ET一3试卷中有不少选择题达到或超过全国性CET一4试卷的难度,这样的题目信度和效度低,不能客观公正地反映三级考生的英语水平。

      试题难度大主要表现在题千结构复杂,含有大纲规定之外的未注明中文的生词 或者干扰项属大纲外的生词或短语等另一方面,由于选择题的设计失误(如有暗示或某些干扰项明显比正确答案容易),题目难度可能偏低下列题目的选择 项干扰方式过于明显,C)与闰和B)的交叉信息最多,笔者调 查的学生中大多数不看题干也能猜出答案例1 1:T her ea r ese v eraleharaeteristie softhebook一一一s Pe eialattention.闰wo rthyB)worthofC)wo rthyofD)wort hle ss第九,每套试卷的匆、B)、q、功选择项占正确答案的比率应各为2 5%,然后在阅卷统分中运用排除猜题因素的公式计算出修正答题数(或修正分),公式如下:修正答题数一答对数一答错数/3如果不按每类选择各占25%的比例,则势必造成修正公式失效,某些考生凭猜测也可能获得更高分三、干 扰项及干 扰模 式干扰模式本应 属于 设计原则之 一,但由于其特殊性,笔者将它单独作一节进行讨论刘润清教授指 出,“有人认为干扰项最容 易设计,随便凑上几个不正确的东西就万事 大 吉了”(刘润清,19 91)。

      事实上,选出一个好句子、语境、段落并不能保证它会成为一个好题目,命题人的创造性与成功 可以说基本上体 现在干扰项的设计中但是,只凭直觉设计并不 一定可靠,通过分析学生的语言错误获得的干扰项更可靠,难度更大(O 止比,1 980)因此,找到干扰项后还应挑选其中最恰当的按合理的模式排列,然后通过测试获得千扰项的干扰度( Po tenc刃和区分度,再作适当调整语法、词 汇、完形填空和阅读的干扰项设计是不 一样的,由于篇幅有限,本文少毛介绍词汇题千扰项的获得来源及效果Coh en(198伪指出了八种词 汇题干扰项,它们分别按由大到小的午扰度排列如下:1 )错误同义词(词义相近但不适用于题干的上下文) .幻上下文相关词(与题干有横组合或语义相关性),3)反义词,4 )从完形填空 的答案获得的词语,5)词缀不当的词,6)词形相似的词多7 )随机 选择的词;8 )假同根/源词(在目的语和考生本族语 中形似而义异)此外,设计中还应注意 千扰项与正确答案保持同等难度(刘润清,1 991),所有干扰项应表面上看似可能,不但代表学生的典型错误,而且还有一定的吸引力干扰项应该和正确答案形成一定的干扰模式,互相牵制,使猜的概率降低到2 5%,但是CE T一4试卷中存在不 少干扰模式失当 的题目,请看下 列省去题干 的干扰项。

      例1 2:闰Only/thatB)Itwa s/thenC)Thatitwa s/whenD)Itwas/that不难看出,D)中I twa s与B)的一部分重合,D)中的 t ha t与A)中一部分 重合,交叉信息最多,干扰最大,容易猜出是正确答案,因此干扰失效例1 3:闰a价Ct刊ef f ortC)e琅etD)a场:d可以看出,闰和C)受干扰比B)。

      点击阅读更多内容
      关于金锄头网 - 版权申诉 - 免责声明 - 诚邀英才 - 联系我们
      手机版 | 川公网安备 51140202000112号 | 经营许可证(蜀ICP备13022795号)
      ©2008-2016 by Sichuan Goldhoe Inc. All Rights Reserved.