语言测试及设计

© 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net 收稿日期: 1997- 02- 21 语言测试及设计 杨爱荣 (中国民航学院外语系　天津　300300) 　　【提要】在外语教学中, 语言测试是不可缺少的环节之一。本文主要论述语言测 试理论, 如语言测试的目的、语言测试的类型、语言测试的 标准 excel标准偏差excel标准偏差函数exl标准差函数国标检验抽样标准表免费下载红头文件格式标准下载 ; 分析 定性数据统计分析pdf销售业绩分析模板建筑结构震害分析销售进度分析表京东商城竞争战略分析 并总结了常见 的语言测试项目的设计 方法 快递客服问题件处理详细方法山木方法pdf计算方法pdf华与华方法下载八字理论方法下载 , 如: 多项选择 题 快递公司问题件快递公司问题件货款处理关于圆的周长面积重点题型关于解方程组的题及答案关于南海问题 的设计、词汇测试的设计、完形测试的 设计、阅读理解的设计、听力测试的设计、写作测试的设计; 并对测试后得分的计算 和分析进行解释。最后提出语言教师了解一点语言测试的知识是很有必要的。 关键词: 语言测试 效度 信度 区分度 实用性 　　语言测试是语言教学的重要手段之一。它为教学提供目标, 检测学习者已取得的成绩及教 师的授课效果。与语言教学的论著如教学方法, 教学大纲, 语言材料或语言理论等相比, 语言 测试的论著很少。语言测试学建立在教育测试学的基础之上, 教育测试学来源于心理学和精神 测定学的测试和实践。语言测试中的一些方法与社会学和人类学领域也有密切的联系。在外语 教学中, 语言测试是不可缺少的环节之一。在其他领域, 各种各样的语言测试也应运而生, 如: 职称考试, 上岗考试等。对于教师来说, 怎样设计一套好的语言测试题就成了他们关心的焦点。 本文试图运用语言测试的理论和语言学习理论及一些语言测试的标准, 分析并总结常见的语言 测试项目的设计方法。 一、语言测试的目的 　　语言测试的目的有四个: (1) 预测学习者未来的潜力; (2) 发现学习者已知的知识; (3) 发 现学习者已经学到的知识; (4) 发现学习者还需要学习什么知识。 二、语言测试的类型 1　内容 按内容来说语言测试可以分为两大类: (1) 语言形式测试 (T est of L ingu ist ic Fo rm ) 从 传统的观念来说, 人们关心、教授和测试语言知识技能: 主动ö输出的技能 (act iveöp roduct ive sk ills) : 说与写 (Speak ing and W rit ing) ; 被动ö接收的技能 (passiveörecep2 第 15 卷, 第 5 期 1997 年 10 月 　　　中国民航学院学报　　　 JOU RNAL O F C IV IL AV IA T ION IN ST ITU T E O F CH INA V o l. 15 N o. 5 O ctober, 1997 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net t ive sk ills) : 读与听 (R eading and L isten ing)。 (2) 语言功能测试 (T est of L ingu ist ic Funct ion) 从语用学的角度看, 语言功能测试指测试语言应用的技能: 如完形填空 (cloze p rocedu re)、 听写 (d icta t ion)、翻译 ( t ran sla t ion) 等。 2　用途 按用途语言测试可以分为四大类: (1) 潜能测试 (P rogno st ic o r ap t itude tests)、 (2) 水平 测试 (P roficiency tests)、 (3) 成绩测试 (A tta inm en t o r ach ievem en t tests)、(4) 诊断测试 (D iag2 no st ic tests)。　　　 (1) 潜能测试用来预示学生学习某种语言的潜力和天赋。潜能测试很象智商测试, 是对一 个人的智力的全面评估。语言潜能测试则主要预测一个人学习语言的天赋。 (2) 水平测试考查学生的语言能力, 不论从前学过没有或学了多少, 也不考虑是如何学的, 不考虑被测试者的文化、教育、年龄等环境因素。美国的“托福”(TO EFL )、英国的剑桥英语 水平测试和我国的英语水平测试 (EPT ) 都属于水平测试。各种类型的职称考试, 上岗考试等也 都属于水平测试。 (3) 成绩测试考查被测试者对所学知识的掌握, 一般要参考某种教学大纲, 甚至要考虑到 教学方法。随堂测试, 期中测试和期末测试, 毕业考试都属于成绩测试。我国的高考外语测试、 大学中的四、六级外语考试严格地说属于成绩测试, 因为这些测试必须参考外语教学大纲; 但 又象水平测试, 因为测试中常常包括一些考查被测试者解决问题和分析问题的能力的项目。 (4) 诊断测试用来发现教和学两个方面的问题。可以考查单个项目, 也可以考查综合性的 项目。其目的是为了改进教学, 调整教学 计划 项目进度计划表范例计划下载计划下载计划下载课程教学计划下载 , 进行个别指导。诊断测试常用做编班测试, 决 定学生适合哪个进度的教学。 成绩测试是回顾以前; 水平测试主要是展望将来, 同时也注意过去; 潜能测试只是预见未 来; 诊断测试检查以往以图补救今后。 3　学习阶段 如果按学习阶段来分, 一个学期之内可能就有四种语言测试: (1) 编班测试: 指新生入学 后进行的全面考查, 又称“摸底考试”; (2) 随堂考试: 指每教完一课书之后进行的小型测验; (3) 期中考试; (4) 期末考试。 三、语言测试的标准 　　为了使语言测试合理有效, 就要按照一定的规律、一定的标准来设计。这有助于教师选择 能够到达测试目的的语言测试。在评估一个测试时总要提出两个最基本的问题: 这个测试确实 有效吗? 这样检测可行吗? 如果语言测试能体现出想检测的内容, 检测的方法也可以接受, 那么测试就是有效的。如 果学生得分稳定, 没有明显的差异, 那么测试就是有信度的。如果试卷清晰, 操作方便, 测试 就是有使用性。 1　效度 (Va l id ity) 26　　 中 国 民 航 学 院 学 报 1997 年 10 月 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net 效度是看是否到达测试的目的。测试什么就要包括什么项目, 不涉及无关的内容。效度又 可分为内容效度 (Con ten t valid ity)、编制效度 (Con struct valid ity)、经验效度 (Emp irica l valid ity) 和表面效度 (Face valid ity)。 (1) 内容效度: 就应该考查的语言要素和技能都要有所体现。成绩测试和诊断测试尤其要 注意符合教学内容。 (2) 编制效度: 一套测试要以一定的语言行为理论和语言学习理论为依据。 (3) 经验效度: 可分为两种, a) 共时效度 (concu rren t valid ity) : 一次测试的结果, 同另 一次时间相近的有效测试的结果相比或同教师对学生的评估相比较而得出的系数 (即两个值的 比, 一般是+ 1. 00 至- 1. 00) ; b) 预示效度 (p red ict i vevalid ity) : 一次测试的结果同后来的语 言能力相比较, 或同教师后来对学生的评估相比较而得出的系数。 (4) 表面效度: 首先让别人看上去是合适的。为某国设计的测试, 搬到另一个国家就失去 了表面效度, 如: panda, chop st ick s 等词的阅读测试, 在中国有效, 拿到非洲就不行。具有表 面效度的测试容易引起应试人的兴趣。 测试的种类不同, 对各种效度的要求也不同。语言潜能测试多基于某种语言行为理论和语 言学习理论, 因此重视编制效度。水平测试强调有共时效度和预示效度。成绩测试和诊断测试 受教学大纲的限制, 因此首先要看内容效度。 2　信度 (Rel iab il ity) 信度是指检测测试本身是否有效和精确。用信度来检测我们所测试的结果是否有效。从这 一定义看, 信度与经验效度好象是相同的。但它们并不相同, 经验效度是由我们确信的一些外 部规则检测的有关测试结果; 正相关系数越大表明经验效度就越大。信度与此相反, 就其本身 做为检测方式检测测试的有效性。显示的信度涉及测试本身而不是其他规则的测试相关性。由 于测试外部的因素, 如测试者或测试环境, 或测试内部的因素, 如缺乏稳定性和平衡性, 测试 的信度可能降低。 3　区分度 (D iscr im ina tion) 区分度是参加测试的好学生和差学生就一个测试卷或测试中的一个项目的区分程度。如果 所有被测试者的分数相近, 如都是 85 分左右, 说明测试缺乏区分度。 4　实用性 (Practica l ity) 实用性是有关测试的使用性: 试卷印刷是否清晰, 是否有错误拼写等。 理想的测试应该是可信的, 测试本身可以提供有依据的检测; 有效的测试不仅能检测预检 测的内容, 而且要经济, 便于使用。 四、试题设计 　　试题设计除按照以上标准外, 还要注意以下几个问题: (1) 语言测试不应包括考查学习者 的理论知识的项目, 这些项目会引导他们注意语法规则, 而忽视语言的运用; (2) 不能设计好 学习者容易答错, 较差的学习者容易答对的题目。 (3) 不能设计让学习者束手无策的题目。有 36第 15 卷　第 5 期 　　　　　　杨爱荣: 语言测试及设计 　 　 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net 些语言现象就是语法学家也没有统一意见。 (4) 设计成绩测试时, 不能设计与教学大纲或自然 语言要素的比例失调的语言项目。总的来说, 设计的语言项目都应是常见的语言现象。 设计步骤: 计划测试内容, 测试总提纲, 确定测试项目的类型、长度、测试所用时间、给 出试题解释和评分方法; 至少设计比所需项目多三倍的内容, 从中选择合适的项目, 删去不合 适的项目; 对已设计好的试题初稿进行分析修正; 最后确定试题项目, 并确信测试的实际使用 性和有效性。 1　多项选择题的设计 多项选择在目前的测试中是最常见的一种题型。无论是测试词汇、语法、还是测试听力理 解、阅读理解, 大都采用多项选择题。这种题目属于客观测试, 设计困难, 但使用和评分容易。 多项选择题由三个部分组成。一是题干 (stem ) , 二是正确答案 (key) , 三是干扰项 (d ist racters) , 正确答案和干扰项统称选择项 (a lternat ive op t ion s)。 例如: T he b rakes need 题干 . 题干 　　A. adju sted　　 B. adju stm en t　　 C. toadju st　　 D. adju st ing　　 　 　 选择项 干扰项 正确答案 在设计中, 要注意每道题只测一个语言现象; 每道题只许有一个正确答案; 每个选择项放 在题干中应该符合语法 (测试语法除外) ; 选择项要符合学习者的水平, 至少不难于所测的项目, 题干本身不包含比所测项目更难的词汇或结构。 (1) 题干的设计 设计题干时, 要把测试项目显示清楚, 提供足够的信息, 但又不包括与题无关的信息或暗 示; 要考虑到有可能找出足够的选择项; 选择项中不应重复使用同一个词或短语, 把重复的部 分放在题干中。 (2) 干扰项的设计 设计多项选择题的题目关键在寻找干扰项上, 每个干扰项都应该对被测试者有一定的吸引 力。 (3) 词汇测试的选择项的设计 干扰项要与正确答案保持同等难度; 选意义相近的词; 选虽然词义不相近, 但在上下文中 有一定道理的词; 选词义不相近, 但形式相近的词, 也能起到干扰作用。 注意: 有些同义词只能部分同义, 在句中的得体程度不完全相同; 有些词没有现成的同义 词, 只能在句中加以解释, 这样有时会使句子变得不太自然。 2　完形测试的设计 完形测试不仅涉及到被破坏的信息量, 而且涉及语言本身的难易程度, 这种难易程度不仅 与文字本身有关, 而且与对内容的熟悉程度有关。 无论文章长短, 一般的做法是, 第一句或头两句是完整句, 不去掉任何词, 目的是为了把 被测试者引入语境。然后每隔几个词去掉一个。如遇到人名、地名、日期、数字时, 可以隔过 46　　 中 国 民 航 学 院 学 报 1997 年 10 月 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net 去, 因为这些东西很难还原。可以测试很多项目: 功能词、动词变化、名词的词义、词组等。空 格是有目的的, 不受所隔词数的限制, 但平均每隔九个词一个空格是正常的。如采用多项选择 题型, 参考四。1 中的设计方法。 3　阅读理解的设计 语言是信息的载体, 所载信息从来就是有选择的。阅读包括: 在语境中理解词和短语的意 义; 理解句子结构; 看出文章中的所指关系, 理解所表达内容的联系; 读懂较长的篇章, 能抓 住大意; 能看出内在含义, 通过推理, 得出结论; 对所读的文章有自己的看法。另外, 阅读过 程肯定要复杂得多, 阅读不仅是语言问题, 而且也同一个人的普通常识有关, 与思维有关, 与 专门知识有关。 设计阅读理解, 文章长短都行。文章长能考查被测试者的短期记忆能力和综合分析能力; 文 章短可以多选几段, 能包括不同内容, 不同文体的文章。英国的水平测试中的阅读文章最长为 250～ 600 词。不能设计与文章无关的项目; 不用看文章就能回答的项目; 也不能直接从原文中 搬出答案, 如果题目太接近原文的文字, 也就达不到测试的目的。 4　听力测试的设计 听力测试用的材料比阅读测试材料要简单得多, 设计时要注意照顾口头语言的特征, 朗读 时速度要适中。听力测试通常选择三种形式: 单句 (Sho rt sta tem en ts) 理解、简单对话 (Sho rt conversa t ion s) 理解、短文 (M in i- ta lk s) 理解。 (1) 单句 设计题干要容易一些, 选择项难一些, 因为题干是听的, 选择项是读的。设计选择项的限 制较少, 选择项可以互相矛盾, 可以离题甚远, 因为听到的句子立刻消失, 懂就懂了, 不懂也 无法再核对一遍。这种设计体现了口语和书面语的区别。 (2) 简单对话 被测试者听到简单对话, 然后听到一个关于对话内容的问题, 试卷上有四个选择项, 选择 其中的正确答案。这种测试很可靠, 能测到许多不同的对话场景和语言难点, 评分容易, 信度 较高。设计时题干和选择项的文字都要容易, 因为测试的重点在对话的内容上; 干扰项不象阅 读的干扰项那么严格, 因为被测试者只能听到一遍; 干扰项是根据听觉特征设计的, 设计估计 容易听错的地方做为干扰项。 (3) 短文 听成段的材料是最难的。选材很重要, 选择什么水平的材料, 要根据测试的目的和被测试 者的水平而定。 选择项的设计文字不要太难, 干扰项与简单对话的干扰相差不大, 是根据被测试者容易听 错的地方设计的。 5　写作试题的设计 写作是一项重要语言技能。写作测试是一种综合性测试, 属于主观测试项目。不仅测验被 测试者的词汇、用法、语法等语言要素, 而且测验被测试者的组织能力、分析能力、表达能力、 逻辑推理、对各种语体的掌握等。有人认为只有写作才能真正反映一个人的语言修养。作文要 求学生组织自己的思想, 用自己的话表达出来, 是测试写作能力的有效方式; 作文可以鼓励学 56第 15 卷　第 5 期 　　　　　　杨爱荣: 语言测试及设计 　 　 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net 生练习写作。 尽管写作如此重要, 有的标准测试不包含写作项目, 其根本原因是写作的评分主观、不可 靠, 而且评分过程很不经济, 因此许多教师不愿意设计此类项目。 写作测试容易设计, 目前的写作测试大都是命题作文。另外, 还有两种测试形式: (1) 单 句写作: 也就是句型改写, 可以测试语法, 句型和词汇; (2) 把一段文章的顺序打乱, 让被考 试者排列成正常的顺序。 五、结束语 　　以上介绍了几种语言测试项目的设计。做为语言教师应该认识到语言测试知识的重要性。要 做到每设计一套题, 都要力求使之科学, 能够测出自己要测的东西。每次测试之后, 要计算分 数的分布情况, 划出分布曲线; 评估一下测试分数是否正常, 分析一下为什么。在有可能和必 要的情况下, 计算一下测试的效度, 信度和项目的区分度。研究区分度较好的项目是如何设计 的, 区分度为负数的项目的毛病所在。 目前, 许多高校都建立了语言测试题库。这有助于测试的科学化、标准化、制度化。然而, 还需要教学第一线的教师根据自己的教学经验和积累的材料编写试题。因此, 学习一点语言测 试的知识是很有必要的。 参 考 文 献 1　D avies, A lan, P rincip les of L ang uag e T esting. Basil B lackw ell. (1990) 2　L uke P rodromou T he Backw ash effect: F rom T esting to T each ing. EL T J ou rna l. V o l. 49. Jan. (1995) 3　R ichaeds, Jack, L ongm an D ictionary of A pp lied L ingu istics. L ongm an. W o rld Pub lish ing Co rp. (1989) 4　U p shur, JohnA. & T urner, Caro lyn E. Constructing R ating Scales fo r Second L anguage T ests. EL T J ou rna l. V o l. 49. Jan. (1995) 5　刘润清 1《语言测试和它的方法》1 外语教学与研究出版社, (1991) 作者简介: 杨爱荣　女　1957 年 10 月生　1996 年 4 月毕业于西北工业大学外语系　文学 硕士现任中国民航学院外语系讲师 (英文标题、提要等下转第 70 页) 66　　 中 国 民 航 学 院 学 报 1997 年 10 月 © 1994-2009 China Academic Journal Electronic Publishing House. All rights reserved. http://www.cnki.net T he Influence of Cu ltu ral E lem en ts in the P rocess of Ch inese- English and English- Ch inese T ransla t ion W ang J in (D ep artm en t of F oreig n L ang uag es CA IC , T ianj in　300300) Abstract: L anguage lays the bases of the en t ire cu ltu re. Pecu liarit ies of a language can be traced to its cu ltu ra l m atrix. A s an art of language m an ipu la t ion, t ran sla t ion m u st be under the influence of cu ltu ra l elem en ts in p rocess of b ilingual t ran sfo rm at ion. In th is paper, f ive as2 pects are analysed to illu st ra te that cu ltu ra ld ifference can lead to non - co rrespondence of se2 m an tics and exp ression betw een the o rig inal language and the target language in the p rocess of Ch inese- English and English- Ch inese tran sla t ion. A nd so comp lenm en tary m ean s m u st be adop ted. 　　　 Key W ord: cu ltu re; o rig inal language; target lanuage; referen t. (上接第 66 页) L anguage T est ing and T he D esign Y ang A irong (F oreig n L ang uag e D ep artm en t CA IC , T ianj in　300300) Abstract: L anguage test ing is one of the key link s in fo reign language teach ing, T h is art i2 cle m ain ly describes the theo ry of language test ing in all it s ram ifica t ion s, such as the pu rpo se of language test ing, the types and the criteriaof language test ing. A nd it analyzes and sum s up the design ing m ethods fo r the common item s of language test ing, such as m u lt ip le cho ice, vocabu lary, cloze test, reading comp rehen sion, listen ing comp rehen sion, and w rit ing. It a lso exp la in s how to calcu la te and analyze the sco res of the test ing, and suggests tha t it is necessary fo r language teachers to learn a lit t le abou t language test ing. Key W ords: language test ing; valid ity; reliab ility; d iscrim inat ion; p ract ica lity 07　　 中 国 民 航 学 院 学 报 1997 年 10 月