CET-SET对口语学习系统研发的反拨作用

邹建萍

（广西大学 外国语学院，广西 南宁）

1.引言

反拨（washback or backwash）指测试对教学的影响（Hughes，1989）。20世纪60年代教育界开始讨论测试对教学的反拨作用，语言测试对语言教学反拨作用的研究始于20世纪 90年代 （Wall,2000）。 自从 Alderson和 Wall（1993）“Does Washback Exist?”一文发表以后，语言测试界围绕Alderson and Wall在文中提出的15种“反拨假说”进行了大量的探讨和研究，研究的范围主要涉及重大测试（high-stakes examinations）对参与者、过程和结果的正面和负面的反拨效应。参与者包括教师、学生、教学管理者以及教材设计者和出版者；过程指教学参与者采取的有助于教学的任何行动，如教材研发、大纲制定、教学方法的变化、学习和应试策略的采用等；结果指所学知识或技能和所学知识和技能的质量（黄大勇，2002）。国内外文献关于语言测试对教学过程之一的教材研发的反拨作用很少见报道。只有Saville和Hawkey（2004）介绍教材分析方法（instrument for the analysis of textbook materials）的实验和修订过程（由University of Cambridge Local Examinations Syndicate制订）及讨论 IELTS（雅思考试）对教材反拨作用的研究方法。Andrews et al.（2002:211）认为：“出版材料对预测反拨效应也起重要作用。”教学内容往往能给教师启示或者成为促进因素（stimuli）。随着教育技术和教学理论的发展，学习系统在教学过程中的作用日益重要。本文讨论CET-SET对口语学习系统研发的反拨作用，认为CET-SET对口语学习系统的研发产生一定的正面反拨作用，口语学习系统给学习者创造更多的口语基础训练机会，增强了学习者练习口语的意识，但学习系统的交际功能和交际任务的真实性需要结合师生之间和生生之间的口语教学活动才能取得更好的教学效果。

2.语言测试反拨作用研究概述

语言测试界关于语言测试反拨作用研究存在两种主要的观点：（1）引入任何测试都会产生或者正面或者负面的反拨作用，反拨作用取决于测试的质量而不是其他的因素。Morrow（1986）认为测试效度验证应包括测试使用后效的验证，提出 “反拨效度”（washback validity）的观点。Nobel和Smith（1994）认为：受测试驱动的评估改革的本质就是要设计更好的测试，使之能引导学校朝着明确的目标，并改革教学大纲和教学方法，以培养学生的思维能力而不是记忆和离散的技能，即从行为主义到认知——建构主义的教学理念的转变，从大规模的标准化测试到表现/行为测试的转变。（2）实施测试会引起不同的个体反应，参与者的差异使测试反拨作用不一定不可避免，反拨作用由课堂教学活动的参与者而不是测试产生（Alderson&Wall， 1993）。 Green（2006）修改了他本人2003年提出的反拨作用产生的方向、变量和强度的模式。修改后的模式用图示反拨作用产生方向：焦点测试结构（Focal Construct）与测试设计特征、项目形式（format）、内容复杂性等相互作用于反拨变量而产生正面或负面的反拨作用，反拨变量包括参与者、过程和结果。反拨变量的差异导致反拨作用的强与弱或零反拨作用。

国内外语言测试反拨作用研究主要研究重大考试如TOEFL （Test of English as a Foreign Language）、IELTS（International English Language Testing System）、HKCEE （Hong Kong Certificate Examination in English）、CET4-6 （College English Test,Band 4-6）、 CET-SET （College English Test-Spoken Englsih Test）、 TEM （Test for English Majors）、NMET（National Matriculation English Test）和一些国家和地区的重大考试等。这些研究用定性和定量分析方法分析通过访谈、课堂观察、问卷调查等手段采集的数据。主要的研究结论有：（1）测试引起教育变化的理念能产生自上而下的教育方针的改革（Cheng， 1999， 2005；James， 2000； Linn， 2000；金艳，2000）。（2）测试设计者和教育政策制定者的意图与课堂实践存在差异，原因是测试两大功能——选拔功能和促进教学变化功能在很多方面自相矛盾（Qi， 2005； Saif， 2006）。 （3） 测试对学习者的学习态度产生强的反拨作用（唐耀彩、彭金定，2004；金艳，2000）。（4）测试对学习者的学习内容和学习方法只产生弱的反拨作用（唐耀彩、彭金定，2004）。（5）设计科学、合理的测试对学习者的学习行为产生良好的反拨作用 （金艳，2000； Pearson， 1988）。（6）测试只是引起反拨作用的因素之一，其他因素包括教师的理念、能力、对测试的了解、学习者的 特 征 等 （Alderson & Wall， 1993； Alderson and Hamp-Lyons， 1996； Green， 2006）。（7）反拨的程度和种类与教师、教材编者对教学法的理念和改革意愿有关（Alderson&Hamp-Lyons， 1996； Cheng， 1999， 2005）。 （8） 测试使课堂教学的内容产生变化，但教师的观念、态度和课堂行为没有变化（Cheng， 1999， 2005； Green， 2006）。（9）测试设计特征与课堂实践缺乏一致性（Green，2006）。（10）反拨的质量不取决于测试的质量（Alderson&Wall， 1993）。

Andrews 和 Fullilove（2002）的研究填补了 Wall（2000）所说的测试对学习结果反拨作用研究的空白。他们提出两个研究问题：（1）“Use of English”考试（香港）增加口试是否影响学生中学7年级毕业时口语表现能力？（2）测试改革对学生口语表现产生即时（immediate）或者后延（delayed）的影响？他们通过对学生的口语成绩统计分析和口试语言产出录音分析，他们的研究得出以下结论：引入口语考试对学生口语表现产生两方面的影响：（1）结构特征与策略；（2）语言特征与策略。但影响是后延的，而且影响的程度因人而异，一些方面的影响能促使学生口语表达能力的进步，而其他方面只引起表层的变化，如熟悉考试形式和要求等。

Alderson（1993）认为反拨假说适用于研究教学大纲里规定的经常性考试以及具有教育意义的考试。这包括重大考试和学校层面的考试，但很少语言测试反拨作用研究涉及学校层面的考试。Mu觡oz（2010）研究了学校层面的口语考试体系对教学的反拨作用。该测试体系为交际能力测试，体系基本参照Hughes（1989）提出的八条标准设计，强调测试任务与教学大纲要求和教学实践的一致性、测试任务的真实性、详细的成绩报告和师生对评分标准的理解。实验得出以下结论：（1）该测试体系对教学产生正面的反拨作用，前提是采用新的测试体系应该重视教师培训，了解教师对测试的观念，了解测试设计与教师观念是否冲突。（2）正面的反拨作用可以培育，方法是让学生了解测试程序和评分标准；课堂教学要基于明确的教学目标，测试应该确定这些目标是否达到；使用自我评价机制。

一些语言测试专家和学者（Vernon，1956；Hughes，1989；Herman&Golan， 1991；Stodolsky，1988）研究了测试对教学的负面反拨作用，研究结论包括：测试扭曲教学大纲；测试浪费教学时间，限制了教学大纲和教学方法；教师由于担心考试结果差，以及与之带来的内疚、羞愧和窘迫，为了高分，采取应试教学，忽略语言应用能力的提高；由于学生的考试成绩影响教师的晋升、奖励等问题，教师缺乏合作精神；测试使学习者产生焦虑，学习者因压力而发挥失常，测试没有反映出学习者的真实水平。

3.CET-SET对口语学习系统研发的反拨作用

CET-SET分“热身练习、个别发言和小组讨论、进一步提问”三个部分考核被试的英语应用能力。“CET-SET既考了语言能力（linguistic competence），即语音语调、语法和词汇，也考了交际能力（communicative competence），即功能意念和语用知识。”（金艳，2000:56）自1999年CET-SET实施以来，很多高校修订了学校的大学英语教学大纲或要求，明确大学英语口语教学目标和评估要求。有些学校针对CET-SET编写口语教材（金艳，2000），增加口语教学课时和口语考试的比分。随着教育技术和教学理论的发展，教材设计者和出版者不断创新和改版教材，尤其是大学英语听力教材，增加了口语教学内容。教材研发经历了以听力为主的纸质教材到研发视听说综合教材和学习系统。由此可见CET-SET对反拨变量——教材研发（包括纸质教材和非纸质的学习系统）产生一定的正面反拨作用，学习系统的使用促进了教学模式的变化，有助于培养学习者练习口语的意识和激励学习者练习口语的行为。这些学习系统对教师的教学观念、教学方法、学习者的学习方法、学习策略产生一定的影响。外语教学与研究出版社出版的《新视野大学英语》网络教学系统（2001～2010版本）每个级别各有10个单元，每个单元有五项内容。其中Listening Skills和Listening In两项是听力任务，涉及口语训练的有Lead-in、Speaking Out和 Let’s Talk 等三项。Lead-in 以一小段视频引出本单元主题，每个单元的语言输入输出基本围绕一个主题。Lead-in提出的通常都是open-ended的问题，学生可以录制自己的答案，听自己的录音，纠正录音，重新录制答案，然后提交。提交答案后，可以点击收听suggested answer的音频。Speaking Out包括video、practice和quiz三部分。Video的练习内容和形式是收看一段和本单元主题相关的视频。Practice练习内容和形式是页面以文字方式列出video的对话，学生与系统里的虚拟鹦鹉Peedy进行对话，学生可以选择扮演两个角色当中的任何一个。Quiz的练习内容和形式是页面以文字方式列出一段和video主题不同、但句型相似的半完整对话，学生根据提示选择必要的内容将对话补充完整。Let’s Talk的练习内容是收听passage或观看视频后根据页面提示进行复述，提交复述内容的录音。页面提示为文字或图画。该系统对客观题进行即时的反馈。口语部分的训练学生在系统提交，由教师评分和反馈。

除了《新视野大学英语》网络教学系统外，目前大学英语学习系统还有清华大学出版社出版的 《新时代交互英语》网络辅助平台（2004年出版，4.0版本）。该系统的每个级别共有12项内容，涉及口语训练的有say it right、repeat and record、record and compare、role play和apply等五项，主要训练口语基础：语音、语调、词和句子的模仿，全部由语音识别软件评分并判断是否过关，即时反馈。Say it right学习者主要练习模仿朗读句子，主要练习语音、语调、重读；Repeat and Record学习者练习听对话中的关键句子，模仿并录音；Record and Compare练习的内容与上个环节一样，朗读上个环节的内容、录音并比较自己的朗读录音和原版音频（由本族语为英语者朗读，以下同）；Role Play学习者可以自由选择对话中任意一个角色朗读、录音并比较比较自己的朗读录音和原版音频；Apply第一步：观看关于本单元主题的一段视频；第二步：就视频主题联系自己生活实际回答问题；第三步：录下自己回答问题的声音，接着回答第二个问题；第四步：比较自己录音和原版录音；第五步：再次观看同样的视频，加深理解。

上述的网络教学系统和网络辅助平台的口语训练形式与CET-SET的形式不完全一致，但强调口语基础的重要性与CET-SET的要求一致，其在教学过程中加强英语口语训练的理念显示了CET-SET的正面反拨作用。这些系统有利于学习者的口语基础训练，为提高口语交际语言能力打好基础。

新世纪广西高等教育教学改革工程“十一五”项目“基于网络的大学英语口语教学研究与计算机化口语考试系统的研发与实践”课题组针对区域大学英语教学的实际情况，正在研发《大学英语口语基础训练与测试系统》。在研发的初始阶段，课题组参照CET-SET的形式与内容（金艳，2000），对以下内容作了详细的描述：（1）系统的类型；（2）系统的结构；（3）语言特征训练；（4）语言功能意念；（5）提问和具有一定封闭性的回答；（6）听力输入文本的类型；（7）听力输入文本的主题；（8）听力输入录音口音的多样化；（9）听力输入的真实性。

《大学英语口语基础训练与测试系统》第一阶段的研发共有10个单元，围绕日常生活的10个主题。主要着重学生基础阶段的口语训练，训练过程大致分“模仿—练习—测试”三个步骤：

（1）模仿：学生通过模仿朗读和角色配音的方式对标准的英语发音进行模仿，并由计算机语音识别系统自动打分。这个过程包括辨音、模仿朗读词、句、段落、配音等多种练习形式，主要训练学生的语音语调、朗读等基础的语言能力，这与CET-SET要求相一致。

（2）练习：学生收听收看标准英语发音的音频和视频材料，根据上下文与计算机进行答案具有一定封闭性的对话和回答问题。这个步骤的练习为交际语言活动打好基础。

（3）测试：学生经过一定量的模仿与练习后，进入测试阶段，由计算机语音识别系统自动评分，学生可以借此了解自己的口语练习情况。

该系统主要供学生课外练习，为语音基础较薄弱的学生创造了更多的口语基础训练的机会，同时大大节省了教师的劳动力。系统最大的特点是通过语音识别系统和Speech Server软件构建的网络对学生的口语表现进行评分，学生可以得到即时的反馈，增加学习兴趣和动力。

口语学习系统的研发反映了CET-SET的正面反拨作用，学习系统的使用增强了学生练习口语的意识，在训练学生的口语基础方面起到一定促进作用。但在训练学生的交际语言能力方面存在局限性，技术条件限制了CET-SET交际语言能力考核要求对学习系统研发的反拨作用。教师课堂口语教学应以培养和训练学生的交际语言能力为主，强调口语训练任务的真实性和交互性，才能更好地发挥CET-SET对口语教学的反拨作用。

4.结语

测试反拨作用研究的深层意义是让测试对教学起正面反拨作用。CET-SET交际语言能力的测试结构、测试内容和测试特征对教学参与者之一的教材开发者和出版商及口语学习系统（非纸质教材）的研发产生了正面反拨作用。这些系统的运用对教师的教学理念、教学方法和学生的口语练习意识、口语基础训练、学习策略具有一定正面反拨作用。但这些系统不能直接地训练口语交际语言能力，教师在课堂口语教学中应设计真实性交互性强的口语任务训练学生的交际语言能力。

［1］Alderson， J.C.&D.Wall.Does Washback Exist?［J］.Applied Linguistics，1993（14）：115-129.

［2］Alderson， J.C.&L.Hamp-Lyons.TOEFL Preparation Courses:A Study of Washback［J］.Language Testing， 1996（13）：280-297.

［3］Andrews.S.et al.Targeting Washback：A Case Study［J］.System， 2002（30）:207-223.

［4］Cheng， L.Changing Assessment:Washback on Teacher Perceptions and Actions ［J］.Teaching and Teacher Education， 1999（15）:253-271.

［5］Cheng， L.Studies in Language Testing:Vol.21.Changing Language Teaching Through Language Testing:A Washback Study ［M］.Cambridge， UK:Cambridge University Press，2005.

［6］Green， A.Watching for Washback:Observing the Influence of the International English Language Testing System Academic Writing Test in the Classroom［J］.Language Assessment Quarterly， 2006（4）:333-368.

［7］Herman， J.L.&S.Golan.Effects of Standardised Testing on Teachers and Learning:Another Look，CSE Technical Report［M］.Los Angeles:University of California.Centre for Research on Evaluation， Standards and Student Testing，1991:334.

［8］Hughes， A.Testing Language Teachers［M］.Cambridge:Cambridge University Press，1989.

［9］James， M.Measured Lives:The Rise of Assessment as the Engine of Change in English School［J］.CurriculumJournal，2000（11）:343-364.

［10］Linn,R.L.Assessments and Accountability［J］.Educaional Researcher,2000（2）.

［11］Mu觡oz,A.P&M.E.譙lvarez Washback of an Oral Assessment System in the EFL Classroom［J］.Language Testing,2010（11）:33-49.

［12］Morrow,K.The Evaluation of Tests of Communicative Performance［C］//M.Portal.Innovations in Language Testing:Proceedings of the IUS/NFER Conference.London:NFER/Nelson,1986：1-13.

［13］Noble,A.J.&M.L.Smith.Old and New Beliefs About Measurement-driven Reform:The More Things Change,the More They Stay the Same.CSE Technical Report［M］.Arizona State University， Centre for Research on Evaluation,Standards and Student Testing， 1994：373.

［14］Pearson,I.Tests as Levers for Change［C］//D.Chamberlain&R.J.Baumgardner.ESPin the Classroom:Practice and Evaluation.London:Modern English,1988：98-107.

［15］Qi,L.Stakeholders’ Conflicting Aims Undermine the Washback Function of a High-stakes Test ［J］.Language Testing,2005（2）：140-171.

［16］Saif,S.Airming for Positive Washback:A Case Study of International Teaching Assistants［J］.Language Testing,2006（1）:1-34.

［17］Saville,N.&R.Hawkey.The IELTSImpact Study:Investigating Washback on Teaching Materials ［C］//Washback in Language Testing:Research Contexts and Methods.New Jersey Lawrence Erlbaum Associates,Publishers Mahwak,2004:73-96.

［18］Stodolsky,H.The Subject Matters:Classroom Activity in Math and Social Studies［M］.Chicago:University of Chicago Press,1988.

［19］Vernon,P.E.The Measurement of Abiliities［M］. London:University of London Press，1956.

［20］Wall， D.The Impact of High-stakes Testing on Teaching and Learning:Can This Be Predicted or Controlled? ［J］.System， 2000（28）:99-509.

［21］黄大勇，杨炳钧.语言测试反拨效应研究概述［J］.外语教学与研究，2002（4）:288-293.

［22］金艳.大学英语四、六级考试口语考试对教学的反拨作用［J］.外语界,2000（4）:56-61.

［23］唐耀彩，彭金定.大学英语口语考试对英语学习的反拨作用［J］.外语界， 2004（1）:25-30.