多模态输入对英语听力教学的影响研究

黄燕

[摘要]本文通过实验与访谈的方式，调查了听力教学中多模态的组合形式对不同英语水平的学习者听力理解造成的影响。实验以高职院校英语专业学生为研究对象，将高低两个层次的受试各四个小组分别采用听音、视听、中文字幕视听、英文字幕视听的方式进行听力材料输入。结果显示，听力材料输入模态的差异对不同层次的学生听力理解的影响不同。对此，笔者结合访谈反馈的信息从认知负荷、注意力分配等方面对研究结果进行了探讨。

[关键词]多模态输入；听力教学；听力理解

[中图分类号]G642 [文献标识码]A [文章编号]1671-5918（2016）04-0161-03

多模态话语研究始于20世纪90年代。它是指运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。随着网络信息技术时代的到来，英语教学从单模态的语言输入逐渐开始转向听觉、视觉、触觉等多种模态。多模态输入调动了学习者的更多感官，有利于对信息的加工和记忆，也有效地激发起学习者语言学习的兴趣。然而，在听力教学中，是否信息输入所使用的模态越丰富，学习效果就越显著呢？本研究采用教学实验与访谈的方式，试图探寻多模态听力教学对英语专业不同水平层次学习者听力理解的影响，为听力教学模态选择的有效性提高参考依据。

一、研究综述

1996年“新伦敦小组”（NewLondon Group）提出了“多模态教学”的概念，开启了语言教学研究新领域。继而掀起国内外学者对多模态的语言教学研究的热潮。其中，听力教学中多媒体应用研究也得到了不少国内学者的关注。

龙宇飞等（2009）对200位非英语专业的学生进行了为期一年多的听力教学实验。研究表明，元认知策略、多模态教学及两者的结合对听力能力的提高有积极的作用。曾庆敏（2011）采用定性与定量分析的方法，发现多模态视听说教学模式不仅有利于学习者听说能力的提高，也有助于积极学习态度的形成。惠兆阳等（2013）以英语专业一、二、三年级的369名学生为研究对象，通过语言测试（语音测试和听力理解测试）与访谈的方式，探讨了听觉模态和视觉模态在不同听力任务和教学阶段对学生的影响。上述实验研究，在模态选择上大多集中于听觉模态与视觉模态的对比分析上，仅顾琦一等（2014）一文通过对比实验分析了听力、听力字幕、听力视频和听力字幕视频四种模态组合方式对英语专业学习者听力理解的影响。研究既对听觉与视觉模态予以考虑，又对字幕的作用进行了分析。但多模态组合方式对不同英语水平学生者听力理解差异度的研究却少有涉及。为此，本研究选择高职英语专业不同英语层次的学习者为研究对象，探讨不同模态输入组合对学习者听力理解产生的差异。

二、研究设计

（一）研究问题

本研究旨在回答以下三个问题：

1.多模态输入方式的不同是否会对学习者的听力理解产生影响？

2.对于不同英语水平的学习者，这种影响是否一致，如果不同，差异表现在哪些方面？

3.以上影响会给英语听力教学带来怎样的启示？

（二）研究对象

本实验选取某高职院校英语专业学生作为研究对象，实验前先进行了听力水平测试，根据学生测试成绩将其分为高分段学生（80分以上）和低分段学生（60分-70分之间），分别代表不同英语水平的学习者。随机抽取两个分数段的学生各120人，每组均为30人。为保证实验中同一分数段各组间听力理解水平具有可比性，使用SPSS17.0软件对测试成绩进行了单因素方差分析。数据显示高分段各组在实验前听力理解能力均未发现有显著性差异（F=0.047，P=0.986>0.05）；低分段4组检验也未显示有差异存在（F=0.033，P=0.992>0.05）。据此，我们有理由相信在实验中可能出现的组间听力差异是由模态输入方式导致的。

（三）任务设计

实验语料为节选自BBC纪录片《大地的声音》第三集《生命的未来》（The Future of Life）中一段时长4分20秒（482词）的视频材料。《大地的声音》是由美国导演Kate Broome导演的一部环保纪录片。该语料发音清晰、语速适中。视频根据研究需要经过了技术处理。2位有五年以上工作经历的大学英语教师和2位外教对语料进行关键词提取，经过多次讨论确定了42个对原文理解不可或缺的关键词，作为听力测试得分点。

实验中，高分段受试的听力语料采用四种不同的模态呈现，听音组采用单一的听觉模态；视听组通过视觉和听觉输入听力材料；中文字幕视听组不仅接收到视听材料，还可以看到中文字幕；英文字幕视听组除视听材料外，同时提供听力语料的英文字幕。低分段学生进行上述相同的实验操作。语言材料输入时，不允许受试做任何笔记。输入完毕后，受试被要求在20分钟内（时间充足）尽可能完整地回忆材料内容，并用英语写出内容概要。需特别说明的是数据处理时只对关键词数量予以计算，不考虑语法准确性。本次测试成绩满分为100分。实验完成后，笔者从两个分数段的视听组、中文字幕视听组和英文字幕视听组中随机抽取各5名受试进行访谈，受访人数共30人。访谈并未在听音组中开展，是因为听音组采用单一模态（听觉模态）输入信息，不会受到视频和字幕等信息渠道的辅助或干扰。访谈内容因模态输入方式的不同而异，主要收集不同模态输入中学习兴趣、注意力分配和认知负荷的情况，从而找出模态输入组合对听力理解造成影响的原因。

三、测试结果

为发现模态输入与听力理解是否存在内在关联，对测试成绩进行了单因素方差分析，统计结果：高分阶段的组和低分段组别分为：听音组、视听组、宗文字幕视听组、英文字幕试听组。其中高分段中的平均值（M）为：62.13、64.40、68.63、74.03；标准差（SD）为：5.894、4.352、5.209、6.376；F：27.075；P：0.000。低分段中的平均值（M）为：42.90、39.57、48.80、61.83；标准差（sD）：5.933、4.125、6.105、6.561；F：87.182；P：0.000。结果表明，模态输入的变化对学习者的听力理解产生了显著性影响（高分段F=27.075，P=0.000<0.05；低分段F=87.182，P=0.000<0.05）。总的说来，采用英文字幕视听输入方式的学习者听力材料理解的效果最好；中文字幕视听效果次之；听觉与视听两种输入方式，对不同水平学习者的作用不尽相同。

为了对四种模态输入方式进行更深入的分析，我们对测试成绩进行了事后多重检验，数据显示：高分段听音组在听力材料理解上显著低于中文字幕视听组（P=0.000）和英文字幕视听组（P=0.000），与视听组不存在显著性差别（P=0.114）；视听组对听力的理解显著低于中文字幕视听组（P=0.004）和英文字幕视听组（P=0.000）；中文字幕视听组显著低于英文字幕视听组（P=0.000）。据此可以做出以下判断：不同模态输入对高水平学习者听力材料理解表现为听音组=视听组<中文字幕视听组<英文字幕视听组，即听觉输入=听觉+视觉输入<听觉+视觉含中文字幕输入<听觉+视觉含英文字幕输入。

低分段听音组在听力理解上与视听组（P=0.027）、中文字幕视听组（P=0.000）和英文字幕视听组（P=0.000）均有显著性差异；视听组的理解显著低于中文字幕视听组（P=0.000）和英文字幕视听组（P=0.000）；中文字幕视听组显著低于英文字幕视听组（P=0.000）。各组听力理解表现为视听组<听音组<中文字幕视听组<英文字幕视听组，即听觉+视觉输入<听觉输入<听觉+视觉含中文字幕输入<听觉+视觉含英文字幕输入。

四、分析与讨论

（一）视频

根据Baddleley（1986）的工作记忆理论，普遍认为学习者通过听觉和视觉两种方式输入加工材料，会扩大工作记忆的信息处理容量，从而提高工作记忆效率。以此推测，视听模态在听力内容理解上应好于听觉模态。而实验数据分析却得出不同的答案：高分段视听组成绩略高于听音组，但两者差异不显著；低分段视听组成绩不如听音组且差异显著。这可能是由于视频输入对低水平学习者干扰作用较大，视频图像增加学习者的信息负荷；而高水平学习者短时记忆容量更大，长时记忆信息更丰富，处理信息的速度更快，因此视听模式对他们干扰并不明显。

访谈发现，视听组、中文字幕视听组、英文字幕视听组对视频的关注程度不尽相同。这一发现在高低分段呈现出相似性，结果均为视听组关注视频的人数最多，中文字幕视听组与英文字幕视听组相比，前者对视频的关注度高于后者。访谈还发现，无字幕的视频虽然对听力材料的理解作用不大，但是对学习兴趣提升方面产生了积极作用。

（二）字幕

通过实验数据比较发现，高低分段对字幕效果的反馈较为一致。均为英文字幕组的理解显著好于中文字幕组，中文字幕组的理解显著好于其他两组。由此可以做出以下两个判断：第一，字幕有利于听力理解。视听过程中，学习者虽也同时受到视频的干扰，但字幕的信息提示功能，在一定程度上抵消了视频带来的干扰。第二，与中文字幕相比，英文字幕对听力的促进作用更为明显。主要是因为英文字幕在获取听力材料原文信息方面比中文字幕更加快捷、更加高效，自然能更好地促进学习者听力的理解。

访谈向我们揭示了字幕在听力理解上突出表现的原因。高低分段各组运用听觉输入获取信息的差别很大，视听组对听觉信息的关注度明显高于字幕视听组，字幕视听组对听觉输入未表现出过多的关注，英文字幕组通过听力获取信息的受试略高于中文字幕组。字幕对听力语料理解产生积极作用是因为受试刻意回避了加工能力弱的听觉通道，更多地利用了加工能力强的视觉通道。可见，字幕的使用表面上对听力理解有促进作用，实际上字幕辅助并不能帮助听力技能的发展，甚至有可能对其发展有一定的杀伤力。

五、结语

综上所述，我们可以得出以下结论：第一，模态输入方式的不同会产生不同的听力材料理解效果；第二，同一模态对不同英语水平学习者听力理解的作用也不尽相同。此外，在听力输入中学习者对听音、视频及字幕的不同注意力分配，为我们的听力教学带来了新的启示：第一，在多模态时代的听力教学中，不应盲目地否定单一的听觉模态输入，而应结合学生的语言水平及认知发展规律，才能达到最佳教学效果。第二。字幕输入对听力材料理解能起到显著效果，但并不能促进学习者听力水平的提高。

本研究的局限在于研究对象为高职英语专业的学生，英语层次普遍不高，英语水平区分度不够。今后可以将研究扩展到更大的范围内进行，从而增加模态输入选择对不同英语层次学习者听力理解影响的说服力。

（责任编辑：桂杉杉）