英语语言教学中多模态话语的意义与构建

梁 强

（滁州学院 外国语学院，安徽 滁州239000）

我国学界对于多模态（multimodality）的定义不同学者有不同的看法，多模态在社会符号学、系统功能语法、话语分析等领域较为集中，但其不局限于此，多模态跨越了学界中的大多数学科。多模态话语以多模态为基础，多模态（multimodality）的词根是模态（modality），进而分析多模态需要了解模态的内涵。［1］模态的定义分为几种，Charles forceville代表符号系统说，是指具体的感知过程，例如，文字符号、图像符号、声音、手势、味道等。G.Kress代表交互方式论，他认为模态是人类通过感官跟外部环境之间的互动方式，例如，视觉模态、听觉模态与嗅觉模态等。［2］交互方式论与符号系统说表明模态的实现需要依靠媒介，仅依靠一种媒介得以实现的模态为单模态，而依靠多种媒介得以实现的模态则为多模态。随着科技不断发展，大数据、物联网等信息化与现代科技主宰的社会，多模态已然成为人们生活不可或缺的一部分。

一、多模态话语的释义

（一）多模态话语的界定

多模态话语是包含了两种或两种以上符号系统的话语。多模态话语分析相对其他话语分析脱颖而出之处在于，多模态话语分析打破了以往的局限性，以往大家提出的理论或研究，皆以语言为研究对象，这无疑是单一的研究模式，仅注意语言系统与语义结构本身及其与社会文化和心理认知之间的关系，为研究带来一定的阻碍与局限，［3］多模态是基于图像、文字、声音、颜色的一种模式，在很大程度上帮助大家克服单一研究模式带来的局限性。单模态下的话语，包含了多个符号系统，一种模态包含两种或两种以上的符号系统的典型例子——漫画，漫画包含了图像与文字，虽然在模态上大家仅运用了视觉模态进行阅读，但是其包含了两种符号系统，我们也将其视为多模态话语，即我们可以理解为，单模态话语是绝对单一的模态。

李战子认为多模态是复合型的话语，如图像、文本、图表等符号系统。张德禄认为多模态是人们通过多种感官符号资源实现交际的现象。O’Halloran综合多位学者的观点，认为多模态是“综合语言、视觉图像、其他符号资源、构建纸质和数字媒体、日常生活文本、事物、事件的理论分析和实践，总体而言，多模态话语代表了社会的进步与社会的文明成果，同时多模态话语是打破多领域研究与发展局限的利刃，具有系统性与功能性；基于系统功能语言学，多模态话语分析认为语言以外的其他符号也是意义的源泉”［4］，系统功能语言学的系统理念，以及纯理功能假说认为，模态话语具有功能性。系统功能语言学的系统理论，认定多模态话语具有系统性，同时还有系统功能语言学的纯理功能假说，认定多模态话语具有功能性等性质。

（二）多模态话语的内涵

在我们进行话语交际的过程中，语言不是唯一体现话语意义的方式与渠道，话语更多体现在非语言因素上，如声音、声调、语速、动作、表情，是伴随着语言一同出现的非语言因素，这些是体现话语意义的重要因素之一，属于副语言特征；非语言因素现代智能教学电子设备，如音响、投影仪、电脑等属于环境因素，在话语交际中也起到发挥话语意义的作用。换言之，交际不是一种简单的利用单一感官进行的活动，而是集合了多种模态进行的活动，这种交际方式产生的话语即是多模态话语。［5］最早研究多模态话语分析的是R.Barthes，他在《图像的修辞》中探讨了语言与图像在表达意义上的相互作用；Kress，G.and van Leeuwen，T.研究了模态与媒体的关系，包括颜色语法、视觉图象，以及报纸的版面设计和不同媒介的作用等；O’Halloran，K.L.专门研究了数学语篇中的多模态现象；［6］Royce，T.研究了不同符号在多模态话语中的互补性，以及在第二语言课堂教学中多模态的协同性等。另外，系统功能语言学将话语意义和功能放置于实现意义与功能的符号系统之前，这打破了研究的局限性，有益于我们全面地理解和研究多模态话语。

二、多模态话语运用于英语语言教学中的意义

（一）增强英语语言实践能力

多模态话语在英语语言教学中，可以增强学生的英语语言实践能力。研究多模态话语对于英语教学的意义在于，开创多模态的英语教学模式，可以培养学生的多样性、全面性与系统性的能力。在英语教学中，多模态话语分析使学生对于语法的理解具有多样性的特征，这是针对学生的思维而言的，多模态话语分析中的语法缺乏严格语法意义上的标记与线性关系，带有较强的主观性，［7］如同系统功能语言学框架中的文化层面，由于每个人的文化背景、知识结构以及意识形态的差异，会得出不同的结论，有些人认为这是多模态话语分析的不足之处，但是置于英语教学的环境当中，这是培养学生个性以及思维的一种方式。

英语语言教学以培养学生英语语言能力为基础，对学生的英语语言实践能力的培养尤为重要。目前英语教学的误区是忽略了英语语言实践的重要性，在英语教学中打破了专业知识与英语语言的平衡。传统英语教学受到了科学技术等智能化设备的限制，教师难以为学生恢复真实的英语语言环境，学生无法体会最真实的人际交流，进而无法通过已有课程提升自身的英语语言思维与英语语言交际能力。多媒体等现代化信息与智能技术的发展为英语教学提供了便利条件，但是英语教学长期以来在教学改革上存在滞后性，教育信息化与教育信息化2.0并没有对英语教学起到较大的推动作用，学生需要具有国际化视野与思维，运用多模态教学促进英语教学的改革迫在眉睫。

换言之，在英语教学的环境下，多模态话语分析能满足社会不断发展对人才日益提升标准的需求，多模态话语的特征可以培养学生的多样性、全面性与系统性，即学生在具有个性的同时，不缺乏共性，并且具有整体性。现今教育领域正在提倡培养学生的全球胜任力，要求学生具有国际化视野、独立的思维模式与较强的交际能力，而多模态话语本身是具有以上几点特征的话语模式，因此，英语教学采取多模态话语的教学模式是培养人才的优质选择。

（二）提升英语语言教学质量

在英语语言教学中，多模态话语可以提升学生学习的积极性，帮助学生更全面地理解英语语言。英语教学在教育信息化与教育信息化2.0 时代的推动下实施一些相应的教学改革措施，使教学设备相对智能化，教学内容更加多样、丰富，但在人才培养模式与教学模式上无法满足社会需求，换言之，教育信息化对英语教学的推动仅局限在教学设备与教学环境领域，并没有对教学内容作出实质性的改变，忽视了英语学习所需的基本原理；在教学模式上，教学方式存在枯燥单调的问题，学生难以提升学习英语语言的积极性，英语课程呈现出传统的教师讲学生听的模式，在各高校各专业皆处在教育现代化转型阶段，多模态英语教学是提升英语教学质量的重要手段。多模态教学的特点就是教师运用多种符号表征，包括教师的声音、语调、手势、表情、情绪等最大限度地刺激学生的多种感官，让学生处在一个多模态的学习环境中完成意义的构建和知识的内化。教师在教学设计过程中应当运用多模态课程资源，促进师生互动或是人机互动，提高学生对于英语语言学习的积极性，促进学生对知识的建构与内化，挖掘学生的多模态交际能力。

三、多模态话语在英语语言教学中的构建

（一）模拟现代化英语语言教学环境

多模态教学模式为英语语言教学提供现代化路径。多模态教学模式是现代教育体系不可或缺的一部分，伴随着教育现代化与教育信息化，多模态教学模式与现代信息技术及设备是相互联系并不可分割的两个范畴，教师在课程设置中需要充分融入现代化的教育元素与教学技术，将多媒体信息技术与多模态教学进行融合，这不单纯局限于教学设备具有信息化与现代化的教学模式，而是从教育内容、教育模式与教育环境中体现出全方位的现代化。

在教学内容上，教师可以针对多种符号的内涵进行教学，针对不同的符号模态设计相符的教学方式，使学生接受适宜的教学方法，在合理整合的英语教学资源中有所收获。在教学过程中，教师应提高对自身的教学要求，使符号模态与现代化的教学手段相融合，促进英语实验教学质量的提升。

在教学环境上，实验室通常配备较为先进的现代化教学设备，这与常规课堂中的教学环境不同，英语实验室更注重学生在英语语言学习中的体验，英语实验室是学生自身对英语进行资源整合的一个环境，能够促进学生自主学习能力的培养，多模态的教学模式需要对英语实验室进行多模态方面的完善，这是英语教学中需要注重的地方。实验室中的计算机、网络会议设施以及其他电子设备对于提升学生的语言适应能力与交际能力十分重要，教师要充分考虑到实际应用中对英语的要求，完善实验环境，打造与现实相近或相符的英语环境。比如，可以安排学生之间在不同地区进行一次视频会议，教师为会议设定主题，会议全程用英语交流，强化学生的英语思维和表达能力。

随着科学技术的迅猛发展以及全球一体化进程的加速，英语环境与教学对学生识读能力的要求不断提升，电子科技与网络在生活中的普及使得颜色、图像、声音等非语言符号系统在交际与话语中的地位不断提升，不断挑战着传统语言在话语中的主导地位与学生的识读能力，在多媒体与多模态不断渗透至生活各个领域的前提下，识读能力尤为重要，多模态教学对于识读能力的提升在于帮助学生接触到更丰富的英语环境，［8］学生通过适应多模态教学模式可以在接触更多英语环境的过程中，增加日常阅读与浏览，体会与构建复杂的英语学习环境，这种促进学生自主学习的方式，可以使学生在多模态教学环境中快速适应不断变化的语言环境，提升语言实践能力。

（二）完善现有英语语言教学模式

模拟视频会议是锻炼学生反映能力与英语思维的语言环境，教师可以在课程中为学生预留一定的模拟视频会议时间，模拟视频会议能够考察学生的反映能力与英语语言习惯，是目前较为真实的人际交流方式，是学生学习英语语言的一个必经阶段，模拟视频会议提升了学生对英语语言的运用能力，打破以往学生只会做题不会交流的情形，是多模态话语的直接体现方式。学生可以运用视觉、听觉以及话语进行沟通，在此期间教师可以从中发现学生学习过程中存在的问题以及其英语语言的弱项。

在开设多模态英语课程后，教师可以考查学生在一学期内的学习效果，考查学生在听说读写译五方面是否有所提高，学生的自主学习能力是否增强。除此之外，多模态英语语言的学习提升了学生的英语语言思维，扩展了学生的国际视野，对学生理解知识以及对自身未来发展有很大帮助。具体而言，关于多模态英语课程的考查，教师可以采用听音练习、复述、对话、文章片段翻译、小组活动、自由发言、写作训练等多种形式，让学生多模态地输出英语，以此全面考查学生的英语语言技能。课后考查时，教师可以在每单元课程完成后，布置开放性作业与任务型作业，要求学生每周利用一定的时间进行自主学习，［9］并将其纳入期末成绩考核当中，此种模式包含教师运用多模态手段对学生的表现进行评估，如学生互评、网络学习平台系统记分等，充分调动学生的学习兴趣和积极性。

多模态与多媒体等现代技术的融合是教育发展的必然结果，多模态一直以来在不断扩展其涉及的领域与学科。多模态结合了一定的文化背景、社会发展以及人际交流模式，具有一定的现实性、全面性与系统性。多模态教学模式可以推动英语教学向现代化教学模式转型，这种模式区别于仅在教学设备上进行现代化建设的外在教学模式，将教学内容和教学思路进行现代化建设与构建，在此基础上结合多媒体等现代智能教学设备，在最大限度上满足社会对于人才的需求，推动教育领域全球化进程。