多模态理论在海外汉语视听说教学中的应用研究

李 巍

（辽宁大学 文学院，辽宁 沈阳 110136）

引言

在当代信息技术迅猛发展的时代背景下，多媒体新科技进入了语言教学领域，新兴技术与语言教学相融合，催生了多种符号系统在语言教学中的应用。多模态理论在语言教学中的应用是旨在通过新技术产生的多种符号系统与传统的符号系统相融合，进而促进学习者对意义的理解和表达能力的提升。虽然学界运用此理论在语言教学领域取得了一些研究成果，但在汉语作为第二语言教学中的成果还比较少，特别是在海外汉语教学中就更少了。我们尝试在海外一线汉语教学中运用此理论进行指导，采用多模态教学模式进行视听说课的教学，这种创新模式受到了学生的欢迎和认可，取得了良好的教学效果。多模态教学模式将成为今后国际汉语教学的发展趋势。

一、多模态理论

多模态理论是系统功能语言学派在20世纪90年代提出的多种符号系统相结合促进意义理解方面的理论。朱永生（2007）对“模态”做出定义：模态是指交流的渠道和媒介，包括语言、技术、图像、颜色、音乐等符号系统［1］。每种模态都是符号的体现方式，都对意义的创建起到作用。张德禄（2009）认为“多模态话语”是运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象［2］。交际者选择多模态进行交际则是采用各种模态的特长和优势，更加有效地完成交际任务。这些意义资源和语言整合起来，使话语意义的解读更全面、更准确，进而达到彼此更多理解和社会交际的目的。

多模态话语分析应用在多个领域，它可以应用在第二语言教学的视听说课程中，成为第二语言教学法体系中的重要组成部分。刘利（2019）指出，汉语教学作为整个第二语言教学的一部分，应当与世界第二语言教学相衔接，也具有第二语言教学的普遍规律。但我们也必须看到，汉语和汉语教学具有自身的特殊性，这就需要本学科深入研究汉语的特殊性和汉语作为第二语言教学的特殊规律，找出符合汉语学习特点的教学途径和教学模式［3］。

多模态教学模式体现了新的语言教学理论和习得理论，实际上就是运用现代信息技术，主要是互联网，充分调动学生的视觉感知和听觉感知能力，通过多种手段，如语言、文字、图像、音乐、动作等多模态形式刺激学习者感官，激发学习者的多种感官感知能力并整合学习者的多元智能，进而用提升他们语言学习综合技能的方法提高学习者第二语言学习效果的一种教学模式。胡壮麟（2019）引用了美国发展心理学家霍华德·加德纳（Howard Gardner）的理论，认为人有九种智能，即多元智能，包括语言、数理、空间、运动、音乐、人际、内省、自然智能和存在智能。语言智能是其中具有引领作用的一类，其他类智能对语言智能的发展有重要的作用，我们要善于融合其他智能发展语言智能［4］。可以说，多模态教学与人的多元智能密切关联，能够融合其他智能提升语言智能。

二、对于视听说课的认识

潘先军（2019）对于汉语视听说课程的研究进行了考察，认为国内关于视听说课程的研究非常少，不多的文献研究的内容主要针对具体操作层面，教材编写是其中的主要内容，即使涉及对课程的认识或教学方法，也多是将其作为背景，所以有必要对视听说课程进行审视，尤其是从学理上进行再认识［5］。我们认为视听说课的本质是多模态教学，多模态教学能够充分调动学生视觉、听觉等多种感官，使学生增强注意力，提高兴趣，并获得更多的信息量，提升对目的语国家语言和文化的理解。汉语视听说教学中的视可以使教学内容具有形象性，便于学生理解；听可以增强学生的语感；说是把视和听的内容表达出来，也是训练学生用地道汉语流畅表达的过程。汉语视听说课的宗旨是使学生置身于真实的语境中学习汉语，变被动接受为主动学习，变枯燥乏味为生动有趣。语言的输入也从简单的听觉输入转变到听觉、视觉、感知等各种模态融合的多样性中。教师、学生和视频资源的互动则成了最基本的学习模式，成为学生有效学习的重要组成部分。李宇明（2019）指出，教师要认识到互联网不只是知识的传送带，而是一个互动社区。要思考即将到来的语言智能时代对语言学习的助益，研究智慧学习问题［3］。

视听说教学较之传统的听力口语课存在优势。一般听力课只用一种感官接收信息，而视听说课却可以用两种感官同时接收，即看和听。从生理学上讲，人脑左半部主管逻辑信号，右半部主管形象信号。逻辑信号和形象信号都需要视觉的输入，在人们接收信息时，用视听两种感官，不仅比一种感官准确，而且双重接收更有利于学习者演绎归纳、分析和理解。视听说教学是画面教学，除声音外，教学材料都是通过直观形象构成的，情景生动、场面灵活又富于变化；记忆材料通过形象作用于感官，很容易被接收。同时，视听说教学材料的重点内容可以反复，反复的图像刺激感官，作用于大脑皮层，会引起大脑兴奋，在学习者脑中留下长久而鲜明的印象。因此，开设视听说课对培养学生的实际语言能力具有特别重要的帮助。

三、多模态教学模式的实证研究

汉语视听说课程不仅是在我国留学的外国留学生的必修课，也是海外专业汉语学习者的必修课。以笔者所教的波兰华沙大学汉学系的学生为例，他们的大学学制是本科三年制，三年级学生的汉语词汇量在2000左右，掌握了基本的汉语语法规则，很多学生参加了HSK4级和HSK5级考试，汉语水平已达到中高级水平。但是他们对于中国语言和文化知识的了解更多来自课本，在与中国人交流的时候还不是那么流利，他们希望通过直接观看有关中国的视频、电视节目或影视剧了解中国；他们渴望了解当代中国社会和中华优秀传统文化，看到更加真实的中国社会和中国人的生活；他们更希望通过视听说课，进行语言综合技能的训练，提升他们的汉语表达能力，提高他们用汉语进行交际的能力，达到更好的跨文化交际效果。在这样的课堂上，还必须结合视频内容设计一些问题，引导他们思考并回答，这样才能锻炼他们的听力理解能力、认知情感能力和语言表达能力。李宇明（2019）认为，伴随着互联网高科技在语言教学上的应用，教师的教学观念也要朝个性化、特色化、定制化的方向转变。要多站在汉语学习者的立场上考虑问题，立场不同，视野和思路也就不同；要洞察学习者的真实需求，精心满足需求，使学习者在学习中获得满足感，生发成就感［3］。

在本科三年级阶段开设一学年的视听说课，每周两学时，一个学年共60学时。教师需要以学生为中心，从教学内容和教学方法两个方面着手提高学生的视听说能力，做到真正的因材施教。

（一）教学的目标

汉语视听说课以视听为手段，其教学目标要根据学生的实际情况和需求确立，对汉语学习者进行听说技能的训练，培养学生运用所学词语、语句就某一话题进行成句成段表达的能力，要提高学生的语言综合运用能力、对目的语文化的理解能力和跨文化交际能力。这个教学目标的实施是有层次的，需要逐步地提高他们的学习能力。

（二）教材的选择

视听说课要想引起学生的兴趣，教材内容的选择至关重要。一方面，教材的难度不能太大，要让学生能听懂；另一方面，要做到融知识性、趣味性和文化性于一体。我们主要选择了《中国微镜头》这样一套适合中高级汉语学习者的视听说教材。虽然有一些教师尝试在国内针对外国留学生使用这套教材，但在海外将这套教材给专业汉语学习者使用的教师还比较少。

《中国微镜头》中级分上下两部分，各十册，每册一个主题，涵盖了校园、励志、爱好、梦想、爱情、家庭、生活、职业、公益、文化、动漫、艺术、综艺、旅行、人物、商贸、社会、教育等20个主题，这些主题都是学生喜欢谈论并感兴趣的话题。在视听说课堂上，每课观看一个相关主题的视频，并就这个主题回答问题，再让学生进行与此主题相关的开放式对话和表达，可以很好地提升他们的听力理解能力、文化感知能力、语言表达能力和社会交际能力。

（三）教学方法的选择

考虑到听力理解的现场即时性，教师并没有把视频及其文本事先发给学生，而是在课程开始的时候把复印好的视频资料发给学生，主要包括本次主题的生词和问题。引导学生先熟悉本次主题的词汇，其中有些词汇他们已经学过，有些还是生词，对于生词要进行讲解，告诉他们其在本主题中的意思；做好了词汇的热身之后，让他们浏览针对视频的问题部分，带着问题看视频，这样能够让他们更专注视频内容，而不是走马观花。《中国微镜头》中视频内容的选材都是来自中国的普通人，非常接地气，通过这些内容，使学生学到更加地道的汉语，也了解中国人和中国社会的方方面面。视频时长多在10～15分钟，通常看过一遍视频之后，需要教师再一次播放，然后根据教材中提出的问题，请学生回答。教材设计的问题形式多样，很灵活。既有根据视频内容，选择正确答案，也有根据视频内容判断对错，还有根据视频内容进行填空。在做这些题目的时候，有些听力较好的学生可以马上作答，而有些听力理解比较慢或听得不够专注的学生则回答不上来。这时教师要选择适当地回放视频，一来让他们听得更清楚，二来增强他们的听力理解和记忆能力。记忆力在语言学习中也是非常重要的，属于认知心理学的一部分，对于语言的认知与理解有很大的帮助。比较有特色的问题是用正确的语气语调朗读句子和根据视频内容给相应的句子找出对应的语气，这两个问题通常对学生的认知理解和情感表达要求较高，通常学生能够根据视频内容选择出正确的语气语调，这说明他们在认知能力和情感能力方面能够跟中国人产生共鸣，在能听懂的前提下，对话语所要表达的情感有比较准确的理解。难的是在朗读的时候，虽然他们理解了文本的意思，但是作为一个外国人，还是不容易读出汉语的重音和强调，以及表达疑问或感叹的语气，这时作为教师就要及时地帮助学生把这些语气语调都读出来，这样可以增强他们的汉语语感，在情感的抒发中让他们感受到汉语的美，感受到自己学到了地道的汉语，对汉语也更加感兴趣，从而激发最大的学习能力，增强学习效果。

（四）具体的教学案例

《中国微镜头》中的视频分为精视精听和扩展视听两部分，我们在课堂上主要为学生播放精视精听的部分。在很多主题上，学生都获得了对中华优秀传统文化的理解，充分体现了语言教学和文化教学的结合是国际汉语教学的发展方向。比如：《公益篇》讲述的是杭州市图书馆管理员帮助盲人小姑娘小草实现去合唱团唱歌的梦想的故事。这个故事反映了中国普通人对于残疾人这种弱势群体的关爱和帮助，反映了普通百姓对于社会弱势群体的公益之心。学生看了后普遍反映很感人，进而笔者告诉他们，在中国有很多这样的故事发生，所以他们可以理解在新冠肺炎疫情暴发后，我们国家那么多省市的医护人员驰援武汉，而武汉人又以封城的壮举让整个国家免于瘟疫横行的局面，这些都是中国人有公益心的表现。这种公益心还扩大到世界范围，中国还帮助世界上其他疫情严重的国家控制病毒蔓延。通过这个视频的播放，让学生了解中国对世界其他国家的友好善行根植于中国人的文化基因。

在精视精听之前，发给学生有关视频内容的生词和与视频内容相关的问题，向学生提问每个生词的意思，遇到他们没有学过的词汇时，告诉他们在视频中的意思，然后就内容提示中提出的问题要求学生带着问题看视频。在第一次看视频时，让学生完全沉浸在视频中，尽可能地理解视频的内容；看完后，学生基本上都能看懂视频，并认为这个故事很感人。

在第二次看视频时，教师需要一段一段播放，引导他们一边看一边做练习，让学生就练习回答问题；听得好的学生会主动回答问题，比如对于视频中的主人公，学生就会主动说出他的姓名和职业，对他的主要经历也能够做出一些描述。在根据视频内容填空时，需要学生准确写出词语，这个要求有一定的难度，因为学生在听的时候虽然听懂了视频的内容，可是对于具体的词语记不住，这时就需要回放视频，让学生一边听一边填空，既锻炼了他们的听力，又提高了他们准确理解的能力。当学生完全看懂和听明白视频内容后，让他们给句子选择正确的语气就容易了，很容易选择正确答案，这说明学生在情感方面的认知能力很强，与中国人达到了共情。

在进行听力训练后，就要进行口语表达练习，本次的主题是“公益”，让学生结合“公益”这个主题谈谈他们自己有过哪些公益行为，并在口语表达练习中使用在本视频中学到的词汇和语言点，如打动、热心、温暖等。在几分钟的准备时间后，学生踊跃发言，其中几个学生谈到了自己做义工的经历，比如去孤儿院或敬老院帮助孩子和老人的经历，有的学生还谈到了帮助路边流浪汉的经历。教师根据学生的发言纠正一些语言方面的错误，再给予肯定和鼓励；引导学生一一发言，对于那些不善于表达的学生更要给予肯定和鼓励；最后教师根据所有学生的发言做总结。这种方式不仅可以使学生练习口语表达，也在挖掘他们人性深处的善良。

《中国微镜头》中不同的主题可以让学生获得不同的感悟。比如：《文化篇》讲述茶人的故事。学生通过看视频，知道了中国茶的生产、加工和泡茶等文化，其中有一句解说词：“中国人认为人生如茶，苦尽甘来。”学生说波兰包括欧洲文化正相反，是“甘尽苦来”，就是说年轻的时候人们喜欢享受生活，觉得生活很美好，可是老年的时候疾病来了，孤独来了，不能很好地享受生活了，就觉得生活很苦了。这个主题体现了中国与波兰甚至是欧洲文化的差异性。

《爱情篇》里面的男主人公追求完美恋人，他在魔法的作用下得到了一部智能手机，可以选择他喜欢的恋人类型。他按照自己心中的设想选择了各种类型的恋人，发现没有一个恋人是完美的。后来，他醒悟了，完美恋人是不存在的。学生看了这个视频后，主要是觉得有趣，觉得男主人公追求完美是不正确的。在口语表达练习上，他们谈了自己心目中的理想恋人，大多数学生更在意对方的内涵，比如诚实、幽默、责任感、忠诚、能够愿意接受他的生活等。他们的择友观体现了成熟、理性的思想，这点体现了中国和波兰年轻人在择偶观上的共性。

《商贸篇》主题展现了中国浙江义乌小商品城的经贸发展。学生对互联网创业很感兴趣，尤其是看到一个以前负债生活的小伙子经过互联网创业成为千万富翁后，感到很励志。他们谈到了目前波兰严峻的就业形势，要想找到一份好的工作很不容易。目前，波兰的互联网行业还没有中国发达，也许他们能从这个视频中受到启发，开启自己的创业之路。

（五）教学的效果

在视听说教学的过程中，我们体验了视和听是说的基础，说又是视和听的转换和提高。视和听可以提高学生的汉语语感和对中华优秀传统文化的理解能力，说可以提高学生的汉语表达能力，并使学生通过对比本族语文化和目的语文化的异同，提升跨文化交际能力。视、听以后说的训练是一项综合练习，训练的方法是多种多样的：复述主要内容、视听后讨论、回答问题、发表看法、分角色表演等。教师可以通过学生说的情况，了解学生的视听效果、理解程度、存在的问题，得到各方面的信息反馈。

四、语言与文化相融合的教学理念

德国语言学家洪堡特说：“语言是民族精神的外在表现，民族的语言即民族的精神，民族的精神即民族的语言。二者的同一程度超过了人们的任何想象。”［6］语言是文化的载体，语言与文化密不可分，语言的背后就是文化，语言中蕴含着文化。任何一个民族的语言都承载并体现着本民族的文化特色，汉语承载着汉民族的文化特色。陆俭明认为，汉语教学必然要承担起中华文化国际传播的责任，但要摆正汉语教学中语言教学与文化教育的关系——以语言教学为主，文化教育是伴随性的，真正有成效的文化教育都是其内容浸润于汉语国际教育的语言教学之中，尤其是要浸润在汉语教材之中，做到润物细无声、潜移默化、耳濡目染。因此，要解决好中华文化精神和我们的世界观、人生观、价值观的文化教育浸润于汉语教材之中［3］，这样的文化教育才能有实实在在的效果。海外汉语教学的实践证明了这个观点是正确的。教学不仅是把课本上传达出来的文化信息和介绍我国历史人文、风土民俗的内容展现给学习者，也要通过视听说课堂上的视频内容以多模态的方式融合学习者的多元智能，使其更全面、更立体地对中华优秀传统文化有更多的了解，从而加深对语言的理解，综合提升他们的汉语水平。

结语

多模态教学模式为海外汉语视听说教学提供了原生态的语言材料，为学习者创设了一个真实的语境，通过多种感知器官的运用激发学习者对语言、图像、动作、音乐、动画、视频、音频等多种模态的融合，最大限度地获得对第二语言的理解和学习，达到流畅的表达和交流的目的，实现跨文化交际的最佳效果。

海外汉语视听说教学与国内对外汉语视听说教学相比，海外汉语教学对教师的要求更高，因为教师并不熟悉海外学生的实际情况，需要在短时间内了解学生的学习水平和需求，所以，要想做到因材施教，更需要教师具有灵活性和创新力。在教材的选择上，要坚持文化教学服务于语言教学的理念，更侧重于给学生选择中华传统文化中具有正能量的内容，把传播中华优秀传统文化与语言技能训练结合起来，并充分激发学生的学习兴趣、好奇心和情感认知，让他们学有所得；在教学法上，由于学生在非目的语环境中，要更侧重于对学生进行语言技能训练，特别是更侧重于提高学生的汉语语感，因此，视听说课为学生创造了一个真实的目的语语境，让他们通过多种感官感知目的语环境，更有利于语感的习得，帮助学生使用汉语有效参与交际并提高学生的跨文化交际能力。