来华留学生“中文+职业技能”在线教育质量评价体系构建

高文茜 聂继德 [泰]占雅·帕布

(1.武汉船舶职业技术学院，湖北 武汉 430050；2.班派工业社区学院，泰国 孔敬 40000)

一、研究背景

后疫情时代，借助了互联网信息技术和网络直播平台的在线教育模式正不断扩大影响，线上线下相结合的教学模式将成为高等教育的发展新常态[1]。为推动深化教育改革、实现优质教学资源共享、促进教学质量提升、实现地区教育公平，高等职业教育领域也开始广泛重视开发优质数字教育资源[2]。《职业教育提质培优行动计划(2020—2023年)》的出台，标志着职业教育信息化2.0建设行动进入实施阶段。

作为我国教育事业的重要组成部分，来华留学教育一直被党和国家给予高度重视。新冠肺炎疫情暴发以来，各高等职业院校响应教育部“停课不停学”号召，积极为来华留学生提供线上教学服务，通过改进教学模式、改良教学手段、改革教学策略等方式，最大限度“保证在线学习与线下课堂教学质量实质等效”。[3]

二、研究回顾

2020年，教育部等八部门在《关于加快和扩大新时代教育对外开放的意见》中提出要做强“留学中国”品牌，究其本源就是要提高来华留学教育质量和管理水平。

笔者基于中国知网期刊数据平台和Cite Space软件，对来华留学生在线教育领域研究成果进行了研究热点可视化分析。结果显示，国内学者主要围绕领域内课程建设(郭卫红,2020)、实施现状(陈武元等,2020;史金生等,2021)、教学模式(王新凤等,2020;王瑞烽,2020；林培玲2021;谭敏等,2021)、质量影响因素(刘帅帅等,2020)等方面展开了研究。[4-11]

相比本科院校，高职院校来华留学在线教育整体呈现出数字教学资源较少、师生网络适应性不足、教学质量评价体系不够健全等特点。因此，审视来华留学生“中文+职业技能”在线教学实践质量问题、探索建立相应质量评价体系、实现在线课堂教学良性循环在当下极具现实意义。

三、研究设计

(一)研究方法

层次分析法(Analytic Hierarchy Process，简称AHP)由美国运筹学家萨蒂教授研究创立，是一种建立在综合性多维度评价方法和网络系统理论应用基础上的权重决策分析方法,近年来在教育领域得到广泛应用[12-13]。该方法采取先分解后整合的思路实施决策行为，基于决策者个体认知水平，搭建层次结构框架、明确层次权重、计算层次排序，最终得出最优方案[14]。本文利用AHP设计来华留学生“中文+职业技能”在线教学质量评价指标权重，为高职院校评价来华留学在线教育质量评价工作提供相关借鉴。

(二)设计原则

2018年，教育部印发《来华留学生高等教育质量规范(试行)》(以下简称《规范》)，对来华留学教育事业提出了培养质量提升和趋同化管理的要求；2021年出台的《国际中文教育中文水平等级标准》(以下简称《标准》)则侧重指导各高等院校来华留学生中文教育的标准化发展。

传统课堂多依据泰勒原理评价教学质量，包括目标、内容、组织、效果等方面。在线教学属远程教育范畴，除上述4点以外，其教学质量还应受到包括教学设备与教学支持等客观条件的影响；从授课者与学习者的角度出发，信息化素养与网络适应性也对教学质量产生一定效用，在评估时应同步纳入考量。

文章遵循目标导向原则以及科学性原则，在充分学习和研究国内外高等院校在线教育质量评价体系相关案例的基础上，结合《规范》及《标准》在管理与教学等方面要求，联系高职院校“中文+职业技能”教学实际，选取线上教学工作每一环节中的关键要素，简析内在关联、明确评价内涵、实现指标量化，以搭建在线教育质量评价体系框架为核心目标展开研究。

四、基于AHP的体系构建

本研究按照层次分析法(AHP)设计高职院校来华留学生的评价指标权重体系，具体有以下步骤：

(一)专家调研，拟定维度要素

首先，研究基于《规范》与《标准》等文件及工作实践，采用文献分析及专家访谈等方法，整理了与来华留学生在线教学质量相关的大致影响因素指标集合，以此来设计调查问卷并向多所高职院校来华留学工作人员及来华留学生发放，有效问卷回收率为83%。

随后，从武汉市高职院校、美国社区学院及泰国高职院校选取了包括教务处负责人、国际学院负责人、教学专业负责人、来华留学生辅导员在内的24名教师组成专家咨询小组，经反复调研,专家达成一致意见后，小组基于管理服务、教学培养、资源保障、成果产出4个维度，形成了包含11个一级要素、29个二级要素的“中文+职业技能”课程在线教育质量评价要素层级(表1)，并以该表为依据构建了结构模型(图1)。

续表

图1 “中文+职业技能”课程在线教学评价要素层级结构模型

(二)成对比较，建立判断矩阵

笔者首先采用Saaty九级评价标度(表2)设计问卷调查，其中数值9、7、5、3、1分别对应绝对重要、十分重要、比较重要、稍微重要、同样重要，8、6、4、2则表示要素的相对重要性介于相邻数值之间；随后邀请专家小组成员分别对4个维度内的29个指标进行成对要素重要性比较；最后将16名参评专家的相对重要性调查数据导入软件Yaahp10.3，形成判断矩阵。

表2 AHP九级评价标度

以“管理服务”维度为例，假设参评专家认为相比“工作队伍建设”要素来说，“工作制度建设”要素“比较重要”，那么二者的相对重要性为1/5；依此类推，若“工作队伍建设”比之“工作制度建设”被参评>专家认定为“十分重要”，那么二者的相对重要性为7/1，详见表3所示。

(三)检验一致性，计算权重系数

经过以上步骤，我们得出1个整体判断矩阵及15个层级判断矩阵。为证明判断矩阵内数据的有效性，需整体通过一致性比例(C.R.)检验，当C.R.<0.1时，该判断矩阵可描述为具有相对一致性，当C.R.>0.1时，则表示矩阵不具有相对一致性。参评专家N对一级要素“教学投入”下的4个二级要素间相对重要性评价示例如表4所示。经计算，求得该矩阵C.R.=0.0979，最大特征根值λmax=4.2615，对应特征向量即权重系数WI=(0.0533，0.5504，0.3007，0.0956)，从而得出一级要素“教学投入”的层次单排序(表4)。

(四)整合层次排序，建立评价体系

除要素层次单排序外，同层其他要素及上层各要素权重也被纳入了整体计算与研判。如表5所示，综合16名专家小组成员的数据结果，将各层级要素对决策目标的相对权重进行了整合排序，建立“中文+职业技能”课程在线教学质量评价模型，该模型共涉及三级层次结构，具有结构完整、量化评估、层次分明等特性。

表3 要素重要性比值示例

表4 教学投入层级判断矩阵

表5 在线教育评价要素权重

五、质量评价体系指标要素合理性分析

通过表5的要素权重排序可了解到，高职院校在考察来华留学生“中文+职业技能”在线教育工作质量时，依次根据人才培养、管理服务、成果产出、资源保障来确立评价分区。

人才培养位于核心区域，是高职院校保障来华留学“中文+职业技能”教育质量的重中之重；管理服务位于关键区域，是保障教育教学活动顺利进行的抓手；成果产出位于重点区域，是衡量教学效果的主要参数及判断依据；资源保障位于必要区域，为教学实施提供有益补充。

(一)人才培养维度

《规范》在教育教学部分指出，高等学校应当根据学校的办学定位、国际化战略、服务面向、优势和特色开展师资队伍、人才培养方案、教学实施工作的组建、制定与规划。结合《标准》要求，研究在该维度设立了2个一级要素，7个二级要素。

1.教师教学素养

作为高校人才培养的承担者和立德树人的践行者，教师起着至关重要的作用。教师队伍的素质直接决定了高等院校的办学能力、办学水平和人才培养能力[15]。高职院校“中文+职业技能”在线课程是面向来华留学生开设的混合型职业技能课程，内容涵盖交际汉语、专业汉语以及专业技能实操，通过信息技术手段进行远程授课，授课语言为中文。为此，我们认为该一级要素应包含教学信念、专业素养、信息素养三方面。

第一，教学信念。坚定教学信念是促进教育质量的重要途径。区别于本科院校，高等职业教育更注重实用型及应用型人才的培养，教师在授课过程中应始终坚定职业教育理念与教学信念，把“培养服务区域发展的高素质技术技能人才”[16]放在首位，并以此来指导教学的计划、组织与实施。

第二，专业素养。高职院校教师专业素养包括教学素养、语言技能素养和职业技能素养。“中文+职业技能”课程的实质是中文语言教学与职业技能教学的结合，授课教师应首先具备双语教学能力，可以从“国际中文教师”或Tesol等能力水平证书获取情况、双语教学内容熟悉情况、教师参与国际教育交流研讨会等方面衡量；语言技能素养可以从教师英语四六级或雅思托福等英语能力考试成绩情况、参与出国(境)培训研修等方面衡量；职业技能素养则可以从技能大赛获奖、课程建设获奖、科研成果获奖等方面衡量。

第三，信息素养。信息素养包括对信息的发现、反思、处理及再创造[17-19]。教育领域内的信息素养则被加注了“对信息、知识及计算机技术、互联网技术等进行互动性使用”的能力内涵[20-21]，教师的信息素养对在线教育质量有着直接的影响作用。教师是否具备搜集、评估和利用信息的知识结构，是否能够熟悉授课平台、熟练掌握课业讲授与任务布置的基本操作等对现阶段来华留学生远程教育格外重要。

2.教师教学投入

相较于传统课堂教学，在线教育教学模式在实际操作过程中存在互动少、反馈慢、缺乏直观性等问题[22]，在一定程度上加大了课堂管理与教学进度监测的难度。尤其是来华留学生“中文+职业技能”的在线教学，在课程实施的全过程中，授课者不仅要考虑学习者中文水平与学习进度[23]，还要考虑学习者对技能实训的空间理解能力，这都对教师的教学投入提出了更高的要求。

第一，教学组织实施。授课准备阶段，基于来华留学生的多元文化特质，教师应遵循“以生为本”的教育理念，设计同时具有语言针对性及技能针对性的人才培养方案与教学大纲、启动相应学生指导计划、技能训练微课录制等，并依据社会就业形势变化及时对计划进行复审修订。

第二，教学设计呈现。尽管教育部对来华留学生的汉语水平做了入学基本要求，但大部分来华留学生中文能力局限于简单交际用语的使用，其使用中文对学术理论和技能操作的描述能力较弱。为此，教师在设计教案时，应注重理论概念讲解与技能实操展示相统一、系统化教学与碎片化知识输入相统一[24]，以循序渐进、以点带面的方式帮助学生构建职业知识框架。

第三，教学互动协助。得益于互联网信息技术的发展，教师可采用视频、游戏、小程序等方式与学生展开互动，在各类技术载体的帮助下，实时课堂互动得以实现。与此同时，应注重互动内容的启发性与针对性，如此才有助于学生深刻理解专业内涵。

第四，教学总结分析。在线教学课堂的良性发展意味着教师在教学技术方面的熟练运用，能够与学生学习成果与教学反馈相结合，这对教师采集教学数据、分析学情提出了要求，通过对学生进行“侧写”，教师将能够提供更为个性化的、“点对点”的课业反馈与教学指导，从而提升整体在线教学质量。

(二)管理服务维度

《规范》指出，高等学校应当设置专门的来华留学生教育管理部门,统筹全校来华留学生教育管理和服务工作的岗位分工与职权协调。高职院校作为来华留学生的招生单位和“中文+职业技能”在线教育的管理主体，在现阶段基本实施线上教育的背景下，应从工作队伍建设、工作制度建设和维护机制建设三个方面推进。其一，设立“来华留学在线教育领导工作组”，组长由分管学院国际化工作的院级领导担任，组员则由学校国际处、学生工作处、教务处、财务处、“双高”发展规划处以及招收来华留学生的各二级学院国际事务联络人等成员共同构成，以“趋同存异”为指导，明确各部门工作分配与责权划分，实现多部门协同管理；同时，指派专职管理人员负责学生的日常管理与协调事务，包括任务完成监督、成绩管理、心理咨询、双向意见沟通等。其二，制定并落实制度性文件，如教学奖励制度与教学规范制度，科学计算教师参与在线教学工作量、合理规范教师课堂行为与语言，提高教师参与教学的积极性与规范程度。其三，科学制定信息维护机制，定期举办教学反馈与报告会议并将会议纪要纳入档案管理，实现来华留学生信息的记录与及时传递。

(三)成果产出维度

本要素主要评价教学活动的成果转化情况。我们首先从教学活动的实施者和接收者视角将成果分为研究成果和教学成果两个方面。

其中，科研成果的主要表现形式为专项课题研究以及公开发表的研究型论文或著作。由于目前国内已经形成了较为严格的专项课题成果等级制度，参与教学活动教师实际获批项目等级以及获批数量都应分别纳入考量；研究型论文也是如此，现行的期刊标准将期刊主要分为一般性期刊、核心期刊、CSSCI、SCI、SSCI、A&HCI、EI、CPCI等，基于不同期刊的影响影子和作者排名进行考核。

教学成果则主要体现在来华留学生在校考评、国家汉语水平等级考试以及国际性职业能力资格或从业资格证书3个方面，对应不同考试的通过率与优秀率来体现教学成果的质量和数量。

(四)资源保障维度

后疫情时代，高职院校统筹国际化发展与布局来华留学生教育发展主要通过信息化资源配置实现，通过为学生提供与其学习水平相适应的、精准的学习支持，是持续激发学习动机、提升学习质量的关键[25]，也是推动来华留学生在线教育教学与管理工作的强大助力，为此我们设计了4个一级要素。本维度旨在评价高职院校是否针对信息化教学发展趋势进行了相应的配置规划。

一是信息化教学平台。教学平台操作的方便程度将直接作用于“中文+职业技能”课程的在线教学效果，高职院校是否主持搭建平台以及平台使用是否简易便捷、引人入胜是本要素的主要考察内容。

二是信息化教学环境。本要素主要考察高职院校对来华留学教育事业以及“中文+职业技能”教学事业在政策、经费与渠道等各方面的支持力度，防止出现因网络信号故障或设备故障等导致教学事故的现象。

三是信息化教学资源内容。由于来华留学生“中文+职业技能”教学从教学对象以及教学内容上都存在相对特殊性，该要素侧重考察高职院校教师是否依据学生兴趣、教学目标与职业需求进行教学资源筹备。

四是信息化教学资源形式。制作规范且种类多样的信息化教学资源将有利于提升师生双方在教与学、练与评互动中的黏粘性与引导性，现阶段大多数高职院校都采取“录播+直播”的形式展开在线教学，为了解高职院校是否为学生提供了诸如小程序、游戏软件等多种非常规教学资源设立此要素。

六、结语

教育质量是国际中文教育发展的核心动能，本研究聚焦国际中文教育领域中的重要分支“中文+职业技能”教育，运用决策领域常用分析方法“层次分析法(AHP)”，借助半结构式访谈与调查问卷收集专家咨询数据，一方面结合工作实际对相关研究文献中提出的潜在影响因素展开分析，另一方面群策群力结合专家智慧，反复修订后将各类观点抽丝剥茧、转化定量，形成具有较好结构关系的评价层级模型，为后疫情时代高职院校来华留学生在线教育质量评估与发展提供有效参考的同时，对“中文+职业技能”在线教学高质量发展路径方面也进行了适当探索。