基于层次分析法的孔子学院评估指标体系研究
2017-01-17吴才天子
吴才天子
摘 要:本文基于已有孔子学院评估指标体系,运用层次分析法对各指标进行重要性分析,规范评估标准,进一步提升孔子学院评估指标体系的科学性、规范性和可操作性,更准确地评估各国孔子学院的发展情况,以便及时发现问题,全面改进提高。
关键词:孔子学院;评估;指标体系;层次分析法
中图分类号:F592文献标志码:A文章编号:2095-9214(2016)12-0265-03
一、引言
随着中国综合国力的不断增强,作为实现中国文化走出去、提升中国文化软实力的重要载体,孔子学院近年来成长迅速、成效显著。从2004年第一所孔子学院在韩国成立以来,截至2015年12月1日,全球134个国家(地区)已经建立了500所孔子学院和1000个孔子课堂①。十几年的发展中,孔子学院总体向上向好,基本完成了服务国家发展战略和传播汉语言文化两大基本任务,但也部分出现了教学质量不高、运营状况欠佳等问题。
为量化呈现和评估孔子学院的发展情况,吴应辉②在《孔子学院评估指标体系研究》一文中提出了一个包含10个一级指标、52个二级指标的评估体系[1]。作者运用该指标体系对东南亚孔子学院进行了国别比较研究,发现有较强的前瞻性、全面性和可操作性,但同时也感觉到孔子学院数量众多,评估工作耗时长、数据繁杂、易产生主观偏差。因此,本文在该评估指标体系基础上,运用层次分析法对各指标所占权重进行计算,运用统一评分法、对比评分法两种方法和定性化、定量化两种方式精确单指标评分,以期建立标准化的评估体系,达到评分更精准、充分反映各孔子学院的发展情况和节省人力、使孔子学院评估工作形成常态的一举两得的效果,促进孔子学院全方位改进工作、提升水平、加速发展。
二、层次分析法基本理论
层次分析法是一种多目标综合评价和分析方法,其应用领域广泛,尤其在建立评价体系过程中具有一定的优势作用。评估孔子学院时,为保证全面性,涉及的指标因素较多。现有的评估体系基本上是直接给出各指标分值,评估人给出各项评分后,累计得出每所孔子学院的最终得分,评分过程易受主观因素影响。层次分析法则是将众多的评估指标划分层次,确定指标之间的相互关系和所占权重,使评估体系更加准确客观。
图1 层次分析法基本结构
将现有指标进行分层次处理,分为目的层(A层)、准则层(B层)和方案层(C层),如图1所示。分析基本步骤如下:
1、建立判断矩阵。在层次分析法的基本评估体系中,通过同一层元素两两比较,分析不同下层元素对上层元素的影响,确定判断矩阵。以准则B1为例,根据其下一层元素方案C11,C12,…,C1n建立n*n的判断矩阵S,
S=S11S12…S1n…Sn1Sn2…Snn。
其中,矩阵元素sij表示C1i和C1j两两比较的重要性,确定对上一层因素B1的影响权重,影响越大权重值越大,影响越小权重值越小。元素两两比较可以采用1-9尺度表示方法,定义如表1所示。
2、通过对判断矩阵的处理,获取判断矩阵的最大特征值λ和其相应的特征向量W,W=[W1,…Wn],则W矩阵元素就是权重系数,即表示各个元素对于上层元素的重要性。在获取权重系数后,仍需要对权重系数分配的合理性进行检查,对判断矩阵进行一致性检验,若判断矩阵不满足一致性,则需要调整权重系数。
针对层次分析法基本评估体系中的元素分别获取其判断矩阵,之后获得其各自权重系数,建立权重树,进而建立更加科学合理的评估体系。
三、优化评估指标体系
将层次分析法应用于孔子学院评估,根据评估指标特点,可分别建立正面指标体系和负面指标体系作为目的层(A层)。正面指标体系的下一层(B层)包括办学指导思想、和谐程度、管理机制、办学条件、影响力、汉语教学情况、主办文化推介活动情况、运营情况、获奖情况9个一级指标;负面指标体系的下一层(B层)包括负面影响1个一级指标,如图2所示。正面指标体系评估结果采用正数值表示,负面指标体系评估结果采用负数值表示,孔子学院的综合评估结果为正数值和负数值的和。也可建立正面指标评估和负面指标评估的权重比,孔子学院的综合评估结果为正数值和其权重比的积与负数值和其权重比的积的和。
建立分层体系后,对同层指标进行两两比较,确定各指标的重要性,重要性较高则权重较大,对最终评估结果影响较大。确定影响权重较为客观的方法是,请多位国内外相关领域的专家学者按层次分析法进行指标比较,得出每位预期的权重结果后再取期望值。
以B层B6汉语教学情况指标举例说明。其下C层指标有学生人数(C19)、培训本土汉语教师数(C20)、汉语考试情况(C21)、教育技术应用情况(C22)、教学法创新情况(C23)、本土化教学资源开发情况(C24)、向其它汉语教学机构提供教学资源情况(C25)、教学质量学生评价结果(C26)、教学质量专家评价结果(C27)和单位时间内教学效率专家评价(C28)。根据层次分析法的基本思想和笔者个人经验,对指标C19至C28进行两两比较,建立判断矩阵,如表3所示,评估其对上级指标汉语教学情况的重要性,确定影响权重分配。
经过矩阵运算后,获取其最大特征值λ=11.1332和对应的特征向量值W=[0.4991,0.7310,0.1209,0.0612,0.0456,0.2696,0.0960,0.1951,0.1951,0.1951]。根据最大特征值和相应的特征向量值,计算出该判断矩阵的一致性检验值大于0小于0.1,满足一致性原则,权重分配具有合理性。根据最大特征值进行归一化操作后,其权重结果为W.=[0.2072,0.3035,0.0502,0.0254,0.0189,0.1119,0.0399,0.0810,0.0810,0.0810]。评估某一孔子学院汉语教学情况指标时,对其下一级指标C19至C28进行评分,分数采用矩阵J表示,J=[jc19,jc20,jc21,jc22,jc23,jc24,jc25,jc26,jc27,jc28]T,汉语教学情况指标的实际得分结果是
采用上述层次分析法构建孔子学院评估指标体系,引入重要性权重分配的概念,可将指标体系从定性化描述变为定量化表现和标准化评估,减少评估的主观性。
四、单指标评分方法
在孔子学院评估工作中,可对不同孔子学院之间同一指标进行横向比较,也可对一所孔子学院同一指标不同年份的数据进行纵向比较。无论横向比较还是纵向比较,重点都是对52个二级指标进行评分。
针对不同的评估需求,可以采用统一评分法和对比评分法两种不同的单指标评分方法。统一评分法较为简单,即结合实际数据情况直接判断给出相应分数。统一评分法适用于研究对象较多的评估研究,但必须在掌握大量数据和相关情况的基础上才能提升客观性。对比评分法则是采用层次分析法的基本思路,针对每个单指标,将不同孔子学院的数据或同一孔子学院不同年份的数据进行两两比较,建立判断矩阵,计算最大特征值和特征向量值,此时的特征向量值表示得分比值。对比评分法客观性更强,但建立判断矩阵工作量较大,适用于研究对象较少的评估研究。
在单指标评分过程中,根据数据性质大致可分为两种指标类型:定量化单指标和定性化单指标。对于定量化单指标,如学生人数(标准学年人),可分析已有数据,确定统一评分标准,方式很多,较为简单的是分段式评分,即获取学生人数指标数据的最大值和最小值,在两值之间进行区域分段划分,每个区域对应一定分数。定性化单指标评分方法更加多样,需要保证对于同一指标采用同一种评分标准和方式,以减少评估误差。以学院领导与师生和谐度指标为例,在评估人主观评分基础上,可使用计算机在描述学院领导与师生和谐度的相关资料中对使用的词汇进行文本情感分析,定量化呈现定性化单指标,辅助最终评分,提高定性化单指标的客观性、合理性。
五、结语
孔子学院评估工作意义重大、方法众多,笔者在吴应辉教授提出的指标体系基础上进行研究,提出了上述优化方法,下一步将继续通过理论探索和实证研究进行验证改进,以期不断完善评估指标体系,推动评估工作常态化,助力孔子学院更好发展。
(作者单位:中央民族大学国际教育学院)
注释:
①数据来源:国家汉办官方网站http://www.hanban.edu.cn/confuciousinstitutes/node_10961.htm。
②吴应辉,男,云南人,中央民族大学研究生院院长,教授,博士生导师。
参考文献:
[1]吴应辉.孔子学院评估指标体系研究[J],教育研究,2011(8).
[2]樊钉.孔子学院质量评估体系研究,云南师范大学学报(对外汉语研究版),2012(9).
[3]邓雪,李家铭,曾浩健,等.层次分析法权重计算方法分析及其应用研究[J].数学的实践与认识,2012,42(7):93-100.
[4]郭金玉,张忠彬,孙庆云.层次分析法的研究与应用[J].中国安全科学学报,2008,18(5):148-153.
[5]Saaty T L.Basic theory of the analytic hierarchy process:how to make a decision[J].Revista De La Real Academia De Ciencias Exactas Físicas Y Naturales,1999,93(4):págs.395-423.