高职学生学习质量评价体系及评价模型的构建——以数字媒体专业“Flash动画设计与制作”课程为例

肖宇

教学评价探究

高职学生学习质量评价体系及评价模型的构建
——以数字媒体专业“Flash动画设计与制作”课程为例

肖宇

当前，高职院校学生学习质量评价普遍存在评价主体、评价方式较为单一，评价内容有较明显的“知识本位”倾向等问题，迫切需要建立一套具有高职特色的学生学习质量评价体系。基于CIPP评价理论，以高职数字媒体专业“Flash动画设计与制作”课程为例，将学生学习质量评价设为背景评价、投入评价、过程评价和结果评价4项一级指标，10项二级指标和24项三级指标，并运用AHP层次分析法确定指标权重，构建了高职学生学习质量评价体系和评价模型。

高职学生；学习质量；评价体系；评价模型；Flash动画设计与制作

当前，我国职业教育发展的重点已经从“数量与规模的扩张”向“质量建设”转移，重点探索职业教育的“质量与内涵”。《国家中长期教育改革和发展规划纲要（2010-2020年）》指出，要把提高质量作为重点，建立健全职业教育质量保障体系。可见，如何促进和保障职业教育质量已经成为国家教育改革的重点。但多年来，在国内外的职业教育质量保障研究中，多数学者是从“教”的角度进行质量评价研究，而忽略了学习主体——学生的需求。教育是一种培养人的活动，在实际的学习活动中，“学”不是“教”的自然结果，而是学生能动地对教师传授的信息进行选择、吸收与内化的过程。学生是学习的主体，学生的学习质量才是教育质量的核心，是教育教学质量的最终决定者和体现者，所以，要提高职业教育质量应该从提高学生的学习质量做起。[1]

本文以高职数字媒体专业“Flash动画设计与制作”课程为例，基于美国学者斯塔弗尔比姆（Stufflebeam D L）提出的CIPP评价理论，[2]确定课程学习质量评价指标体系，运用AHP法[3]，确定各项评价指标的权重，构建了学生学习质量评价模型。其评价体系和评价模型也适用于高职院校同类专业及其他专业相类似的设计类课程，以供高职教育质量评价主管部门及相关机构、高职学校教师作为参考。

一、学生学习质量评价体系的基本原则

（一）以职业能力为本位

改革开放以来，我国职业教育快速发展，目前的职教体系既继承了壬寅学制的学校职业教育层次体系，[4]又借鉴了国外职业教育体系构建思想，由初等职业教育、中等职业教育和高等职业教育组成。不同层次的职业教育教育目标、功能和活动各有不同，质量标准也当不同。高等职业教育肩负的使命是培养面向生产、建设、服务和管理第一线需求的高素质技能型人才，学生需要掌握的是职业技能（包括学习能力、职业能力和职业素质），以满足用人单位的需求。所以，高职教育是以职业能力为本位的职业教育，在确定高职学生学习质量评价标准时，也应树立职业能力本位的质量评价观，从而突出高职教育特色。

（二）评价视角多样化

高职教育主要培养面向生产、建设、服务和管理第一线需要的技能型人才，学校为企业提供一线的技术人才，评价体系需要改变以“教师”为中心的评价方式，提高企业专家及社会其他人士的参与度。在建立指标体系阶段，要充分调研企业对学生的能力需求；在评价实施阶段，可邀请相关企业的技术人员、督导、院系部教学专家以及学生参与评价。要从多个视角出发，形成“以教师、企业为核心，学生参与”的评价体系，从而保证评价结果与企业需求相一致。

（三）评价模型合理化

从企业岗位标准和专业人才培养方案的整体优化入手，结合具体课程性质，进一步完善各指标项的内容。评价的指标应涉及学生综合素质所体现的各个方面，应用统计学方法科学地确立各指标项的权重系数。评价指标体系的设置应细致和便于理解，利于评价者进行问卷回答，使所得评价信息更为客观。

二、学生学习质量评价体系的构建

本研究主要对“Flash动画设计与制作”课程构建学生学习质量评价体系。“Flash动画设计与制作”是高职数字媒体专业的专业课程，该课程由Flash动画师、网页设计师的“Flash动画制作”典型工作任务转换而来，其培养目标是：通过动画项目的训练，使学生熟悉Flash动画的基本制作流程，具备利用Flash动画制作技术进行二维动画设计与制作的能力，并能够在完成项目过程中不断提高自身的设计审美意识和沟通表达能力，培养优良的职业素质，达到动画公司、网络公司、游戏公司等企业中Flash动画师岗位、WEB设计师所需的Flash动画设计与制作专业技能。

研究小组由5人组成，其中教授1名，副教授1名，讲师2名，企业专家1名。通过讨论、文献研究学习等方法，针对课程的培养目标，初步拟定了课程评价体系指标；然后，采用立意抽样法，与企业Flash动画师、网页设计师、设计主管、人事部门主管和学院教学质量管理专家等8人进行访谈，访谈的内容主要围绕本课程学生质量评价标准的指标设定；结合访谈的结果和本课程所在的数字媒体专业人才需求调研，对初步确定的各项评价指标进行了修正。基于CIPP评价理论的背景评价（Context evaluation）、投入评价（Input evaluation）、过程评价（Process evaluation）及结果评价（Product evalu-ation）四个维度，对各评价指标进行了归类，总结出了4项一级指标、10项二级指标和24项三级指标的课程评价体系，对学生的学习能力、职业能力和职业素质进行全面考核，具体如表1所示。

表1 “Flash动画设计与制作”课程学生学习质量评价体系

续表

（一）背景评价（一级指标1）

背景评价是课程顺利实施的前提，包括3项二级指标和6项三级具体指标。学生如果能对即将开始学习的Flash充满兴趣，了解Flash动画设计师、网页设计师等工作岗位对Flash的知识、能力和素质的需求，就会发挥学习的主动性。另外，要学好本课程，学生需要掌握基本的动画原理，色彩、版面搭配基本原则，计算机操作能力和图像处理能力，这就需要在专业的人才培养方案中设计合理的前导课程，以保证学生具备一定的学习基础。

（二）投入评价（一级指标2）

投入评价是课程能够顺利进行的保障，包括2项二级指标和3项三级具体指标。教师的授课能力和实践能力越强，课程准备得越充分，课程的授课效果就越能得到保证。另外，学校也需要保证上课所需要的硬件条件。

（三）过程评价（一级指标3）

过程评价是对学生学习质量形成过程的评价，包括2项二级指标和6项三级具体指标。其中，学生的学习态度至为关键，无论外部环境如何，学生要达到课程的目标，首先需要有认真的学习态度；而学生分镜头的设计能力、动画角色和场景的设计能力、Flash动画元件的设计能力等指标，也同样反映出课程质量。学生这些指标得分越高，掌握的技能越强，课程的质量也就越高。

（四）结果评价（一级指标4）

结果评价是学生学习质量的最终评价，包括3项二级指标和9项三级具体指标。集中反映了学生通过课程学习，其知识、能力和素质的提升情况。

三、学生学习质量评价模型的构建

（一）确定指标权重

明确了学生学习质量评价指标，课题组遵循层次分析法原理，将学生学习评价指标的重要程度设定为“1，2，…，9”个级次，数值越大，重要性越大。如指标1相对指标2的重要性之比为a，则指标2相对指标1的重要性为a的倒数1/a，[5]形成专家咨询表，通过发放、邮寄、E-mail、QQ和电话等方式征求相关专家、教师的意见。根据调查结果，依据各项指标重要程度平均值构建判断矩阵（指标权重资源配置表），利用特征根法，得到具体的两两判断矩阵结果。

本研究计算了各判断矩阵的λmax和对应的归一化特征向量W的一致性比例（CR）。进行了一致性检验，根据CR判断矩阵结果是否合理。本研究计算结果各判断矩阵一致性比例CR＜0.10，满足一致性检验要求，说明两两判断矩阵中各指标权重分配合理。综合以上研究结果，将各级指标权重分布汇总如表2所示。

（二）评价模型指标重要性分析

本研究提出的“Flash动画设计与制作”课程质量指标体系及评价模型可直接用于课程评价，并对类似的设计类课程学生学习质量评价提供了参考。一方面，根据评价结果，可掌握学生学习质量现状，确定学生学习质量的薄弱环节，制订提升教学质量的具体措施；另一方面，亦可依据各指标权重，确定提升学习质量的重点工作。

表2 “Flash动画设计与制作”课程学生学习质量评价体系一级二级指标及权重

就一级指标而言，投入评价和过程评价所占权重最大，说明课程前期的投入和学习的过程最需要重视。学校和教师充分的前期投入能保证人才培养的基础环境；而加强过程评价能够促进教学问题的及时解决，进而保证课程教学目标的实现。

就二级、三级指标而言，背景评价中学生“色彩版面搭配基本原则、图像处理能力”指标权重最高，说明在人才培养中需要设置好相应的前导课程，以保证学生掌握好这两种基本技能。投入评价中指标权重最高的是“教师教学方案的设计、教师项目实践指导能力”，说明要保证学生学习质量，教师必须具备高超的技能水平和进行投入的备课。过程评价中指标最高权重是“持续学习的热情”，说明学生的学习态度尤为关键，是保证学习质量的基本动力。结果评价中“Flash动画制作的知识点和通用知识、分析问题、解决问题能力”权重最高，说明学生最需要加强这两块知识的学习和能力的培养，教师在课程教学过程中，要重视这两块内容，除了Flash专业知识和技能学习外，还需要加强学生职业能力的培养。

另外，三级指标中“职业基本规范和职业价值观”也占到较高的权重，说明在教学过程中，注重培养学生职业规范意识和正确的职业价值观至关重要。学生能热爱自己的工作，有高度的责任心，也就会重视自身的职业规划发展，从而在工作中继续丰富专业知识和技能。

（三）确定评价模型

设三级指标各项得分命名为Fi，相对总目标的权重系数为ai（i=1，2，…，24），学生学习质量为S，构建评价模型为：

在实际评价过程中三级指标采用百分制，求得的课程学生学习质量分值也为百分制，[6]若三级指标采用10分制，亦同。

四、评价模型的应用

（一）确定评价主体

由相关企业的技术人员、督导、院系部教学专家以及学生等组成学生课程学习质量评价小组，对各项评价指标进行评价。[7]

（二）统一评价标准

在获取评分数据的基础上，对所有人员的评价分数进行平均处理，将各指标平均分值与该指标对应权重之积进行加和，最终得到课程评价指标质量分数。课程评价采用百分制，若分数在90～100分区间，表明课程学习质量“优秀”；分值在70～90分区间，表明学习质量“良好”；分值在60～70分区间，表明学习质量“合格”；若分值落在0～60分区间，则表明学习质量“较差”。

（三）运用评价结果

若学生课程学习质量评价结果达到“优秀”状态，则应做好课程质量维持工作；若评价结果属于其他3个级别，则说明课程学习质量还有较大的提升空间。特别是课程学习质量为“一般”或“较差”时，责任主体应对相关指标进行分析，提出该指标的保障措施并付诸实施。

五、结论

本研究所构建的评价体系和评价模型只是评价的初步方案，实际上，学生学习质量评价体系的构建是一个复杂的研究课题。本评价体系和模型还需在实际应用中不断地加以改进和补充，以便能充分发挥其所具有的各方面功能，从而对学生的学习质量作出客观、公正的评价，促进学生学习质量的提高，培养更多的优秀人才。

[1]陆秀玉.动物医学专业学生学习质量评价体系构建[J].黑龙江畜牧兽医，2016（9）：257-258.

[2]Stufflebeam D L,Madaus G F.KellaghanT:Evaluation Models:Viewpoints on Educational and Human Services Evaluation(2nd ed.)[M].Boston:Kluwer Academic Publishers,2000: 280.

[3]谢承华.AHP及其应用[J].兰州商学院学报，2001（17）：79-82.

[4]周明星.我国应尽快建立类型职业教育体系[J].教育与职业，2008（13）：22.

[责任编辑 盛 艳]

常州大学高职教育研究院2015年度立项课题“基于能力为本位的学生学习质量评价体系构建——以‘Flash动画设计与制作’课程为例”（项目编号：CDGZ2015035）

肖宇，女，常州工程职业技术学院讲师，硕士，主要研究方向为图像处理、数字媒体技术。

G712

A

1674-7747（2017）18-0076-05