MOOCs课程教学效果评价指标与权重研究

余璐

（河南理工大学万方科技学院，郑州451400）



MOOCs课程教学效果评价指标与权重研究

余璐

（河南理工大学万方科技学院，郑州451400）

摘要：教学效果评价是衡量课程教学质量的关键。本研究以课程论、教学论为基础，以评价理论为依据，综合运用德尔菲法，通过计算集中度、离散度、变异系数的方法，确定了MOOCs课程教学效果评价指标及权重。从MOOCs课程建设、教师教学和学生学习三个维度对MOOCs课程教学效果全方位评价，为今后更好地评判和发展MOOCs课程带来依据和参考。

关键词：MOOCs；教学效果；评价；指标；权重

此文为2015河南省教育科学“十二五”规划项目“MOOCs课程教学效果评价体系构建研究”（JKGHYB-0682）的阶段性成果。

MOOCs课程教学效果评价是指以课程论与教学论理论为基础，以评价学理论为指导，运用可操作的科学方法，按照一定的评价标准，对MOOCs课程教学效果进行价值判断的过程。本研究所要解决的问题为：1.用什么评价指标能够对MOOCs课程教学效果做出评价？2. MOOCs课程教学效果评价各指标的权重分别是多少？

一、理论依据

（一）诊断性评价、过程性评价和总结性评价

诊断性评价是指在课程实施之前，对课程定位、教学目标等基础条件做出的评价。形成性评价是指在教学过程中，在持续了解课程教学进行的情况下，不断对教学内容、教学方法等做出评价。形成性评价针对的对象是动态的。总结性评价是指在课程教学完成之后，对教学活动的成果做出鉴定，是对课程计划的成效做出整体判断。三者相辅相成，不可或缺。

（二）目标评价模式和目标游离评价模式

目标评价模式又称为“泰勒模式”。根据这一模式，课程评价实际上是判断学生的实际活动是否达到目标的活动。目标评价模式在提出之初对课程及教学的评价带来了极大便利和好处，但也有局限性，该模式不能评价发展中的教师授课过程和学生学习过程，而且只关注预期结果，许多非预期效果被排斥在外。

目标评价游离模式是美国评价专家斯克里文针对目标评价模式所存在的弊端所提出来的评价模式。该模式强调评价的关注点是课程计划的实际结果。这种评价模式以实际结果为评价对象，使评价更加客观。但也有其自身无法克服的问题，即评价完全游离于既定目标之外，导致对某些结果不可测。

目标评价模式与目标游离评价模式得而兼之才能对课程教学效果进行全面而准确的评价。

二、MOOCs课程教学效果评价指标

“指标”是对评价对象品质的衡量标准，它明确了评价对象的特征和性质。教学目标是课程教学效果评价的基础，而评价指标正是对教学目标分解后的具体规定，它是具体的、可测量的、行为化和可操作的。

（一）MOOCs课程教学效果评价指标初构

1. MOOCs课程教学效果评价指标制定原则

MOOCs课程教学效果评价指标建构（见表1）遵循一般指标建构原则，即客观性、全面性、科学性、可行性、可比性和导向性。客观性是指在制定评价指标时要依据MOOCs课程教学的实际情况；全面性是指评价指标要能覆盖评价MOOCs课程教学的所有方面；科学性是指评价指标应尊重教育规律；可行性是指指标可以通过观察评价对象的实际行为而检测；可比性是指同级或不同级指标之间不能相互重叠和包含，也不存在因果关系；导向性是指评价指标能够指导今后的教学工作。

表1　MOOCs课程教学效果评价指标初构表

2. MOOCs课程教学效果评价指标构建

教学效果评价是在教学评价的基础上，对教学产生的实际结果的评价。综上，初步制定MOOCs课程教学效果评价指标如下：该指标体系分为三个一级指标、十个二级指标和二十八个三级指标。每级指标都有具体的标准阐述其内涵，且每级指标都运用利库德五级量表进行评分，即：非常不合适1分、不合适2分、较合适3分、合适4分、非常合适5分。

3.对MOOCs课程教学效果评价指标的分析

一级指标。一级指标分别为MOOCs课程建设效果、教师教学效果和学生学习效果。MOOCs课程建设效果评价是在课程进行之前对课程的基本信息做出评价，属于诊断性评价；教师教学效果评价关注点是课程进行的过程，属于形成性评价；学生最终学习成果评价属于总结性评价。此外，MOOCs课程建设效果评价指标属于典型的目标评价模式，该评价指标的参照物为预定的教学目标；学生学习效果体现了目标游离评价模式，该评价指标针对的对象包括不可预知的结果。

二级指标。在MOOCs课程建设效果的二级指标中，课程基本设置、课程内容设计、栏目设计、教学环节设计分别从形式到内容，对一级指标做出完整的阐述；在教师教学效果二级指标中，教学组织是对教师对课程安排的评价，教学过程是对教师授课行为的评价，教学指导则是对教师课后辅导的评价；在学生学习效果二级指标中，参与度和考试成绩是客观量化的评价，而自我评价则是学生主观能动的评价。

三级指标。课程基本设置下的三级指标为课程定位与教学目标，是对课程教学的基础进行评价的依据；课程内容设计三级指标侧重评价课程教学所需要的资料、题库等是否完备；页面设计三级指标对MOOCs课程版面予以关注；教学环节设计概括了教学的各个步骤。教学组织三级指标从教师的课程执行力方面做出评价；教学过程三级指标则是对教师掌控力及教师负责程度的评价；教学指导三级指标关注点是教师对学生的课外关注度。参与度三级指标是客观考量学生参与学习的指标；考试成绩三级指标可以直观检测出学生是否掌握了教学大纲要求掌握的知识；自我评价三级指标是学生主观评价自己学习效果的最好方式。

（二）德尔菲法重构MOOCs课程教学效果评价指标

德尔菲法即专家咨询法，是指运用问卷、访谈等方式向相关专家征询意见，并获得专家意见和建议的方法。本研究邀请10位具有MOOCs课程一线教学经验的专家作为德尔菲法的研究小组成员。组内专家对指标给予了评分和修改意见之后，研究小组将专家给各指标的评分以平均值、标准差和平均值/标准差进行计算。指标的平均值为指标的集中度；指标的标准差为该指标的离散度；离散度与集中度的比值为该指标的变异系数。集中度、离散度和变异系数综合表示该指标的必要程度。

三、MOOCs课程教学效果评价指标权重

各指标在该评价指标体系中的重要程度也不相同，即“权重”。本研究所运用确定指标权重的方法为排序法和百分数计算法。专家对各级指标的重要程度分别进行排序，排序靠前的指标得分高，排序靠后的指标得分低，通过计算指标在该级指标里所占的百分数即得权重。

在评价MOOCs课程教学效果时，应该从MOOCs课程建设效果、教师教学效果和学生学习效果三方面进行。对学生最终学习效果的评价仍然是课程教学效果评价最重要的部分；对教师教学过程做出的评价能够动态、实时监控该课程教学过程；而对课程基本信息的考量则是对该课程教学效果进行评价的基础。本研究所得结果将为今后更好地开展MOOCs教学提供参考，并为将来进行MOOCs课程评价带来启示。但由于条件所限，本研究并没有对MOOCs课程的评价主体进行阐述，今后的研究可以针对不同的评价主体进行，以对MOOCs课程教学效果评价指标进行更细致的划分。

表2　MOOCs课程教学效果评价指标权重一级指标

参考文献：

[1]B.S.布卢姆.教育评价[M].上海:华东师范大学出版社，1987.

[2]陈玉琨，赵永年.教育评价仁[M].北京:人民教育出版社，1989.

[3]马武林，胡加圣.国际MOOCs对我国大学英语课程的冲击与重构[J].外语电化教学，2014(3):48-54.

[4]R.W.泰勒.课程与教学的基本原理[M].台北:桂冠图书有限公司，1981.

编辑朱荣华

[5]G. F. Madaus, M.S. Scriven, D.L. Stufflebeam. Evaluation Models[M]. Kluwer-Nijhoff Publishing, 1983.

Research on the Indexes and Weight of MOOCs Teaching Effect

YU Lu
（Wanfang College of Science & Technology, Henan Polytechnic University, Zhengzhou 451400，China）

Abstract:Teaching effect evaluation is the key point in assessing the teaching quality of a course. With the curriculum theory, didactics and the evaluation theory as theoretical foundation, the research has determined the indexes and their corresponding weight of the teaching quality evaluation of MOOCs by using Delphi method and calculating concentration ratio, dispersion and variable coefficient of the statistics. The three dimensions are MOOCs curricula construction, teaching process and learning result. The findings would provide some references to judge and develop MOOCs curriculum in the future.

Key words:Teaching Effect; Evaluation; Index; Weight

作者简介：余璐（1984），女，河南洛阳人，硕士，讲师，研究方向为语言学、英语教学。

收稿日期：2015-09-23

中图分类号：G642

文献标识码：A

文章编号：2095-8528（2016）01-012-04