在线开放课程评价指标体系研究

2020-02-23孙福孙佳怡贾帅

教育现代化 2020年102期

孙福，孙佳怡，贾帅

（1.陆军工程大学石家庄校区，河北石家庄；2.上海海事大学信息工程学院，上海）

一引言

在线开放课程评价是依据课程建设开发的标准、规范和方法，对在线开放课程的教学设计、课程质量、教学过程、课程效果等构成要素进行全面或某一具体方面的价值评定，其实质就是在课程的教与学活动的过程中，对课程的各个环节采取各种定性与定量相结合的方式方法，对课程实现教学目标、教学策略的价值判断及其分析，为改进和完善课程提供决策依据和遵循[1]。

二在线开放课程的起源、内涵及特点

（一）在线开放课程的起源

在线开放课程的起源可以追溯到二十世纪六十年代。1962年，美国发明家和知识创新者Douglas Engelbart提出一项题目叫《增进人类智慧：斯坦福研究院的一个概念框架》的研究计划。在这个研究计划中，Douglas Engelbart倡导将个人计算机与“互联的计算机网络”结合起来，形成一种大规模的、世界性的信息分享的效应[2]。

真正意义上的在线开放课程起源于2001年麻省理工学院的开放课程运动。2001年4月麻省理工学院宣布启动开放式课件项目(Open Course Ware，简称 OCW)，这是开放课程共享的开始。作为在线开放课程的最典型的应用形式——慕课（Massive Open Online Course,简称MOOC）于2008年逐渐呈现。2011年5月，“乔布斯之问”呼吁并有效促进了教育与技术的深度融合，从2011年秋季开始，慕课呈井喷式发展。2012年，斯坦福大学的专家学者推出Udacity在线课程、创立Coursera在线免费课程，麻省理工学院和哈佛大学共同创建免费开源在线课程计划—edX，各著名大学和教育机构，也都极力推动慕课教学，这一年也因此被《纽约时报》称为“慕课元年”[3]。

（二）在线开放课程的内涵

在线开放课程属于网络课程范畴。网络课程是指通过网络媒体表现的某门学科的教学内容及实施的教学活动的总和[4]。我们常说的在线开放课程，一般是指慕课，即大规模开放在线课程，是一种新型在线教育模式，是一种针对大规模人群的在线课程，人们可以通过网络实现碎片化、自主性学习[5]。针对慕课学习体验缺失、监管乏力、学习者不宜坚持、课程完成率低、学分认证难、难以实现个性化学习及教师与学习者缺乏面对面交流等问题与局限，国内外教育机构和学者们致力于从不同的问题视角、课程类型和教育理念对MOOC进行改进，衍生出了SOOC、SPOC、PMOOC、DOCC、MOOL、MOOR 等教学模式，很好地补充和拓展了MOOC，进一步丰富了形式，增大了选择的可能性。无论是哪种衍生形式，也都未能突破慕课的在线开放的特点。因此，接下来的研究和讨论的对象主要以慕课为主，所称在线开放课程也主要是指慕课。

（三）在线开放课程的特点

在线开放课程的典型特征主要有大规模、开放性、共享性、协作性和交互性[6]。此外，在线开放课程既然称其为课程，具有传统课程的一般属性，包括教育目标、教学内容、教学资源、教学效果、教学评价等课程构成要素；在课程内容呈现方式上，又不同于传统课堂教学模式，是运用信息技术在网络支撑平台上，采取文字、图表、音频、视频、动画等多媒体形式表现；在课程设计与教学方法上，在线开放课程的教与学的过程具有交互性、共享性、开放性、协作性和自主性的特征，在线开放课程的学习是一种基于资源、基于情境、基于协作的学习[7]。在服务方式与服务对象上，不受时空限制，学习者可以在时空分离的虚拟环境中自主选择学习时间和学习内容；而且服务对象可以是在校师生，也可以是社会上有课程学习需求的任何人。

三设计在线开放课程评价指标体系需要把握的几个原则

在线开放课程既有传统课程的属性，又是运用“网络+教育”的理念方法，具有信息技术与教育融合的典型特征。构建其评价指标体系时[8]，既要运用传统课程评价的理论与方法，又应充分考虑信息技术支撑下的在线开放课程的特征与要求；既要考虑评价对象与评价主体，又要关注评价模式和评价技术；既要注重过程评价，又要注重结果评价；突出课程设计、教学过程、课程服务、课程应用等重点评价项目，构建覆盖在线开放课程全要素、开发建设全过程的评价指标体系。具体操作中，应重点把握以下原则。

（一）方向性原则

评价指标体系是在线开放课程的课程定位和课程目标的具体化。在设计指标体系时，应站在立德树人的高度，遵循教育教学规律，体现现代教育思想，体现课程思政理念，符合教学目标要求，在课程评价理论的指导下，体现评价的导向功能与激励作用，使指标体系具有鲜明的方向性和导向性。

（二）科学性原则

评价指标体系是由彼此联系又相对独立的指标组成的，指标间具有一定的逻辑关系，评价指标体系的建立，应遵循科学的教育理论和统计学的资料分类要求，对各类指标科学分类[9]。

（三）全面性原则

评价指标体系是由指标的集合组成的，每个指标反映总体目标的一个点或面，应完整地再现目标，使其各个层面都能显现出来，这样指标体系才能够全面地、无遗漏地再现和反映整个目标的要求。因此，在线开放课程评价指标体系应尽可能完备，最大限度地反映目标的各个层面。

（四）可操作性原则

评价指标是用可操作化的语言、数据加以测量或定义，应做到能定量则定量，不能定量的可以定性测量或利用其它方法加以测定。构建评价指标体系时，应尽量做到条目简明，表达清晰准确，每个主要观测点描述应内容具体、切实可行、便于操作[10]；指标末端可测量，可以通过一定的测量手段获得信息，取得结论，以达到评价的可靠性、准确性和可操作性。

四设计在线开放课程评价指标体系的思路与方法

在设计评价指标体系框架时，坚持理论与实际相结合、科学性和思想性相结合，运用现代教育理论和系统工程方法，对在线开放课程评价指标的科学性、准确性和可行性进行深入研究，并采用现代权重集合的构造方法、模糊综合评判方法等方法进行数据处理。

（一）评价指标体系构建思路

在线开放课程评价指标体系是根据特定的评价目的，用于从多个维度选取相应的评价项目或要素进行科学、客观地价值判定的指标集合[11,12]。评价指标主要来源于在线开放课程本身所包含的课程目标、课程内容、课程信息等构成要素和在线开放课程支撑平台提供的教与学过程数据和考核数据。而每个指标应有相应的分值和计算方法。评价指标的分类由分值类型和分值范围构成，评价指标的分值应落在规定的范围内。评价指标的分值类型有整数型、实数型、列表型、有序类型（评价指标的分值是一个有序离散的值区间，如A、B、C、D）。

（二）评价指标体系设计方法

把在线开放课程构成要素和支撑平台提供的数据信息类型分解为若干个评价项目，组成一个完整的指标系统。在这个系统中，应准确地反映达到的目标，以及完成目标的客观情况，做出明确的结论。由于在线开放课程评价的复杂性，对目标的一次分解，可得到几个一级指标；将一级指标进行再分解，得出若干个二级指标；各级指标根据其地位、作用和工作量的大小，分别设定出不同的权重。为增强指标可测性，通过再分解的方法，再将二级指标分解出若干个观测点。根据观测点的功能作用，制定出相应的评价标准，也就是对观测点进行详细而具体地描述。设计指标体系，力求简便易行、考虑全面、突出重点，定量评价与定性评价相结合[13]，构成较为完整合理的评价指标体系。

五在线开放课程评价指标体系框架

从理论上讲，评价指标的层次越多、等级的数量越多，评价的精确度就越高，但超过五个等级的划分，一般就很难掌握，教育评价一般常用二至五个等级[14]。鉴于此，结合上述评价指标体系设计原则、思路、方法，在构建评价指标体系框架时，运用现代课程评价理论与方法，对评价指标的科学性、准确性和可行性进行深入研究，梳理出影响在线开放课程价值评定的课程定位、课程内容、教学过程、媒体呈现、课程效果、课程团队等六个维度，即六个一级指标。对每个维度再分解，得出若干个二级指标，分别对二级指标进行分解获得相应的观测点，对每个观测点进行界定和描述，即构成了评价指标体系框架。

（一）课程定位维度

课程定位维度可分解为课程理念、教学对象、建设思路等3个二级指标。教学理念指标重点考察是否遵循教育教学规律、体现现代教学思想，以及与在线开放课程特点和规律的符合度等。教学对象指标重点考察在线开放课程服务对象是否明确。建设思路指标重点考察在线开放课程建设原则与思路是否明确清晰。课程定位维度评价指标体系框架如表1所示。

表1 课程定位维度评价指标体系框架表

（二）课程内容维度

课程内容维度可分解为内容选取、课程设计、课程资源和版权与保密等4个二级指标。内容选取指标重点考察课程内容是否满足学习者学习需求、课程内容是否具有科学性、先进性、前瞻性等。课程设计指标重点考察课程要素是否齐全，知识体系、章节编排是否合理，知识点划分和课程内容深浅度是否合适等。课程资源指标重点考察课程资源要素是否齐全规范，数据与事实引用是否严谨规范，课程辅助资源和参考资料是否满足需求等。版权与保密指标重点考察课程政治上是否合规，有无侵权问题，是否符合保密要求等。如表2所示。

表2 课程内容维度评价指标体系框架表

（三）教学过程维度

教学过程维度可分解为教学设计、教学方法、课程讲授等3个二级指标。教学设计指标重点考察教学设计思想、教学策略是否符合认知规律，教学形式是否灵活多样，创意是否新颖等。教学方法指标重点考察教学方法是否符合在线开放课程类型及特点等。课程讲授指标重点考察表述是否清晰、准确，讲解是否透彻，重点是否突出等。如表3所示。

表3 教学过程维度评价指标体系框架

（四）媒体呈现维度

媒体呈现维度可分解为出镜人员、媒体素材、编辑制作等3个二级指标。出镜人员指标重点考察出镜的教师和出镜的示教人员的仪表、着装、肢体语言、操作动作等规范性。媒体选用指标重点考察所选用的媒体形式是否合适，素材是否丰富，是否能有效支持内容表达等。编辑制作指标重点考察教学视音频、画面构图、剪辑等是否符合标准规范。如表4所示。

表4 媒体呈现维度评价指标体系框架

（五）课程效果维度

课程效果维度可分解为课程服务、互动交流、课程应用等3个二级指标。课程服务指标重点考察课程团队在线指导与服务的时效性，以及课程内容与课程资料更新情况等。互动交流指标重点考察学习者在线互动交流是否充分等。课程应用指标重点考察课程应用效果、社会影响、学习者评价等。如表5所示。

表5 课程效果维度评价指标体系框架

（六）课程团队维度

课程团队维度可分解为课程负责人和团队成员等2个二级指标。课程负责人指标重点考察负责人的教学能力、学术水平、师德师风等。团队成员指标重点考察团队结构、各类人员的能力水平、是否符合项目服务要求等。如表6所示。

表6 课程团队维度评价指标体系框架

区分二级指标的重要程度分配相应的权重，再对二级指标的观测点赋值，将所有一级指标、二级指标（含权重）及其观测点（含赋值）整合在一起，即可形成完整的在线开放课程评价指标体系。根据不同的评价目的，可选取所需的一级指标，并对相应的二级指标及其所属观测点进行取舍，给出相应的计算公式，便可形成满足不同评价要求的指标体系。