英国开放大学的电子评估及对我国远程教育的启示——电子评估在物理和天文学科的实践探索
2012-08-15李伟
□李伟
英国开放大学的电子评估及对我国远程教育的启示
——电子评估在物理和天文学科的实践探索
□李伟
英国开放大学是英国开放教育史上的一座里程碑,是国际远程开放教育领域成功运营和办学的典范。本文首先介绍了电子评估的内涵,然后对英国开放大学基于两个电子评估系统的电子评估实践和研究进行了综述和分析,指出了电子评估的效果和优势,最后得出了对我国远程教育的几点启示。
英国开放大学;电子评估;评价;远程教育
英国开放大学(The Open University,OU)是世界远程教育的先驱,2010年已是欧洲最大的大学(在校生25万)[1],在人才培养、科学研究等方面取得了举世瞩目的成就。它以完善、独特和有效的组织管理体制、媒体教学模式、专业课程设置、学生支持服务体系和优质的办学质量,得到了英国和欧洲学习者的广泛认同,成为世界各国发展远程开放教育的榜样。英国开放大学提供研究生和大学本科的学历教育,同时提供非学历教育,包括继续教育、职业技术教育和社会教育,并以优异的教学质量著称。在2005-2009年连续五年的全国学生调查(National Student Surveys)中,英国开放大学的学生满意度在全英主流大学中排名第一,教学质量排名第五,高于牛津大学(排名第六)。[2]英国开放大学的学术标准和教学质量及学生业绩不仅得到英国教育界、产业界和政府的认同,而且得到世界各国同行的赞许,科研在其中发挥了不可低估的作用。
英国开放大学物理学科教学创新研究中心(PICETL,Physics Innovations Center for Excellence&Teaching in Learning) 成立于2005年,是基于英国高等教育基金委员会(The Higher Education Funding Council for England,HEFCE) 的CETL(CenterforExcellence & Teaching in Learning) 项目设立并一直由其提供资金支持的。HEFCE鼓励所有高等教育系部提交申请建立教学创新研究中心资助的投标书,既可以独立申请,也可以与其他机构合作申请,既可以以某一学科或是某个教学或学习领域提出申请,也鼓励跨校申请,甚至鼓励校企合作。HEFCE资助的74个创新研究中心由55个单一中心和19个合作中心组成,横跨多种学科和教学领域,各合作中心都有指定的牵头单位。英国开放大学有三个单一中心,分别是个性化综合学习支持服务中心、基于实践的专业教学和学习中心以及数学、自然科学、计算机技术开放学习中心。而PICETL是英国开放大学的一个合作中心,由在物理教学创新方面有良好成绩的OU、雷丁大学和莱斯特大学物理系合作,OU是该中心的牵头单位。PICETL重点关注课程创新、技术应用、个性化和专业化技能的发展,通过利用新技术手段、共享优秀的科学资源,提供物理和天文学前沿领域的各种创新的学习体验。自2006年起,PICETL开展了一系列的研究项目,主要目的是探索如何利用科技手段改进评估方式(即电子评估),为远程学习者提供较为及时的反馈信息,以提升学生的学习效果。
基于系列的研究项目,2010年6月,英国开放大学PICETL、物理与天文学系合作编纂了项目报告《电子评估》。该报告收录了多份在物理和天文学科中进行的关于电子评估的实验、研究及总结报告,并附了多份针对助教和学生的调查问卷及相关表格。鉴于国内对于远程教育评估的研究多集中在对整个远程教育质量的评估,理工专业的学习过程评估较少采用信息技术手段等现状,本文拟在《电子评估》报告的基础上对英国开放大学的电子评估实践和研究做介绍和分析,以期对我国远程教育发展,尤其对远程教育理工学科学习者的形成性评价及学习过程评估模式提供借鉴。
一、电子评估的内涵
相关研究表明,评估与学习成绩之间存在直接的因果关系。Black和Wiliam[3]的研究进一步证明,设计优秀的形成性评价与学生在广范围传统测量方面的成绩呈正相关。因此,在学习过程中,教师有必要为远程教育学生设计不同类型的评估。学生需要隔期完成这些评估任务以巩固学习到的知识并检测对知识的掌握程度。在远程教育学习的评估手段上,国内通常采用作业(包括在线作业和离线作业)、在线测试以及学期末的纸质考试、论文等形式进行。与国内非常类似,英国开放大学的评估手段包括作业、论文、实验和学期考试,并以此作为学生拿到毕业所需学分的依据。
顾名思义,电子评估就是采用电子手段尤其是现代信息通讯技术(Information Communication Technology,简称ICT)手段实施的远程教育学习过程中的各种评估活动。英国信息系统联合委员会(JISC)将电子评估定义为一种“终端对终端的电子评估过程,在此过程中,ICT被用于进行评估和记录反馈”。电子评估在支持学习时可以呈现出多种方式,包括电子文档的使用,以及对学生在线讨论的评估[4]。目前,电子评估更多地被认为是计算机在评估中的使用。在多个国家的实践领域,ICT已经以多种方式改善了当前的考试实践,包括在线测试、代替考卷、支持学生者键入信息、自动计分及实现对于评分质量的控制。但电子评价也存在一些问题,例如:ICT技术特别适合评价清晰可辨的陈述性知识,而在评价程序性知识方面要稍逊色一些[5]。
在英国开放大学的《电子评估》报告中,电子评估特指学生用电子手段完成电子作业、教师批改电子作业以及教师和学习者对eTMAs(electronically submitted tutor-marked assignment,电子提交的辅导教师评分作业) 和iCMAs(interactive computer-marked assignment,交互式电脑评分作业)系统的应用。eTMAs是非实时的评估系统,学生可以提交电子版作业到服务器,辅导教师则可以下载作业并进行离线批改评分,并通过网络上传至服务器,服务器会自动录入分数并对作业进行备份,学生则可以下载并查看自己被批改后的作业。iCMAs则是一种实时的评估系统,学生在学习过程中可以在指定的时间内登陆系统,完成在线作业或测试,系统会即时给出分数和相关反馈信息。
二、英国开放大学电子评估的实践与研究
在英国开放大学,绝大多数的课程都包括辅导教师评分作业(Tutor-marked assignments,TMAs),需要学生在学习期间隔期完成并提交。开放大学的辅导教师分布在全国各地,每个辅导教师大约负责25名学生。电子评估的实践和研究正是在此背景下展开的。英国开放大学的《电子评估》报告主要针对物理和天文学科的学生隔期提交的作业进行研究。这些实践研究基于真实环境进行,通过1-2个学期的实践及相关调研,获得了一些经验和教训。下面对英国开放大学电子评估的实践和研究进行介绍和分析。
(一)英国开放大学电子评估的实践探索
如前所述,英国开放大学的电子评估包括两个系统:eTMAs和iCMAs。前者是一个单独的系统,后者是基于OpenMark教学平台的。
1.eTMAs系统的实践与研究
英国开放大学大力推广和鼓励师生应用eTMAs系统。这个系统使得学生能够通过互联网提交电子版作业至文件处理系统服务器。辅导教师从服务器上下载学生提交的电子作业后,可以离线批改或评分,之后再通过互联网将批改后的作业发送到服务器。服务器会自动将分数录入相应的数据库,同时对作业进行备份,以便监督辅导教师的工作质量。学生可以从服务器下载他们被批改的作业,及时获取反馈信息。
2006年3月,英国开放大学启动了一个试点项目——辅导教师使用平板电脑批改作业的研究。项目组为所有参与项目的辅导教师配备了平板电脑并提供相应的软件,使他们能够对学生的电子版作业进行批改,包括输入手写评论、插入一些方程和图表等。在该项目中,学生可以自愿选择提交电子版作业或纸质版作业,并可以使用各种程序来完成电子版作业。80%以上的学生作业是以word格式提交的,而辅导教师主要采用PDF注释器和word来批改作业。通过对参与项目的辅导教师的调查发现,与传统的纸质批改相比,使用平板电脑批改具有许多优势,例如:不用处理大堆的纸质文件;能随意删除、修改评语,评语会显得更加清晰;使用电子批改系统更省时;可以在不同作业之间复制和粘贴评语;可以轻松插入标准答案;可以保存作业副本以供日后参考。但是,这种电子批阅也存在诸多问题,例如:辅导教师熟练程度不够导致批改作业占用了更长的时间;物理和天文学课程通常涉及大量的符号、公式和图表,相对于直接用笔进行批改,使用键盘、鼠标等工具进行公式编辑和绘图更加费时费力;学生们提交电子版作业也需要输入符号、公式等,word或openoffice等软件的输入公式功能虽然简单易学,但是非常耗时,而一些能高效输入公式的软件则不易于掌握等。2008年,这项实验拓展到大学三年级的一门物理学课程中,研究结果是类似的。上述两项研究证明,平板电脑是电子批改作业的一种切实有效的解决方案,得到了师生的共同认可,但是这种方式的成功取决于教师和学生对现代信息技术或电子评估系统的掌握程度,同时平板电脑的成本也可能会限制其在开放大学的推广应用。
针对上面所提到学生难以将数学内容和图像嵌入电子版作业的问题,英国开放大学启动了新的项目,提供给学生一些设备供其完成电子作业时使用。这些设备包括:CannoScan Scanner(一款能识别彩色和黑白的扫描仪,可以自动生成单个PDF文档)、LogiTech io Pen(一款罗技牌的数码笔,可以在专用纸上书写并传入电脑)以及PC Note Taker(支持用特制笔在特制纸上书写答案,包括公式和图形,并通过USB接口传到电脑上)。这些设备可以使学生很方便地完成电子作业,并且,如果电子作业存在任何问题,学生都有一份纸质作业可以提交。在实验过程中,英国开放大学还为实验的参与者提供了相应的论坛用于信息交流和互相帮助。2007和2008两年的研究发现,使用扫描仪是一种高效且令人满意的方法,其优点在于对于使用者的信息素养要求比较低,花费时间少同时质量也比较好,但其缺点是扫描文件无法进行编辑,如果出现错误,学生需要重写作业并重新扫描;LogiTech io Pen和PC Note Taker这两款电子笔在绘制精确的图表时无法正确感知,同时,在绘制图表时使用尺子也会阻断电子笔与纸之间的信号,无法令人满意。
2.iCMAs电子评估系统的实践与研究
前面已经提到,快速反馈能够使学生在对知识记忆犹新的时候,通过尝试解决类似的问题来加深学习。iCMAs电子评估系统则进一步满足了这种要求,它提供编制在线测试题目的功能,能支持学生在线选择或输入问题答案,即时提供反馈信息。iCMAs是基于教学平台的,学生在每个学期需要较为频繁地完成多份iCMAs作业或测验,达到形成性评价的作用。iCMAs最初在一门大学课程课前的诊断性测试中进行了实践,后来被应用于多门课程的形成性评价中,与规律的课程间隔相配合,调整学生的学习进度,使其积极主动地参与学习过程,以保持良好的学习效果。
实践研究证明,iCMAs的优势表现在:支持各种题型,包括填空题、单项选择题、多项选择题、拖拽题以及问答题等;能够向学生提供即时的、有针对性的反馈,学生回答题目均有三次机会,第一次尝试错误仅会被提示回答错误,第二次尝试错误则会给予简单的指导,第三次尝试无论正确与否都会给出详细的解释以及题目完整的解答过程;学生成绩会通过教学平台传送给学生和教师;题目都存在5种变体(对于某一知识点的考察,会有选择题、填空、连线、计算等多种方式),学生可以尝试完成同一套题目,以达到熟练掌握,因此可作为考前复习的方法之一;辅导教师可以通过iCMAs监测学生的学习进展及答题情况,以监控学生学习,发现共性问题等。研究发现,学生对iCMAs的反映很积极,认为它是重要的学习辅助工具。但存在的问题在于:学生往往不会及时完成iCMAs,失去了该系统应有的与课程同步的功能;学生只有在iCMAs具有一定的总结性评估功能时,才会深入地完成它。这与学生多是在职的成人学习者、面临工学矛盾等问题相关。
(二)英国开放大学电子评估的实践效果分析
从英国开放大学电子评估的实践来看,电子评估确实在如下方面产生了明显的效果:
1.提高了反馈的速度并节约了开销
在英国开放大学基于纸张的作业批改模式中,学生将纸质作业邮寄给辅导教师,辅导教师对作业进行批改后再邮寄到开放大学,开放大学将分数录入数据库并对作业进行复制和存档,然后将作业邮寄给学生。显而易见,这一过程会耗费大量纸张,邮寄、分数录入、作业备份过程中会产生错误和相应的开销,最关键的是,辅导教师对学生的反馈信息在经过这一过程后被延迟,导致反馈无法发挥其应有的作用。Gibbs和Simpson[6]总结了11种促进学习的情况列表,其中就包括:及时给学生反馈,让他们能及时调整进一步的学习或者接受进一步的帮助。C·C·罗西与L·K·亨利所做的著名的反馈试验也证明,及时知道自己的学习成果对学习有非常重要的促进作用,即时反馈比远时反馈效果更大[7]。从这个意义上来讲,电子评估消除了对邮寄系统的依赖,解决了传统评估模式中的信息延迟问题,提高了反馈的速度,同时,也节约了管理费用。提高了反馈的速度对于巩固学生学习、鼓励学生参与学习过程和提高记忆方面有非常积极的影响,能够使隔期作业发挥其对学生阶段性学习的情况进行监测、发现薄弱环节或欠缺之处、及时补救和修正的应有的作用。尤其是在人数众多的课程或模块中,电子评估能够节省大量的成本和精力。
2.提升了学习效果
相关研究证明,提供反馈本身并不能提升学习效果[8]。Sadler提出,为了使反馈发生作用,必须拉近学生当前的认知水平和老师期望值之间的差距,不仅要给学生提供反馈,而且要使他们理解并按照反馈及时行动[9]。电子评估提高了学生获得反馈信息的速度,让学生可以在对作业记忆犹新的时候,根据反馈信息,立刻尝试解决类似的问题或其它方式来加强学习、修正知识理解,如此完成反馈机制的整个循环,能有效提升学习效果。也正是因为能够及时反馈、促进学习效果的特点,英国开放大学的电子评估系统被看作是“近在眼前的导师”。
3.提高了学生的信息素养
英国开放大学的课程设计尤其关注以下技能:提高学习能力和增进绩效、交流、信息技术、信息素养、数字的运用、解决问题及与他人合作的技能[10]。从中可以看出,信息技术和信息素养是英国开放大学培养目标的重要组成部分。在评估中采用电子或信息技术手段,需要学生通过电子评估系统提交电子版作业或者在线完成作业或测试,能够提高学生上述关键技能中的信息技术技能和信息素养,尤其是本研究主要集中在英国开放大学的物理和天文学科,学生要完成电子作业,需要借助扫描仪、图标函数软件等输入大量的数字、函数和图表,对于学生信息素养的提升甚至数字的运用等能力都有质的提升。
4.使辅导教师能更多地投入于一对一的辅导
在英国开放大学,辅导教师偶尔会对学生进行辅导,包括面对面的辅导或者通过各种实时和非实时的电子通讯工具来进行辅导。在传统的基于纸张的评估系统中,辅导教师的大多数时间都用在批改作业、邮寄作业上。从一定意义上讲,电子评估节约了辅导教师的时间,从一定程度上将辅导教师从纸质作业的批改中解放出来。在eTMAs中,辅导教师对作业批注进行复制和粘贴、可以轻松插入标准答案,还能保存作业副本,用于日后参考,从长远来看,能够节约辅导教师批改作业的时间。iCMAs这种实时反馈的评估系统,对于学生不同的回答都给予了有针对性的、自动地反馈,还可以自动录入分数,辅导教师仅需要统计学生的共性问题即可,节约了大部分的时间。电子评估使得辅导教师有更多的时间用于给远程教育学生提供一对一的辅导。
三、给我国远程教育的启示
远程教育是一种基于现代信息技术手段的新型教育模式,学生通过网络学习课程,通过各种技术手段获取支持服务,而作为对学习结果进行测验和验证的评估环节,不使用电子手段是不正常的。另外,人们需要在日常生活中使用计算机,而不在评价中使用计算机似乎很荒谬[11]。随着远程教育国际化趋势的逐渐显现,一所远程教育办学机构的学生可能来自境外以及全球各个地方(如英国开放大学就有英国境外的学生),在评估环节采用电子手段使得学习者的整个学习过程都能通过网络进行,节省邮寄费用和时间,提高了反馈速度,能够更好地保证学习效果,更顺应了远程教育发展的国际化新趋势。
随着信息技术的日新月异,国内远程教育也得到了长足的发展,对于人才培养质量的关注也被提上了日程。对于远程教育理工科的教学及支持服务工作,我们可以从英国开放大学电子评估的实践中得到如下启示。
1.探索电子评估模式
尽管也预料到困难重重,英国开放大学还是先后开发了eTMAs和iCMAs两个电子评估系统,并逐步扩大试点范围,实现了对电子评估模式的实践探索。尤其是在物理、天文以及科学等理工科的教学、支持服务及评估过程中,由于过多地涉及数字、符号、公式、函数等,电子评估操作起来面临许多可预见的困难。我国远程教育理工科的评估模式多沿用传统的总结性纸质考试的形式。这种模式的缺点在于无法及时了解学生对阶段性学习的掌握情况,无法在学习过程中为学生提供自我测验的机会,学生在学习过程中无法定期获取教师的反馈信息,不利于学习效果的最大化。另外,技术是社会变革的核心驱动力之一,随着信息技术的发展、计算机软硬件性能的不断改善,人与人之间交互的虚拟环境得到了不断的优化,另外,移动终端技术的发展也使得移动学习不再遥远。因此,从英国开放大学电子评估的实践及效果分析来看,我国需要学习英国开放大学的经验,在理工科的远程教育评估中采用实时或非实时的电子手段,在学习过程中为学生设计阶段性的作业或学习任务,使学习者及时验证学习成果,改善学习质量,同时节约成本,提高效率。
2.加强对于电子评估的培训及其它支持
从英国开放大学以及PICETL逐步演进的一系列研究可以得出结论:宣传电子评估的优势、为学生和辅导教师提供电子评估系统的相关培训、提供电子设备完成电子作业等措施都可以提高电子评估实践的效果。因此,我国要在远程教育理工科教学中探索电子评估模式,需要解决三个方面的问题。首先,要解决理念的问题。对电子评估的优势做充分的宣传,启动电子评估的试点,用数据说话,提高教师及学生等对电子评估的认识。其次,解决操作问题。对于理工科的学生来讲,在电子作业中必须展示完整的解题思路,才能使教师对学生的掌握情况提供正确的、有针对性的反馈信息,而这需要扫描仪、公式输入软件、特制纸笔以及其它高科技的信息技术工具的帮助,因此,对于这些工具软件技术以及电子评估系统的使用,必须针对性地对辅导教师和学生加强培训。最后,在电子评估的试点及推广过程中,要加强信息技术产品与教学过程的整合,提高远程教育领域对电子评估的认识和掌握程度,逐步地推动电子评估在远程教育中的普及和推广。
3.启动评估模式改革的试点探索
基于对电子评估的实践探索,英国开放大学启动了评估模式改革的实践探索,并得到了师生的认可,成功采用了一种形成性的eTMAs和iCMAs混合的评估模式。目前,国内传统教育已赋予了形成性评价较高的地位,包括在高考中都试图将学生平时的学习成绩作为重要参考依据。实时或非实时的eTMAs和iCMAs系统无疑能够在形成性评价中发挥重要作用,不但有利于检测学生对知识的掌握情况,更重要的是可以保证学生及时获取反馈信息,促进学习效果提升。因此,我国远程教育的评估模式也需要改变“一考定成绩”的传统评估模式,将包括作业在内的形成性评价活动与总结性评估结合起来,不仅能解决目前远程教育学习者对课程活动参与度不够的问题,还能够从根本上提升学习对知识的掌握,提高人才培养的质量,从而提升远程教育的社会认可程度,促进远程教育、网络教育的发展。
4.在远程教育研究中要加强科学的实证研究
在每项研究的过程中,英国开放大学都对参与项目的辅导教师和远程教育学生进行了问卷及其它调查,发现存在的问题并在新一轮的项目研究中采取对策和措施。通过文献调研我们也发现,英国开放大学的研究项目偏重于实证研究,重在以理论指导实践,其远程教育的研究对象就是学习过程、支持服务过程,研究结果来源于数据分析和问卷调查。国内的远程教育尤其是文科的一些专业和课程,采取了在线作业、离线作业等电子评估的方式,但是学术领域鲜有对这种模式的研究,其受欢迎程度、存在的问题、下一步需要完善的地方等都不得而知。因此,我们需要加强远程教育的实证研究,从远程教育教学及支持服务过程入手发现问题,采用问卷调查、小组讨论、实验性观察等科学方法来研究问题,发现规律,提出提升远程教育质量的措施。
[1][2][11]张竹莉.2010年英国开放大学的现状及启示[J].飞天,2011,(8).
[3][4][6][8][9]电子评估.英国开放大学内部资料,2010,6.
[5]Jim Ridgway,SeanMcCusker&DanielPead.侯小杏译.电子评价研究新进展[J].远程教育杂志,2009,(2).
[7]百度百科.[2011-08-05].http://baike.baidu.com/view/67362.htm.
[10]马莉,马红亮.英国开放大学对学习者关键技能的培养[J].安徽电大学报,2011,(2).
G420
A
1009—458x(2012)02—0033—05
2011-10-30
李伟,中央电大奥鹏远程教育中心(100120)。
责任编辑 南 岭