绩效评估在网络学习评价过程中的应用探究
2016-05-30梁文丽张立华
梁文丽 张立华
摘要:将绩效技术与教育技术结合是近年来教育技术学研究的热点,本文将绩效评估方法应用于网络学习评价过程中,为网络学习评价过程提出一套科学可行的程序,具有深刻的理论和实践意义。
关键词:绩效评估;网络学习;教学评价
中图分类号:G642.0 文献标志码:A 文章编号:1674-9324(2016)13-0127-02
自上世纪90年代以来,互联网技术的飞速发展为人们的学习、生活、工作方式带来了颠覆性的改变,如今,网络已覆盖到人们生活的方方面面。中国互联网发展状况统计报告指出,截至2014年12月,我国网民规模达到6.49亿,互联网普及率为47.9%,其中学生上网人数占整体网民的25.6%。[1]网络技术的飞速发展也为教育领域带来了变革,如国内外各高校相继推出的网络公开课、精品课程,以及慕课(MOOC)等等,满足了人们终身学习的需求。基于网络学习的特殊性,传统的教学评价模式无法科学有效地对网络学习进行评价,因此,探究如何科学地评价学习者进行网络学习的过程,以及网络学习取得了怎样的效果,是一个值得探究的课题。
一、网络学习绩效评价概述
(一)概念界定
“绩效”源于英文单词Performance,根据《现代汉语词典》的解释主要是表示“成绩、成效”。强调绩效应该是成绩和成效二者的综合,是一定时期内的工作行为、方式、结果及其产生的客观影响。2004年6月,美国教育技术协会(AECT)为教育技术概念提出了一个新的定义:教育技术是通过创造、使用、管理适当的技术过程和资源,促进学习和改善绩效的研究与符合道德规范的实践。定义明确指出教育技术的目的是促进学习和提高绩效。
将绩效技术引入到网络学习评价中,能够更准确地评价学生的真实能力。网络学习绩效评价指在网络学习中,以学习目标为导向、利用技术手段对学习者的学习进行绩效分析并提出改进学习绩效的措施,对学习者的学习过程实施绩效干预,促进学习者学习的一套策略和方法。从绩效的角度评价学习过程不单单只注重学习结果,而是反映着学习者的知识迁移能力和解决实际问题的能力,从能力、素质等多方面对学习者进行测评。
(二)网络学习绩效评价研究发展现状
1.国内网络学习绩效评价研究尚处于初始阶段。绩效技术与教育技术的结合吸引了教育技术学各领域学者的关注,也涌现了大量研究成果。但通过对网络学习绩效评价相关文献进行梳理分析发现,虽然学者们对网络学习绩效的研究范围较广,但研究角度较为分散,不成系统,且一致性的理论不多。研究都处在尝试设计阶段,缺乏一定的深入研究和后续研究。
2.理论研究较多应用研究较少。通过对相关文献进行分析研究发现,近年来学者对网络学习绩效评价的研究较多,但大多着眼于描述和解释层面,如评价标准的研究或评价模式的研究,而缺少后续的实验验证和应用推广层面的研究。将绩效评估应用于网络学习评价是绩效研究的一项具体应用,应该通过后续的实证研究来验证评价体系的科学性与适用性。
(三)将绩效评估引入网络学习评价过程的必要性
目前,对于网络学习评价存在的问题主要体现在以下四个方面:①重结果而轻过程。侧重于评价学习结果,而忽略了学习者在学习过程中所表现出的能力、学习态度、学习风格等,也没有反映出学习者在学习过程中出现的问题;②教师在学习评价中占据主体地位。评价标准是根据课程编制者的意图制定的,对学生的评价标准相对固定和统一,而学习者在评价中处于消极被动的地位;③客观测试过多。客观测试的侧重点在于考察学习者对知识的记忆和理解,难以有效地反映出学习者的高级思维能力;④评价信息反馈延迟。由于无法得到及时的评价信息反馈,学习者无法根据评价信息调整自己的学习过程,会影响学习者的学习积极性。
绩效评估方法则不仅关注学习成果,而是更加侧重于评价学生的表现和学习过程,关注学生应用知识的能力;再者,绩效评估方法的评价标准往往是由教师和学生根据实际问题和学生先前的知识、兴趣和经验共同制定的,学生在如何学、学什么、如何评价等方面有一定的控制权;最后,绩效评估方法是一种持续的、动态的过程,评价贯穿于整个教学过程中,关注评价对象各个侧面的发展变化,且能够及时反馈。在技术上,多媒体、网络交互等技术的发展也使得在网络学习中应用绩效评估方法成为可能。因此将绩效评估引入网络学习评价体系,更全面地对学习进行评价,帮助学生更全面地认识到自己的问题并解决问题是非常必要的。
二、网络学习绩效评价的实施
(一)建立合理的评价指标体系
网络学习绩效评价是一个动态的、循环往复不断进行的过程,强调多元化的评价方法,应建立一个科学完善的评价指标体系来保障评价的实施。整个评价指标体系的构建流程为确定评价指标、明确评价标准、确定指标权重、评价的实施、进行实证研究。
1.评价指标的确定。评价指标是对被评对象的各个成分特征的一种反映。每个被认为重要的评价方面、元素都可能成为一个评价指标,指标项由大到小,从若干层次上逐级分解,可分解为一级指标,一级指标再分解为若干个二级指标等等,被评对象所分解出的各指标共同构成了一个完整的评价指标体系。
对于网络学习绩效的评价,各研究者选取评价指标具有一定的差异性,同时也具有共性。如左明章基于多元智能理论提出教育信息化环境中,通过图表和文字档案、网站、博客、论坛记录、课件、摄影展等形式的作品评价学生的学习绩效[2];戴锡莹提出包括可行性、反应、认知迁移、行为迁移、组织成效五个层次的评估学习绩效的模式[3];杨碧云从学习行为、学习者满意度、学习结果三个维度构建了数字化学习环境下终身学习者的学习绩效评价体系[4];王淑娟提出从知识与技能的应用、学习风格、学习态度、综合能力等四个领域针对成人职业教育的学习绩效进行评价[5];石娟提出基于问题的网络协作知识建构学习绩效评价体系,从学习行为、协作能力、智慧制品三个方面评价学习者学习绩效[6];陈晶,李迎春将学习绩效评价引入高等教育,提出了以舆论环境因素、管理制度因素、教师授课因素和学生学习因素等为基本框架的4大类16个指标组成的高等院校学生学习绩效评价指标体系,对改进测度学生学习效果的方法具有一定的理论指导意义[7]。
通过对文献的研究归纳发现,尽管各学者从不同角度选取学习绩效评价指标,具有差异性,但大部分学者都选取了学习者满意度、学习结果和学习行为作为评价指标来评价网络学习者的绩效。因此可将学习者满意度、学习结果和学习行为作为网络学习绩效评价的一级指标,一级指标确定后,通过结构化的分解方法细化出二级指标、三级指标,依次构建树状结构的评价指标体系。
2.评价标准的明确。对于每一评价指标,网络学习绩效的质量如何,量规中都要有具体的描述,这些具体的描述即评价标准,这些描述往往组成由好到差或由差到好的一个序列。指标项的评价标准通常会采用定量评价或定性评价进行确立:定性评价是指评价者根据其价值观对研究成果进行评价;定量评价是指评价者根据数据对研究成果进行具体精细的评价。根据前文确立的评价指标,网络学习绩效的评价标准应采用定性与定量相结合的方法来确立。
3.指标权重。权重表明各评价指标的重要性,通常用字母W表示。对各评价指标的权重进行合理的设置不但可以帮助有效地进行学习评价,还可以引导学生把握好努力的方向,起到目标导向的作用。对于网络学习绩效评价,可以采用层次分析法来赋权。层次分析法是美国运筹学家撒汀等人于20世纪70年代提出的对复杂问题作出决策的一种简明有效的方法,层次分析法的优点是可以将定性分析与定量分析相结合。层次分析法可分为以下四个步骤:第一步,明确问题,建立层次结构;第二步,构造判断矩阵;第三步,层次单排序及其一致性检验;第四步,层次总排序及其组合一致性检验。
(二)评价的实施及信息采集
在网络学习绩效评价的实施过程中,过程性评价是整个评价过程的重点和难点,需要收集学生在学习过程中的评价信息,如学生在思考问题,探究问题,解决问题的过程中的记录。可利用Blog系统作为过程性评价的主要实施平台,管理者通过对学生个体日志、发布的作品、讨论等相关信息的采集、分析、整理,有助于对学生的整个学习过程进行多维度的评价,使学习者看到自己的发展轨迹,更好地确定学习任务,促进学习效能。
(三)进行实证研究
在构建了完整的评价指标体系后,应将所构建的评价指标体系应用于具体的网络学习平台,进行实证研究,以验证所构建评价指标体系的合理性、科学性及有效性,并根据实证研究反馈回的信息对评价指标体系进行调整与修改,以期对网络学习绩效做出更全面、更科学的评价,有效提高网络学习质量,进而促进网络学习的持续和有效发展。
参考文献:
[1]中国互联网络发展状况统计报告[DB/OL].http://news.mydrivers.com/1/381/381898.htm.
[2]左明章,易凌云.教育信息化绩效评判中学生学习绩效的评价研究——基于多元智能理论的学生学习绩效评价[J].中国电化教育,2006,(11):17-19.
[3]戴锡登,孙跃东,李岩.基于Kirkpatrick评估模式的网络学习绩效评价模式设计[J].中国远程教育,2009,(01):4548.
[4]杨碧云.数字化学习环境下终身学习者绩效评价指标体系研究[D].上海外国语大学,2012.
[5]王淑娟.远程职业教育学习绩效评价的探索[J].现代远距离教育,2008,(06):6-8.
[6]石娟.基于问题的web-CKB学习绩效评价研究[J].中国远程教育,2011,(11):17-21,95.
[7]陈晶,李迎春,姜国刚.高校学生学习绩效测度方法研究[J].佳木斯大学社会科学学报2007,(06):101-102.