高校线上教学质量评价存在的问题和改进因素分析
2021-12-04卢春丽
卢春丽
(龙岩学院,福建 龙岩 364102)
一、引言
2019年底新冠肺炎疫情暴发,举国上下同心协力,攻克疫情,取得了极为显著的成果,新冠疫情虽然造成全国高校一再延期开学,但并未阻挡师生教与学的脚步。2020年2月开始,全国高校陆续开展线上教学,3月份的统计数据显示,全国近 1 400所高校的70万教师进行在线教学,在线开设课程约120万门次,参加在线学习的学生超过2亿人次[1]。总体上看,在线教学组织有序,平台平稳运行,平台资源充足、服务管理到位,教学效果基本达到预期,师生参与度、满意度均较高。
线上教学就是借助互联网提供的各类平台,依托多媒体、人工智能等现代信息技术进行教与学互动的教育方式,是互联网技术发展与高等教育教学改革相结合的必然产物[2]。本次大规模线上教学既是课堂教学和信息技术深度融合的大演练,也是未来教学模式改革的切入点,是在教育教学信息化的背景下,积极推进“互联网+教育”“人工智能+教育”的一个史无前例的壮举。
大规模的线上教学已开展一学期,为保障线上教学的质量和效果,各高校也在陆续开展线上教学质量调查与反馈。在CNKI数据库平台中,以“大数据+线上教学+质量评价”或以“线上教学+质量评价”为主题词进行高级检索到的文献仅7篇。因线上教学刚兴起,这方面的研究在数量上较少。在内容上,主要探讨新时期线上教学质量评价体系的构建,或者以某课程为例,探讨线上线下混合式课程的教学质量评价体系[3],尚缺乏对线上教学质量评价体系存在问题的总结分析。新一轮“本科高校教学质量与教学改革工程”已经启动,这进一步证实了本科教学质量对高校的重要性。高校教师的教学质量是整个教学的基本保证,科学精准地评价当前高校教师线上教学质量既能识别教师的工作质量,又能充分调动教师的积极性,对促进教师的自我提高、加强师资队伍建设、提高教育教学质量及高校培养合格人才方面具有积极的促进作用。为此,本研究以当前高校线上教学质量评价中存在的问题为出发点,提出针对性的改进建议,以促进线上教学质量的提升,为高校线上教学质量管理提供参考。
二、线上教学质量评价存在的主要问题
(一)线上教学评价体系和标准有待进一步完善
评价体系是教学质量评价有效运行的基本保证。当前高校线下教学质量评价已经建立了较为成熟的体系,如教学工作标准、课堂教学管理办法、课堂教学质量评价等。然而,对于教师的线上备课、上课、师生互动、作业的布置和批改,学生的参与,完成作业等环节的质量标准暂未明确,忽略了学习效果评价,评“教”过多而评“学”较少。线上教学评价的内容应包括与教师线上教学有关的一切活动,而当前高校线上教学的评价内容较为单一、操作定义不强、较难衡量,个性化、多元化的评价标准尚未建立。与此同时,从目前高校的线上教学评价体系来看,评价方式往往采用“一表法”,借助多用途评价表一刀切、统一化,不分学科、专业、课程,忽略了教学内容的丰富性以及不同学科特点的多样性,也忽略了高校育人的真正目的。此外,从统计学角度上说,评价的指标应具有较为良好的信度和效度。
(二)教学评价没有充分体现以人为本的指导思想
线上教学质量评价标准是自上而下制定的,作为评价对象的教师以及评价主体的学生没机会参与评价标准的制定,而评价标准的制定和评价体系的构建主要是管理者参与,忽略了任课教师和学生,没有充分体现以人为本的指导思想和理念。线上教学质量评价结果的工具性价值使教学管理部门和学生不得不“为评价而评价”,教师不得不“为评价而教学”[4]。评价往往流于形式,走过场,忽视了评价对于提升线上教学效果的作用。此外,现行的线上教学评价指标体系在评价的内容上更多关注教师“教”的水平和质量,忽视学生“学”的效果,以“教”为中心的评价理念仍占主导,学生处于被动地位,他们在线上学习中的心理状态、情感表现、自主学习和自我管理能力等方面并未受到充分的重视和关注。
(三)线上教学质量评价的相关制度尚未健全
当前课堂教学质量评价制度已逐步建立完善,而线上教学质量评价尚缺乏相应的配套制度,如线上教学质量评价体系的监督制度、教师线上教学考核制度、督导线上听评课制度、学生在线学习考核制度、线上教学效果评价制度等,这方面的直接性作用较弱,尚未引起足够的重视。线上教学已开展一学期,但多数高校尚未深入研究和重新制定适用于线上教学的质量评价制度,一些高校仍沿用原有的评价制度或者仅在原有的基础上稍作修改,未经过充分研究和探讨即用于开展线上评教工作,致使师生对线上教学质量评价的认识不到位,主动参与的意识不强。再者,现阶段的教学质量评价基本上是课程间的纵向对比,缺乏同一门课程不同教师授课水平的横向比较,缺少作为参照对象的评估,评价结果的准确度不够。
(四)评价方法忽视了教师的自我评价
教师的自我评价作为自我反思的一种体现,对于提升线上教学质量、促进教师专业成长具有不可替代的推动作用。然而,当前线上教学评价方法多采用学生评价、督导评价、同行评价等形式,忽视了教师内在的主体价值取向、成就动机、个性和创造力等,忽略了教师的自我评价。虽然线上教学的优势在于任课老师可以随时回放课程视频,重新审视自身的授课情况,但学校没有硬性要求,评价指标体系中也缺乏相应的教师自我评价标准和要求,忽略教师自我评价这一程序,多数教师也就放松了要求,上完一节过一节。评价方法缺乏教师的自我评价,影响了教师的积极性,较难客观真实地反映教师的线上教学质量。
(五)学生评教的积极性不够,缺乏对评教工作的合理认识
以龙岩学院为例,当前线上教学质量评价已经开展了三次,虽然教学管理人员和任课教师都在持续地推动,但随着评教次数的增多,学生的参评率依旧持续走低,评教的积极性逐渐下降。对于学生而言,评教的目的是希望授课教师能改进教学方式,然而评教结果未向学生公布,忽视了学生的知情权,学生仅仅只是参与了评教的过程,对于评教的结果一无所知。教师也未就评教的结果及时与学生进行沟通,易导致学生丧失评教的兴趣,挫伤学生评教的积极性。
由于缺乏较为有效的监督机制,学生评教主体意识不强,责任意识较低,评教过程中的随意性较大,弃评、乱评、找人代评的现象时有发生,学生往往根据对教师的个人喜好、师生关系的亲疏、教师对学生的要求高低以及对课程的喜好等进行评价[5],缺乏对评教工作的合理认识,导致评教结果的真实性受到影响。
(六)评教结果的反馈不全面,缺乏后续的整改跟踪机制
首先,评教结果的计算方法较为局限,仅通过加权求和得出总分,较少采用数据分析软件进行深入分析,影响评教结果的准确性。其次,反馈的信息不全面,评教的结果经过多层处理,反馈到教师时只有评教的总分和排名等定量的结果,而细节信息不清晰,缺乏定性的评价结果,提出主观性评价意见和建设性建议的学生较少,对教师改进教学的引导性不强,在一定程度上影响了线上教学效果的提升[6]。再次,在改进教学方面,相关的评价和监督机制明显滞后,缺乏后续的整改跟踪机制,评教出现的问题是否整改到位尚未进行及时的跟踪,教师线上教学的动态发展难以把握。
(七)督导参与线上教学质量监控的职能尚未充分发挥
线上教学的开展对学校的教学管理体系和教学监控机制提出了新要求。与传统的课堂教学不同,线上教学的师生处于空间分离状态,缺乏面对面的交流和互动。与此同时,线上学习的效果还受其它因素影响,如线上教学资源和教师教学水平的吸引力、线上教学平台的稳定性和便捷性、网络的通畅性、学生投入的时间和精力等[7]。因此,相比较课堂教学,线上教学质量更需得到有效的监控。然而,当前线上教学秩序和线上学习效果如何有效监控尚缺乏探讨,如何根据在线学习的特点进一步更新督导的线上监督职能还有待探索。此外,当前高校对于线上教学质量评价在操作和实施方面的监督力度不够,这也在一定程度上影响了评价结果的真实性。
(八)线上教学评价产生的大数据并未进行合理运用
当前线上教学质量评价产生的数据众多,以龙岩学院为例,线上教学以来学校开展了3次教学评价共产生226 570条评价数据。与此同时,线上教学平台以强大数据存储功能保存了师生在教学平台上进行的所有活动,如教师提交的音视频、课件、授课过程、学生参与讨论、互动评价、上传作业、教师答疑等信息,随着教与学的不断发展,会产生新的实时数据,数据的量和面都会逐渐增加。然而对于这些大数据,相关的教学管理部门仅停留在简单的查询、反馈和存储的管理工作上,对于长期以来累积的大量数据,并未进行深入挖掘与利用。随着信息化社会的不断进步,如何借助大数据挖掘与分析技术,从线上教学平台和教学评价大数据中挖掘出更多有价值的信息,使其更好地服务于线上教学评价的改革和线上教学质量的提升,也是当前应解决的问题。
三、线上教学质量评价考量因素分析
针对线上教学质量评价存在的问题,为了更加科学和客观地评价高校教师线上教学质量,应从以下角度进行改进:完善评价体系、更新评价理念、完善评价相关制度、增设教师自我评价、提升学生评价积极性、加强评价后续的整改和跟踪、强化监督职能、应用大数据的评价方法等。
(一)优化线上评教指标体系,确定科学的多元化评价方法
以龙岩学院为例,当前线上教学已经进行了三次评教,根据评教的结果,教学管理部门可以结合历史评教数据,通过调查、访谈的形式,了解学生、教师以及督导等评教主体对线上评价指标体系的建议,根据反馈的意见,通过探索性因素分析、信效度检验,从评价的指标、维度、观测点、评价主体等方面进一步优化线上教学评价的指标体系,从教学(学习)资源的准备、课程设计、教学组织、教学态度、教学水平、学习效果等方面制定线上教学质量评价标准。强化学习效果评价,及时建立以知识、能力和素质为主要内容的学习效果评价指标,确定知识、能力和素质等因素在学习效果评价中的比重,充分利用平台系统的测试功能,对学生的线上学习效果进行多种形式、多种内容的评估,实现对线上教学质量的跟踪、诊断和反馈。同时,充分考虑不同学科特点,对其共性的内容设置同一标准,对于非共性的内容,应允许标准的不同,如在制定评教指标时可以先设定基本项目,各学科在此基础上增设不同的指标,设计出因学科或课程的差异而不同的评教指标体系。此外,指标的内容上应赋予更多的操作性定义,符合学生的认知能力和理解水平,并通过李克特等级的方式按等级计分[8],让评价者有一个更统一的标准去评价。
确定科学合理的多元化评价方法和评价权重。多元化评价方法依赖于多元化的评价主体,教学评价主体包括学生评价、督导评价和同行评价,在此基础上增设教师自我评价,使评价主体更加多元化,评价的结果也具有更理想的效度。此外,还应合理分配评价方法的权重系数。教师的自我评价可以指导其及时调整教学方法,由于其主观性,评价权重不宜过大。由于覆盖面不全,缺乏综合比较的评价结果,教学督导的权重应略小一些。同行教师对教学互动内容较熟悉,对线上教学质量评价结果理应较为准确。但是,在评价过程中,受晋升、评优评先等因素的影响,也存在一些主观因素,可以适当降低同行评价的权重系数。在教学质量评价中,学生的话语权最大,因为学生是教学的直接对象,学生的权重系数最大。
合理确定多元化的评价内容和要素,评价的内容和权重应该基于不同的评价主体而设计。具体而言,教师行为规范、教学态度、教师教学能力和学生的学习成果等相关内容可以作为教师的自我评价指标。教师的教学态度、作业批改反馈、问答辅导、学习效果等方面可以作为学生的评价指标。可以采用教学目标、教学方法、教学进度、课堂互动、教学效果等作为督导的评价指标。把衡量教学质量、教学内容、教学方法、教材规范、教学活动积极性、授课的专业性等作为同行的评价指标。根据学科的特点,通过多元化的评价主体,实现对教师线上教学进行全面、多维和综合的评价。
(二)更新线上教学评价理念,树立“以人为本”思想
首先,要求教学管理部门构建以人为本的评教制度,让任课教师充分参与线上教学质量评价指标体系的建构,将其纳入院系教工大会、系部会议、教师代表座谈会中的重点讨论内容,这种公开透明的做法可以让任课教师清楚本课程的教学目标和要求,在课前能对指标体系有一个较为清晰的认识,在备课、设计教学时能做到心中有数,在线上教学中也能牢牢把握教学的方向,充分体现“以人为本”的指导思想。其次,要求任课教师树立以学生为主体、以学生的需求和成才为导向的教学理念,构建以“学”为中心的课堂。与线下教学不同,线上教学要求任课教师课前与学生建立联系,发布课程教学进度,提前向学生推送音频、视频等学习资料,设置针对性强的课前预习任务,做好课前网络设备调试等准备工作,课中充分利用平台提供的讨论区、QQ或微信群等网络交流平台,加强与学生的互动和交流,课后通过布置作业、答疑等引导学生主动学习,增强学生的自主性,通过对学生学习行为数据分析及时检测学生的学习效果,以此促进下一次的教学。再次,线上教学质量评价指标体系的构建可以适当吸纳学生参与,通过线上平台、问卷调查、访谈等方式,让学生充分参与到评价指标体系的建构上来,及时收集学生对评价体系的看法和建议,并合理采纳,充分体现出评价的主体地位和“以人为本”的思想。此外,评价体系中不仅设有教师自我评价,还可以增设学生自我评价、学生相互评价,促进学生自我反思和培养自主学习能力。
(三)进一步完善线上教学质量评价的相关制度
高校应切实履行线上教学管理职能,建立适应线上教学的管理机制,发挥发展性评价的柔性策略和奖惩性评价的刚性策略的最大效用,不断加强线上教学质量评价相关制度的建设。高校相关部门应出台相应的教师线上教学质量评价管理办法,形成常态化的线上教学评价制度,并贯穿线上教学全过程,为教师线上教学质量评价体系、评价标准和运行机制提供有力的制度保障。线上教学在时间和精力上都需高度投入,高校相关行政部门应及时配套优质的激励制度,可以把教师开展线上教学质量的优劣与教师的切身利益息息相关的年度考核、绩效考核、聘期考核、职称评聘、评优评先等相关联[9],切实将评教的结果提升到一定的高度,鼓励教师重视线上教学。同时,教学管理部门应积极配合线上课程的推进工作,制定合理规范、适合本校实际的线上教学管理制度,对于评教中出现的共性问题,积极鼓励教师同行间进行线上教学研讨,以及线下的反思。建立评教的对比机制,对于“一课多人”的课程可开展横向评教,促使教师在竞争中不断提升教学质量。
(四)引导教师积极地自我反思,重视教师的自我评价
当前在线上教学为主的形势下,自我反思具有特殊的意义,对于在线授课的教师而言,通过反思,可以让他们感受整体授课过程,包括教师的教学态度、学生的学习表现、学生的课堂参与和师生互动、生生互动等,并且在需要的时候引入变化,根据学生的需求调整教学内容和教学策略。自我反思是在线教学成功的主要调节工具。因此,每上完一次课,任课教师应充分利用线上教学平台的数据存储功能,及时回放上课过程记录,重新审视上课过程中的问题,反思解决和改进措施,进一步提升线上教学质量。与此同时,教学管理部门应将任课教师的自我评价也纳入评教主体中,并占有一定的权重,使教师在评价他人的同时也给自身的教学做一个合理的评价,引导教师正视优点,找出不足,促进线上教学质量的提升。
(五)加大宣传和教育,提升学生评教的积极性
评教前应做好评教的宣传和教育,如通过安排讲座活动,利用高校官网、微信、校园论坛等途径和渠道,宣传、引导学生正确认识评教的意义,增强学生的主体意识和责任感。评教前,应详细讲解评教指标的内容和定义,要求学生客观公正地评分;评教中,对于学生出现的疑问应及时予以解答;评教后的结果应及时反馈给学生,让学生享受知情权,使学生在评教中能真正受益,让学生感觉评教没有白费,通过评教,教师在教学方法等方面有所改善。与此同时,积极创造多种方法如召开师生交流会、座谈会,让学生参与到线上课程的授课、评教指标的制定,有目的地培养学生的主体意识和责任意识,提升学生评教的积极性。
(六)加强评教后的整改跟踪,落实整改到位
首先,评教结果的统计应在剔除极端值、平衡有效数据的基础上运用统计学软件做进一步的计算,以减少数据偏差,提高数据的准确度。其次,对于评教结果的反馈在内容上要详细具体,包含定量和定性的结果,适当增设开放性问题,获取更多的教学反馈信息。在程序上设置复议程序,如果学生评教结果与预期不同,教师可以提出申诉意见,学校管理部门进行充分调查,分析原因。对于学生提出的合理建议,任课老师和管理部门应及时分析原因,制定整改方案,根据建议逐条落实整改。同时,在整改的过程中,督导应及时深入一线课堂跟踪教师的整改情况,进一步落实评教后续的整改工作,充分发挥评教的诊断和改进功能,形成教、学、管同向合力,切实提升线上教学质量,促进线上教学质量的持续改进。
(七)强化督导职能,确保评教和整改工作顺利开展
完善监督机制,进一步修订教学督导的线上教学监督职责。要求教学督导及时转变观念、树立“以人为本”的督导理念,创新线上督导形式,充分利用互联网信息技术、线上监控和平台数据分析等手段替代常规督导,深入线上平台班级,听取一线教师的线上教学情况,重点检查教师“以学生为中心”理念的落实情况,关注学生的课堂参与度,师生互动情况等,让督导科学评教而非经验评教,以开放、积极的态度为线上教学出谋划策。同时,加强对评价体系的构建和师生评价过程的监督,确保评价指标体系的科学合理,保障学生评教、同行评教等数据的真实性。此外,加强对评教后期整改的跟踪,重点做好评教中问题较为突出的教师的跟踪督导和整改帮扶,完善评教整改的跟踪机制,使评教的结果真正落到实处。
(八)充分利用大数据评价线上教学质量
高校应充分利用线上教学平台以及评教产生的大数据,创造性地开展线上教学质量评价。Leverett等人认为“教学质量在很大程度上在于反馈[10]。及时成立包含教学管理人员、教学督导、一线教师、教研室主任等为主体的线上教学质量监控队伍,通过平台的强大功能,收集师生在平台上的数据信息。在此基础上,通过分类或组合分析、个别分析等方法对大量的实时数据进行分析,能够准确把握教师的上课过程信息以及学生状态,获得大量有价值的教与学的信息,进一步指导教学。在教学目标和方案制定过程中,教师根据数据分析的结果调整教学目标和方案,也可以针对不同特点的个体或群体设计出个性化或小组式的教学方案。在线上教学过程中,充分根据学生的学习能力、学习需要和兴趣,设置适当的教学内容,选择适当的教学方法。在教学反馈和评价环节中,综合学生线上学习情况和不断更新的平台学习数据,对学生进行持续、全面的评价,丰富评价体系。与此同时,通过挖掘大数据的统计和分析报告,对于异常的数据及时反馈和处理,教学管理部门可以及时进行线上教学质量的监控。当前高校广泛采用线上教学的形势下,通过线上教学基本状态数据的采集,对教学质量的管理和监控将有很大帮助,进一步形成全过程、全员闭环的线上教学质量监控体系。
此外,线上教学质量评价主要依托网络进行,保证线上教学质量需要校领导、教学管理部门、教研室、教师、督导和学生等高度重视,相互配合,多方联动,齐抓共管,共同做好线上教学质量的评价和监控。加快学校线上教学评价平台和教学管理信息化建设,形成完善的线上教学质量监控体系,确保线上教学质量评价持续有效开展。与此同时,针对线上教学质量评价存在的问题,学校教务处、二级院系的相关教学管理部门应进一步完善线上教学质量评价的政策支持,创新教学管理,创造多种机会组织师生进行评教结果的讨论和交流。在改进教学方面,可以定期邀请名师开展讲座或者示范课、引导教师进入名师课堂进行观摩学习等,加强教师的线上教育技术的培训,帮助教师较快掌握有效的线上教学方法,提升线上教学效能感。研究表明,教师线上教学效能感越高,对教学的态度越积极,就越有信心把线上课程教好[11],学生的学习效果也更加明显。
四、线上教学评价实施与发展展望
教学质量始终是学校生存和发展的生命线,质量控制是高校自我管理、自我约束和自我发展的重要保证。高校要切实履行好提升线上教学质量的使命,通过确立线上教学质量评价体系改革的目标,充分借助平台产生的历史数据以及师生调查反馈的问题,采用统计学方法修订和完善线上教学质量评价体系。在评价主体上,以学生为主体,督导、教师和同行相结合的综合评价。在评价的指标维度上,科学设立一级指标、二级指标的内容和权重,通过等级评价的形式呈现给师生。在评价的内容上,主要从教学资源、课程设计、教学组织、教学态度、教学水平、学习效果等方面依据不同的主体进行针对性地设计。
在评价方法上,实行定性评价与定量评价相结合,过程评价与结果评价统筹兼顾,评“教”与评“学”相统一,评前动员和评后反馈紧密结合,构建更加完善的线上教学质量评价体系。同时,通过体系创新、理念创新、制度创新、方法创新和内容创新的线上教学质量评价体系,致力提升线上教学质量,更好地为管理部门监督线上教学质量和学习效果提供保障。
线上教学质量评价指标体系的改革和应用将使师生评教的积极性进一步提升,评教的结果更加真实准确,任课教师也将更加认同评价指标体系对于改进教学的促进作用。因此,当下高校亟须摆脱对传统模式的路径依赖,更新评价理念、把疫情危机对教学评价的不利影响转化为推动教学评价改革的机遇,通过评教推动教师改革教学方法,重塑教育教学形态,积极打造“线上金课”,切实提升人才培养质量。
总之,疫情期间带来的大规模线上教学,对高校来说既是一次挑战,也是一场推进新时代教育教学改革的契机,接下来要做的是逐步完善和优化线上教学质量评价体系,相关教学管理部门持续加强线上教学质量评价的研究、提升线上教学质量的研讨以及线上教学质量评价的改革,深入推进“课堂革命”“质量革命”和“评价革命”,真正做到教学以本为本、评价以人为本,促进高等教育高质量、可持续发展。