美国服务学习课程评估方案研究
——以波特兰州立大学为例
2020-12-25翁金芸
翁金芸
(汕头大学 高等教育科学研究所,广东 汕头 510563)
服务学习课程是一种承载着学分的教育体验,学生通过参加有组织的服务活动满足特定社区的需求,并通过反思服务活动获得对课程内容的深层理解、对学科的广泛认识以及促进其公民责任感的提升[1]。显然,课程的核心要素是学术提升、社区服务和结构性反思,且这三者贯穿于课程的始终。课程管理包括准备、实施、反思、评估等四个子过程。服务学习课程评估既较为科学的度量课程对学生、教师、社区合作伙伴的影响,又促进学生以课程为基础的学习转化为实践能力和各相关群体之间的信任和沟通,更发展一种“描述和记录服务学习的影响”的证据文化,且支持了服务学习的制度化。
由于服务学习蕴含着公益劳动和实践育人的功能,与近年来我国提倡加强劳动及实践教育的理念不谋而合,部分高校开始借鉴美国服务学习模式设置课程。但国内开设服务学习课程的高校范围有限,且课程发展相对缓慢,也出现课程质量参差不齐的现状。问题根源之一在于缺乏对课程的有效评估。
美国波特兰州立大学因自成立之日起始终贯彻“让知识服务城市”的宗旨和优质的服务学习项目跻身于《美国新闻与世界报道》全国最佳院校排名中的前列。PSU较早开始服务学习课程的探索且成效颇丰,尤为显著的是其课程评估策略和技术。为推动服务学习课程在国内高校的本土化的顺利开展,全面分析PSU服务学习课程的评估方案对提高我国实践教育质量意义重大。因此,本文以学生作为信息来源,尝试从评估目的、评估主体、评估原则和评估方法四个方面透析美国高校是如何评估其服务学习项目的指向对象(主要是参加此类课程的仍在学校就读的学生),以期对我国高校服务学习课程评估体系的建构与实施有所借鉴。
一、PSU服务学习课程评估的目的
服务学习课程作为PSU学生的必修通识课,其核心的课程目标是增强学生的沟通能力、提高学生的批判性思维、增加学生对多样性的理解和丰富学生的社会责任感,且这四个目标被编入跨学科的各个年级中。PSU几乎每年都对完成服务学习课程的学生进行调查,结果显示约有75%的学生可以实现这些核心目标[2]。但由于数据的匮乏,还未有足够的证据解释学生是如何提高这些目标领域的能力的。全面评估学生的课程学习成果可有效回应上述问题。此外,进行评估又能提供即时反馈,使项目负责人能够根据确定的需求和关注点进行更改。从长远看,评估的数据可以为项目规划、重新设计和实质性改进提供依据,进而提高学生的学习成果。再者,自21世纪初起,联邦政府为学校服务学习项目活动提供的资金越来越多的同时也需要高校展示具体的评估报告。可见,社会问责力度的深化加大了对持续的准确数据收集的需求。这些评估目的关系着服务学习课程的学生、教师和社区伙伴之间的高质量持续合作关系,指向课程质量的改善,其本质属于发展性的评价。
二、PSU服务学习课程评估的主体
评估主体是指由谁来主导评估活动,其成员的合理构成是评估质量的基本保障。在美国,服务学习课程评估可以由各类认证组织等校外机构组织,但PSU目前的评估活动主要还是由校方自己负责。PSU在校内设立一个服务学习课程中央办事处,或称之为服务学习项目研究办公室,它是依附于学校之下的相对独立评估机构。这个研究机构拥有经过合格培训的教师和工作人员,他们主要承担学生学习成效工具的开发、测量、数据的收集及分析等工作。虽然PSU的服务学习项目评估活动是学校自身主持的,但数据的收集却要与学生、教师和社区合作伙伴等项目利益相关者相互协作。有效的评估需要将评估客体聚集在一起,并从不同评估客体中挖掘项目学生的学习成果佐证材料的深度和广度,尽可能全面地评估服务学习课程对学生的影响,最终做出客观的评价。
三、PSU服务学习课程评估的原则
评估原则发挥着导向、基准、诊断等作用,是进行评估活动的基础[3]。根据PSU官网发布的服务学习课程评估手册内容显示,其评估原则共有十一条,且围绕评估的整个周期展开,即评估的目的、理念、组织过程及结果运用等方面。其中具有代表性的原则是:评估始于人们真正关心的教育价值、评估只有在明确的目标和目的时才有效、评估是持续和系统的、评估是一个协作过程、有效的评估是透明的且包括反馈环节、评估可以向学生、社区和公众展示校方的责任和义务[4]。PSU服务学习课程评估的核心目的是提高学生的学习收获,进而推动课程质量的提高,评估的立足点始终是学生。针对不同的服务学习项目,评估的原则差异甚微。但它建立一个清晰的愿景,指出课程评估活动中什么是重要的,为教师提供如何帮助学生实现课程核心目标的路线图。通过评估原则,可在以下方面有所作为:审查现有的服务学习项目,以确定哪些方面需要进行修订以更好地实现课程目标;为服务学习课程的利益相关者提供基于原则性的建设性反馈和建议,有利于课程质量的不断提升;为新的服务学习项目开发提供方向和目标。
四、PSU服务学习课程评估的方法
出于不同的评估目的,各主体往往会使用不同的方法进行课程评估。本文围绕学生并将其作为信息来源进行探讨,故对PSU常使用的服务学习课程学生学习结果调查问卷、访谈、分析学生反思论文等三种评估方法进行剖析。经过研究发现,无论PSU采用何种评估方式,其评估的主要内容结合认知能力、专业技能、情感三个维度和沟通能力、批判性思维、多样性理解、社会责任感等课程核心目标融合设计课程的评估指标,具体内容见表1。更为重要的是,PSU往往从多客体角度出发收集学生的学习收获。如果从不同评估方法测量的内容角度看,可将这三种评估方法分为直接测量和间接测量。这些评估能有效测量学生的学习收获,使学生清楚知道自己学了什么知识,让教师明白课程教学哪些方面需要改进,是社区了解应提供什么教学资源支持。
调查问卷是评估活动中最常使用的也是最重要的间接评估方法之一。问卷调查旨在了解学生对他们在服务学习课程中收获的相关经验、面临的困惑、项目的态度,是评价学生态度、情感及其价值观念变化的有效方式。评估专家班塔(Banta)曾指出:“在学习结果评估中,没有某一种单一的测量是完全精确的;对同一测量目标进行多纬度测量会尽可能提高测量的精准性,并提高评估结论的可信度”[5]。PSU服务学习课程评估方法借鉴这一思想,在沟通能力、批判性思维、多样性理解和社会责任感等课程目标的基础上按认知能力、专业技能、情感三个维度将其细化,形成一套指标体系完善的服务学习课程学生学习成果调查问卷。问卷是基于完全不同意、不同意、中立、同意、完全同意的李克特五分制定,调查学生对服务学习项目的认同程度。具体的评估调查主题包括以下内容:社区服务与课程内容的相关性和社区服务与课程内容的相关性;自我能力及不足的认识和社区服务的自我贡献认识;沟通技能的增长情况和对沟通能力重要性的认识;对社区的了解及认识;对自己感兴趣职业方向的认识;对社区服务的态度及看法;对种族、文化、阶级、性别、能力等差异的理解等。此外,问卷还提供人口学统计变量,包括学生的种族背景、年龄、性别、年级等。课程评估工作者利用SPSS软件对比服务前后学生学习经验情况,通过描述性统计、x2分布、方差分析和因子分析等方式衡量学生学习成长[6]。使用问卷方式这种标准化的形式进行调查,收集到的数据可以对所有的服务性学习课程进行调查,也方便教师了解学生对服务学习的看法及其课程对他们的影响。但问卷也存在致命性的缺点,因为它所反应出来的结果都是出自学生的自我陈述,带有一定的主观色彩。
为弥补调查问卷的缺点,除了依靠数理统计的数据来分析学生的学习收获外,PSU还使用访谈的方式来完善评估资料的收集。通过访谈可以提供有关学生实践经历变化材料、深入了解课程中发生的互动数据、聆听学生在社区服务中的声音,从而为提高课程质量提供坚实而具体的建议。从访谈中获得的讯息是调查问卷无法捕捉到的,学生们有机会讨论和反思他们在社区活动中获得的技能发展,并提供许多不同的具体例子。表2是PSU服务学习课程学生访谈提纲的主要内容。
反思是服务学习课程的鲜明特色,贯穿于课程的始末,参加服务项目的学生被要求在课程实施的所有环节都要对自我在课程中的收获进行反思,且常以日记、论文等形式将反思内容记录下来。在这些论文中,学生们必须用自己的话描述他们所学到的关于沟通、批判性思维、社会责任和多样性理解的认识;描述这些课程是如何改变他们的;说明这些课程的哪些教学特点可以支持他们的学习。PSU对服务学习项目学生的论文进行分析也是补充检测学生学习收获的有效手段之一。为使这项研究工作的顺利开展,服务学习项目研究办公室以自愿原则发动若干名教师参加此项工作,规定每名教师一定要研读所有的反思论文,获取论文的最初感受,记录下他们对论文的想法。然后,每个教师需要深入体会论文内涵,回答反思论文背后隐含的意义,并根据具体的内容对应评估指标的维度进行匹配,归纳出分析的主题词。此外,教师也要将分析的主题词进行分类,寻找它们之间的关系,同时对它们进一步分析和编码,直到可以连贯和全面分析主题词,最终确定课程目标的实现程度。
表1 PSU服务学习课程学生学习成果评价矩阵
表2 PSU服务学习课程学生访谈提纲
五、特点与启示
课程评估方案回答了为什么要对服务学习项目进行评估、由谁来进行评估、评估应遵循什么原则、怎么评估等问题,是一个评价系统的物质外壳。只有评估方案科学合理,评估的结果才可能具有较高的信效度。基于PSU服务学习课程评估实施情况分析,可以总结归纳出服务学习课程在学生学习成果评估上具有以下几个特点和可供参考的启示:
(一)评估目的的发展性
PSU在对参与服务学习课程的学生学习成果评估时,其目的具有鲜明的“回应问责”和“质量改进”的双重属性。“回应问责”是为向社会大众证明在学生收获、社区服务等上的效用,以确保得到他们的继续支持,是保证课程朝着预期目标前进的举措。另外,评估还特别强调自身在给教师带来课程反馈的同时可以推动学生学习收获增加。就评估目的来看,评估活动并非加重教师的教学任务,而是想通过评估的方式在保障服务项目资源的基础上推动课程质量的改进和学生学习能力的提升。
(二)评估主体的专业性
与其他课程类似,美国的许多高校都倾向于让负责服务学习课程的教师直接参与评估工作。虽然该课程的教师可更为方便和直接对学生的学习进行评价,但这毕竟会带有一定的主观色彩,且教师无法设计出完整科学的评估工具。相比之下,PSU有组织地设立专门的课程研究部门,配备经过考核合格的专业人员对服务学习项目的学生进行评估,可实现判断的专业、公正和客观。更为重要的是,有专门负责的机构可以将评估数据进行全面细致的分析、分类归档保存。随着大数据时代的到来,研究机构也开始使用电子档案的形式来记录学生的学习情况,这不仅扩大了存储容量,且有益于评估的检索和查询。从纵向上可以对比每一年参加此类课程学生的学习成效,横向上可以分析每一年级学生学习效果的差异,为课程质量改进提供更凸显绩效性的证据。
(三)评估方法的多元性
由于每一种评估方法都存在一定的弊端,采用多样化的评估方法是PSU服务学习课程评估科学化的保证。从现有的课程评估研究报告来看,服务学习课程评估多采用直接评价与间接评价相结合的方式,也多使用问卷、访谈和分析学生反思论文的方法。课程评估注重通过利用这些方法收集学生的认知和情感等行为变化数据并从不同评估对象的访谈中考察学生内在心理状态的数据。显然,课程评估时既关注学生问卷自评的数据,又重视来自教师和社区人员的他评资料。在问卷收集客观数据的基础上,辅之以访谈和分析学生反思论文等形式进行更深入的价值判断。就如沃克维(J.Fredericks Volkwein)说的,“评估就是通过定量和定性的方法分析相关证据的行为,目的是检验其是否与目标保持一致。”[7]如此,增进课程评估结果的信效度,确定目前的课程开展方式是否有效,是否能够满足预设的课程目标。
(四)评估过程的持续性
学习成果评估不是对学生掌握知识程度的一次性检测,也不是简单地由一系列调查堆砌而成[8],而是以改进学生学习为目标,由精心设计和符合课程目标的一系列持续不断的活动构成。由于服务学习项目的动态性,使学生学习成果的分析更具有挑战性。它既包括学生社区服务行为发生前的学习结果预设,也包括学生社区服务行为发生时学习情况以及社区服务行为完成后的结果检验,而这些内容又都和学习成果评估的运行密切相连。显然,这是一个持续循环的过程。评估者需不断收集、分析和解释学生的数据外,还要把评估结果应用于课程的重新调整中,更要在下一轮的评估活动中测量其变化,以达到提升学生学习和改进课程质量的评估目的。实际上,评估过程建立起了“评价—反馈—改进”的课程质量持续改进机制。