美国公立高校自愿问责系统的发展现状及未来展望*
2017-01-09谢梅,李强
谢 梅,李 强
(中国矿业大学,江苏 徐州 221116)
美国公立高校自愿问责系统的发展现状及未来展望*
谢 梅,李 强
(中国矿业大学,江苏 徐州 221116)
美国公立高校自愿问责系统(VSA)已成功运行9年,净价计算器、学生成就与发展比率、学生学习效果三项信息代表了其对美国高等教育绩效问责实践的重要贡献。2015年11月推出的大学肖像一瞥工具,可以方便用户选择感兴趣的主题设计。VSA在发展中也面临着各种挑战,管理层正积极采取措施努力应对,以期不断扩大影响力,更好地发挥其连接公众与高校的信息沟通桥梁作用。
美国;高等院校;自愿问责系统;绩效问责
一、“自愿问责系统”的产生背景
随着高等教育入学率的不断上升、政府财政紧缩和毕业率的持续走低,美国社会对高等教育绩效问责的呼声越来越高,高等学校也面临着提高学生学习效果和办学业绩透明化的挑战。2005年,布什总统当政时期,时任教育部长玛格丽特·斯佩林斯(Margaret Spellings)号召成立了高等教育的未来委员会(Commission on the Future of Higher Education),该委员会将工作的重点聚焦在大学的准入、学生的可负担性、高等教育的质量标准和绩效问责四个方面,使公众的目光转向了透明而具有可比性的高等教育报告,并号召学校创建一个问责与透明的高等教育文化氛围,使人们能够进入大学、上得起大学并不断提高教育质量和创新能力。
此后,许多高等教育界人士担心联邦政府会不顾高校的使命和学生类型的差异,而使用统一的方法来评价大学的可负担性和办学质量。2007年,作为对斯佩林斯委员会所提议的高等教育绩效问责的回应,美国州立学院和大学协会(American Association of State Colleges and Universities,简称AASCU)与公立和赠地大学协会(Association of Public and Land-grant Universities,简称APLU)共同倡议建立了面向公立四年制高校的自愿问责系统(Voluntary System of Accountability,简称VSA),这是一个基于互联网的网络绩效报告平台。VSA的初始设立目标有三个:一是为公立高校提供展示其信息透明和问责的平台;二是为学生、家长、高中顾问等其他利益相关者提供高校的相关信息;三是通过原创性研究和合作与交流论坛为高校评价和报告学生的学习效果提供支持。为了实现上述目标,由大学校长、教务长和其他管理人员共同组成的工作组创建了大学肖像(College Portrait)——一个交流本科生学习体验的网络绩效报告模板,它可以向学生、家长、政策制定者、高校教职员工及其他利益相关者提供直观、灵活且具有可比性的本科生学习体验信息。
成立初期,VSA得到了卢米纳基金会(Lumina Foundation)的资助,2010年起开始依靠向参与高校收取会费来维持运转,从而实现了财务独立[1]。VSA的日常监管由执行董事负责,执行董事对VSA监督委员会负责。VSA监督委员会是由APLU和AASCU的董事会联合组成的子委员会,监督委员会成员由APLU和AASCU从VSA参与高校的代表中任命产生,委员会主席的任期为两年,由APLU和AASCU的主席轮流担任[2]。
二、“自愿问责系统”的运行现状
当前,VSA在监督委员会的领导下始终秉承其初始设立目标并不断发展成熟。在经历了2011年 12月和2015年8月的两次网站全面改版后,大学肖像界面的布局更加合理,可以对不同高校的各项指标和成本信息进行比较,从而更加直观和灵活地反映高等教育机构的办学情况。VSA大学肖像目前已融入加利福尼亚、明尼苏达、密苏里、北卡罗来纳等州的高等教育问责体系,其网站访问流量逐年稳步上升,年平均用户访问量超过75万人次、访问页面超过300万个[3]。
大学肖像页面主要展示了高校9个方面的信息,包括学生情况、招生状况、大学成本和财务援助情况等(见表1)。
表1:大学肖像页面的信息内容
在以上九方面信息中,净价计算器、学生成就与发展比率、学生学习效果三项信息代表了VSA对美国高等教育绩效问责实践的重要贡献。净价计算器可以帮助学生及家庭更为准确地估计大学就读的净价成本。研究表明,许多低收入家庭的学生放弃上大学的主要原因正是错误地高估了就学成本。学生成就与发展比率可以反映学生在整个高等教育系统中的学习进展与毕业情况,而不仅仅局限于某一所学校。学生学习效果主要体现在批判性思维(包含分析推理)和写作交流技巧两个方面,高校除了要报告自己如何来评价学生的学习效果以外,还要报告评估的管理过程及评价结果的用途。
除了以上信息外,高校还可以根据自身需要在“学生学习效果”版块添加补充信息。比如加州州立大学系统(California State University System)添加了“公益事业”信息[4]、佛罗里达农业和机械大学(Florida Agricultural&Mechanical University College Portrait)添加了“新生报名须知”(Information for Prospective Students)[5]、阿巴拉契亚州立大学(Appalachian State University)添加了“阿巴拉契亚州立大学新闻”等[6]。
2015年11月,VSA又推出了一项全新的交流工具——大学肖像一瞥(College Portrait At A Glance),它向VSA的参与高校提供了一个可以与用户方便交流的平台,用户可以根据自身需要量身定制大学肖像快照,并可以保存为PDF格式下载。大学肖像一瞥工具将原有的大学肖像数据划分成17个基础模块①,用户可以通过两种方式利用这17个基础模块来创建自己的肖像一瞥报告。第一种方法是先点击“使用肖像一瞥模板”按钮,然后从网站提供的5个默认主题②中任意选择其中的一个,再点击“创建我的肖像一瞥”按钮就可以自动生成一份包含4个基础模块的肖像一瞥报告了。在这种方法下,用户还可以根据自身需要对自动生成的4个模块内容进行替换,替换内容的选择范围是其他13个未纳入自动生成报告的基础模块。第二种方法是直接点击“创建我的肖像一瞥”按钮,然后就会出现17个基础模块列表,用户从中任意选择4个模块就可以创建一份肖像一瞥报告了。
三、“自愿问责系统”的发展困境与未来展望
(一)“自愿问责系统”的发展困境
1.参与高校数量下降、信息披露不完整
2008年是签署VSA参与协议的高峰年,现有成员中约有75%是在这一年签署的加入协议,截至2012年2月,已经有320所公立高校加入或者曾经加入VSA。但在此之后,相比新加入的高校而言,选择退出的高校数量更多,根据2016年3月底网站披露的信息,VSA共有成员高校260余所,比高峰时期减少约60所。在美国各州中,参与VSA的高校数量差异也比较大。截止2016年3月底,在公立四年制高校数量超过15所的州中,北卡罗来纳州的16所全部签署了加入协议,加利福尼亚州的36所中有64%签署了加入协议,德克萨斯州的46所中有50%签署了加入协议。然而,乔治亚州、弗吉尼亚州和华盛顿州则分别仅有4所、1所和1所高校签署加入协议,分别占该州有资格参与高校数量的15%、7%和6%。
2.不同信息板块的网页访问量差异显著
每所VSA成员高校都花费了大量的时间和资源来收集和列报大学肖像信息,那么这些信息的用户访问量如何,这是所有成员高校和利益相关方都十分关心的问题。由美国伊利诺伊斯大学和印第安纳大学合作成立的国家学习效果评估院(The National Institute for Learning Outcomes Assessment,简称NILOA)利用Google流量统计工具对2009年10月至2010年8月和2011年2月至2011年12月两个时间段的大学肖像网站的“学生学习效果”页面的访问流量和访问时间进行了分析,结果发现:近20%的高校的学生学习效果页面没有用户访问。总体来看,2011年学生学习效果页面的用户访问量非常少,更多的用户对大学成本信息感兴趣,在全部的1 157 520个被浏览的大学肖像页面中,有43%为大学成本信息页面,仅有1%为学生学习效果页面;另外,不同高校学生学习效果页面的访问时间差异显著,短则无人访问,长则可达17分钟。
3.学生学习效果评价工具存在争议
2016年以前,在“学生学习效果”的评价方面,VSA仅允许高校从以下四项评估工具中进行选择:一是美国大学入学考试机构(American College Test,简称ACT)组织的大学学业水平评估(Collegiate Assessment of Academic Proficiency,简称CAAP);二是教育援助委员会(Council for Aid to Education,简称CAE)组织的大学学习评估(Collegiate Learning Assessment,简称CLA/CLA+);三是美国教育考试服务中心(Educational Testing Service,简称ETS)组织的能力测试(Proficiency Profile,简称ETS PP);四是美国学院和大学协会(Association of American Colleges &Universities,简称AAC&U)制定的本科教育学习有效性评估标准(Valid Assessment of Learning in Undergraduate Education Rubrics,简 称 VALUE Rubrics)。ACT、CAE和ETS三个测试评价组织提供了与VSA学习效果相一致的标准化评估方法,并按照VSA的目标使用相同的方法来计算和展示不同高校的学生学习收获或增加值评分,评分共分为5个等级:远高于预期、高于预期、达到预期、低于预期和远低于预期[7]。AAC&U的VALUE Rubrics报告可以将入学新生和毕业班学生的评分结果放在同一张图中显示,从而可以展现出新生从入学到毕业的学习效果的变化情况。
然而,从VSA成立至今,各方对是否应用标准化工具来评估和报告学生的学习效果始终存在争议。高校的相关部门难以理解评价得分的含义,此外高校及公众对评价结果的可靠性和有效性、评估分值的解释以及评估结果对提高学生学习效果的作用存在质疑。有些高校认为标准化评估工具毫无价值,不但应用成本高、评估结果不能有效反映学生的学习效果,而且对于提升学习效果也没有什么帮助,他们采纳的目的仅仅是为了遵循VSA参与协议的要求,所以这些高校更希望VSA能够扩大评估工具的选择范围,而不仅仅局限于目前的四种。另外,有些高校对学校间选择参评学生样本的程序差异存在担忧,很多情况下,成员高校由于选择参评学生样本量过少而难以得出有意义的评价结果。
(二)“自愿问责系统”的未来展望
1.扩大影响力,增加参与高校的数量
作为一个自愿性项目,VSA的影响力在很大程度上取决于参与高校的集体声音,因而不断增加参与高校的数量对于扩大VSA的影响力及其未来健康发展至关重要。2009年,美国联邦高等教育政策发生了转移,高校与类似VSA的自愿性项目的合作意愿降低了。一些大学管理层认为危机已经解除,因此选择了退出,这导致VSA参与高校的数量从高峰时期的330所逐渐减少至目前的260余所。然而,2013年秋推出的一系列联邦消费者信息工具,如大学积分卡(College Scorecard)、经济援助购物单(Financial Aid Shopping Sheet)、高等教育机构评级系统(Postsecondary Institution Rating System,简 称PIRS),又再度强调了高等教育问责与透明的重要性,公立高校也再度面临着政府和公众问责的挑战。与此同时,APLU和AASCU的管理层正积极采取措施向公众证明类似VSA的集体行动项目的存在价值,VSA监督委员会也在同样致力于提高大学肖像与州和联邦政策对话的能力[8]。此外,还有教育专家建议VSA放开准入条件,使有意愿的公立和私立高校都能够加入。如果以上努力能够实现的话,VSA将能够在最大程度上发挥其影响力,并不断增加参与高校的数量。
2.增强与目标受众的有效沟通,提高网站访问量
对于多数用户来讲提供全套完整的大学肖像数据是没有必要的,为此VSA于2015年秋推出了大学肖像一瞥工具以方便用户根据自身的兴趣选择有价值的信息,但是目前用户在使用大学肖像一瞥工具时,每次仅允许从固定的17个模块中选择4个来创建大学肖像快照,这就限制了部分用户对较大容量信息的需求。因此,VSA未来在大学肖像一瞥工具的设计方面应更加灵活,适时根据用户的需求放松对模块选择数量的限制,并在现有17个模块的基础上,继续开发更加有价值的模块,同时告诉不同类型的用户,哪些模块提供的信息(尤其是学生学习效果)更加重要并详细解释其原因,以减少不同信息模块数据访问量的差距,进而提高VSA网站的整体用户访问量。
3.扩大学生学习效果评估工具的选择范围
为了回应各方对学生学习效果评估工具选择限制的争议,VSA于2012年邀请NILOA对学习效果的评估工具展开了调查,结果显示:反馈者提到最多的是AAC&U制定的VALUE rubrics工具和ETS组织的专业领域成就测评(Major Field Achievement Tests),分别占反馈比例的42%和38%。根据这次调查的建议,从2013年起VSA扩大了评估工具的选择范围,增加了AAC&U的VALUE Rubrics工具。然而,仅增加VALUE Rubrics工具对高校和高等教育专家而言依然不够,事实上在NILOA调查中,反馈者还提出了许多其他建议。比如NILOA提出增加毕业生调查、证书考试通过率、认证信息、专业水平评估和档案评价;VSA成员高校反映有价值的评估工具有证书考试、地区项目/专业评估、毕业生调查、毕业班学生调查、顶峰课程考试(Capstone Exams)、雇主调查和电子档案评价(E-Portfolios)等;另外,有23%的被调查者还建议增加专业水平评估,并根据学生的类型来报告评价的结果,如转学生、副学士学位学生和学士学位学生的情况等[9]。近期,VSA做出了一个颇具包容性的决定,自2015-2016学年起,对学生学习效果的评估工具将不再做特殊限制,而是推荐将NILOA的透明框架(Transparency Framework)作为首选的报告方式,这样高校将一改过去直接将学生学习效果的评价结果在大学肖像报告中列报的办法,而是给出一个超链接即可,通过点击这个链接用户可以连接到高校依据透明框架设计的学习效果评估信息页面,从而获取更加具有个性化的评估信息。为了与透明框架相协调,VSA正 在 启 动 卓 越 评 估 计 划(Excellence in Assessment Program),意在识别能够将各种校内学生学习效果评估实践进行有效整合,从而能够全面反映所有在校生学习效果的高校。校内评估实践除了包含VSA建议而非强制规定成员高校所采用的评估工具以外,还包括学校内部的各个院系基于学生、课程、专业或学位等不同层次开展的具有本校特色的评估活动。VSA希望通过放松对评估工具选择范围的限制,使高校能够依据自身的需要选择合适的评价工具来评估、报告和改善学生的学习效果,并以公众能够有效理解的方式进行信息的披露[10]。
注释:
①17个模块分别是:(1)平均贷款;(2)大一新生概况;(3)教职员工情况;(4)依据家庭收入划分的净价成本;(5)就学成本的定价;(6)学位授予;(7)学生承担多少费用;(8)首次入学学生的成就与发展情况;(9)转学生的成就与发展情况;(10)全日制学生的成就与发展情况;(11)学生年龄;(12)高年级学生的体验:与不同种族及信仰群体的交流情况;(13)高年级学生的体验:主动学习方面;(14)不同类型学生的总数;(15)不同性别、肤色学生的数量及占比;(16)不同性别、种族学生的数量及占比;(17)招生情况。
②这5个主题分别是:(1)校园多样性;(2)校园生活;(3)成本、援助与贷款;(4)学生档案;(5)学生成果。
[1]The VSA.VSA Dues Schedule[EB/OL]. http://www.collegeportraits.org/about/dues_schedule,2 013-01-01/2016-04-04.
[2]TheVSA.VSAGovernanceandOperations[EB/ OL].http://www.collegeportraits.org/about/governance,2013-01-01/2016-04-04.
[3][7]The VSA.History of the VSA[EB/OL]. http://www.collegeportraits.org/about/vsa_history,2013-01-01/2016-04-04.
[4]California State University Channel Islands. College Portrait[EB/OL].http://www.college portraits. org/CA/CSUCI,2013-01-01/2016-04-04.
[5]Florida Agricultural&Mechanical University. College Portrait[EB/OL].http://www.collegeportraits. org/FL/FAMU,2013-01-01/2016-04-04.
[6]Appalachian State University.College Portrait[EB/OL].http://www.collegeportraits.org/NC/Appalachian,2013-01-01/2016-04-04.
[8]Keller,C.M..Lessons from the Voluntary System of Accountability(VSA):The Intersection of Collective Action&Public Policy[J].Change:The Magazine of Higher Learning,2014,46(5):23-29.
[9]Jankowski,N.A.,Ikenberry,S.O.,Kinzie,J.,Kuh,G.D.,Shenoy,G.F.,Baker,G.R..Transparency &Accountability:An Evaluation of the VSA College Portrait Pilot[R].Urbana,IL:University of Illinois and Indiana University,National Institute for Learning Outcomes Assessment(NILOA),2012:14-15.
[10]Teri Hinds.Communicating Campus Assessment Work:The VSA EIADesignationProgram[EB/OL]. http://www.collegeportraits.org/about/webinars,2013-01-01/2015-10-12.
(责任编辑:李作章;责任校对:于 翔)
The Present Status and Future Prospect of Voluntary System of Accountability for American Public Higher Education Institutions
XIE Mei,LI Qiang
(China University of Mining and Technology,Xuzhou Jiangsu 221116)
The Voluntary System of Accountability for American 4-year public institutions has successfully run for 9 years.The net price calculator,student success and progress rate and student learning outcomes are 3 important contributions for the VSA to American higher education performance accountability practices.In November 2015,the new College Portraits AtA Glance feature is launched,and it can be used as a tool that users can easily choose their own topics of interest.It also faces many challenges in its development,the management is actively taking measures to deal with,so as to expend its influence and better play its role of acommunication bridge in connection with the public and universities.
America;higher education institutions;voluntary system of accountability;performance accountability
G649.1
A
1674-5485(2016)12-0114-05
江苏省高校哲学社会科学基金项目“江苏普通高校自愿问责系统研究”(2015SJD436)。
谢梅(1981-),女,江苏淮安人,中国矿业大学讲师,博士,主要从事高等学校经济与管理研究;李强(1965-),男,内蒙赤峰人,中国矿业大学副校长,教授,博士生导师,主要从事高等学校财务管理与内部控制、会计理论与方法、财务战略管理研究。