APP下载

高职院校专业办学水平评估研究

2018-01-19张新亮

都市家教·上半月 2017年12期
关键词:评估指标质量标准权重

【摘 要】高职专业评估对提高人才培养质量、完善质量保障体系、保证专业设置合理等都有深刻的意义。参照教育部相关文件、本科专业评估经验及教育者的研究成果等基础上,给出了质量标准和评价指标的制定策略。对评估保障措施及实施内容进行分析,给出了具体的评估实施方案。

【关键词】高职;专业评估;评估指标;质量标准;权重

1现状分析

高职教育已是我国高等教育的重要组成部分,如何及时了解自身专业办学水平、及时改革并知晓改革效果十分困难。专业评估是一项有效的手段,它能推动高职专业建设和保证专业设置贴近地方产业结构,是保障专业质量、职院自我完善和发展行之有效的方法。专业评估分“外部评估”和“内部评估”,我国还没具有专业评估资质、独立法人的“第三方”,各行业协会尚不健全,行业组织也不具备开展评估的实力和条件,不能将评估委托给“第三方”。高职专业评估基本都是内部評估[1],我国目前还没真正建立高职的专业建设质量标准,专业建设检查也仅作为制度的一部分出现在质量管理中,虽然国内一些较好职院陆续从2011年开始对其重点专业进行校内评估,探索自我评估模式,但更多职院对其专业建设与改革方向是模糊的,专业建设摸着石头走,甚至出现专业招不到人就取消专业。专业评估远没达到普及程度,更谈不上成熟和完善[2],职院和本科走的路还相差甚远。

我校08年开始进行示范建设,于10年9月进行专业评估,积累了丰富的专业建设经验和校内外数据,为构建专业质量标准、专业质量评估方案、评估方案的保障措施等提供了横向和纵向知识。结合国家颁布的文件政策、本科成熟的专业评估体系、其它职院的专业自评经验及职业教育研究者的研究成果,在对职院专业评估的目的、意义、内涵和基本原则等厘清之后,探索一个适合职业院校专业评估的自我评估体系。

2评估参数标准体系的制定

2.1评估指标体系的建立

评估指标体系是将具有原则性和抽象性特征的评估目标逐级分解,使之成为具体的、行为化和可测量的诸分目标,评估指标引领专业建设方向,是实施评估的准绳。指标体系的建立需遵循导向性、科学性、可行性、时效性、独立性及可测性等原则[2]。为确保评估指标满足如上原则,在重庆市教委和我校教务部门关照下,通过走访兄弟院校、深入校企合作企业和各层次人员的问卷调查上,充分利用本校国家示范重点建设专业“数控技术”的建设资源和数据,参照教育部相关文件、结合其它院校专业评估成果及职业教育研究者的理论和实践成果,在平台数据足够充实之后,把握以上几点原则进行科学的多种手段的研究分析,制定一套针对职院专业办学水平评估的指标体系。

所制定指标体系分一级和二级指标,一级指标含指标群、对应权重和内涵说明,二级指标含各一级指标下的二级指标群、对应权重、内涵说明和主要观测点。内涵说明指对各一级指标和对应的二级指标的深层含义的解释,主要观测点指各二级指标重点考察的内容。制定的一级指标群和权重为:师资队伍及建设0.065,专业设置与培养规格0.106,教学条件与教学管理0.115,教材建设与教学环节0.087,职业能力与素质培养0.124,课程体系结构与改革0.102,产学研合作0.058,就业及社会声誉0.112,实训基地建设0.073,基本素质教育培养0.065,学生知识能力素质0.046。

2.2质量标准体系的建立

质量标准是评判和打分的依据,也是通过查阅资料、专题调研、学术交流和典型案例分析等方法的综合运用辅助抽样、分类测量和量化等技术得到的。每个二级指标下的质量标准包含实测方法及量化、参考等级标准和相关说明三项内容。量化评分有:直接按指标要求进行定量刻画;按指标要求先对材料进行定性描述,然后再进行定量打分;将评估对象的不等质转化为近似等质,然后再进行综合评估。以二级指标“师资结构”为例,制定的实测方法为:校内资源平台提供数据,教务处和人事处监督统计;量化策略为:青年教师中研究生以上比例、高级职称比例、双师素质比例、专业带头人和梯队作用情况。参考等级设计为由三项不同比例和一项情况说明构成的四级,“师资结构”的权重为0.26,可设计该二级指标满分为26分,可划分为四个0-26的区间,具体分由评估组专家给。用于不同评估模型数据可以是具体分值,也可以是A到D四级模糊量。

2.3权重的确定

权重表征了各指标的重要程度,是人工评估中采用线性规划或模糊评判模型得到评判的量化结果所必需参数,可采用特尔菲法确定一级指标权重,用层次分析法确定一级指标下各二级指标权重,这样做可减少专家咨询量,能充分利用专家经验智慧。特尔菲方法实质是专家咨询法[3],计算每位专家估计值与平均值偏差,相同专家多轮咨询,直到结果趋于收敛为止。层次分析是运筹学家T.L.Sauty提出的一种进行决策分析的方法。可测定被评对象的优先次序或评估指标的权重,可根据原理使用可视化编程软件编程实现。

3专业水平评估方案

评估应基于现代技术手段的科学可行的程序和方法,包括人工评估方案、评估保障措施、人工智能评估模型和评估结果处理四个方面。

3.1人工评估方案

校内人工评估之前先进行专业所在系部预评估,系部以平台数据为依据并对照《评估指标体系》分析数据,总结经验找出不足及原因所在,制定改进措施,形成初步自评报告并向评估办提交校内评估的申请。

开展校内评估先要做好评估的准备工作并最终形成工作计划,具体包括:确定评估的展开范围、确定评估组评估成员、组织学习有关文件、明确评估内涵和评估纪律、熟悉评估方案和具体要求、确定成员分工、给出评估日程安排和现场评估的内容和流程。

具体实施评估阶段包括专业建设数据分析、预评估报告分析、现场考察、为各级指标打分和产生量化结果五个方面。专家组借助网站、网络会议及现场会议等方式对系部专业建设数据和预评估报告进行分析解读,给出初步意见并考察方向和重点。教务处组织专家深入现场进行多种形式的考察分析,重点是以评估标准为依据收集打分所需的各种论据和数字信息,要求具有打分资格的评估成员都要参与现场考察的每个环节。现场考察的环节主要有:听取专业所在系部的汇报、走访企业和进行问卷调查、核心课程的听课和进行面向多类对象的深入访谈、考察校内外实训基地等硬件水平以及调阅智能部门提供的汇总资料等方式。各专家分工现场考察的数据向专家组负责人汇总后,便可召开专门会议进行专业剖析和考察结果的讨论汇总,现场找出专业建设中存在的问题、分析出问题的成因和给出一个有高度可操作的建议对策,将结果反馈给院系相关领导和主要任课老师以指导将来的整改。评估组成员在会议现场根据自己的考察结果和会议总结为各级指标进行打分,准确数值可被线性规划模型所使用得到该模型下的量化结果,准确数值被模糊化处理后可被模糊评判模型使用得到量化结果。endprint

各指标打分数据数据、线性规划或模糊判断模型得到的量化结果以及评估结论,它们的准确值或模糊值又可被加工成各种规则库供人工智能系统里的各模糊神经网络(FFN)学习训练。可建立预测性、诊断型和改进型的FNN[5],并嵌入到专家系统中构建综合评估模型,一个成熟的人工智能评估系统,可通过评估平台的输入接口提供的无需太准确的打分数据直接进行智能评估测试。测试结果经文字总结后形成《评估报告》报学校领导审阅,为下一步总结整改做准备。

3.2保障措施和结果处理

“保障措施”为人工评估、智能评估和评估结果的处理提供数据标准和评估行为保障[4],主要包括:建立完善的数据采集和处理平台、建立完善的激励机制、建立监督及反馈改善机制、建立评估组及相关管理人员体系四个方面。“数据平台”是制定指标体系、质量标准和权重的核心。“激励机制”能推动专业建设进一步的快速发展和加快新专业的合理诞生。“监督和反馈”能保障能对评估的过程和结果的可信度作出科学的评判,以达到优化评估方案和提高评估质量的作用。”人员体系”构成领导团体会、评估办公室、行政监督管理部、二级院系、和评判专家组五大功能。

进行基于该方案的时空和评估主体不同组合下的多次人工评估后,系部根据专家组反馈来的考察意见和校领导审批后的评估报告进行总结整改的工作,制定整改方案并报评估办,经同意后实施整改,整改到期可申请相同评估主体下的复评。以获取的各指标模糊数值、评估量化结果以及考察意见和评估报告作为数据源,制定预测型、诊断型和维修型模糊规则。

4结论

对高职院校专业评估的目的、意义、内涵、基本原则、方案及实施保障措施等进行研究。“以评促建,评建结合”是高职专业评估的最终目的,评估需以主动性、科学性和智能性等为导向,注重对评估结果的分析和处理,努力探索一个适合职院专业评估的评估体系。为省级和全国性评价体系的建立与完善提供先导数据,在评估中不断发现和解决问题,为专业办学的改进提供理论和实践指导,推动专业不断前进。

参考文献:

[1]王鑫芳.高职院校内部专业评估研究[J].机械职业教育,2012:17-19.

[2]陈寿根,万里亚.高职院校内部专业评估制度的设计[J].职业技术教育,2010,17(31):5-8.

[3]蒋荣健.以本科教育为主的工科院校专业办学水平评估方案及其软件支持系统[D].天津:天津纺织工学院,1999:25-50.

[4]丁晓昌.高等教育质量保障体系研究[M].南京:江苏教育出版社,2008:110-125.

[5]張新亮,钟富平.基于人工智能的高职院校专业办学水平评估系统[J].计算机系统应用,2015,24(2):75-81

作者简介:

张新亮(1981~ ),男,研究生,研究方向:数控技术、计算机软件、人工智能。

注:本文系“重庆市高等教育教学改革研究重大(重点、一般)项目资助,立项编号:133298”。endprint

猜你喜欢

评估指标质量标准权重
权重常思“浮名轻”
功劳木质量标准的改进
为党督政勤履职 代民行权重担当
石见穿质量标准的研究
抗骨增生丸质量标准的改进
基于公约式权重的截短线性分组码盲识别方法
我国职业足球俱乐部商誉价值评估指标体系构建研究
以评估指标为依据,构建教学质量标准体系
行业型高校就业质量评估指标体系初探
消肿止痛膏质量标准研究