构建与量化康复治疗技术专业毕业生职业能力评价指标体系研究
2012-11-04姜涌
姜 涌
(辽宁卫生职业技术学院,辽宁沈阳110101)
构建与量化康复治疗技术专业毕业生职业能力评价指标体系研究
姜 涌
(辽宁卫生职业技术学院,辽宁沈阳110101)
开展高职康复治疗技术专业毕业生职业能力评价,应首先构建科学的评价指标体系,评价指标体系的建立是一项系统工程,需要从构建原则、构建依据、指标筛选、评价标准以及指标权重等多层面、多角度进行设计与研究。本研究就康复治疗技术专业毕业生职业能力评价指标体系的构建和方法进行探讨。
康复治疗技术专业;毕业生;职业能力;评价指标体系
评价工作是一项科学性高、综合性强的管理工作,根据评价对象和评价目的不同,科学地构建评价指标体系是决定评价工作成功与否的关键。
一、确定构建评价指标体系的原则
指标和指标体系是预测或评价的前提,其科学性是关系到预测或评价质量的关键。因而,在设计指标体系时,通常应遵循相应的原则。在参考相关文献的基础上,征询专家意见,在选择和构建指标体系时,遵循以下原则:
(一)系统导向性原则。
系统性是指指标的设计要能全面反映毕业生职业能力的综合情况,分清主次要方面,找出能反映主要方面的指标,以确保综合评价的全面性和可靠性。同时,还要兼顾指标的导向性原则,即评价指标体系构建的重要指导思想,其含义是指充分利用评价指标,让学生的知识、能力、素质得到全面的发展,体现教育在新形势下的培养目标,引导大学生明确发展方向[122]。
(二)简便可行性原则。
简便性要求合理构建指标层次和指标数量,如层次和指标数目太多,则易造成评价过程复杂、计算繁琐,易影响结果的准确性;可行性要求评价指标含义明确,指标内容可直接测量或观察,可得出明确的结论。具体操作时注意从以下三个方面把握尺度。第一,把目标向指标转化;第二,通过分解、测评模块化,指标体系简易化、明细化,操作方便易行。第三,指标中能量化的尽可能量化。
(三)科学整体性原则。
科学性要求评价指标必须能客观准确地反映毕业生的实际情况,符合国家高职人才培养的目标——培养面向生产、建设、服务和管理第一线需要的高技能人才;整体性原则是指评价指标体系比较完整,能较全面反映评价对象的各个方面。
(四)相对可比性原则。
指标体系中同一层次的指标,应该满足可比性的原则,尽可能地使其具有横向和纵向的可比性,使指标既能反映实际情况,又便于比较优劣。可比性原则有两个涵义,一是指标应该在不同的时间或空间范围上具有可比性;二是在不同时期和不同地区之间进行比较时,除指标的范围必须一致外,一般用相对数、比例数、指数和平均数等进行比较才具有可比性。
(五)指标可量化原则。
指标体系应当满足在定性分析的基础上进行量化处理。对于缺乏统计数据的定性指标,可采用评分法,利用专家意见近似实现其量化。只有通过量化处理,才能较为准确地揭示事物的本质。
二、构建评价指标体系的依据
构建一套合理的康复治疗技术专业毕业生职业能力评价指标体系,应首先明确构建指标体系的依据,本研究在参考与分析有关研究以及教育学、评价学等理论的基础上,主要以我国的高等职业教育指导意见及本专业培养目标为参考依据。
三、初步筛选的评价指标
在参考与分析有关研究以及教育学、评价学等理论基础上,遵循构建康复治疗技术专业毕业生职业能力评价指标体系的原则,依据我国对高等职业教育的指导方针和本专业的培养目标,并走访了有关专家,初步拟定了本专业毕业生职业能力评价指标体系。
四、确定评价标准和指标权重
对应于相应的评价指标,被评对象实际应达到的水平有具体要求。不同等级有不同的评价标准,末级指标必须明确评价标准。同一级指标的权重系数之和等于1;同级指标分解为各子系统时,每个子系统内各指标权重系数之和等于1。权重系数是分项评分综合合成时的重要参数,表明各指标之间同评价结果之间的确定关系,具有导向作用。因此,合理分配权重,才能保证结果的客观性和科学性[3]。
五、构建指标体系的方法
根据评价指标体系建立的方法可以确定构建评价指标体系的路线。
(一)明确评价对象和评价目的。
评价对象是康复治疗技术专业的毕业已参加工作的高职生,评价目的是了解毕业生能否胜任工作及对学校教学工作的要求和建议,建立网络互动平台,指导教学与就业市场的需求相结合。
(二)界定评价指标体系。
评价指标体系中拟定多少指标和层次,很重要。指标数量和层次多,可能降低评价结果的精度,所以必须控制指标数量和层次。
(三)咨询行业专家。
依靠有广泛知识、对评价对象有深刻理解的行业专家确立有限度的评价指标层次和指标。
(四)采用次序树法构建基础结构模型。
构成评价指标次序树图,对多个层次的评价指标进行排序,价值低的评价指标予以排除,初步构成评价指标体系。
(五)运行与修正。
利用网络平台,建立用人单位、毕业生、学校联系渠道,通过网络运行反馈、讨论、修订体系,多次反复完成。
六、评价指标体系的构成
(一)评价指标体系构成分析。
评价指标体系的一级指标通常是属于子指标或准则性质的指标,是不能直接进行评判的,而是要根据下设的基础指标的标准进行评估。根据构建评价指标体系的依据,本研究初步完成了评价指标体系的构成分析,设立了五个一级指标及近20个二级指标待选。
(二)初步构建的评价指标体系。
通过上述定性分析,结合本专业学生培养目标的要求,经反复修改,初步确定本研究的评价指标体系的结构,整个指标体系包括5个一级指标,21个二级指标。
七、专家咨询与结果
科学的指标及指标体系是获得准确评价信息的前提条件,初步拟定的指标体系必须逐步完善,本研究采用了德尔斐法(Delphi Method)来确定本专业毕业生职业能力评价指标框架[4]。
(一)确立专家组。
专家的选择是应用德尔斐法的关键环节,咨询结果是否科学、可靠与咨询专家的权威性、代表性等密切相关。要求专家对研究主题应具有较深入的认识,否则难以提出正确的意见和有价值的判断,故必须明确专家的选择条件。
(二)确定指标体系及权重系数。
将咨询表以信函、E2mail和亲自发放的方式交给咨询专家,征询指标结构的合理性,要求专家对各选指标的内容进行完善和补充,解决指标的覆盖面。经过两轮专家咨询,确定指标体系及指标内涵。第3轮专家咨询,必须确定每项评价指标在指标体系中所占的重要性程度,并赋予相应的值,这个数值就是对应指标的权重系数,简称权数(权重)。指标权重的确定采用一种改进的层次分析法(AHP)——指数标度AHP法[527]。计算出权重系数见附表。
附表 康复治疗技术专业毕业生职业能力评价指标体系
八、专家咨询的可靠性分析
对应答结果进行分析和处理,是德尔斐法的最后阶段,也是最重要的阶段。通过对专家积极性系数、意见的集中程度、协调程度、权威程度进行评价和检验。
经过反复征求专家意见,并将专家的意见进行统计处理,结果表明:我们所建立的康复治疗技术专业毕业生职业能力评价指标体系是一种比较完整、系统、科学的指标体系。
九、结果讨论
指标体系的构建包括选择指标和确定指标权重两方面内容。本研究利用德尔斐法选择确定康复治疗技术专业毕业生职业能力评价指标,以半定量法(专家咨询法结合层次分析法)确定权重系数。
从专家的选择来看,本研究所邀请的评分者为熟悉评价对象的专家,主要依靠其丰富的知识和经验选择指标,结果比较全面,虽具有较大的主观性,但主观看法的形成往往与专家所处的客观环境有直接联系。在多指标综合评价中,影响指标相对重要性的因素应当包括当时的社会、环境等因素,这些因素对指标重要性的影响是难以度量的,以半定量法(专家咨询法结合层次分析法)确定权重系数,由专家凭经验判断给出权重重要程度分值,再经过数学处理,去除偶然因素,从专家对指标重要性的粗略排序,得到一组清晰的数值,可以保证结果的客观性。
从研究的结果来看,本研究构建的指标体系科学性较强,主要具有以下几个方面的特点:第一,评价指标体系针对性强。评什么、为什么评,从指标的初步设计到专家的遴选和定量筛选过程,都有明确定位。确定的指标紧紧围绕评价康复治疗技术毕业生的综合素质这一研究目的,指标体系的动因较为明确;第二,评价指标体系系统性好。从职业道德观、理论基础知识、职业核心能力、自我发展潜力、综合素质评价五个方面反映了康复治疗技术毕业生的职业能力;第三,各级指标权重确定合理。经计算专家对各级指标重要性判断结果的标准差均<1、变异系数均<0.2,说明咨询意见比较集中,结果可信。一般专家认为组合权重系数>0.02为可接受程度,如果<0.02说明该项指标在整体指标体系中占的比重小,意义不大。本研究的各级指标组合权重系数均>0.02,表明权重设计符合要求;第四,具有一定的现实意义。所设计的评价指标体系,紧紧围绕国家对高职院校的指导意见精神,体现了对毕业生的基本要求。
[1]戴 洁,张 辉,陈 盼,等.用人市场对大学毕业生质量评价的调查与分析[J].青年研究,2001(5):36240.
[2]王丕龙,顾家珍,肖 风,等.对毕业生质量社会评价结果的分析与思考[J].医学教育,1997(4):25.
[3]江晓滨,蒋小龙,刘 阳,等.第二军医大学麻醉专业毕业生质量的社会评价[J].医学教育,2000(4):451.
[4]平卫伟,谭红专.Delphi法的研究进展及其在医学中的应用[J].疾病控制杂志,2003,7(3):2432246.
[5]谭晓红.大学生素质测评系统设计与实施[J].黑龙江科技学院学报,2002,12(1):55258.
[6]黄殿臣.大学生综合素质评价体系研究[J].黑龙江高教研究, 2001,5:37239.
[7]李 真.适应社会需求的大学生综合素质测评体系的构建[J].河北青年管理干部学院学报,2003,1:3215.
G449
A
1002-1701(2012)09-0026-03
2011209
姜 涌,女,副教授,研究生学历,博士学位。研究方向:高职教育教学方法改革研究。
全国卫生职业教育研究发展基金项目,课题名称:康复治疗技术专业毕业生职业能力评价指标体系的量化与实测研究,课题编号:092Y B15。课题获奖:获全国卫生职业教育研究发展基金课题成果三等奖。
10.3969/j.issn.1002-1701.2012.09.013