信息系统项目管理师评价的实践与效果分析
2020-08-25盛晨媛
盛晨媛
(工业和信息化部 教育与考试中心,北京 100040)
1 概 述
软件和信息技术服务业在新技术、新理论、新社会需求的共同驱动下,细分为软件开发、工业软件与行业解决方案、嵌入式软件、信息安全软件与服务、信息系统集成、信息技术咨询与服务、大数据增值服务等分支,作为软件与信息服务产业重要分支的信息系统集成服务的快速发展,催生了信息系统项目管理师人才需求大幅增长。信息系统项目管理师是工程系列的高级工程师专业技术资格,专业技术资格是通过计算机技术与软件专业技术资格(水平)考试(简称计算机软件资格考试)取得。2019 年,信息系统项目管理师报考人数达到137 881 人,比2018 年增长39%,是计算机软件资格考试报考规模最大、层次最高的专业技术资格,科学评价从事信息系统项目管理的高级技术人才是产业发展的需要,也是以考代评、不拘一格选拔人才政策的需要。
2 信息系统项目管理师评价标准与评价方式
2.1 信息系统项目管理师的职业定义
信息系统项目管理师是具有信息化领域大型项目或工程规划、建设、管理能力的高级工程技术人员。
2.2 信息系统项目管理师岗位要求
信息系统项目管理师应能系统掌握信息系统项目管理的知识体系,具备开发、管理复杂、大型信息系统和多项目系统的经验和能力;能够根据需求组织制订可行的项目管理计划,组织项目实施,对项目的资金、设备、进度和质量进行管理,并能根据实际情况及时做出调整,系统地监督项目实施过程的绩效,保证项目在一定的约束条件下达到既定的项目目标,能分析和评估项目管理计划和成果,具有高级工程师的实际工作能力和业务水平。
2.3 信息系统项目管理师的评价标准
掌握信息系统知识;掌握信息系统项目管理知识和方法;掌握大型、复杂项目管理和多项目管理的知识和方法;掌握项目整体绩效评估方法;熟悉知识管理和战略管理;掌握常用项目管理工具;熟悉过程管理;熟悉业务流程管理知识;熟悉信息化知识和管理科学基础知识;熟悉信息系统工程监理知识;熟悉信息安全知识;熟悉信息系统有关法律法规、技术标准与规范;熟悉项目管理师职业道德要求;熟练阅读并准确理解相关领域的英文文献。
2.4 信息系统项目管理师的评价方式:
每年5 月、11 月组织全国统一考试,考试包含3 个科目,即信息系统项目管理综合知识、信息系统项目管理案例分析、信息系统项目管理论文,从理论基础、应用能力、实践经验不同维度考核信息系统项目管理高级人才的专业技术水平,每科成绩都达到合格标准才能取得相应的专业技术资格。
2.5 信息系统项目管理师近几年的报考规模
随着信息服务业的快速发展,信息系统项目管理师报考规模持续增长,2016 年全年报考70 666 人,到2019 年报考人数达到137 881 人,增长近一倍,行业发展对人才需求量快速增长,对人才的数量和质量提出了更高要求。报考人数情况见图1。
图1 2016—2019 年历次考试报考人数
2.6 信息系统项目管理师评价结果的使用
参加信息系统项目管理师考试合格者取得高级专业技术资格,可以作为评聘高级工程师的依据,信息系统项目管理高级技术人才的选拔促进了信息系统管理专业技术人才水平的提高和信息系统集成企业的规范化发展。
3 信息系统项目管理师评价的质量保障机制
3.1 以用立考,建立科学的考试标准
充分进行岗位需求调研,掌握行业发展现状,总结专业技术岗位所需的知识体系和应用能力,制定考试大纲并根据考试大纲编写相应教材。
3.2 建设以能力为中心的考核体系
建立持续更新的以能力为中心的考核知识体系,采用专业知识、应用能力、实践经验的考核方式,对接企业的用人需求。
3.3 组建结构合理的专家团队
针对计算机软件资格考试的要求和特点,命题专家由来自于高校、企业、行业的专家组成。高校教师有教育教学经验,有扎实的理论基础,精通命题技术及命题规范;企业专家有丰富的一线工作经验,大型项目开发经验,了解岗位需求;行业专家视野开阔,对新技术、新设备、产业发展方向有精准的把握,建立稳定的专家队伍有利于对考试的持续研究,对命题方向、命题结构等进行全局性的技术指导,保证命题的质量和稳定性。
3.4 有效应用的命题技术
评价目的的实现是通过优良的试题来实现的,命题工作要把考试标准的知识体系和应用能力通过试题呈现出来,因此可以说命题工作的好坏决定考试的成败。
3.4.1 根据考试大纲,合理设计试卷结构
通过知识分布图(见图2)和命题蓝图进行试卷的架构设计,确定考核的知识分布、知识点、题型、数量、难易度、分值。
图2 2019 年计算机软件资格考试信息系统项目管理师知识体系分布
3.4.2 科学进行试题的提炼加工
计算机软件资格考试不同于一般的课程考试,大量试题来源于实际工作中的真实案例,因此试题的提炼加工非常重要,从命题内容、题型设计、答案的收敛性各个方面保证试题的有效性、准确性。一份优良的试卷是衡量专业技术人员技术水平的一把标尺。
3.4.3 严格执行命题标准化工作流程
命题工作的流程包括:计划、命题、初审、终审、复审、签发交付、校对、试卷印刷、总结等主要阶段。保证试卷无技术错误、无文字错误、无印刷错误。
4 信息系统项目管理师的质量检验机制和评价效果分析
每次考试后进行试卷质量分析,检验试卷的可靠性、难度、区分度和及格率,对参考人员的专业、工作年限、年龄等进行研究,总结命题规律,分析是否达到考试设定目标。
4.1 试卷的质量分析
一份合格的试卷应该是符合考核大纲要求、考试结果可靠、难度适中、区分度大,使用信度、难度、区分度指标进行检验。
4.1.1 考试可靠性指标——信度
计算机软件资格考试采取了提高考试信度的一系列措施:严格实行考培分离;不使用重复试题;遵循考试大纲;严格执行保密规定;严格执行考试纪律;阅卷标准严格规范统一;集体阅卷并实行流水作业,复核认真。
4.1.2 考试及格率指标——难度
难度是指考试试卷的难易程度,是评估试卷质量的主要指标之一。针对计算机软件考试试卷结构和试题情况,难度计算方法如下:其中Xi为全体考生第i题平均分,Wi为第i题的满分。对于主观试题,难度系数不小于0.55,难度为难;难度系数在0.45 和0.55 之间,难度为中;难度系数小于0.45,难度为易。
4.1.3 考试有效性指标——区分度
区分度是指试题或试卷对应试人员实际水平的区分程度或鉴别能力。区分度高的试题或试卷能对不同知识水平和能力的人员加以区分,使能力高的应试人员得高分,能力低的得低分;区分度低的试题则不能对应试人员的能力进行很好的鉴别,使水平高和水平低的学生得分相差不大或没有规律可循。
在计算机软件资格考试的实践中,区分度>0.4,表示区分度为优;区分度范围为[0.3,0.4],表示区分度为良;区分度范围为[0.2,0.3],表示区分度为可;区分度<0.2,表示区分度为差。
2018 年上半年信息系统项目管理师考试样本数为27 665 个,质量分析指标见表1。
表1 2018 年上半年信息系统项目管理师试卷质量分析汇总表
从表1 的数据来看,综合知识为75 个选择题,抽取样本数27 665 个,试卷信度良好,难度中等,区分度一般,需要改进试题对技术水平高低不同人员的鉴别,适当提高区分度。案例分析采分点过粗,对信度分析准确性带来影响,实践中需要进一步加强研究。
4.2 考生特征分析检验信息系统项目管理师评价效果
由于信息系统项目管理师不受报考资格限制,报考人员和合格人员的成分是检验考试设置是否科学的重要依据,人员特征分析是检验评价标准科学性的重要指标。
2018 年上半年信息系统项目管理师合格人员的在职情况、年龄状况、学历分布分别见图3~5。
从图3~5 可以看出,2018 年上半年信息系统项目管理师资格考试合格人员88.1%以上是在职人员,年龄23—40 岁的占九成以上,90.7%以上具有本科以上学历,说明该资格的绝大多数考生和合格人员都是具有一定工作经验的在职人员。符合软件与信息服务业高级专业技术人员的基本状况,达到了科学评价信息系统项目管理高级技术人才的目的。
图3 2018 年上半年信息系统项目管理师资格合格人员职业情况
5 结 语
图4 2018 年上半年信息系统项目管理师资格合格人员年龄分布
图5 2018 年上半年信息系统项目管理师合格学历情况
通过信息系统项目管理师评价工作的实践,软件与信息服务业专业技术人才的评价机制逐步完善,未来随着产业的发展和工程技术人员职称改革工作不断深化,专业技术人才分类评价将在培养造就素质优良、结构合理、充满活力的工程技术人才队伍中发挥越来越重要的作用。