APP下载

基于因子分析法的高职外语教材专业适用性评价

2021-10-18王卓恒郑希锋

黑河学院学报 2021年9期
关键词:适用性效度信度

王卓恒 郑希锋

(山东经贸职业学院,山东 潍坊 261011)

2019 年,国务院发布了《国家职业教育改革实施方案》(简称职教20条),明确提出,将标准化建设作为统领职业教育发展的突破口,建立健全教学教材标准。而现行各类高职外语教材的专业适用性缺乏统一规范的评价标准,本文从教师、学生、行业三方需求出发,采用因子分析法构建评价模型[1],最终得出高职外语教材专业适用评价的各级指标及权重,以研究的信度与效度为落脚点,拟定出较为客观与可靠的评价指标体系,对高职外语教材专业适用性的提升及优化策略的制定起到推动作用。

一、问卷设计

(一)样本

教师与学生作为教材的直接使用者,对于教材的适用性具有绝对发言权,而企业作为人才需求者,对于教材的专业适用性具有评价权,因此,以三方需求为出发点,选取山东经贸职业学院及兄弟院校从事外语教学工作的专家同行、近三年的毕业生、在校学生、相关用人企业为为样本。从知识需求、岗位需求、可持续发展支撑等多个维度,设计调研问卷,采用网络调研与实地调研相结合的方式,采集三方调研数据并对结果进行分析。

(二)问卷结构

1.基本信息

各类别调研对象占比分布如图1所示:

由图1可以看到,高职院校在校大学生占比超过59%,在校大学生是外语教材的直接使用者,对现行教材的适用性,能够从自身知识需求、可持续发展需求、就业需求等多个角度进行评价,因此,调研结果凸显在校大学生的教学主体地位。外语教师占比将近20%,教师是教学活动的组织者,实施者,教材能否满足课堂教学的需求,是否能够辅助教师落实教学策略,关系教学成效。近三年毕业学生及用人单位人力资源管理人员合计占比超过20%,这两类调研对象能够从岗位需求、行业素养需求等维度对外语教材的专业适用性给出切实评价。问卷对象的占比分布凸显了“学”的需求,充分考虑了“教”与“用”的需求,结构合理,能够充分满足调研需求。

图1 调研对象占比分布饼图

2.问卷主体

在充分吸收专家意见的基础上,该问卷主体部分采用李克特五点量表,共设定18个项目,每个项目设定五个评分档次,如选项若为非常重要,重要,比较重要,不太重要,不重要五个档次,则按照5分,4分,3分,2分,1分来计分。

例如:您认为高职外语教材是否应该根据学情进行内容组织?

若认为非常有必要,则量化赋分5分,有必要为4分,较为有必要为3分,不太有必要为2分,没有必要为1分。

同时为保证调研的全面性,问卷最后一题设置为开放性题目,吸纳调研对象对问卷遗漏问题的补充及意见建议。

3.问卷发放情况

本次调研通过网络及实地调研相结合,共发放问卷150份,收回有效问卷137份,回收率为91.3%。

二、信度与效度分析

(一)信度分析

信度是一个测量学概念,指测量的可信程度。在量表类问卷调研中,信度通常是指采用同样的方法对同一被调查者重复测量时所得结果的一致程度,即研究的方法是否可靠、可信,信度是衡量问卷质量的一个重要指标。

问卷信度分析方法较多,主要采用了目前最常用的克隆巴赫信度系数,不同研究者对信度系数的界限值有不同的看法,一般认为,问卷的信度系数在0.9以上,说明问卷信度很好;如果信度系数在0.8以上,可以接受,但若问卷的信度系数低于0.8,则应考虑重新制订量表或删减项目。

利用spss17对问卷的信度进行了分析,结果显示α=0.956,信度系数超过0.9,说明问卷信度很好。

?

(二)效度分析

效度也是一个测量学概念,在量表类问卷调研中,效度是指结论能被明确解释的程度和普遍性,即研究的有效性,是衡量问卷质量的另一重要指标。

利用spss17对问卷的效度进行检验,得到问卷kmo度量值

为0.914,说明问卷效度较高。

?

三、因子分析

(一)KMO检验及Bartlett球形检验值

?

1.KMO值

统计学家Kaiser给出了用KMO值来判断是否适合做因子分析的标准[2]:

0.9

0.8

0.7

0.6

KMO<0.6:不适合。

2.Bartlett球形检验

Bartlett球形检验用来判断相关矩阵是否是单位阵,即各变量是否有较强的相关性,原假设为:相关系数矩阵是一个单位矩阵,即各变量是相互独立的,因此,若P值小于给定的显著性水平(一般为0.05),则应拒绝原假设,即认为变量间有较强的相关性,适合做因子分析;而若P值大于给定的显著性水平,则不能拒绝原假设,认为各变量相互独立,不适合做因子分析。

根据分析结果,可以看到,问卷的kmo=0.914, Bartlett球形检验值为1864.454,显著性水平p=0.000,说明问卷非常适合做因子分析。

(二)提取因子

采用主成分分析法抽取出两个公因子,累积方差贡献率为67.5%,符合研究的需要。

?

未旋转因子载荷矩阵:

?

由此得到以下2个主成分:

在第一主成分上,x8,x9,x10,x11,x12,x13,x18的绝对值较大,因此,根据这些题项内容的共性来命名第一主成分为:基本需求适用性。

在第二主成分上,x3,x4,x5,x6,x7,x14,x15,x16,x17的绝对值较大,因此,根据这些题项内容的共性来命名第二主成分为:岗位需求适用性。

四、评价指标体系及权重

(一)评价指标体系

根据两个主成分及包含的子成分,拟定评价指标体系如下:

(二)权重计算方法

对主成分及各自对应子成分的特征值进行归一化处理,得到各级指标权重值如表1所示。

表1 指标权重

五、结果解释

本文在充分征求专家意见、查阅大量参考文献的基础上,根据研究需要,设计了基于“教、学、用”三方需求的调研问卷,问卷主体部分为李克特量表,共收回有效问卷130余份,通过信度及效度检验,确定问卷产生的数据适合采用因子分析法进行分析。在因子分析过程中,采用了主成分法提取公共因子,通过spss计算得到两个特征值大于1的主成分,二者的累积方差贡献率达到了67.5%,符合研究的需要。进一步通过因子旋转,将因子载荷矩阵转换为向量矩阵,从而得出各特征值对应的特征向量,并根据向量矩阵中各元素绝对值的大小,将各个因子分类划归到两个主成分下,结合实际,以“基本需求适用性”与“岗位需求适用性”命名两个一级指标,并通过对主成分及各自子成分对应的特征值进行归一化处理,得出各级指标的权重值,从而构建出高职外语教材专业适用性评价量表。

评价量表一级指标中基本需求权重值为0.88,岗位需求权重值为0.12,作为高等职业教育各专业的公共基础课,教材的专业适用性评价应首要强调高职外语教学在满足人才知识需求、内涵需求、素质需求等基本需求方面应发挥的作用,凸显文化育人及课程的价值引领功能,同时,兼顾职业教育的特色,注重高职外语教学在支撑与提升不同专业人才的岗位素养中应发挥的独特作用。

六、推广价值

依据高职外语教材专业适用性评价指标,可对现行高职外语教材的专业适用性进行量化赋分,从而为高职外语教材改革提供参考依据。

基于因子分析的研究方法,可为高职其他公共基础学科教材的专业适用性评价研究提供参考。

猜你喜欢

适用性效度信度
效度验证模式系统整合与效度研究发展策略
《广东地区儿童中医体质辨识量表》的信度和效度研究
作为数学教育研究质量分析的信度
童装常用领型及其适用性分析
强调简洁和适用性 MICHI by Rotel X5/X3合并功放
无人潜航器作战保障适用性评估方法
问卷是否可信
——基于体育核心期刊论文(2010—2018年)的系统分析
环保技术在土木工程领域的适用性探讨
谈高效课堂下效度的提升策略
语言测试效度研究的另一视角:考试的因子结构研究