高校学生评教指标体系的信度和效度分析—以牡丹江医学院为例

李　丹，刘　冰，宋高臣，马　微，赫英娟

牡丹江医学院：1教学质量监控处；2思想政治理论教学研究部；3教务处；4研究生处；5公共卫生学院，黑龙江　牡丹江　157011



高校学生评教指标体系的信度和效度分析
—以牡丹江医学院为例

李丹1，刘冰2，宋高臣3，马微4，赫英娟5

牡丹江医学院：1教学质量监控处；2思想政治理论教学研究部；3教务处；4研究生处；5公共卫生学院，黑龙江牡丹江157011

【摘要】：以牡丹江医学院的学生评教量表作为研究对象，对其进行信度和效度的定量分析。采用重测信度法和克隆巴赫系数法对评教量表作信度分析；采用内容效度分析法和准则效度分析法对评教量表作效度分析。其结果显示：牡丹江医学院现采用的学生评教量表具有比较好的信度和效度；同时通过此次定量分析，也为今后评教量表修订和完善提供了依据。

【关键词】：评教；信度；效度

【DOI】：10.13566/j.cnki.cmet.cn61-1317/g4.201604003

进入20世纪90年代，为适应社会对高等人才的需求，全国各高校纷纷扩大招生规模，进而我国的高等教育由“精英式”教育向“大众化”教育转变。与此同时，作为高校生存和发展的生命线—教学质量也受到了严峻的考验。如何提高高校的教学质量，除深化教学改革之外，教育评价是最重要的手段之一。而学生评价教师的授课质量（以下简称学生评教）作为高校教育教学评价体系中的重要组成部分，不仅可以考核教师工作业绩，还可以帮助教师改进教学，提高教学有效度，逐渐得到了国内外各高校的认可。

学生评教作为教学评价的工具，其评教指标体系制定是否科学、合理，直接影响学生评教的信度和效度，也直接影响教学质量和教师的教学行为［1］。所以，信度和效度是高校教学评价体系科学性的重要衡量指标，对指标体系信度和效度的分析是修改、完善、设计、简化评价量表进行预评估和再评估的必要工作［2］。

1　研究方法与指标

该文拟以牡丹江医学院的学生评教指标体系为例，进行学生评教指标体系的信度和效度分析，只有这样才能更好地修订、完善评价指标体系，增强其科学性，充分发挥学生评教的功能。为了保证实验的有效性，随机抽取学生信息员，对相同的20位教师进行评价。被抽取的学生信息员均上过这20位教师的课。

1.1信度分析

信度即可靠性，就是指测量数据和结论的可靠性程度，在学生评教中要能稳定地反映教师的实际教学水平。信度指标多以相关系数表示，大致可分为三类：稳定系数（跨时间的一致性）、等值系数（跨形式的一致性）和内在一致性系数（跨项目的一致性）。信度分析的方法主要有四种：重测信度法、复本信度法、折半信度法和克隆巴赫系数（α信度系数）信度法［3］。文章拟采用重测信度法和克隆巴赫系数信度法。

1.1.1重测信度随机抽取基础医学院教师20名作为被测评对象，由学校的部分学生信息员（保证这些学生信息员都上过这20位教师的课程）对这20位教师的授课质量进行评价，计算评价分数并排名。时间间隔8周之后，再抽取学校的部分信息员（保证这些学生信息员都上过这20位教师的课程）对这20位教师进行重新评价，计算评价分数并排序。

1.1.2克隆巴赫系数信度检测随机选择基础医学院20位教师为被测评对象，提取其2014—2015学年第一学期的评价数据，计算克隆巴赫系数。

1.2效度分析

效度即有效性，就是指测量工具如何最大程度地反映所要测量概念的真实含义，即正确性程度。在学生评教中就是指能否最大化地实现预期的目的和效果。效度分为：内容效度、准则效度和结构效度。由此对应的效度分析方法有内容效度分析法（单项与总和相关效度分析法）、准则效度分析法和结构效度分析法［3］。文章拟采用内容效度分析和准则效度分析。

1.2.1内容效度分析牡丹江医学院现有资深教学督导员9人，笔者将牡丹江医学院的学生评教量表发给各资深督导员，由这9位督导员组织座谈、访谈等相关活动对评教指标进行讨论、比对、逻辑分析，最终确定量表内容效度的有效性。

1.2.2准则效度分析选取牡丹江医学院现用的督导评价用表作为效标。随机抽取基础医学院20位教师作为被测评对象，53名学生信息员参与此次测评试验。收集近期学校督导员对这20名教师的评价数据，并计算评价平均分；学生信息员分别用原学生评教量表和新学生评教量表对这20位教师的课堂教学质量进行评教，并计算评教平均分。将这3组评教成绩进行相关分析并得出结论。

1.3统计分析方法

该文主要通过调用SPSS中的Reliability过程进行信度检验，对被测利用重测信度法和克隆巴赫系数（α系数）进行主成分分析和相关分析来估计测验的内部一致性；对效度的检验主要采用内容效度分析法和准则效度分析法对数据进行相关性分析来测验评教量表的效度。所有数据均通过SPSS 18.0进行统计分析，检验水准α为0.05。

2　研究结果

在信度分析的重测信度实验中，将两次评价后的结果进行统计分析后得到重测信度系数为0.81（P＜0.01）。在克隆巴赫系数信度实验中，对提取的评价数据进行主成分分析发现，仅有一个特征根值大于1，抽取此因子解释总变异的85.6%。所有指标的内部相关系数为0.70～0.98，说明牡丹江医学院的学生评教指标是同质的，各指标的因子负载系数是0.85～0.95，该学生评教表的克隆巴赫系数为0.78。由此可以说明，牡丹江医学院的学生评教表是一维的，且信度较高。

在内容效度分析中，最终反馈结果是9位督导员均认为学生评教的所有指标均与教师课堂教学质量息息相关，且无明显重复之处，在评教内容上是有效的。

在准则效度分析中，通过对三个评教表两两进行相关分析，督导评价表与原学生评教量表的相关系数为0.539，记为r12，督导评价表与新学生评教量表的相关系数为0.732，记为r13，原学生评教量表与新学生评教量表的相关系数为0.586，记为r23。对三个相关系数分别进行显著性检验，结果表明三个相关系数均有统计学意义（P＜0.05），具体结果如表1所示。

表1　督导评价、原学生评教量表和新学生评教量表评价成绩之间的相关性

为考查新学生评教量表较原学生评教量表的效度是否有所提高，以督导评价表为效度标准，采用SN比值法比较原学生评教量表和新学生评教量表（结果表2所示），原学生评教量表的SNR值较新学生评教量表小，表明新学生评教量表所得结果更接近督导评教结果。由此说明新学生评教量表较原学生评教量表效度有所提高，且新评教量表与督导评价表之间更具有较高的一致性。

表2　原学生评教量表与新学生评教量表SN比值法分析结果

3　讨论

从信度的分析结果来看，牡丹江医学院使用的学生评教量表是一维量表，其中各项指标反映的是同一性质的问题，所以各分项得分相加，其总分具有测评意义，总分的高低可以说明教师授课质量的好坏。而且通过重测信度系数可以得出，牡丹江医学院教师的整体授课水平比较稳定。通过此学生量表进行的学生评教量化是可靠的。

从效度的分析结果看，使用新的学生评教表测评出的数据与督导评教的相关度提高了，说明新的学生评教表比原来的学生评教表更科学、合理，更能体现教师的教学质量的高低，但是这一前提是必须保证我们所选取的效标—督导评价表是有效量表。通过督导专家的逻辑分析，我们今后在学生评教指标的内容阐述和条目的多少上进行再次修订，以提高学生评教量表的效度和信度。

作为教学管理者更应该看到对于教师教学质量的高低是受到多种因素的综合影响，即使学生评教在短期内乃至长期都是稳定可靠的，对于一个教师教学质量的衡量也要从更广的角度和更多的因素进行分析评判，以期做到公正、公平、客观，才能真正地促进教师教学发展，从而使教学效果最大化。

参考文献

［1］韩天学，张倩.美国高校学生评教体系本土化的实证研究［J］.黑龙江高教研究，2015（3）：55-58

［2］尹海洁，赵希文，孙颖，等.学生评教指标体系的构建—基于对哈尔滨工业大学的研究［J］.大学：学术版，2010（10）：65-72

［3］孙振球.医学统计学［M］.2版.北京：人民卫生出版社，2007：756-769

【中图分类号】：G642.0

【文献标志码】：A

【文章编号】：1004-5287（2016）04-0375-02

基金项目：黑龙江省哲学社会科学研究规划项目（13E043）；牡丹江市科技局计划项目（G2014b1580）；牡丹江医学院高等教育教学改革项目（2014024）

收稿日期：2015-07-02

作者简介：李丹（1978-），女，黑龙江牡丹江人，讲师，硕士，主要研究方向：教育技术及教学管理。

通信作者：刘冰（1987-），女，黑龙江牡丹江人，助教，硕士，主要研究方向：马克思主义哲学美学。电话：15774630210；E-mail：63020919@qq.com

Reliability and validity of college students'teaching evaluation index system：Taking Mudanjiang Medical College as an example

Li Dan1，Liu Bing2，Song Gaochen3，Ma Wei4，He Yingjuan5

1Office of Teaching Quality Supervision and Assurance；2Department of Ideological and Political Theory Teaching and Research；3Office of Educational Administration；4Graduate Department；5School of Public Health，Mudanjiang Medical College，Mudanjiang 157011，China

【Abstract】：We made a quantitative analysis of the reliability and validity of the students'teaching evaluation scale of our college.By adopting the retest reliability method and Cronbach's coefficient method，we analyzed the reliability of the assessment scale.By using content validity analysis and criterion validity analysis，we made validity analysis of the assessment scale.Results revealed that the students'teaching evaluation scale of Mudanjiang Medical College has good reliability and validity.This quantitative analysis also provides basis for revising and improving the evaluation scale in the future.

【Key words】：evaluation of teaching；reliability；validity