APP下载

课程考试质量分析与教学反思
——以实验心理学课程考试为例

2014-05-02谢威士

石家庄学院学报 2014年6期
关键词:区分度效度心理学

谢威士

(合肥师范学院 教师教育学院,安徽 合肥 230061)

课程考试质量分析与教学反思
——以实验心理学课程考试为例

谢威士

(合肥师范学院 教师教育学院,安徽 合肥 230061)

课程考试质量分析是教育教学过程的一个重要环节,也是教学反思与教学改革最适宜的切入点.利用教育统计和教育测量理论,对合肥师范学院2011级应用心理学专业的实验心理学期末试卷进行分析,从正态性、信度、区分度、难度和效度5个客观指标进行试卷质量分析.结果表明本次课程考试试卷基本合理,并根据试卷分析结果进行教学反思.

考试质量分析;教学反思;实验心理学

0 引言

目前大学教学质量成为社会关注的焦点,本科生课程与教学改革成为高等教育大众化之后大学发展的中心任务[1],而课程考试质量分析是课程与教学改革最为适宜的切入点.高校的课程考试是以考试大纲(课程标准)规定的合格标准为参照的水平考试[2].考试环节在整个大学教学过程是课程教学的终结环节,并一直处于一个非常重要地位.通过考试可以推动学生对所学课程进行比较全面、系统的复习,从而掌握比较完善的知识体系,形成运用知识的技能和技巧.考试也是及时检验学生学习效果以及教师教学质量是否达到要求的重要手段.如果某门课程的试卷能够成为所要考核的知识点的介质,那么学生成绩就应该能反映考试对该课程知识体系的掌握程度和教师的教学效果.而高校现行的课程考试存在很多弊端,如课程考试没有考试标准,出题、评分存在随意性,试题信度、效度不理想,试题难度、区分度不合理,试题所涉及的知识面过窄,考试内容中机械记忆的知识过多,应用性知识过少,题型比较单调;在考试评卷时仅报告学生成绩,缺乏科学系统的试卷分析和教学反思.以至于课程考试只流于形式,而未能发挥课程考试在教学中的作用,课程考试储存的信息不能对教师教学和学生学习起到一定指导作用.因此,课程考试结束之后,应该对考试质量进行科学的分析和评价.并把分析与评价的结果反馈给任课教师,教师可以根据反馈的信息进行教学反思和教学改革,从而提高学科的教学质量.

课程考试质量分析是根据试题内容和学生答题情况的分析,评价试卷和试题质量,是对试卷中储存信息的再利用.具体包括定性分析和定量分析[3].课程考试质量分析是考试管理的一项重要工作,其分析和评价结果是对考试工作和教学工作进行科学总结并给予正确评价的重要依据[4].运用测量学原理对课程考试试卷进行系统分析,可以了解学生对基础知识的掌握程度以及对应用能力的培养情况;能够为教师教学改革、提高教学质量提供科学的参考依据.通过试卷分析,也可以获得考试试卷的命题质量,难度、区分度是否合理,教师可以以此为依据,为以后修改、筛选考试题目,建立课程考试题库提供实证依据.考试分析的结果也是以后教学改革的一项重要依据.

基于上述问题,以合肥师范学院2011级应用心理学专业实验心理学考试的试卷分析为例,运用测量学原理进行科学系统的分析,从试卷分数的分布情况、信度、效度、难度、区分度等等方面对衡量考试客观性的标准进行详细的分析.根据分析结果进行针对性的教学反思,为以后实验心理学的教学改革提供科学合理的依据.

1 研究对象与方法

1.1 试卷来源

研究中所分析的试卷来源于合肥师范学院应用心理学专业2011级实验心理学课程考试试卷.试卷由承担实验心理学课程的授课教师命题,命题严格按照应用心理学专业本科培养方案和实验心理学的教学课程标准,通过教研室多次审查,最后教研室主任核查.试卷采用闭卷考试的方式,试卷共计41份.

1.2 试卷结构

按照实验心理学要求,本次考试的试卷结构如表1.

表1 实验心理学考试试卷结构

1.3 试卷评定方式

依据标准化考试要求,命题教师制定试卷参考答案和评分细则,并通过教研室审核.试卷评分采用集体阅卷方式,客观题按照评分标准给分,主观题由承担过实验心理学教学和实验指导的教师按照参考答案和评分细则评阅,最后由其他教师进行总分和复核.

2 试卷分析与主要指标

根据测量学原理,在对考试成绩进行正态拟合检验的基础上,从试卷的信度、效度和难度、区分度几个方面对试卷进行分析.

2.1 正态拟合检验

测量学理论认为一项符合学生实际水平的考试,理论上其考试成绩应该符合或接近正态分布,即考试成绩中等水平的学生占大多数,而特别好和特别差的学生均占少数.本次课程考试卷面满分为100分.全体学生考试的平均成绩为75.22,标准差为8.55.通过正态拟合检验发现本次考试的成绩接近正态分布(见图1).由图1可见,试卷基本能够反映学生的实际情况.

图1 实验心理学成绩频率分布图

2.2 信度分析

考试的信度是指考试结构的一致性程度,是考试质量的稳定性和可靠性的一个重要指标.信度越高说明考试结果受随机因素的影响越少,其考试成绩能够真实地反映学生的学科水平.学科测验的信度通常采用内部一致性系数来评定.本次考试的内部一致性系数为0.61.根据学科测验的要求,试卷成绩较为可靠,说明本次考试较为真实地反映了学生的基本学习情况.

2.3 效度分析

考试的效度是指考试结果的有效性程度,也就是说考试所能够测量到的所要测量的东西的程度,是反映试卷本身的准确性.效度越高说明试卷越能真实地反映学生的实际水平.考察学科测验效度的方法一般采用校标关联效度(是指考试结果与校标之间的相关程度),本次考试成绩我们采用本专业公认的相关较高的两门课程普通心理学和心理统计学的成绩作为校标,本科考试与普通心理学成绩的相关系数为r=0.63,P= 0.000,与心理统计学成绩的相关系数为r=0.61,P=0.000.可以看出本次实验心理学的考试具有良好的效度,能够反映学生的实际水平.

2.4 难度分析

考试的难度是试题的难易程度,也是试题质量分析的一个数量指标.本次考试采用极端分组法计算5类试题和整个试卷的难度,计算公式如下:

其中,XH为高分组总分,XL为低分组总分,N为每组人数,H为高分组最高分,L为低分组最低分。

高低分组的人数按照总人数的27%来计算,结果见表2,整个试卷的难度为0.54,基本符合学科测验的标准,主观题的难度分别为0.63,0.67和0.68,题目稍显简单.

表2 《实验心理学》考试难度与区分度分析

表3 不同性别大学生在各个题型上的得分差异比较

2.5 区分度分析

考试的区分度是指试题区分能力的大小,试题用于考试时对学生学业能力的区分能力,是鉴别试题的重要依据.区分度越高说明试题可以使学业成绩好的学生得高分,学业成绩差的学生得低分.采用极端组分组法计算5类试题和整个试卷的区分度,计算公式如下:

D=PH-PL,

其中,D为鉴别指数,PH为高分组的通过率,PL为为低分组的通过率.

从本次考试的结果可以看出,试卷整体上具有良好的区分度.其中,除单项选择题外其他类型题目的区分度都较好,单项选择题的区分度较差,而这一结果恰恰是本次试卷中难度最高的题型(见表2).

2.6 不同性别大学生在各个题型上的得分情况

从男女大学生在各类题目得分差异比较结果(见表3)可以看出,男女生总分差异存在统计学意义差异(P<0.01),男生总成绩明显低于女生;男女生在名词解释、简答题、实验设计题上的得分均存在非常显著的差异(P<0.01),并在这3个题型上男生成绩明显低于女生;男女生在单项选择题和论述题两个题型的得分差异不存在显著差异(P>0.05).

3 教学总结与反思

3.1 考试标准及其检测功能分析

本次考试的成绩接近正态分布,表明试卷的难度适宜,试卷基本能够反映学生的实际情况.这可能与合肥师范学院为每一门课制订一套严格的课程标准有关.教育测量理论认为,课程考试是一种标准参考测验,标准参照测验的编制主要取决于出题人对课程标准的把握[1].通过考试质量的分析表明,总体上具有良好的信度、效度、难度和区分度,考试成绩较为真实地反映学生的学业水平,能够为教学改革提供较为准确的信息.因此大学的课程考试有必要制订严格的课程标准,教师应严格按照学科的课程标准,并结合双向细目表编制课程试卷.最后由该学科其他相关教师结合该学科课程标准对课程试卷进行评定审查.这样才有可能使得考试结果呈正态分布,考试成绩才能反映学生掌握该课程的实际能力.

通过考试的效度分析结果可以看出,本次实验心理学考试成绩与本班学生在之前学习的普通心理学和心理统计学的成绩均存在高相关,并达到显著水平.一方面说明此次实验心理学的考试具有良好的效度,能够反映学生的实际水平.另一方面也说明,学生学好普通心理学和心理统计学这两门课程是学习实验心理学的基础.

3.2 考试题型分析与教学总结

实验心理学是心理科学的基础性学科,是研究心理现象的一门课程.该课程在心理科学中处于一种特殊的地位,它需要向学生传授自科学心理学诞生以来通过实验研究所获得的各种实验结果和相应的理论;更为重要的是要使学生掌握各种实验方法,培养和发展学生从事心理实验的能力,既包括心理实验设计能力,也包括各类心理实验的操作能力和技能等[5].

通过统计分析可以看出,试卷中总体难度适中,基本符合学科测验的标准,客观题(单项选择题、名词解释)的难度系数适中,单项选择题难度稍难.主观题(简答题、论述题、实验设计题)的难度系数稍大,题目难度稍简单.试卷整体上具有良好的区分度.其中,除单项选择题外其他类型题目的区分度都较好,单项选择题的区分度较差.综合分析,试卷各类题型的难度和区分度的对应关系分析基本符合测量学原理,其中选择题的难度系数较低(较难),相应的区分度也较差,名词解释难度较为适中,其相应的区分也较为适中.主观题(简答题、论述题、实验设计题)的难度系数稍大,相应的区分也稍微偏低.

通过上述分析发现,此次考试学生在论述题和实验设计题上的成绩较好,这可能与我们在教学过程中采用了探索性的教学方式有关.众所周知,实验心理学既是应用心理学专业的基础课,又是一门方法课,所以该课程的日常教学分为两个部分,即理论教学和实验教学,并且在理论教学过程中强调与日常生活实际相结合,布置学生去查阅实验心理学研究的最新成果,达到学以致用.实验教学方面采用两种方式,一是结合理论教学内容做针对性的验证实验,使学生对学过的实验心理学的相关理论有了更加深入的理解;二是开设学生自主设计实验,要求学生结合日常生活中的心理学现象,运用学过的实验心理学的理论和方法,进行自主设计实验,通过自主实验设计开题报告、实验设计、实验报告答辩等环节,学生不仅掌握实验心理学的理论和方法,而且激发了学生的学习实验心理学的兴趣.并且会推荐学生的自主实验报告参与申报各级大学生创新项目和学生创新奖项等.

另外,此次考试学生在单项选择题上的成绩稍差,单项选择题主要考察学生对所学知识的掌握程度和辨别分析能力.这一结果反映出个别学生只注重对知识的应用,而忽略对基础知识的理解与辨析.这也可能是教师在日常教学过程中过多强调实验心理学的应用性,而忽略了对学生基础知识掌握和辨析能力的培养.因此在以后教学过程中应该合理分配基础知识的讲解和学生应用能力培养的教学时间.

3.3 男女大学生的成绩特点分析

试卷分析发现,该门课程的成绩呈现明显的性别差异,男生总成绩明显低于女生的成绩.这可能是因为目前国内大学课程考试普遍更适合女生的学习特点,女生比男生更加适合做闭卷考试[1].女生的现象意识比较强,阅读精细,对具体概念和理论的理解和记忆能力较强,并且对具体实验操作更加细心和谨慎.在考试过程中,对待考试的态度认真,回答问题较为详细.进一步对各个题型分析可知,男女生在名词解释、简答题、实验设计题上的成绩均存在非常显著的差异,男生成绩均明显低于女生.从这一结果可以看出,名词解释题考查的是学生对基本概念和理论的记忆能力,而简答题和实验设计题虽然考查的侧重点是学生对问题的综合分析能力,但是同样离不开学生对知识点的记忆,这些有关记忆能力方法女生占优势.通过对日常教学的观察也印证了上述特点,如,课堂笔记女生较男生认真;课堂讨论女生更加积极参与;平时作业女生比男生完成的质量好;实验报告的撰写女生较男生规范认真,女生对实验数据处理分析更加透彻,论证更加严谨.

4 结语

通过对合肥师范学院2011级应用心理学专业的实验心理学课程期末考试的成绩分析,结合我们前期的教学改革,发现在教学过程中教师、学生以及命题规范性对学科考试质量的影响,以此进行系统的教学总结与反思,为进一步开展实验心理学的教学改革提供参考依据,对将来实验心理学的课程建设起到一定的指导作用.

[1]曹中平.考试分析与教学反思:以一门课程为例[J].大学教育科学,2004,(2):38-42.

[2]汪艳丽.高校课程考试质量的分析与评价[J].北京联合大学学报(自然科学版),2003,(4):44-47.

[3]王莉,任亮宝,赵爱.大学期末考试试卷定性分析研究[J].河西学院学报,2011,(1):124-128.

[4]任亮宝,王莉,赵爱.大学期末考试试卷量化分析研究[J].甘肃科技纵横,2011,(3):163-165.

[5]任旭明.实验心理学考试方式变革的探索[J].华南师范大学学报(社会科学版),1998,(1):43-45.

(责任编辑 钮效鹍)

The Curriculum Examination Quality and Teaching Reflection:A Case Study of the Course in Experimental Psychology

XIE Wei-shi
(School of Teacher Education,Hefei Normal University,Hefei,Anhui 230061,China)

The analysis of course examination quality is an important part of teaching process and the most suitable pointcut of the teaching reflection and teaching reform.By using educational statistics and measurement theory,this paper analyzes “Experimental Psychology”final examination paper of Grade 2011 at Hefei Normal University in terms of normality,reliability,discrimination,difficulty and validity.Results show that the course exam paper is reasonable on the whole.Teaching reflection is based on the results of the analysis.

test quality analysis;teaching reflection;experimental psychology

B844

:A

:1673-1972(2014)06-0093-05

2014-05-17

2014年安徽省高等学校省级教学研究项目“基于应用型人才培养的心理测量学课程改革与实践”

谢威士(1980-),男,安徽太和人,讲师,主要从事基础心理学研究.

猜你喜欢

区分度效度心理学
爆笑心理学
爆笑心理学
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
浅谈试卷分析常用的几个参数及其应用
爆笑心理学
图形推理测量指标相关性考察*
爆笑心理学
浅观一道题的“区分度”
单维参数型与非参数型项目反应理论项目参数的比较研究*
被看重感指数在中国大学生中的构念效度