APP下载

MBBS留学生《口腔科学》线上教学全英文期末试卷分析

2022-04-28王红梅黄鼎阳朱志超邓凤丽杨亚龙

大众科技 2022年2期
关键词:区分度信度试卷

王红梅 黄鼎阳 朱志超 邓凤丽 吴 麒 杨亚龙

MBBS留学生《口腔科学》线上教学全英文期末试卷分析

王红梅1,2黄鼎阳1朱志超1邓凤丽1吴 麒1杨亚龙1

(1.广西中医药大学第一附属医院,广西 南宁 530001;2.广西医科大学附属口腔医院,广西 南宁 530001)

目的:通过对MBBS留学生《口腔科学》课程的线上教学期末考试试卷进行分析,为完善线上教学方法,提高线上教学效果提供参考依据。方法:利用SPSS软件对广西中医药大学2015级47名MBBS留学生《口腔科学》的全英文期末考试试卷进行统计分析。结果:留学生《口腔科学》考试的平均得分为69.5分,标准差为12.13,最高分为95分,最低分为41分,及格率为89.3%。试卷总体难度系数为0.695,各类型试题难度适中偏易,区分度较好,信度为0.8。结论:整体试卷难度适中偏易,区分度及信度较好,但同时个别题型还需进一步进行修正和完善。还需要完善线上教学的教学内容和教学平台,努力建设线上网络课程和资源平台,进一步改进和完善线上教学的教学方法和教学内容,提高线上教学的教学效果。

口腔科学;线上教学;试卷分析

引言

近年来,随着国家科学技术水平的提升和国民经济实力的不断增强,我国的对外教育及学术交流活动也逐渐变得活跃起来。自从2010年我国教育部印发《留学中国计划》起,到我国留学和深造的外国学生逐渐增多[1],这也显示出我国在国际社会上的地位在不断提升。其中,本科临床医学专业(Bachelor of Medicine and Bachelor of Surgery,MBBS)[2,3]中选择到我国留学的国外留学生人数增长较快。MBBS留学生的众多理念与国内学生不同,比如文化传统、宗教信仰、价值观念等,而国家间的医疗理念和水平也存在着较大的差异,语言交流的障碍也给教育教学带来了很大的挑战[4],这对MBBS留学生的教学工作也提出了更高的要求,需要从事相关教学工作的人员付出更多的心血。自1984年起,广西中医药大学开始招收外国留学生,到目前为止,已为40多个国家和港澳台地区培养了留学生和进修生2000多名。

广西中医药大学口腔教研室自2020年起开始承担学校MBBS留学生口腔科学的教学内容。因新冠疫情的发生,学校留学生的日常教学工作该如何继续开展成为难点,需要全体相关教师共同努力,共克难关。尽管当时我国国内疫情已被控制,但从全球范围来看,疫情仍严峻,其中就包括了多个MBBS生源国家[5]。为充分解决留学生的日常教学问题,经学校协商安排,尝试将线上的教学平台应用于MBBS留学生口腔科学的教学中。

线上教学是通过网络教学的方式将线下传统课堂教学的内容转移到网络上去,通过网络进行日常的教学工作及沟通互动等。但对于大多数教师而言,多数进行的为面对面式线下课堂教学,从线下教学转变为线上教学的模式,因两种模式之间的差异性等,对多数教师来说都会面临一定的困难,其中在网络平台操作、师生互动、课堂反馈、课后检测等方面与传统教学模式均有较大差异,会导致教师难以把握网络教学效果。在线上教学过程中,教师无法用“眼神交流”“现场观察”等方式来了解学生的知识掌握程度,这对学生的学习效果和教师的授课质量都带来了一定考验。考试是评价教学成果和学生学习效果的重要方式[6]。因此,通过合理的方式对学生的考试试卷进行分析,能够有效地反映出教师的教学质量和学生的学习效果[6,7],这对于任课教师来说,可以此为依据对教学中可能存在的问题及时进行纠正,从而不断提升教学质量。本文拟对广西中医药大学2015级MBBS留学生口腔科学线上教学的期末考试试卷进行分析,通过分析及时发现教师教学及学生学习中存在的问题,并在日后的教学工作及时采取针对性措施,并为提高MBBS留学生口腔科学的线上教学质量相关工作提供参考借鉴。

1 对象与方法

1.1 研究对象

广西中医药大学2015级MBBS留学生共47人参加了口腔科学期末考试,对这47份考试试卷进行分析和评价。试卷总分为100分,共由客观题和主观题两个部分组成。客观题即客观性试题,主观题即主观性试题,试题共55道。其中客观题(主要为单项选择题)50道,占50分。主观性试题中包含简答题4道,占40分,案例分析题1道,占10分。试题题型分布见表1。

表1 2015级MBBS留学生口腔科学期末试卷题型分布情况

1.2 研究方法

利用Excel软件录入相关数据,再将数据导入SPSS 22.0软件中,利用SPSS 软件对数据进行相应的处理和统计,分析试卷题型分布、考试成绩、试卷的难度、试卷区分度及信度等相关测量学指标。

2 结果

2.1 试卷成绩分析

该试卷总分为100分,共47名学生参加了本次考试。学生平均得分为69.5分,标准差12.13,总及格率为89.3%,最高得分为95分,最低得分为41分。其中,单选题总分50分,最高分及最低分分别为47分和18分,单选题的平均得分为34.8分;简答题满分为40分,平均分为27.4分,最高分及最低分分别是40分和5分;案例分析题满分为10分,最高分为10分,最低分为0分,平均分为7.2分。60分以下(不及格)5人,约占10.6%,60~80分有34人,占72.3%,80分以上有8人,占17%。(见表2、表3)。配合直方图教师对本次考试的成绩作正态性分析(图1),发现本次考试成绩整体呈现正偏态分布,峰度值约为0.156,偏度值约为0.154。如图1所示。

表2 2015级MBBS留学生口腔科学期末考试成绩分布

表3 2015级MBBS留学生口腔科学期末考试成绩表

图1 成绩分布直方图

2.2 试卷难度、区分度分析

试卷难度通常能够反映出试题的难易程度,可用大写字母P来表示。=M/W(M代表该试题平均分;W代表该试题最高得分),值大小位于0-1之间,值越大,则该试题的难度就越小,反之,值越小,则该试题难度就越大[6]。由于学生在做选择题时有随机猜测的可能,为了排除这种随机猜测带来的影响,将计算方式进行改良,利用公式cp=(kp-1)(k-1)计算最终的矫正系数(其中k代表的是该选择题的选项个数)。本试卷中各试题的难度系数见表4。由难度系数结果可知,该试卷的选择题与简答题难度相当,分别为0.69和0.68,难度属于中等水平,主要针对的是口腔基础知识点的考察。案例分析题的难度0.46,位于中等偏易水平,主要考察学生对综合知识点的应用能力。整体而言,试卷难度处于偏难水平即>0.8的题型主要是选择题,其分值约占试卷的6%;难度偏易的题型也集中于选择题,分值约占总分的25%,余下的题型皆处于难度中等水平。

区分度(D),是能够区分出考生能力水平高低的指标,即试题的鉴别力。试题区分度的好坏决定着试题能否将学生对知识的掌握程度区分开来。由于主观题和客观题所属数据类型不同,故采用不同的方法进行分析。主观题属于非等间距测度的连续变量,而客观题属于顺序数据类[7],通常采用的是皮尔森相关分析和斯皮尔曼等级相关分析。皮尔森相关分析是求每道试题得分与总分之间的相关系数,而斯皮尔曼等级分析是求每道试题得分与总分之间的相关系数[7]。一般来说,D<0.2,说明该题的区分度较差,0.2<D<0.5之间属于中等水平,若D>0.5以上说明区分度良好。从表5中可以看出,本试卷中选择题与简答题的区分度分别是0.82和0.9,区分度良好,案例分析的区分度为0.46,达到中等水平,所有题型皆达到考试要求。

表4 口腔科学期末考试试题的难度分析

表5 口腔科学期末考试各题型的难度及区分度

2.3 试卷信度分析

检测结果的一致性、可靠性及稳定性通常作为试卷信度分析的标准,一般将一致性作为反映信度高低的标志[1]。信度值的大小称为信度系数,信度系数位于0~1之间,数值越高,说明试题内在的一致性越好,测试的结果就越可靠。本试卷整体信度系数为0.8,该值表明试卷信度较好(表6)。具体分析来看,案例分析题与总分的相关系数为0.402,系数值较低,且删除该项目后信度系数0.87高于原试卷的信度系数0.8,说明该题信度较低,应进行修改或删除(表7)。

表6 口腔科学期末考试试卷信度系数

表7 口腔科学期末考试试题题型的信度分析

3 讨论

口腔科学在国内是与临床医学并列的独立一级学科,但与临床医学又有着非常密切的交叉和联系。相比较于欧美的“牙医学”,我国的口腔科学涵盖的范围更为广泛,学习口腔科学知识对于提高MBBS留学生的综合临床能力,树立整体医疗观不可或缺[4]。线上教学是将传统课堂的授课模式转移到线上网络平台,打破了传统教学对于时间、空间的限制性,具有授课方式灵活,授课地点可不固定等诸多优势。同时,线上教学的方式也较为多种多样,比如网络直播教学、网络在线课程、提供教学视频供学生自主学习、网络答疑等。由于新冠疫情,在口腔科学的线上教学课程中,学校采用了网络直播教学的方式。这种教学方案契合了MBBS留学生地域/时区跨度大、互动需求强的特点,也有利于在多媒体教学中对教学资料、视频视频等资源的随时获取。

试卷作为反映教学成果的重要一环,进行试卷分析在教学工作中就显得尤为重要。通过试卷分析教师能够及时发现教学工作中可能存在的问题及学生学习过程中容易出现问题的环节,从而能够在之后的教学工作中及时进行改正,这对于提升教学质量至关重要。此外,对试卷有整体的把控,对试卷整体难度做到心中有数,从而使学生的成绩分布尽可能趋向于合理,这对于教师教学改进及学生的身心健康都能起到重要作用。本文利用SPSS软件对2015级MBBS留学生的口腔科学期末考试成绩进行分析,对相关数据进行具体分析,以期反映出教学工作中存在的问题,为日后的教学工作提供参考借鉴。

3.1 题型分布与成绩分析

本试卷题型包括选择题、简答题和案例分析题。其中,选择题属于客观题类型,简答题与案例分析题属于主观题类型。客观题题量占90%,客观题试题覆盖面较宽,涵盖了各个学习章节内容的基本知识点。主观题及案例分析题占10%,分值占50%,考查了学生对口腔临床基础知识如BASS刷牙法、拔牙并发症、牙周炎临床表现等口腔常见病多发病的掌握和熟悉程度。试卷平均分为69.5分,及格率为89.3%,可以看出大部分同学对口腔基础知识的掌握都较好,达到了课程的基本教学目标。对学生考试成绩行正态性检验,结果显示MBBS留学生口腔科学的期末考试成绩呈正偏态分布,偏度值为0.154,峰度值为0.156,故可以认为2015级MBBS留学生口腔科学的期末考试成绩分布基本符合正态分布。

3.2 试卷难度、区分度及信度分析

试卷的信度、区分度和难度是评价试题质量的重要参数,也是评价考试结果的可靠性、有效性的重要依据[8]。本试卷总体难度水平适中,各题型的难度位于0.6~0.8的范围内,属于适中且偏易的水平。选择题区分度为0.82,简答题区分度为0.9,案例分析题区分度为0.46,说明选择题和简答题的区分度较好,案例分析题区分度一般,对案例分析题可以进行修改和完善以提高区分度。本试卷信度系数为0.8,说明该试卷信度较好。而案例分析题与总分的相关系数为0.402,数值较低,且删除该项目后信度系数为0.87,高于原试卷的信度值0.8,说明该题信度较低,应对该题进行修改或删除,这也与试卷区分度分析的结果一致。

3.3 教学思考

广西中医药大学的MBBS留学生主要来自于亚洲、非洲的一些欠发达地区,学生的思维方式、文化背景等都与国内学生存在较大的差异,留学生之间专业基础和英语水平等方面也是参差不齐,这些都对MBBS的教学工作提出了更高的要求和更大的挑战。

教研室是首次承担MBBS留学生《口腔科学》的全英文授课,难免经验不足,且线上教学尽管有其优势和特色,但教学过程中却缺乏传统课堂中面对面的交流互动,尽管线上课堂可以通过字幕、连麦等方式实现实时沟通,但是这些方法手段皆是延后的。教师难以及时通过学生对课堂教学的反应发现学生在学习中存在的疑难点,这给教师把控课堂节奏带来了很大的挑战,教师只能按照自己预想的进度进行授课,此外,留学生相对国内学生来说性格更加活跃,对课堂互动的要求较高,这都对教学工作提出了更高的要求。为了解决这些问题,在教学课件的设计中,尽可能区别于国内学生的教学模式,而是更多地选择加入视频及动画,以此来提高留学生的学习兴趣。特别是口腔临床操作部分,单纯理论讲解容易枯燥乏味,而视频教学则能够有效规避该问题,增强了课堂的趣味性,能够促使学生集中课堂注意力,还能促使学生在视频学习中深入学习专业词汇及临床操作步骤。教师还利用钉钉实现了实时互动、课堂答疑解惑以及随堂测试。计划在以后的课程中,采用网络课程、小班化上课、课后答疑讨论等多样化的线上授课方式,弥补线上教学的不足。在期末测试方面,因为是首次授课同时也是首次线上授课,教师也降低了考试难度,以口腔基础知识为主要考核目标。对2015级MBBS留学生《口腔科学》期末试卷的分析结果也证实,该试卷难度适中偏易,区分度较好,信度较好,能够真实反映出学生的学习能力和水平。说明留学生对口腔基础知识的掌握情况基本符合预期。同时,案例分析题在区分度和信度方面还有待改进,需要进一步的修改和完善。

3.4 后疫情时代的在线课程建设

就目前的形势来看,新冠疫情还将在全世界范围内持续,疫情的应对预案和防治工作也将常态化。MBBS留学生的线上教学模式在短期内将成为主要授课方式。在《口腔科学》的课程建设方面,还需要不断进行网络课程的建设以及线上教学的改进和完善,继续对线上教学方法进行改进和教学内容进行修改[9,10],比如线上的形成性评价、教学反馈、视频学习资料及网络资源等。虽然“线上直播课程+教学平台”是疫情期间MBBS留学生的主要教学方式,但希望今后线上教学方式可以保留部分下来,用以改进和加强传统的课堂教学。可通过线上线下相结合的方式进行教学工作,综合利用线上教学的便捷性、广泛性和普适性,分担一部分线下课程内容,而将线下课程教学内容更加合理地分配到师生间的互动、讨论、交流中,通过这样的方式,来促使MBBS留学生《口腔科学》课程教学质量的提升。

4 结束语

整体来说,《口腔科学》期末考试试卷分析结果表明,广西中医药大学2015级MBBS留学生口腔科学期末考试成绩基本符合正态分布,大部分题型难度适宜,区分度及信度良好。其中,案例分析题因区分度及信度相对较低,因此案例分析题目需及时进行更新,以提高其区分度和信度。分析结果也表明,学生对基础知识掌握较好,整体课程的学习效果基本符合预期。在后续教学过程中,还需要完善线上教学的教学内容和教学平台,建设线上网络课程和网络资源平台,进一步改进和完善线上教学的教学方法和教学内容,从而促进教学质量的不断提升。

[1]黄睿彦. 我国来华留学生本科医学教育现状与趋势的案例研究[J]. 医学教育研究与实践,2020,28(4): 621-624.

[2]董向前. MBBS留学生内科学全英文教学的实践与探索[J]. 教育教学论坛,2017(32): 142-143.

[3]谢亮焜,李艳红,孙宇,等. MBBS留学生口腔医学教学效果分析[J]. 昆明医科大学学报,2018,39(7): 133-136.

[4]朱慧勇,吕炯. 疫情期间直播/在线平台实施MBB口腔教学的实践与思考[J]. 浙江医学教育,2021,20(1): 18-20.

[5]潘萍,林海燕. MBBS留学生妇产科见习带教的实践与思考[J]. 中国继续医学教育,2021,13(14): 100-103.

[6]敖希琴,蒋静. 基于SPSS的试卷质量分析与建模[J]. 安庆师范学院学报(自然科学版),2016,22(4): 37-40.

[7]刘伟东,屈华,石萍,等. 试卷分析的量化与规范化[J].辽宁工业大学学报(社会科学版),2012,14(4): 100-102.

[8]刘胜伟,何锦悦. 2017级护理专业《药物学基础》试卷分析与教学思考[J]. 教育教学论坛,2019(17): 237-238.

[9]姜福琼. 以案例为线索的讨论式教学在MBBS留学生皮肤病见习中的应用[J]. 昆明医科大学学报,2017(38): 144-148.

[10] 周娜. 一个病例串联和TBL、CBL相结合的方法在MBBS 教学中的运用评价[J]. 中国继续医学教育,2015(2): 6-7.

Analysis of All English Final Papers of MBBS International Students' Online Teaching of

Objective: To analyze the final examination papers of Online teaching ofcourse for MBBS international students, so as to provide reference basis for improving Online teaching methods and improving the effect of Online teaching. Methods: The English final examination papers of 47MBBS international students in Guangxi University ofChinese medicine in 2015 were statistically analyzed by SPSS software. Results: The average score ofexamination for international students was 69.5, the standard deviation was 12.13, the highest score was 95, the lowest score was 41, and the pass rate was 89.3%. The overall difficulty coefficient of the test paper is 0.695, the difficulty of various types of test questions is moderate, easy to distinguish, and the reliability is 0.8. Conclusion: The overall test paper has moderate difficulty, easy to distinguish and good reliability, but at the same time, individual question types need to be further modified and improved. We also need to improve the teaching content and teaching platform of Online teaching, strive to build an online network curriculum and resource platform, further improve and improve the teaching methods and teaching content of Online teaching, and improve the teaching effect of Online teaching.

stomatology; Online teaching; test paper analysis

G642

A

1008-1151(2022)02-0140-04

2021-11-22

广西壮族自治区卫生和计划生育委员会自筹课题资助项目(No.Z20170178);广西高校中青年教师科研基础能力提升资助项目(No.2020KY07007);2020年广西中医药大学第一附属医院教改课题(2020JG01B);2020年广西中医药大学教育教学改革项目(2020B005);自治区中医药局自筹经费科研课题(GZZC2019069)。

王红梅(1986-),女,广西中医药大学第一附属医院主治医师,口腔临床医师,研究方向为口腔医学教育、口腔3D打印相关研究。

杨亚龙(1993-),男,广西中医药大学第一附属医院住院医师,研究方向为中医药教学和教学管理研究工作。

猜你喜欢

区分度信度试卷
《广东地区儿童中医体质辨识量表》的信度和效度研究
浅谈试卷分析常用的几个参数及其应用
图形推理测量指标相关性考察*
Module5 A Trip Along the Three Gorges
Module5 Great People and Great Inventions of Ancient China
Module 4 Sandstorms in Asia
Module 1 Europe
浅观一道题的“区分度”
科技成果评价的信度分析及模型优化
单维参数型与非参数型项目反应理论项目参数的比较研究*