体育学硕士毕业论文中调查问卷的信效度检验
2023-11-06谢威朱兵
谢威 朱兵
摘要:大部分硕士进行硕士论文写作时会选择问卷调查法,因为问卷调查法操作起来比较方便,能得到大量所需要的数据。正是由于普遍使用,部分论文的调查问卷很可能出现问题,因此,本研究选取50篇足球方向的硕士论文作为样本,对其调查问卷的有效性、可靠性、客观性进行正确性辨析。研究发现有不少的硕士论文中的调查问卷没有进行信效度检验,且没有进行信效度检验的硕士论文调查问卷都出现了各种问题,所以得出,问卷调查一定要对问卷进行信效度检验,从而保证调查问卷的有效性及可靠性。
关键词:足球;硕士论文;调查问卷;信效度检验
The three characteristics of the questionnaire in the master's thesis
——taking football direction as an example
XIE Wei1 ZHU Bing1
(1. Graduate School of Guangzhou Institute of Physical Education, Guangzhou, Guangdong 510,500)
Abstract: Most masters will choose the questionnaire method when writing their master's thesis, because the questionnaire method is more convenient to operate and can obtain a large amount of required data. It is precisely because of this common use that there will be problems with the questionnaire of the paper, so this study selects 50 master's theses in the direction of football as a sample to correctly analyze the validity, reliability and objectivity of the questionnaire. It is found that a large number of questionnaires in master's theses do not carry out reliability and validity testing, and there are various problems in the master's thesis questionnaires without reliability and validity testing, so it is concluded that the questionnaire must be tested for reliability and validity, so as to ensure the validity and reliability of the questionnaire.
Key words: football; Master's thesis; Questionnaires; Reliance test
1.引言
碩士研究生在撰写毕业论文时,或多或少会选择用问卷调查法这种研究方法,收集研究所需要的各种资料信息与数据。在当前的社会学研究中,大多学者采用了大量的数据采集方式,其中尤其是以问卷调查法为典型,特别是在社会调查中,问卷调查法更是采用得最多。[1]使用问卷调查法进行资料收集就必须要制作问卷,无论是何种研究方法都面临着信效度问题,那问卷调查法也同样面临着这个问题。[2] 信度是一份问卷的可信性的程度,就是指多次测量得到结果是否是大体一致的,而不是每次结果出入都很大。效度是指这份问卷是否真实的测量了它要测量的东西,所以对一份调查问卷进行三性分析是非常有必要的,除非是直接引用专家设计并通过检验的问卷。为了验证效度的真实性,研究者应该理清问卷调研的研究思路,摈弃为了问卷而问卷的做法,注重问卷调查整体过程的科学严谨,保证问卷流程规范化。[3]本文通过分析在知网上检索到的50篇足球方向硕士论文中的三性检验进行分析,从而得出结论。
2.研究方法
本论文的研究主要采用了以下几种方法:(1)文献资料法,在中国知网数据库上以“足球、问卷、现状研究”为关键词进行了检索,选择其中50篇硕士论文作为样本,分析其中的三性检验是否存在问题,存在什么问题。(2)数理统计法,通过检索关键词查找所需要的文献资料,再从其中随机抽取50篇所需要的硕士论文作为样本,进行分类整理,对比分析。(3)逻辑分析法,通过对所收集到的文献资料进行整理,分类,梳理其中的脉络,对其中蕴含的关系进行阐述。
3.研究结果
在硕士论文写作中,问卷调查法是比较常用的一种研究方法。科学而规范的研究方法是学科建设与发展的基石,是学科建设与发展的动力,它能使学科建设和理论发展不断走向进步,也是一门学科成熟与否的标志。[4] 问卷调查法是以有效的数字实现复杂宏观世界中现象或问题的精确把握的科学方法,是为解决问题、改进现况并计划未来提供现实依据的研究方法,是研究社会现象背后的各种社会力量作用下产生的客观事实的研究方法。[5] 在本文研究所选取的50个样本中,有3个样本没有使用问卷调查法这一研究方法,但是其硕士论文题目是以某某现状研究为题,在实际撰写中却并没有使用问卷调查法。本研究对这50篇硕士论文进行列表整理,分析结果如下。
3.1调查问卷设计需注意的问题
一个研究调查成功的关键问题就是其中调查问卷的质量,也即是说是否设置合理,换句话就是调查问卷要有较高的信度和效度。而要保证问卷具有较高的信度和效度?遵循问卷设计的程序设计问卷是必要前提。[6] 实践研究证明,要想成功地开展一项调查研究,要想做到这一点,就必须要熟悉并掌握问卷调查法的具体流程和操作方法,同时也要提高问卷调查的可靠度和有效性,还必须熟悉和了解它的方法论背景。[2] 问卷的編制是这整个研究中最重要的一个环节,问卷设计的可靠度和有效性越高,将直接影响到研究调查工作的最终结果。因此,研究人员在进行调查问卷设计时,需要对问卷调查对象所采用的定义有所了解。如果研究者所设计的调查问卷在调查者与被调查者之间没有吻合度较高的意义结构,研究结果的有效度和可信度是值得怀疑的。[7]
3.2硕士论文问卷有效性辨析
3.2.1有效性的概念界定
有效性(也就是效度)就是要判断所设计的题目是否合理,以及它能否有效地反映出研究者的研究目的。即调查出来的结果与设想的预期目标之间的误差程度。为了保证问卷调查结果的准确性和科学性,需要对预调查的数据进行分析,进而检验问卷本身的可信度和有效度。[8] 效度类型多样,可分为内容效度、结构效度以及校标效度,尽管从其分类来看表现多样,但是实际上其中每种类型的方法都适用于不同情况的测量结果。
3.2.2有效性在问卷中的应用
在调查问卷中常见的效度检验方法有内容效度检验,校标效度检验和结构效度检验,但是校标效度很少出现在硕士论文调查问卷的效度(有效性)检验中。内容效度是指问卷内容的恰当性和相符性,即问卷内容能否有效和正确反映所要测量的特质,能否与测验目的和要求达到一致的结果。[9] 调查问卷内容效度常用的评价方法是专家法,即请有关专家对问卷题目与原来的内容范围是否符合进行分析,作出判断,看问卷题目是否较好地代表了原来的内容。[10] 通过使用调查问卷调查而得到被调查者的实际情况,再经过运用统计分析,最后的结果表明调查问卷是可以有效解释被调查者的某项特质,因此表明这份调查问卷具有很好的结构效度。因子分析法是一种经常被用来评估问卷结构效度的方法,它的目标是想要得出两种概念相似的问卷会与理论中的预示一般,都在共同的公共因子当中。
3.2.3本研究中有效性辨析
在本研究中所抽取的50篇硕士论文样本中,有3篇硕士论文是没有使用调查问卷法的(《我国足球后备人才培养的现状与对策研究》、《延边地区朝鲜族学校开展足球运动现状及对策研究》、《我国足球方向硕士研究生学位论文选题现状及发展对策研究》),本人认为,体育学硕士研究生的论文题目中应当包含使用调查问卷法的现状研究才能真正将其合理性充分体现出来,凸显其研究价值和意义。除去这3篇样本之后,还有5篇样本在论文调查问卷的设计中没有使用有效性检验也就是效度检验,没有在论文中有文字说明体现,所以认定其没有使用有效性检验(《山西省中小学足球传统项目学校的现状与研究》、《陕西女子青年足球队员身体素质训练现状分析及发展对策研究》、《我国中超俱乐部2012赛季引进外籍球员的现状及对策研究》、《成都市足球协会实体化现状探究》、《新疆青少年足球专业后备人才培养现状研究》)。在42篇使用了有效性检验(效度检验)的样本中,有9篇样本使用了多种方法进行有效性检验,例如专家评判法,进行了问卷预测验,用文字描述问卷设计的参考依据,如参考某某的某某问卷量表,这些方法都是属于内容效度检验。除此之外,有作者也会使用结构效度进行检验,也有使用特尔菲法进行效度检验,以及使用逻辑分析法。多种检验方法保证了问卷的有效性。
表1简单对50篇硕士论文是否使用有效性检验进行了统计分析,发现没有进行问卷调查的硕士论文在总的50篇样本里面占比16%,而对调查问卷进行了效度检验的硕士论文在50篇样本里面占比84%,说明,绝大部分硕士在进行说硕士论文问卷的设计与编制的时候都会考虑到调查问卷的有效性(效度),但是这42个样本里面,只有9个样本使用了多种检验方法进行调查问卷的有效性检验,其余33个样本都是只使用了一个方法,只对内容效度进行检验,使用的是专家评判法,没有对结构效度等进行检验。
3.3硕士论文问卷可靠性辨析
3.3.1可靠性的概念界定
可靠性分析(信度分析)是一种测度综合评价体系是否具有一定稳定性和可靠性的有效分析方法,一般[11]多以内部一致性来表示该测验信度的高低。问卷检验的信度会受到来自随机误差的影响,通过两次测验结果的对比,两者相差不大则说明,误差带来的影响可忽略不计,同时也表明该测验信度越好。因此,信度亦可视为测量结果受随机误差影响的程度。系统误差产生恒定效应,一般不影响信度。[9] 在问卷调查中可靠性分析相对而言非常简单,大部分都能通过信度检验。
3.3.2可靠性在问卷中的应用
信度系数是衡量检验一份调查问卷质量高低好坏的重要指标。取值范围为0-1,该数值在这个区间内越靠近1,也就说明该问卷的可信度越好,一般认为在0.9以上信度为最佳状态。比较常用的问卷信度(可靠性)检验方法以重测信度法为核心,内部一致性可信度分析法,也就是使用克隆巴赫系数法(Cronbachα信度系数),克隆巴赫α系数的检验显示,本量表的内部信度较好,各个因素层次的内部信度均达一般水准,满足了测验的信度要求。[12]对于调查问卷中的可信度评价分析一直是国内硕士论文设计编制调查问卷时很容易被忽视的问题,且也是比较重要的问题。调查问卷的设计者与编制者在设置问卷的过程中人们关注的仅仅是数据和信息收集的难度,和调查问卷设计的逻辑问题,很少会对调查问卷进行信度(可靠性)分析该份问卷是否具有可靠性的问题。在调查问卷中做好信度分析这一工作会使识别筛选与调查问卷没有关联性或者关联性很小的量表的工作更轻松,从而更好的推进与修改调查问卷量表,提供了很好的理论依据。
3.3.3本研究中可靠性分析
在本研究中,对所选取的50篇硕士论文调查问卷的可靠性(信度)进行整理与分析,发现有37篇硕士论文(除去没有使用问卷调查法的三篇)对其设计与编制的调查问卷进行了可靠性(信度)检验,也就是说有74%的文章进行了信度检验,这同样也说明没有对调查问卷进行信度分析的硕士论文还是非常多的。下面对此情况进行列表。
相对于效度检验而言,信度检验是绝大多数碩士在进行撰写硕士论文时常常忽略的一个重要的检验方法,从本研究中就能看出来,没有进行可靠性(信度)检验的硕士论文占总样本的比例是20%,这个数字看起来不是很大,但是相对相较于度检验来说,没有进行信度检验确实是个比较常见的问题。在实际的可靠性检验中,可能出现“可靠”,但“不真实”的情况。[13] 问卷进行了可靠性检验都有可能出现不真实的情况,那么可想而知一份调查问卷不进行效度检验是何等结果。
从表2中可以得出,有28篇硕士论文进行效度检验是采用的重测信度法,占比56%,这也是问卷调查法进行信度检验比较常见也比较便捷的一种检验方法。采取同质性的调查问卷进行同种人群的测量,按照先后顺序测量两次,其测量结果的相关程度为重测可信度,它考察的是经过一段时间后问卷测量结果的稳定程度,重测可信度越高,测量结果越一致,这也表明受测验环境中日常随机因素的影响越小。[14] 然而,重测法也仅适用于样本容量不是很大的对象,否则就不容易实现。其次,有8篇采用的是内部一致性检测法,也就是克隆巴赫系数法(Cronbachα信度系数),占比16%,这个相对来说也是属于比较常见的一种检验方法。有4篇采用的是折半信度法(皮尔森系数),占比8%。这一信度方法指把问卷项目分成两半,通过对两个部分之间的相关性进行评估和测量来估算出整个问卷的信度,该方法主要用于态度型和观点型问卷的信度。[15] 剩下5篇是采用了其他的检验方法,因为数量不是很多,所以不在此细分是何种方法,占比10%。在总的进行信度检验的论文里,有9篇是几种方法结合起来验证调查问卷的可靠性,这种相对来说会比只用一种检验方法更准确一点。没有进行信度检验的共有10篇,这占比20%,在本研究中,有五分之一的样本没有进行信度检验,这是一个非常严重的问题。
3.4硕士论文问卷是否合理与三性检验的联系
通过表3的数据可以看出,只有百分之53.19%的调查问卷设置比较合理,还有46.81的问卷或多或少都有各种问题出现,这也充分说明了进行信效度检验对于调查问卷的质量的重要性。
对所有50篇硕士论文的三性检验,也就是可靠性、客观性以及有效性进行一个正确性辨析之后,对出现问题的一些情况进行了分类,整理出数据,从而得出表4的数据。在本研究中发现,没有对调查问卷进行信效度检验的11篇硕士论文中,有9篇硕士论文的调查问卷都出现了各种各样的问题(一些问题没有设置填空题,例如收入等,导致信息量太少,从而会影响答案的穷尽性和互斥性,或是全部设置填空题,且题量太大,还有选项没有设置机关,等等,都不能保证问卷的质量),而且问题还比较多,占比81.81%,从而得出,没有进行信效度检验的调查问卷一般都是行不通的。再分析第二种情况,在对调查问卷进行多种信效度检验的11篇硕士论文中,仅仅有3篇硕士论文出现问题,占比27.27%,相对于没有进行信效度检验的来说,这个结果已经是非常理想了。因为或多或少都出现一些误差,这个是不能完全保证的,也是可以接受的,误差可产生在问卷调查的任何环节从而降低结果的可靠性和有效性,所以,从调查设计、问卷拟定、现场实施及资料汇总等整个过程都应注意质量控制,以保证调查结果的可信度和有效度。总体而言,进行信效度检验或者进行多种方法的信效度检验,其中测试的问卷所得出的信度与效度将直接影响问卷的质量。[16] 调查问卷的研究中显现出来的不妥与失误,其实质原因是对于体育科研方法的了解过少,缺乏对科学研究的敬畏。总体解决方案是“谨慎和积累”。[17]
3.5设计硕士毕业论文调查问卷需重视的问题
(1)首先做好研究方法的确定。做问卷设计方面的研究,要注意好研究工具和研究方法的使用,使用何种研究工具,对于有些问卷内容,是否可以引用权威专家设计好的内容,以及测量工具,这样就只需对研究对象有所修改并重新进行一下信效度检验就可以了,该种方法可以为研究省时省力,提供便利。(2)注意问卷内容的规范与科学性。对于调查问卷内容选项的编制一定要符合规范,不能依据自己的想法经验来决定指标的选择,要进行科学的选择以及依据普罗大众都认可的内容,保障设计出来的调查问卷所收集的数据信息有效而科学。(3)重视调查问卷的信效度分析。根据所分析的硕士毕业论文以及一些数据文献可以发现,大多数学者以及硕士在进行论文写作时,涉及到相关内容要进行三性检验这一必须要进行的研究步骤时都会忽略这个重要的问题,考虑到这一点的作者事实上并不多,对于问卷设计中相关问题的组织与构成来说,这是非常重要的一个问题,会直接影响到硕士所撰写的毕业论文整个研究的结论,相信都知道,如果你的调查问卷如果没进行三性检验,别人怎么会相信你做出的结论呢,既没有有效性,又没有可行性,怎么证明你的研究结论是正确的呢?所以这几个问题在现状类硕士毕业论文调查问卷的编制设计中是一定要注意重视的问题,争取做到对学术研究的科学性,为科学研究营造一个良好的学术研究氛围,做好高质量的毕业论文,顺利毕业。
4.小结
对于现状类论文这一类论文中,最容易被忽视的一个问题就是不对调查问卷进行信效度检验就直接开始使用其得来的数据信息,而一份高质量的调查问卷则是论文研究的精髓所在,一份高质量的调查问卷所得出来的研究数据能够有效支撑论文的结论。因此,要保证调查问卷所收集到的数据信息准确有效,就必须要对调查问卷进行信效度检验,而且是多种检验方法结合起来使用,会使设计编制出来的调查问卷具有较高的有效性、可靠性、客观性,真正做到了三性检验,检验出来发现问卷有问题,即使对调查问卷进行修改,只有经过了严格的信度与效度检验的有效问卷才可以进行正式的测量进而得出高质量的调查问卷以保证问卷的有效性及可靠性。希望今后的硕士毕业论文对于问卷的信效度方面一定要严谨从而写出高质量的毕业论文。
参考文献
柯友枝,刘阳,孙建刚,等.问卷是否有效——基于体育核心期刊论文(2010-2019)的系统分析[A]. 中国体育科学学会.第十二届全国体育科学大会论文摘要汇编——专题报告(期刊工作委员会)[C].中国体育科学学会:中国体育科学学会,2022:12-13.
风笑天.方法论背景中的问卷调查法[J].社会学研究,1994,(03):13-18.
罗宝勇,魏珣,杨文南.我国档案学问卷调查法期刊论文统计分析[J]. 档案管理,2022,(04):108-111+114.
朱国生,陈雯娴.体育学科发展基石——研究方法[J].体育世界(学术版),2019,(12):159+131.
郑晶晶.问卷调查法研究综述[J].理论观察,2014,(10):102-103.
静恩英.调查问卷设计的程序及注意问题[J].湖北民族学院学报(哲学社会科学版),2009,27(06):99-102.
风笑天.推动与引领:《社会学研究》三十年来的方法研究论文回顾[J].社会学研究,2016,31(06):49-72+243.
张钦,薛海丽,唐海萍.问卷调查法在可持续生计框架中的应用[J].统计与决策,2019,35(16):78-83.
柴辉.调查问卷设计中信度及效度检验方法研究[J].世界科技研究与发展,2010,32(04):548-550.
余海滨,刘青,余学庆,等.调查问卷研制与评价的相关问题初探[J].中国药物经济学,2014,9(02):193-196.
张虎,田茂峰.信度分析在调查问卷设计中的应用[J].统计与决策,2007,(21):25-27.
隗金水,邹亮畴,潘慧文.体育科研中自编量表的内在信度?结构效度量化分析[J].广州体育学院学报,2005,(06):110-114.
隗金水,潘慧文.體育问卷调查中的可靠性与真实性探析[J].体育科学,2004,(10):76-80.
曾五一,黄炳艺.调查问卷的可信度和有效度分析[J].统计与信息论坛,2005,(06):13-17.
亓莱滨,张亦辉,郑有增,等调查问卷的信度效度分析[J].当代教育科学,2003,(22):53-54.
赖扬盛,康桥水,段子勇,等.体育类问卷调查法的问卷量表的编制[J].内江科技,2021,42(05):22-23.
毛志雄.体育科学领域的问卷调查:常见问题与解决方案[J].北京体育大学学报,2016,39(05):127-131+136.