项目反应理论指导下村民生活满意度调查问卷的设计

吴 广,张运吉*,张敬玮,闫明慧,赵秀华,徐学东*,

1.山东农业大学 园艺科学与工程学院,山东 泰安 271018

2.山东农业大学 水利土木工程学院,山东 泰安 271018

项目反应理论指导下村民生活满意度调查问卷的设计

吴 广1,张运吉1*,张敬玮2,闫明慧2,赵秀华2,徐学东2*,

1.山东农业大学 园艺科学与工程学院,山东 泰安 271018

2.山东农业大学 水利土木工程学院,山东 泰安 271018

新农村建设背景下，村庄改造以村民为主体。通过科学的问卷设计进行民意调查，能更加准确地了解村民真实意愿，对村庄改造具有指导意义。本文以项目反映理论为指导编写村民生活满意度调查问卷，详细阐述问卷设计的基本流程、问项筛选、误差控制等技术环节，最终形成精简的村民生活满意度调查问卷。结果表明，IRT理论能精简调查问项，严格控制问卷标准，极大提高调查问卷的设计质量，对新农村建设过程中切实了解民意、指导改造建设工作具有重要意义。

社情民意调查;项目反应理论;问卷设计;村民生活满意度;Likert量表

村庄改造是一项惠民工程。近年来，新农村建设如火如荼，各地相继开展了各种形式的村庄改造实践工作，政府投入大量人力、物力和财力，在切实改善农村地区生产、生活条件上取得了显著成效，为推进新农村建设、统筹城乡发展作出了积极探索和实践。

但是，在改造的具体实施中，政府或集体一般处于主体地位，有些农民反映强烈、生活生产急需改造的项目，政府并没有作出及时安排，还有些改造项目是根本脱离了农民实际需求的“面子工程”。这使作为改造受益人的村民长期处于被动地位。究其原因除了财政预算、施工过程等人为因素外，主要是政府站在改造的制高点俯视村民，不了解村民的真实需求。村庄是村民生产生活的家园，村庄改造如不能突出村民的主体地位，尊重村民意愿，就不能真正实现村庄改造政策的良好初衷，不但造成资源上的巨大浪费，最终损害广大村民的利益[1]。为解决这种政府供给与农民需求不对等的局面，切实了解村民需求，建设改造前进行相应社情民意调查显得尤为必要。

1 社情民意调查

社情民意调查是使用社会科学的调查和分析方法，对一个地方政府所管辖的居民的调查，通过调查了解公民的需求、行为特征、政策偏好及其对政府服务的评价，并确定公民对政府服务评价高低的决定因素，以利于政府改进服务的过程[2]。民意调查的方法与国际接轨，包括问卷、焦点小组、网络问卷调查、数据挖掘等多种方法，其中问卷调查法在我国应用最为普遍。如何遵循科学理论，设计出合理的问卷（量表），对公众就政府行为及其产生的后果进行准确地心理特质（如感受、意愿、态度等）测量，是社情民意调查中的关键问题[3]。

民意调查设计中对问卷设计质量的评价主要是通过“信度”和“效度”进行。实际中，一方面由传统的问卷设计理论所衍生出的信度指标（克朗巴哈α信度、重测信度、评分者信度、复本信度、折半信度等）与效度指标（结构效度、鉴别效度、内容效度、准则效度等）在调查中发挥着积极作用，但也存在真值假设不足、平行性假设不足、信度定义不足、正态假设不足、评价理论适用范围不足等缺点[4]；另一方面，问卷设计者多凭经验或前者研究文献主观臆造问项，没有逻辑依据，从而导致问卷设计质量不高。而以项目反应理论（IRT）为代表的现代反应理论，弥补了传统理论的不足，逐渐成为社情民意调查的重要理论。

2 项目反映理论

项目反应理论[5]（Item response theory）也称潜在特质理论或潜在特质模型，是一种现代心理测量理论，即在一定的假设之下，用一个数学函数去描述被试在项目上可观察的作答表现与其不可观察的特质水平之间的函数关系。IRT认为，任何受访者就调查问题能否得到肯定或满意回答的概率，取决于两个方面：一是自身态度，即主观因素；二是用“难度”与“区分度”等属性所反映的调查问题的客观属性[5]。IRT具有以下特点：（1）项目统计量不依赖于特定的被试样组；（2）被试的测验分数与测验的难度无关；（3）能够根据该测验理论选择和被试能力相匹配的测验项目；（4）不要求测验误差和方差对所有被试都相同；（5）不要求通过严格的平行测验来评价测验精确度。

自20世纪50年代诞生以来，IRT已跨越近70个年头，渗入军事、医疗、教育、工业等众多领域。在社情民意调查中应用IRT理论，目的在于了解公民对政府行为及其产生后果的心理特质（如感受、意愿、态度等）评价，以及决定这些评价的影响因素，这与社情民意调查的目的一致。在调查问卷设计中，采用IRT方法进行调查问题的取舍、等级量表的选级、基于不同受访群体的问卷选项、满意度（和谐度）合格线标准划分等方面优势明显[5]。

文章主要论述村民生活满意度问卷的设计流程，从而切实了解村民需求。借助软件对问卷数据进行处理，所以有关项目反应理论的数学模型以及项目特征曲线本文不再详述。

3 调查研究——村民生活满意度问卷设计

在民意调查中，被试者一般只根据切身体会，做出对相应调查结果的评价，所以满意度调查是民意调查的主要形式。满意度是顾客或用户接受产品和服务的实际感受值与期望值比较的实际程度。村民是政府实施村庄改造行为的“消费者”，属于顾客的范畴，因此本文将顾客满意度理论应用于农民满意度研究中。

3.1 问项编写与预调查

3.1.1 村民生活满意度指标的构建 满意度测量有很多模型可供参考，其中最具主流代表性的是费耐尔提出的包括顾客预期、感知质量、感知价值、顾客抱怨和顾客忠诚等五方面组成的逻辑模型[6,7]（图1）。借助费耐尔逻辑模型（ACSI）的核心概念和架构，并结合村庄的具体情况，利用结构方程模型等理论，构建出村民生活满意度评价模型（VL-CSI）（图2），并在此基础上形成了相应的评价指标体系（表1），将不可直接测量的一级指标转化为可直接测量的二级指标。

图1 费耐尔逻辑模型Fig.1 The logical model of Fei Naier

图2 村民生活满意度指标评价模型Fig.2 The evaluation model of satisfaction index for villagers’living

表1 村民生活满意度评价指标体系Table 1 The index system of satisfaction for villagers’living

3.1.2 问项编制 根据所构建的评价指标体系，针对二级指标编写问项。一般情况下编写问项要足够多（至少30个[8]），并尽量保证调查问项与调查目的的内在一致性，以便后期优化。同时为保证IRT的测量精度，被试一般在500以上[8]。本调查运用可与IRT理论模型相拟合的五级Likert量表[9]，正向问项由非常满意、满意、一般、不满意、非常不满意5种答案分别设置5分、4分、3分、2分、1分，反向问项设置1分、2分、3分、4分、5分，编写初始问卷（共设置70个问项）。受农村地区经济发展水平制约，抽取泰安地区经济发展状况不同的邱家店镇（经济发展状况良好）、祝阳镇（经济发展状况中等）、石莱镇（经济发展较落后）3个地区的657位村民进行问卷发放，做好预调查工作，并收回问卷进行数据处理。

3.1.3 数据预处理 将问卷统计数据输入IBM SPSS Statistics 2.1软件进行问项数据的同向化，并作二级评分处理，得分为1、2、3的记0分，4、5记1分，得到IRT建模的基础数据。

3.2 拟合度检验

3.2.1 单维性检验 所谓单维性，就是只有一种的潜在特质对反应数据起作用。单维性检验是是IRT的一个基本假设。常用主成份分析法检验单维性：若第一特征根与第二特征根之比均在3以上，而且第一主成分解释的方差比率在20%以上，则可认定测验满足单维性要求；或第一、二特征根之比小于3，但是却都是唯一的大于1的特征根，即可认为数据满足单维性[10]；若第一主成份与第二主成份项目特征根之比小于3，且第二特征根大于0，为得到单维量表，要去掉第二公因素上负荷较大的问项[5]。各一级指标单维性检验情况如表2所示。其中感知质量所反映的内容与村庄改造最为密切，所以将感知质量划分为七个维度的二级指标分别检验单维性（表3）。

表2 各一级指标用主成份分析法抽取的第一和第二特征根Table 2 Trait root No.1 and 2 extracted from each level indexes by principal components analysis

表3 感知质量指标用主成份分析法抽取的第一和第二特征根Table 3 Trait roots No.1and 2 extracted from perceived quality indexes by principal components analysis

本调查去掉8个问项后，各潜在变量的特征根如表1、2所示，各项被测数据均满足要求，故可认为基础数据满足单维性。

3.2.2 等区分度检验 计算各个项目的点双列相关系数（即项目区分度），然后计算每个分测验的相关系数的平均数和标准差。如果标准差相对平均数非常小的话，可认为这些项目区分度比较接近，符合等区分度假设。如表4所示，各项目区分度比较分散，显然不符合等区分度假设。

综上所述，调查数据满足单维性，故可用IRT模型拟合，因为数据不满足等区分度的要求，故不能采用单参数逻辑斯蒂模型；由于不存在猜测性问题，不必采用三参数逻辑斯蒂模型，所以采用双参数逻辑斯蒂ICC模型为好。

表4 各一级指标点相关系数的平均数和标准差Table 4 Averages and standard differences of correlation coefficients of indexes

3.3 参数估计与问项初选

根据预调查的基础数据，可采用不同IRT软件对各问项的二参数逻辑斯蒂ICC模型的参数进行估计。而问项初选是根据估计出来的各问项模型参数，将有极端参数值的问项去掉。通常讲对于a≤0.3（或a≥4），b＞2.95（或b＜-2.95），c＞0.4中的任意一个问项均属于项目区分度和难度不满足要求的项目，需要修改或被删除[7]。本文模型的参数估计运用BILOG_MG软件，得到各问项的ICC曲线，删除43个难度和项目区分度不满足要求的问项，剩余29个问项。如表5所示。

表5 村民生活满意度调查的二参数逻辑斯蒂模型参数估计Table 5 The parameter estimation of two parameters logistic model of survey on villagers for life satisfaction

3.4 确定目标信息函数曲线

在调查精度的考量中，将信息量标准对调查精度的要求转变成调查问项的最低信息量。精度要求越高，对应的信息函数值就越大。根据用户对调查精度要求，计算调查的标准误SE(θ)，得出调查所需最低信息量的要求，即目标信息曲线TIC。IRT规定，如果我们要顾及某个总体均数，它的置信区间宽度就和标准误的平方SE2有关。SE2越小，置信区间越小，则表示我们已经获得的信息量最大。因此，在能力水平θ处的能力估计标准误SE(θ)为[5]等值化处理后，态度测量应该把量表值为中性（即θ=0）以下的被试鉴别出来，但由于测量误差的存在，有些真实θ大于0的被试其测量值可能小于0，有些真实值小于0的其估计值也可能大于0。为此就要确定能够允许的估计标准误，在置信区间为98%的真实态度θ1的置信度下，θ1=0.8在θ0=0以上的两个标准误之外，即|θ0-θ1|≥2SE，于是θ=0.8处的SE（θ）=0.4，带入上述公式得出问项应具有的最低信息量I（θ）=6.25。故问卷所含问项的信息函数累计值必须大于或等于6.25的最低信息量要求。如图3所示。

3.5 问项选择、形成最终问卷

根据所计算出的信息量θ在-0.8和0.8处的取值，分别从大到小顺序排序，按θ大小依次提取选项，直到累计的信息量达到6.25以上（表6）。最后去除6个选项，最终形成包含23个问项的村民生活满意度调查问卷。

图3 最终生成的村民生活满意度调查方案信息曲线Fig.3 The final information curve of the investigation scheme of villagers for life satisfaction

4 结论

本文一改传统满意度问卷的编制方法，首次将项目反应理论应用于村民生活满意度调查问卷的设计当中，详细阐述了项目反映理论在村民生活满意度问卷设计过程中各个技术环节的应用，并指导生成结构科学、逻辑严密的调查问卷。

研究表明，村庄改造要以村民为主体。通过科学的问卷设计，切实了解村民意愿，对于村庄改造建设工作具有重要的指导意义和实践意义。项目反应理论能够很好地规范问卷设计流程，控制筛选标准，合理精简问项，极大提高了村民生活满意度问卷编写的质量,尤其在反映村民针对调查问项的潜在特质方面。

表6 各问项信息量排序Table 6 Rank of each item query information amount

[1]蔡少华.闵行区村庄改造农民满意度研究[D].上海:上海交通大学,2012

[2]刘 全,刘 勇,刘 汀.项目反应理论在我国社情民意调查中的应用[J].中国统计,2011(9):48-49

[3]刘 全.基于项目反应理论的社情民意调查问卷设计[J].统计与决策,2012,358(10):29-32

[4]刘 全,张 勇.社情民意类调查问卷设计的综合研究[J].中国统计,2013(4):23-26

[5]余嘉元.专著题名缺失[M].南京:江苏教育出版社,1992

[6]涂荣庭,赵占波.顾客满意度测量探讨:量表设计、信度和效度[J].管理学报,2008(1):33-39

[7]刘 武,杨 雷.中国高等教育顾客满意度指数模型的构建[J].公共管理学报,2007(1):84-88,125

[8]漆书青.专著题名缺失[M].北京:高等教育出版社,1998

[9]郭庆科,陈英敏,孟庆茂.自陈量表式测验应用IRT的可行性[J].心理学报,2005,37(2):275-279

[10]杨业兵.两级评分自陈式量表项目反应理论分析的方法与模型选择[D].西安:第四军医大学,2011

Design ofVillage Life Satisfaction Questionnaire underthe Guidance of Item ResponseTheory

WU Guang1,ZHANG Yun-ji1*,ZHANG Jing-wei2,YAN Ming-hui2,ZHAO Xiu-hua2,XU Xue-dong2*
1.College of Horticulture Science and Engineering/Shandong Agricultural University,Tai’an271018,China
2.College of Water Conservancy and Civil Engineering/Shandong Agricultural University,Tai’an271018,China

Under the new rural construction,the village is transformed by the villagers as the main body.Through the scientific questionnaire design for public opinion survey,we can more accurately understand the true wishes of the villagers,and have guiding significance for the transformation of villages.In this paper,a questionnaire on the life satisfaction of villagers is guided by the project reflection theory,it elaborates the basic flow of questionnaire design,the selection of questions and the control of error,finally,a concise questionnaire was formed for the life satisfaction of villagers.The results showed that IRT theory can simplify investigation questions,strictly control the questionnaire standards,and greatly improve the design of the questionnaire quality,it is of great significance to effectively understand the public opinions and guide the construction work in the new countryside construction.

Public opinion surveys;item response theory;questionnaire design;village life satisfaction;Likert scale

C915

A

1000-2324(2017)05-0697-05

2016-04-23

2016-05-13

“十二五”国家科技支撑计划:低成本村镇基础设施与环境建设技术研究与示范(2014BAL04B05)

吴 广(1991-),男,硕士研究生,研究方向农业园区规划设计.E-mail:1058707309@qq.com

*通讯作者:Author for correspondence.E-mail:yjzhangdeyouxiang@126.com;xdxu2007@163.com