第三节 定量研究的质量控制
定量研究用于了解总体的真实情况及其相联系的各种因素,但研究结果常偏离真实情况。这种偏离可能包括抽样误差,也可能包括非抽样误差。抽样调查的抽样误差不可避免,但有一定规律。非抽样误差则是在调查设计、资料收集、整理和分析的整个过程中,各种人为因素或偶然因素所造成的,如设计方案不周密、问卷设计不恰当或测量仪器不精确造成的收集资料不准、汇总计算有误等。它涉及设计人员、调查人员和调查对象、资料录入和分析人员等。因此在实际研究工作中,应结合具体问题仔细考虑各阶段可能出现的各种非抽样误差,并采取有效措施控制研究质量。
一、设计阶段
(一)正确确定目标总体
在调查设计时,应正确确定目标总体。例如,调查某地流动人口的心理健康状况,目标总体应确定为该地流动人口群体,并给出“流动人口”的明确定义。
(二)恰当选择调查指标
反映同一问题的指标或许很多,选择一些常用的、普遍认可的指标才有利于不同研究、不同地区、不同人群的相互比较。例如,调查某社区居民的主要健康问题、卫生服务需求和利用水平,经常选择的调查指标为该社区居民两周患病率、慢性病患病率、伤残率、疾病严重程度、就诊率、住院率等。
(三)合理设置调查问题
问卷设计时应紧扣调查目的,合理设置调查问题,在众多问题中精选最有代表性的问题,这也是保证调查质量的重要环节。例如,为了解儿童的卫生习惯,可选择的问题包括洗脸、洗澡、勤剪指甲、勤换衣服、按时睡觉、饮食习惯、定时大小便和饭前便后洗手等方面,它们均在一定程度上反映了儿童的卫生习惯。
(四)恰当选择调查方式
根据调查对象的特点选择恰当的调查方式,以保证调查质量。例如,对小学生进行健康教育方面的调查时,由于他们理解力较差,易受环境干扰,宜采用调查员逐一询问,并由调查员填写问卷的调查方式;而调查儿童的父母时,既可用调查员填写的方式,也可用调查对象自填的方式。
(五)预调查
预调查是问卷设计过程中以及正式调查实施前一个十分重要的环节,它有助于完善问卷设计和正式调查的顺利实施。小范围的预调查可以检验问卷设计能否达到预期目的、设计是否合理可行。根据预调查结果可以及时修改和完善问卷设计。此外,预调查也是调查员培训的重要环节。
在调查研究中还经常涉及敏感性问题(sensitive question)的调查,比如个人收入、家庭财产、性关系、性取向或性行为等。敏感性问题的调查比较困难,一些被调查者要么拒绝回答,要么提供不真实的答案。但有时对敏感性问题的调查又是调查目的所决定的,例如艾滋病高危人群的性行为调查等。对于敏感性问题的处理,可采用匿名和保密等措施来消除被调查者的顾虑,也可在敏感性问题的设计中采用一些技巧。在问题设计时,采用“假定法”或“对象转移法”有助于减轻被调查者的心理负担以便其如实回答问题,也可采用附有保密协议的问卷或封闭式不记名自填式问卷进行调查等。此外,随机应答技术(randomized response technique, RRT)可以做到匿名和保密,有效保护被调查者的隐私。随机应答技术是指在调查过程中使用特定的设计,使被调查者以一个预定的基础概率P从两个或两个以上的问题中选择一个问题进行回答,被调查者本人以外的所有其他人(包括调查者)均不知道被调查者对问题的选择或作答,然后再计算出敏感性问题特征在人群中的真实分布情况。在实际应用时应根据不同的研究目的、不同的调查对象、不同类型的敏感性问题选择适宜的敏感性问题调查方法。随机应答技术详见本章第四节。
二、资料收集阶段
现场调查是由调查员实施的,他们是资料收集的具体执行者,直接关系到调查的成败。因此,调查员的选择与训练是调查工作中十分重要的工作。调查员的选择要注意工作态度、专业知识、业务技能、实际经验以及对当地文化的熟悉程度等。此外,根据特殊情况宜选用不同的调查员,如生育状况的调查或女性商业性性工作者的调查,最好选用女调查员。在调查员的培训中,最好将理论培训和实践培训相结合。在理论培训中,应明确调查目的和意义、调查的方法、调查的内容、调查指标的说明或定义以及提问方式等。不同的调查员由于对问卷或问题的理解不同,用相同的问卷调查相同的对象,可能得到不相同的调查结果。因此,应严格按照设计方案的要求,统一认识,掌握技巧,并通过预调查取得经验。另外,调查对象的理解和配合也是调查取得成功的重要保证。调查前应开展宣传,争取调查对象的积极配合,这在某些特定人群的敏感性问题调查中尤其重要。
三、资料整理与分析阶段
资料整理与分析阶段的非抽样误差可能来自于编码、录入、汇总和计算等方面的错误。为此,应采取有效措施进行严格的资料录入、清理和检查,及时发现和更正错误。对数据可采取双输录入,并进行逻辑查错。
四、调查结果的质量评价
调查结果的质量主要反映在调查结果的真实性和可靠性两个方面,一般采用效度与信度两个指标进行评价(参见本章第二节的相关内容)。质量高的调查应尽量做到效度与信度的统一,即调查反映了客观情况并且结果是稳定一致的。理想的情况是对预调查结果的质量进行评价,质量好的调查表或问卷才能用于正式调查。此外,调查工具的可接受性也需评价。可接受性是指被调查者对调查表或问卷的可接受程度,主要取决于调查条目是否简单、内容是否为被调查者熟悉并且易于填写、调查所需时间是否较少等因素。可通过调查表回收率、合格率和填表所需平均时间等进行评价。