一、正式调查前的准备工作
在正式问卷和抽样完成之后,就进入了正式调查前的准备阶段。这一阶段的主要工作是,编写调查手册和培训调查员。
1.调查手册。在实地调查中,调查手册是调查员的工作指南。它的作用是指导调查员按照统一、标准的方式来完成调查过程。调查手册通常包括:(1)项目的基本信息,如名称、目的、主持机构等;(2)调查员的职业守则;(3)实施的流程和技术规范,即如何接触和甄选正确的样本单元,如何使用地址表、抽样表等工具,如何正确地进行访问,如何控制访问环境,如何核查问卷,如何记录访问过程等;(4)问卷说明,包括问卷中主要概念的定义,容易引起歧义的问题的解释,疑难回答的解决办法,正确或错误的询问示例等;示卡与附录:示卡是调查中需要向被访人单独出示的图片,或某些特殊问题;(5)附录则包括职业、行业代码表,农历/公历对照表,属相纪年对照表等。
除调查手册外,还应该为督导员制作督导手册。督导手册强调如何管理和分配调查员,监控调查进程、确保调查质量、控制经费预算等问题,而且为其提供现场解决问题的方法和原则。
2.调查员培训。准备好一份清晰、准确、详尽的调查手册,调查员的培训工作也会方便很多。调查员培训主要有三个步骤,一是依据调查问卷和调查手册讲解问卷,让调查员熟悉问卷的结构、概念、问题和解释口径,传授一些调查技巧。二是指导调查员进行模拟演练,通常由调查员访问督导员扮演的被访人,以及调查员之间互访。通过模拟演练,调查员可以进一步熟悉问卷,理解调查手册的正确用法。三是进行试调查,让调查员亲临现场访问一两位真实的被访人,以熟悉调查的操作过程。一般而言,培训期大约要2天~3天。
二、调查过程的质量控制和管理
1.调查质量的控制。调查质量的控制首先是对调查员监控,调查员作为调查实际操作者,是影响调查数据质量最直接的一环。不同调查员调查质量差异较大。现在商业调查公司已经衍生出一批“职业”调查员,这部分人经验丰富,调查能力较强,但是弄虚作假的情况也多,如果委托给调查公司而不加监控,调查质量难以保证。
调查早期,调查员尚未熟悉调查问卷和操作过程,容易出错,因此早期现场监控最为重要。通常督导员要通过陪访、回访、审卷、再培训等手段发现并迅速解决调查员出现的问题。如果条件许可,可以在每天调查工作结束后与调查员进行交流、总结。问卷调查是一项重复性的劳动,如不能及早解决调查员遇到的问题,访问误差会持续整个调查进程,最终导致调查失败。
调查中后期的质量控制主要集中在对问卷质量和样本分布进行控制。就问卷质量的控制而言,督导员通常会要求调查员在一份问卷填答完毕之后,立刻自查问卷是否有漏答、误填和前后不一致的答案。条件许可的话,应该要求每天上交所有完成与空白问卷,这样做一方面可以防止调查员作假,抄袭已完成的调查问卷;另一方面也有利于及时了解和控制调查进度和问卷质量。在回收一定数量的问卷后,要安排复核人员用电话访问或面访的方式,对被访人进行回访,了解调查员是否规范地执行抽样、访问程序。对不合格的访员要及时更换,对不合格的问卷要重新补做。在调查结束后,调查负责人还要组织全面复核,以评估调查实施的质量。
就样本分布的控制而言,督导员要逐日记录问卷的回收情况,对已有的调查问卷进行粗略手工统计,与宏观数据或者以前相应调查的汇总数据进行比对,确保收集到的数据能够符合研究目的的要求。比如在某项调查中,督导员发现样本中年龄分布偏高,无业者的比例偏多,经审核发现调查员为了追求成功率没有按要求约访短期外出的被访人,而代之以家中留守的父母,或只在白天访问。这时督导员就应及时予以调整,组织补充调查以覆盖缺失的人群,避免收集到的样本与研究目标总体出现偏差。
2.调查运作和进程管理。调查运作和进程管理与调查质量控制相辅相成。调查运作和进程的管理事实上是调查负责人(督导员)与调查员之间的互动过程,调查负责人与调查员形成良好的合作关系很重要。督导员要合理地安排调查员的工作量,控制调查进度。一般每位调查员在一项调查中完成20份问卷左右为宜,最高不要超过30份。在人地两生的环境中做调查,调查员往往因找不到被访家庭或被访人,往返奔波而产生畏难情绪。对此,督导员可以安排事先“摸点”,同被访人预约时间,以提高调查员的成功率。
调查运作和进程管理的另一目标是对经费支出的控制。调查实施的经费支出较大,通常调查负责人要每日统计完成率(即完成访问数占计划访问数的比例),以此作为衡量调查员工作计划执行情况的一个指标,把完成率与目标比率进行比较,以此进行督促,保证调查按时完成。通常还把费用与此指标结合起来进行评估,以确定调查费用是否已经超出预算范围。另外还要统计回答率。对大多数调查来说,无回答是非抽样误差和抽样误差的一个重要来源。因此在调查运作和进程管理中,质量目标的确定主要基于回答率。一般来说,单个调查员调查中出现低回答率,说明调查员可能有问题;如果整个样本的回答率都低,说明在调查研究设计中出现了较大问题,或者反映了被访人的拒斥心理。低回答率会导致在既定的时间和经费情况下,难以完成既定的调查目标。在这种情况下,对无回答追踪回访十分重要。
三、调查实施过程中的其他问题
1.调查机构设置。在大型调查中,调查机构的设置作用明显。一是要设立调查核心组或总部,负责调查方法的设计和准备,培训设计和策划公共交流和宣传;二是设立地区调查办公室,确保调查的相关信息能够在总部、地区办公室之间和调查员之间交流,以提高调查效率。地区办公室一般配有项目负责人和督导,调查员招聘则由地区办公室来完成。在有条件的情况下,应该设立值班电话,了解和解决各类应急事件。
2.公共关系和宣传。根据调查主题、经费预算和目标总体的不同,大型调查应该采用不同的方法进行调查宣传活动。规模较小的调查可以通过致被调查者信、一般的机构介绍手册、电话等形式告知与被调查者积极合作的重要性,有助于被调查者配合调查。
3.保密和安全。对被调查者私人信息和隐私保密是调查研究的基本原则,事先告知保密原则有助于被调查者如实的回答问题。同时,调查数据在传输和使用过程中的安全也必须注意,避免因数据泄露而导致被调查者遇到麻烦。
文章来源:中国社会科学院院报 2007-09-11