政治学研究中的抽样调查:难点、问题与方法创新

作 者:
严洁 

作者简介:
严洁,北京大学政府管理学院。北京 100871

原文出处:
政治学研究

内容提要:

政治学抽样调查面临概念抽象、复杂,难以测量,理论假设中的关系结构复杂,不得不较多依赖面访式概率抽样调查的难点。受这些难点所限,一些调查中发生了概念不清、社会期许偏差、评价参照系偏差、覆盖偏差、无回答偏差,以及抽样成本高昂和无应答率居高不下等问题。针对这些难点和问题,学者们利用列举实验法、随机化回答技术、虚拟情境锚定法来解决社会期许偏差和评价参照系偏差问题;利用地址抽样来解决覆盖偏差问题,以空间单元格和夜间灯光亮度来降低高昂的抽样成本;以并行数据的应用来降低访员效应,处理无应答,构建应答代表性指标,以此提高调查和统计推断的质量。这些创新方法为政治学抽样调查的精准化积累了有益经验。


期刊代号:D0
分类名称:政治学
复印期号:2018 年 09 期

字号:

       近些年,政治学研究方法出现了一种混合路径的趋势,例如,将抽样调查法和大数据法相结合①、和实验法相结合②,但是抽样调查法仍为多数研究者所采用。政治学研究中的抽样调查通常指概率抽样调查,即按照一定的概率以随机原则抽取样本,使总体中每一个个体都有一个已知不为零的被选机会进入样本,然后用结构化问卷采集数据的一种调查方式。其优点是已知每个样本的入选概率从而推论总体,使用结构化问卷则可以尽量避免测量误差。

       抽样调查属于理论驱动的研究模式,从提出理论假设开始,历经概念操作化、问卷设计、抽样、数据采集、数据分析、得出研究结论等主要环节达成研究目标。在理论假设和数据分析阶段,近些年的政治学研究更加重视因果推断方法的改进和复杂模型的应用。例如,为实现因果推断而采用实验室实验、现场实验、调查实验③、自然实验的设计;为检验因果假设而使用匹配法、工具变量法、差分法(也称倍差法)、断点回归设计、固定效应模型、Heckman选择模型等统计分析技术;为了分析宏观因素对个体行为或态度的影响,应用多水平模型;为了研究复杂概念之间的关系结构,应用结构方程模型、潜在类别分析法④等。关于理论假设和数据分析阶段的创新方法已有相应的讨论和综述,为此,本文将综述政治学抽样调查在问卷设计、抽样、数据采集方面的难点、问题,以及一些创新性解决方案。

       一、政治学抽样调查的难点与问题

       (一)概念抽象、复杂、宏观,产生测量误差问题

       抽样调查用结构化的问卷采集数据,形成结构化的问卷需要对概念进行操作化处理。政治学研究中的概念和其他社会科学中的概念相比具有更为抽象、复杂、宏观的特点。政治学的核心概念包括:权力、权利、权威、利益;体制、制度、规则、规范;民主、政治发展、现代化;政治行为;政治文化、政治价值、政治态度;政治知识;政治绩效、公共服务绩效、公共政策绩效,等等。将这些概念写成问卷中的题目,形成可定量测量的变量,具有非常大的难度。这是因为受访者常常无法对题目有相同理解,或者不具备回答问题所需的知识,或者对题目很陌生,或者没有切实的与政治有关的经历。也正因为概念的抽象、复杂、宏观,常常导致研究者在设计问卷时遇到以下问题:

       1.概念定义不明确。例如:“您认为本县政府官员为政清廉吗?”为政清廉的定义不明确。“您认为美国的民主程度如何?”民主的概念不明确,人们有不同的理解,给出的答案不具有可比性。民主的概念可以从价值、原则、制度、程序、要素、绩效评价等多维度进行测量⑤,用任何一个单一测量的题目都无法准确获得人们对这个概念的完整理解。类似的概念和不明确的测量方式不胜枚举。

       2.负担过重,难以理解或回答。包括专业词汇、过长量表、过长题干、逻辑复杂等带来的难以理解和难以回答等。例如:“‘生意人赚钱实际上最终对所有人都有好处,所以是可以接受的。’您对这种说法是非常同意、比较同意、不太同意,还是非常不同意?”受访者会提出质疑,为什么生意人赚钱对所有人都有好处,受访者难以理解其中的逻辑关系。

       3.易发诱导。例如:“您认为市政府应该花费更多的税收去拆毁棚户区吗?”也是给出了不平衡的选择,只提到了拆,没有提到建,导致受访者的答案偏向一方。政治学中的有争论性的观点较多,在设计上本应该提供平衡的选择,但很多调查问卷设计者忽视了这一点,从而发生了诱导受访者的结果。

       4.产生评价参照系偏差。政治学研究比较关注政府行为和公共政策绩效,调查内容中经常有类似“评价”的题目。例如:“您认为本市当前的公共医疗服务居于什么水平?”受访者在回答这类题目时,各自的参照系不同,给出的答案则不具有可比性。例如,有的受访者在回答时会询问:“医疗服务水平和谁比呢?和过去5年相比,还是和我心中的期望相比?和北京比,还是和哪个城市比?”如果在没有一致参照系的情况下,直接使用原始测量得来的数据进行统计推断则会导致估计偏差,这被称为评价参照系偏差。

       5.产生社会期许偏差。政治学研究中的一些题目测量的内容已经形成了一般社会规范,受访者回答时,迫于社会规范压力,会少报社会非期许行为,而倾向于回答出社会所希望的行为⑥,这类回答被称为社会期许回答(socially desirable responding,SDR),即个体在特定情境下给出适应社会或文化规则及标准的倾向性回答。这类回答在面对面访问模式或电话访问模式中由访员的“社会在场”(social presence)效应所致。访员的“社会在场”会促使受访者在应答时考虑社会规范⑦。使得调查结果系统性偏向那些“正确的”或者社会所提倡的行为,与实际情况发生偏离⑧,这种偏离被称为社会期许偏差(social desirability bias),一些中文文献也称其为“社会意愿偏差”“社会称许性偏差”“社会期许效应”等。社会期许回答容易发生在以下题目中:政治支持、政治信任;国家认同、爱国主义;自尊、公民行为、违法行为等。敏感题目通常也会产生社会期许回答。

       (二)依赖面访调查和概率抽样,产生成本高昂问题

       抽样调查常用的调查模式有面对面访问、电话访问、网络访问、集中自填问卷等。政治学研究中的理论假设通常具有复杂的关系结构,例如,评估公共政策绩效,不仅要考虑人们自身和家庭的客观受益、主观获得感,还要考虑人们对政治、经济、社会、人文自然环境等大环境的评价和感受,还要考虑到人们对公共政策的知晓度、期望值等。复杂的关系结构需要测量更多的变量,需要依赖面访调查来实现,这是因为面访调查可以容纳30分钟及以上的问卷容量,而电话访问和网络访问则不具备这方面的优势。但是面访调查成本高昂,通常是电访调查成本的2~4倍。

相关文章: