引起人们的一阶问题:文本分析开放式调查的问题

公开辩论是由争议和辩论问题在政治、科学和健康。越来越多的证据表明,美国人持有强烈对立的观点关于政策(2020年尼汉在新发布的研究报告中,Alesina et al . 2020年),它正在成为至关重要的科研人员和决策者制定新的严格的方法听不同背景的公民和更好地理解他们的观点。

调查:一个独特的研究工具

为此,调查是一种独特的工具来理解正在发生的事情在社会和人们的思想,他们认为,他们是如何的原因,和他们的问题是什么。其他一些研究工具允许研究人员采取的快照人们的思想。如果设计正确校准,并针对相关感兴趣的样品,使研究人员能够进行在线调查,实时大规模调查。他们是直观,清晰,和自适应的参与者。

调查迄今为止帮助阐明许多相关政策的话题。一个特别富有成果的研究利用调查数据来探索人们对税收政策的认知和偏好和再分配(十字形等。2013年,Karadja et al . 2017年,Alesina et al . 2018年,罗斯2018年Wohlfart, Fisman与2020年Kuziemko Hvidberg et al . 2021年)。

开放式调查问题的价值

的支柱调查通常由封闭式问题,提供一组固定的答案选项。这些问题的优点是,答案选项是标准化和精简的受访者,他们轻易借钱给自己定量分析。然而,在某些设置,我们可能无意中主要受访者思考答案选项,否则没有想到。相反,我们可能会忽略相关的选项,我们不知道。在开放式的问题,受访者不提供答案选项,而是一个空的文本输入字段,他们可以自由写。因此开放式调查问卷可以规避上述问题。由于引导越来越少,他们可能教我们的东西,我们可能错过了,我们可能不是用来思考。从这个意义上说,开放式问题的答案可能有助于阐明的一阶因素约束的情况下,人们的思想思考一组有限的答案选项。

设计开放式的问题时的最佳实践是什么?开放式问题的范围可以从非常广泛的狭窄的和具体的。引起更广泛的问题是有用一阶,内在担心人之前提示认为特定的政策方面有更多的直接问题。因此,可以先问人们大局问题如“主要问题”,来到他们的想法当他们想到一个问题(例如收入或遗产税)。然后有助于缩小重点问人们他们考虑特定方面的政策,它的优点和缺点,甚至更有针对性的对其后果的问题。理想情况下,开放式的问题应该补充交叉验证的封闭式问题。

开放式问题的答案可能捕获两个不同的东西。首先,受访者的答案之前没有想到这个话题可能是肠道反应。这些反应是有用的,因为它们反映了被调查者认为,会想什么,没有更多的学习或集中反映。第二,受访者的答案已经想到的主题或花时间想想在回答前调查可能反映出更深刻的观点。无论哪种方式,开放式问题的答案捕获一阶对人们很重要考虑的方面的问题在他们的头脑。

方法的分析

在最近的一个项目(Ferrario和Stantcheva 2022),我们这些开放式问题的方法适用于数据从两个调查关于收入和房地产税收在2019年进行大型和代表性样本的年龄在18岁到70岁的美国人。

我们专注于广泛的问题的答案,“你的主要因素是什么?”,当考虑收入和房地产税,分别,我们提出三种不同的分析方法。

词云是最好的作为第一步的观察数据和快速扫描的答案的。图1和图2显示云这个词来源于反应。所得税,受访者表达分歧与当前的税收水平,意见的方向改变它们(“低税”或“更高的税收,”根据组织他们引用),和关注“中产阶级的影响。“遗产税,受访者一阶反应中心的“双重征税”问题和房地产税收的公平性,紧随其后的担忧“中产阶级”和“家庭”。

图1主要考虑收入和房产税

一)所得税

b)遗产税

笔记基于开放式问题的答案:文字云对受访者主要考虑收入和房产税。

图2主要议题受访者考虑关于收入和房产税

一)所得税

b)遗产税

笔记:图中显示的题目中提到的答案分布主要考虑收入和房地产税。酒吧代表的话题被提及的次数总提到政治团体的任何话题。

然后特别有趣的研究人们是否属于不同的群体(例如不同的政治立场、年龄和收入)系统使用不同的词汇。我们关注政治背景的异质性和削减我们的示例使用一个组合2016年总统候选人支持(克林顿对特朗普)和自我报告的程度的保守主义和自由主义。

我们考虑两种调查方式异构性:凯恩斯分析和主题分析。凯恩斯的分析是基于一个相对频率分析,比较两组之间的使用。这种方法高度每一项的得分,这衡量特征项是一组相对于另一个。主题分析是基于keywords-count模型,主题是由组关键词。

一阶担忧收入和房产税

所得税,我们确定了八种不同的主题:分布、公平、政府支出、社会安全、效率、漏洞,统一税,公共物品,不知道。的分布的话题,例如,包含关键词如“中产阶级”、“低收入”,和“百万富翁。“公平问题包含单词“公平”和“不公平”。公共物品抓住了“基础设施”、“教育”和“医疗保健”。效率由词如“伤害经济”、“少工作”,“竞争”和“少花钱”,等等。最后一种是受访者表示他们不了解政策给一个有意义的答案。

的主题分布和公平,以及政府支出和漏洞的顶部,是很多人的思想。的效率话题似乎并不突出。这些结果呼应Stantcheva(2021)发现,分配和公平考虑主导效率问题在塑造人的税收政策的观点。

遗产税的面板b,所得税的主题类似的调查。特定于遗产税是双重征税的话题,被“已经征税”等关键词,和悲伤主题,捕捉到术语如“悲伤”、“埋葬”,“葬礼”。话题再次大量集中的分布的问题分布和公平,但双税也很重要。很少有提及政府支出、效率、漏洞,悲伤,和公共物品。此外,越来越多的人表达缺乏知识比所得税遗产税。

一阶的党派差异问题

有明确的政治差异的话题被提及。相关问题分布更普遍的左边比右边的政治光谱,在吗政府支出是一个更迫切的关心受访者在右边。效率不是经常提到的任何政治团体。公平提到相当均匀地分布在政坛上。然而,尽管每个人都关心公平,这个概念的意义大大不同受访者;公平是在旁观者的眼睛。

图3显示了关键字最具体的民主党和共和党。与主题一致分布,关键字在民主党方面围绕的问题分布(“贫穷富裕”、“下层阶级”,“中产阶级”和“税收富裕”)。共和党人倾向于强调政府开支,政府浪费,经济成本(“人的工作”,“经济消费”)。遗产税,也有明确的提到的政治倾向不同的主题。分布问题中最普遍克林顿自由派和保守派迅速减少,对特朗普单调。相反,双重征税担忧胜过保守派非常普遍,但很少见在克林顿的自由主义者。提到的公平又均匀地分布在政坛上。这些模式是由凯恩斯分析确认面板b(图3所示。

图3关键字提到的民主党和共和党关于收入和房产税

一)遗产税

b)所得税

笔记:图中显示的关键字在民主党和共和党关于受访者的答案主要考虑收入和房产税。分数报告一组两个词是χ^ 2的测试数据,测试零假设给定的关键字的出现是民主党和共和党之间的相同。* * * p < 0.1, p < 0.05, * * * p < 0.01。

开放式的问题深入研究指南

开放式问题的答案可以指导后续研究。在收入和房地产税的情况下,他们表明,人们关心的分布影响税收和公平。这促使我们深入挖掘这些问题使用详细的封闭式调查问卷和实验来更好地理解这些问题(Stantcheva 2021)。许多经济学研究领域可能受益于使用开放式调查问题引起人们的一阶问题和指导更深入的研究。

引用

Alesina, Miano,年代Stantcheva(2020),“现实”的两极分化,AEA论文和程序110:324 - 28。

Alesina, A, S Stantcheva, E(2018),都是“再分配”的代际收入流动比例和偏好,美国经济评论108 (2):521 - 554。

十字形,G, R Perez-Truglia,和M Tetaz(2013),“有偏见的看法再分配收入分配和偏好:证据从一项调查实验”,《公共经济学》杂志98 (C): 100 - 112。

Ferrario B和S Stantcheva(2022),“引发人们的一阶问题:开放式调查问卷”的文本分析,AEA论文和程序112:1 - 8。

Fisman R K格拉德斯通,我Kuziemko,和S Naidu(2020),“美国人希望税收的财富吗?在线调查的证据”,《公共经济学》杂志188:104207。

Hvidberg K、C krein和年代Stantcheva(2020),“社会地位和公平的观点”,美国国家经济研究局工作论文28099。

J Mollerstrom Karadja, M, D Seim(2017),“比你富裕,更神圣的吗?相对收入再分配需求的改进的效果”,回顾经济学和统计数据99 (2):201 - 212。

尼汉在新发布的研究报告中,B(2020),“关于误解的事实和神话”,《经济视角34 (3):220 - 36。

罗斯,C和J Wohlfart(2018),“有经验的不平等和偏好再分配”,《公共经济学》杂志167:251 - 262。

Stantcheva年代(2021),“了解税收政策:人们如何理由?”,经济学的季刊136 (4):2309 - 2369。