电话和网络调查的利弊

收集调查数据的方式多种多样,包括电话,网络和邮件,每一种都有其优缺点,最终可能会影响收集到的数据的质量–越来越好。

收集调查数据的方式多种多样,包括电话,网络和邮件,每一种都有其优缺点,最终可能会影响收集到的数据的质量–越来越好。为了更好地了解调查模式如何影响与房地产行为相关的反应,Zillow于2017年3月进行了一项实验研究,该研究通过电话向2016名成年人和2011名成年人进行了相同的问卷调查。

该网络调查由在线小组受访者本人自行管理。电话调查是由训练有素的访问员使用计算机辅助电话访问系统(CATI)进行的。电话调查中还使用了随机数字拨号(RDD),以确保有相等的概率被选择为两个独立的概率样本,即手机和固定电话样本。电话和网络调查均经过加权以平衡样本,以根据相同的人口统计属性集(年龄,性别,地理区域,种族和教育程度)反映18岁及以上的美国成年人口。

当模式很重要

每次调查中确定的总体趋势大致一致。两次调查之间回答的模式差异很常见,但通常很小。在涉及受访者使用技术和更多个人话题的问题上出现了实质性差异。

例如,在在线调查中,过去一年搬入房屋的房客中有65%表示他们使用了网站和应用程序等在线资源。电话调查中只有59%的人表示相同。此外,电话调查的受访者表示,他们比网络调查的受访者更容易在搜索过程中接触到房东,朋友,亲戚或邻居。

这种区别是有道理的:为了响应Web调查,需要访问…Web。电话受访者使用互联网的频率降低了(只有89%的电话调查受访者表示在过去12个月中已连接到互联网),并且使用较少的设备类型进行访问。显然,为了获得准确的响应,在加权过程中针对人群中的互联网使用情况进行调整尤为重要。

关于谁对在线和电话调查做出回应,我们发现电话受访者比网络调查参与者更可能住在农村地区和贫民窟。这与其他研究一致。[1]

谁和如何

此外 WHO 回应,有差异 怎么样 人们回应。对于容易引起社会期望偏差的较敏感主题,尤其如此。调查受访者可能不愿意与现场采访者共享个人信息,并且/或者可能希望被该人正面评价。例如,受访者不太可能向访调员报告毒品和酒精使用情况。[2]

在我们的电话调查中,当受访者被问到他们的家庭收入时,这种现象就很明显:五分之一的电话受访者拒绝报告他们的收入。收入分配较低和较高端的受访者不太可能做出响应,这可能会改变结果。[3]

网络调查可以被认为是更匿名的,因此可以避免受到社会可取性偏见的影响。在网络调查中,家庭收入中位数为$ 55,000,比电话调查中的收入高出$ 10,000,[4] 并接近人口普查报告的基准2016年家庭收入(57,617美元)。[5]

其他注意事项

虽然网络调查可能更适合于捕获有关容易引起社会期望偏差的问题的准确信息,但电话调查通常缺少较少的项目级缺失数据(当受访者跳过调查问题时),并且不容易出现某些类型的满意度或捷径受访者的情况例如在一系列问题中做出直截了当的回答。训练有素的访问者还可以帮助受访者以网络调查通常无法做到的方式来理解更复杂的调查问题。[6]

当需要概率样本时,混合模式调查可能是一种有用的研究方法,并且进行初始征募和电话预选资格并不太昂贵。剩余数据可以在线收集或通过邮件调查收集。这使得可以用不太倾向于社会期望偏差的方式获得的大多数信息来构建概率样本。

但是,对于概率较低的人群(例如最近卖出房屋的人),通过概率电话样本收集数据可能是不可行的。采访者必须先筛选大量呼叫,然后才能找到合格的受访者,这可以使用在线小组更有效地完成。此外,近几十年来,电话调查的回复率已大大降低,这限制了它们作为真实概率样本的可行性。这种趋势可能会持续下去[7] 促使业内许多人完全转向非概率网络调查。

到目前为止,与电话调查相比,Web调查的最大优点是它们便宜得多,并且可以更快地收集数据,我们应该继续了解如何从Web调查中收集高质量的数据。但是在线非概率样本提出了许多挑战,并且网络调查的质量可能会因所使用的方法而异。

进一步的研究 详细介绍了Zillow在设计网络调查时所做的一些选择。

 

[1] 皮尤研究中心,2015年5月,“从电话到网络:民意测验中面试效果模式的挑战”。

[2] Tourangeau,Roger和Ting Yan。 2007年。“调查中的敏感问题”。心理公告。

[3] Bollinger,C.R.,Hirsch,B.T.,Hokayem,C.M.和Ziliak,J.P.,2014年。《尾巴中的麻烦:整个发行中的收益无回应和回应偏差》。在 劳动经济学家协会年会,五月 (pp. 2-3).

[4] 先前的外部研究表明,电话调查得出的中位数收入也可能高于网络调查得出的中位数。分配的两端都遭受社会期望偏差。皮尤研究中心,2015年5月,“从电话到网络:民意测验中面试效果模式的挑战”。

[5] Guzman,G.G.,2017年。家庭收入:2016年。美国社区调查摘要。 美国人口调查局.

[6] Lavrakas,PJ,Benson,G.,Blumberg,S.,Buskirk,T.,Cervantes,IF,Christian,L.,Dutwin,D.,Fahimi,M.,Fienberg,H.和Guterbock,T.,2017。美国普通人口电话调查研究的未来。

[7] Lavrakas,PJ,Benson,G.,Blumberg,S.,Buskirk,T.,Cervantes,IF,Christian,L.,Dutwin,D.,Fahimi,M.,Fienberg,H.和Guterbock,T.,2017。美国普通人口电话调查研究的未来。