通过创造性,鼓舞人心,教育和思想挑衅内容使洞察领导联系在一起。

停止速度,骗子和机器人,从风险中施加调查数据质量

分享这篇文章

成功的市场研究人员知道,要讲一个既可信又能给生活带来客户洞察的强大故事,他们必须用高质量研究的相关统计数据来支持他们的论点。但确保一项调查提供高质量的数据可能是困难的,特别是当受访者来自广泛的普通受众小组,不需要验证其身份(出于隐私原因),或提供金钱奖励时。

即使从信誉良好的示例提供商收集数据,您正在练习良好的调查设计技术,一些调查受访者仍将通过答案进行比赛。这危及调查质量,甚至可能使调查结果无效。必须过滤这些不合格,不专心或甚至欺诈性受访者,或者他们可以增加收集数据的不必要的噪音。

在调查中的战略点,可以通过使用注意力检查来实现这种过滤过程,也可以在调查的战略点。除了过滤疏忽的受访者之外,他们还可以过滤出机器人,在他们的答案中是不诚实的人,或者那些甚至不会说语言的人。

陷阱问题的好处
根据从GroupSolver自己的研究中收集的数据,实施陷阱问题可以识别并过滤掉15-30%的应答者,这些人通常应该被取消资格,因为他们没有认真回答问题——通常是因为他们没有给予足够的关注。这些问题不是为了欺骗应答者或测试他们的知识;每一个答案都应该简单明了。相反,它们被插入到调查的关键位置,以过滤掉那些不认真对待调查的受访者。

每个调查都应该使用陷阱问题——即使受访者来自一个非常专业和高度管理的社区。虽然糟糕的受访者通常来自一般人口面板,但高成本的专业面板也会受到粗心受访者的影响。因此,我们总是建议通过使用陷阱问题在每次调查中独立验证受访者的质量。

陷阱问题可以使用开放式和多项选择题屏幕屏幕的屏幕,虽然多项选择问题传统上有点易于实现。这是因为先前要求研究人员在传统文本框中提供的答案,以前所需的开放式问题。

然而,最新的调查平台应用了自然语言处理(NLP)来消除这种繁琐的工作。自然语言处理和其他技术可以用来快速处理自由文本的答案,去除重复和噪声,只保留那些独特和有意义的答案。使用这些技术提出开放式的陷阱问题,可以更容易实时标记那些提供胡言乱语或零价值陈述的受访者,因此他们应该被终止调查,因此他们不会提供质量可疑的数据。

但在这里,我想专注于多种选择的陷阱问题。有各种类型可在任何调查中使用,并且应该量身定制以测试不同类型的有问题的受访者行为。

如何实施陷阱问题
理想情况下,每个调查都应该使用多个陷阱问题。审查来自Albonolver最近研究的样本的数据,第一个陷阱问题识别所有调查员的近12%,平均而言是疏忽的。如果插入第二个陷阱,则通常捕获额外的7%的总受访者池。凭借第三个陷阱问题,另有5%的受访者已被确定。必须尽快确定这些非专期受访者,并从研究中终止,或者他们将污染结果。

以下是如何使用陷阱问题的例证,使用最近的选举2020学习(n = 332,来自最杰出的面板提供商之一的一般人群样本)。在这种情况下,主要包括三个陷阱问题,以筛选非专期受访者。例如,一个人问:“你识别哪种物种?”并将选择作为岩石,兔子兔子,人,鱼,魔法地毯或吸血鬼。任何正在关注的受访者都会选择明显的正确答案:人类。在完整的样本中,68名受访者错误地回答了这个问题,并从研究中终止。

陷阱问题示例 一个陷阱问题的例子。

在同一项研究中,受访者还被问及:“从周一开始算起,一周的第三天是几?”选项有:7个,周六,周三,非常好,或不确定。正确的选择,星期三,只有当受访者花时间阅读问题和选项,特别是因为有一个随机组合的选项列出来,很容易回答。有18名受访者答错了这个问题,因此被取消了完成研究的资格。

[标题ID =“附件_1044333”align =“SendalCenter”宽度=“310”]陷阱问题2一周中的一天陷阱问题的例子。

这两个陷阱问题以及第三个陷入研究中的第三个问题,总共终止了183名受访者,或35%的研究参与者。虽然这是一种异常高的差别受访者,但它展示了调查内部质量控制措施的重要性。

最大化您的研究学习投资和价值
市场调查需要花费大量的时间、金钱和精力,而低质量或不诚实的调查答案会很快破坏结果的完整性。这反过来会损害你工作的信誉,并导致你的企业做出糟糕的决策。

要降低这种风险,调查答复必须来自合格和细心的受访者。虽然没有一种技术是100%有效的,但即使使用部署陷阱问题的快速和简单的策略,也将有助于提高数据的质量,以及对所获得的见解是有效和可操作的信心。

关于作者
Albanolver  - 兰西斯拉夫伊冯Rasto Ivanic是一家集团的联合创始人兼首席执行官 - 一家市场研究科技公司。AlbanOlver建立了一个智能市场研究平台,帮助企业回答他们的燃烧为什么,如何以及什么问题。在Gransolver之前,Rasto是麦肯锡和公司的战略顾问,后来他在孟德尔生物技术领导了业务发展。在他的职业生涯中,他帮助公司对开发和管理新业务的战略决定,追求市场机会和建立伙伴关系和合作。拉斯托是一个训练有素的经济学家,博士学位。普渡大学农业经济学,他还收到了他的MBA。

分享这篇文章

即将到来的事件

t

2021年11月15 - 17日纳什维尔,TN.
2021 TMRE,扰乱 - 沿着新方向引领。
去网站