关于问卷调研的验真测谎

应客户最开始的需求,希望问卷的填写者尽量都是他们家APP的用户,对于不是他们家用户的填写者,希望尽量能被剔除。

当然靠着第一题问,你是不是我们家的用户,就想完全筛掉那些不关事的填写者,是不现实的。

因为但凡你是个稍微有点生活经验的宝宝,你就会知道有奖调研的奖极大可能送给他们家的目标填写者;但凡你是个爱小便宜多于爱这个调研产品的宝宝,你就会从第一题就开始撒谎,是的我是你们家用户。

为了进一步预防这个情况,客户希望加入验真题目,验这个填问卷的人到底是不是真的用户。

于是在其中一道问你最喜欢哪些功能的题目里,加入了两个APP里面不存在的功能,一个是免费短信,一个是个性换肤,都是客户提出来的。

也就是说但凡选择了这两个的其中一个,这个人的数据就可以踢掉了。

既然有了验真题验是不是真用户,就再设置了测谎题测这个人有没有认真填。

对其中一道题设置了反向题,两道题相隔好几道题。

这道题是“我觉得XXX的操作方便快捷”,反向题则是“我觉得XXX的操作既不方便也不快捷”。

也就是说但凡同时对这两道题表示肯定或否定,这个人就是连题目都没认真读随便填写的,也可以踢掉了。

虽然说依然防止不了那些乱填的这两道题恰好选了相反的答案而不被剔除,防止不了那些撒谎的假用户没有选中不存在的功能而被留下,但至少能筛走一波,使问卷的结果尽量真实且有价值。


在漫长的等待问卷回收的日子,我无意中看了下该APP的官网。

发现,原来,它曾经,是有免费短信功能的。也就是客户提供的APP不存在的功能之一。

冷汗一下子出来了,查看了下回收情况,果然,有近一半的用户都选了免费短信的功能。

那这个功能就不能作为验证的选项了。

这件事情教育了我,下次问客户拿这些app不存在的功能时,一定要问清楚,是不是从未存在过。曾经存在的不行,毕竟不知道用户有没有曾经用过,只要曾经用过,他就可以选,并且不代表他就是个假用户。

因此验证题方面就剩下个性换肤了。



最后来两道题的筛选效果。

回收的有效问卷为800多份。

首先是剔除在最喜欢功能里面的个性换肤。其实我本身没有太好看个性换肤这个陷阱,因为它不是APP的核心功能,而且又没有太大的实用价值,假用户即使无心也可以轻松避开。


然而,还是有近80人选择了个性换肤,因此剔除。

再看那道反向题。说实话还挺难过的,剔除了200多人。



合着一共删除了三百人,删除了百分之三四十,剩个五百多人。

这都还没算上机缘巧合躲开了陷阱的人呢,可想而知填问卷的人里面不认真的到底有多少。

但话又说回来,如果不剔除这三百人,出来的结果会有很大差异吗?

对比发现,这三百人主要分布在“非常满意”和“满意”的正向选项中,也就是说一直选择同一个选项,因此对一道仅有的消极描述的题目(其他题目都是积极描述)的结果影响非常大——



删除三百人后的结果,选择非常赞同和赞同的共25%,即对这个功能不满意的占比还行;但删除前,这个比例高达41%,可以说用户对这个功能很不满意了,直接影响了这个功能满意度的结论

这么看来,在今后的问卷中,需要设置测谎或验真题目。

特别是满意度这种,选项几乎一直都是重复非常赞同到非常不赞同的,需要设置反向题剔除不认真填写的用户。

而如果是针对特定应用的用户,需要放入关于该应用的陷阱题目,剔除假用户。


最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 221,135评论 6 514
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 94,317评论 3 397
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 167,596评论 0 360
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,481评论 1 296
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,492评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 52,153评论 1 309
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,737评论 3 421
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,657评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,193评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,276评论 3 340
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,420评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 36,093评论 5 349
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,783评论 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,262评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,390评论 1 271
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,787评论 3 376
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,427评论 2 359

推荐阅读更多精彩内容