线上问卷调查是传统问卷调查的延伸和变种,已成为互联网公司比较通行的了解目标用户群、操作特征、评价反馈及痛点等的重要渠道,不论是已经拥有一定用户规模的公司或者刚开始创业的团队,在线问卷调查都可以给产品设计、运营和营销等提供很好的参考作用。
随着移动互联网的发展,手机App端的中小型公司越来越多,当需要了解大量用户的信息时,除了依靠产品后台数据,也希望通过用户调研更直接的了解用户及对产品的评价,在没有专业用研队伍的情况下,面对专业研究公司动辄几十上百万的费用,更多是以最经济的“头脑风暴”和用户意见反馈解决问题,非常容易造成产品策略和方向的误判。本文正是基于大量App端线上问卷调查经验,分享整理出自己趟过的坑,让用研同学及广大的创业者能更好的利用线上问卷这个工具。
问卷调查是门复杂学问,从前期问卷设计、调查实施、统计分析都有很多技巧和方法,本文不过多探讨问卷设计和统计分析,而是着重突出移动端线上调查渠道的一些局限、注意事项及破解的方式等。
前期准备时遇到的坑
通常在问卷调查前,为保证调查的代表性和客观性,就会根据调研对象、内容和目的等进行抽样方案的选择,尽可能采取概率抽样的方式,以减少误差,但概率抽样在线上问卷调查中较难实行,一般会以“巨额”样本来抵减抽样因素带来的误差。
1、线上问卷选择什么工具
工欲善其事,必先利其器。可能大家对问卷调查都有一定了解,但对于使用什么线上问卷工具仍然是十分头痛的事情。如果担心数据安全、并想了解特定的内容,最好自己搭建问卷调查的小平台;如果调查频率不是很高,市面上有比较多成熟的产品可用(如问卷星、调查派之类),都能满足要求。但不论使用何种工具要考虑到用户设备的差异,如不同系统(如android、ios、Wp)、不同型号手机(如对低端机的兼容)、在PC端填写等,能否插入图片、兼容不同题型的设计等。
2、如何到达目标用户群
当产品的用户规模有限,又想尽可能多的了解目标/潜在用户时,线上问卷也能帮上忙。这时除了自己产品外,还有哪些渠道能到达用户呢?广散网再筛选是比较可行的方式,除了在自己产品上收集现有用户数据外,各种QQ群、校园BBS、分类信息网站、手机论坛、应用商店、贴吧、微博/微信、传统社区(天涯/猫扑/豆瓣)都可以,如果有费用可以请一些论坛/社区加精推荐、达人/大V转发推广等,之后再按需求进行筛选、分析。
3、需注意不同功能/内容入口的用户群差异
当产品已经有较大规模的用户时,产品不同功能/内容都会吸引一批特定的用户,这时在某个功能模块投放问卷时,回收的数据更多是以习惯使用该功能的用户为主,实际上把大量不使用该功能的“非到达人群”排除在问卷之外,用户数据和产品的目标用户存在很大差距。例如把问卷链接放在UC浏览器的网址导航里面,可能回收数据中UC老用户、在职用户的比例会更高,和整个UC浏览器的用户也会有较大差异。
故先明确问卷调查的对象,再选择合适的入口投放,能有效保证回收数据的质量。有时调查需要在不同功能入口投放问卷,这时对不同入口问卷编号,之后再单独进行分析,也可以深入了解产品不同功能入口的用户群差异。
4、样本数据能否推论到目标用户
我们很容易把回收的样本数据推论到产品的目标用户,但实际上,线上问卷更多是一种被动等待的自填式问卷,对很多用户有一种筛选过滤,低活跃、低意愿用户(如女性、中高龄用户,以及高端政商务用户等)参与的会较少,不同投放入口都会有“非到达人群”。因而在自然状态下,在产品上投放问卷回收的数据更多为偏活跃的用户,推论到整体要通过其他方式进行数据补充,不然会有较大误差。
而通过与后台数据定比配额后,筛选批量用户精准推送线上问卷,这种方式比在产品上挂问卷链接的到达率更高,而且覆盖的用户更广,能更准确的获得所需要的数据。精准推送的方式在PC端上已经广泛使用,现在手机端更方便定位推送,而且用户基本是随时在线容易接收,更大程度保证样本数据代表性,这样样本数据推论目标用户的误差就会更少。
线上问卷投放碰到的坑
线上设计好后,又开始担心没有用户填写、或者填写质量不高等问题了。这个其实可以可以更直接的理解为:一是如何能吸引用户注意并点击;二是如何让用户较真实的填写完问卷。
1、什么标题更吸引用户
在广告泛滥、信息堆砌的网络上,或者在自己产品的某个位置上,我们的问卷标题可能都很不显眼,不会引起用户的注意。这时可根据不同的调查内容,选用吸引眼球经过包装的标题(或卖萌、或诱惑、或温情、或无节操等)、再辅以不同颜色/高亮的字体,可以更加吸引用户关注。
好不容易让用户点击进入问卷,为了让用户再继续往下填,可以再稍再添一把火。用户进入问卷时,最先看到的是引导语,除了简单介绍调查内容外,最好能从物质和精神层面进行激励,“引诱”用户较客观真实的完成问卷。物质层面基本是赠送用户纪念品、话费、其他礼物等,以作为感谢;而精神层面,则是激发用户更崇高的行为动机,如“让您的期望变为产品功能”、“帮助我们改进产品体验”等。两种激励方式有效结合可以更有力的刺激用户填写问卷。
3、问卷填写时间多少合适
大家可能会经常碰到的一个问题,就是如何能在用户容忍范围内,尽可能多的收集信息。当问卷太短时收集的数据有限,对问题的了解不够全面;而太长了,用户的耐心有限,很多中途弃答、空答或乱答的,问卷的质量及填答率都跟不上。传统的入户或拦截问卷,它们的填写时间可能达到30分钟以上,从实际操作经验来看,一份手机线上调查问卷的时间最好控制在15分钟(有效用户填写时间的众数和均值基本都低于15分钟)、题目在25道以内,才能更好的保证问卷质量和数据回收。
我们在设计问卷时,切记不要把用户想象成对产品各个功能都了解,当用户在填问卷时碰到不清楚的内容,不会退出问卷打开你的产品探个究竟,再回来填问卷。因而问题设置应尽可能以“现在时”为主(对当前产品/版本的感受、认知、评价和痛点等)、并清晰的描述功能路径或举例说明,至少让用户看到题目就能清楚的理解我们所指的内容,避免用户乱填答或者空答等,更好的保证问卷质量。
5、避免问卷中使用产品术语
问卷中我们有时会习惯性的把自己对产品的内部称呼/术语用到问卷中,带有较强的工程师或设计师思维,虽能突显出自己的专业,但用户理解起来会很困难,甚至与我们想要抓取的意思完全不同。问卷中使用的词汇应站在用户角度,应尽量通俗化、接近用户的语言,最好先在论坛、QQ群或者公司进行一些简单的用户访谈,了解普通用户对一些功能或术语的称呼,再提炼到问卷中,最大程度保证与用户的理解一致。
6、怎样的题目逻辑及选项顺序更合适
在设计问卷的逻辑顺序中,除了最基础的先易后难、先行为再态度、先选择题再开放题等注意事项外,互联网产品还有自己的一些特点,逻辑上更要考虑用户使用习惯、主要路径、关键场景等,让用户更自然的过渡到日常使用状态,降低问卷填写难度;有时在设置多选题时,也往往会担心选项存在“首因效应”而导致误差,会纠结选项怎样顺序最好,而这个问题在线上问卷里可以通过系统的随机排序轻松解决。
线上问卷数据处理应避免的坑
1、线上问卷怎样进行筛选
数据回收后,我们怎样对数据进行筛选清理,剔除无效问卷,保证样本数据更加有效可信呢?移动端线上问卷调查可以收集用户行为数据、手机硬件数据等,都可以成为我们筛选数据的依据,最常用的是通过对用户的填写时间、重复提交、空题数量、逻辑错误等进行判断,可以过滤掉很大部分无效问卷。
2、如何利用好后台数据
线上问卷回收的数据,更多是用户使用产品的习惯、感受和评价等,与后台行为数据会有一定的差异,产品或研发等同学不免会拿两个数据进行对比,可能对线上问卷数据产生一些疑问。因而将两个数据配合使用更能相得益彰,调查前期可以抽取相关后台数据进行分析,了解用户对产品的使用行为和特点、功能或服务偏好等等;之后再与线上问卷数据进行对比和补充,如用户分布、硬件情况、功能使用等,并能为调查数据提供配额依据,让整个线上数据更有说服力。
除了前面投放阶段选择合适的问卷渠道或精准推送,增加样本的代表性;线上问卷回收后,为了让样本用户与产品目标用户更贴近,更好的代表用户的态度或评价,还可以对样本数据进行配额或加权处理。一种方式是,从后台数据抽取某些维度进行分析,再对样本数据进行配额或确定权重,如用户地域分布、机型分布等;另外还可以根据相对权威的行业报告数据或第三方调研数据,按照一些维度抽取样本数据。或者上述两种方式结合。最终目的都是为了让问卷数据的说服力更强、更客观真实的了解产品用户。