爆发了。。挖出久远年代总结的一些想法,大家凑活着看。其实隐藏在研究人员内心最不可爱的一面,大家都觉得自己做的研究是天衣无缝的,偏偏研究并不形成最终产品成果。所以研究人人都可以做,但缺乏可重复可衡量的指标,做的好坏比设计更难说清。

问卷法,可用于大样本的量化调研。这种方法其实在社会科学中被应用的很多,由于其能在短时间内收集到大量数据的特点,最近在公司里也常常用这种方法来进行产品概念的前期用户需求调研。简单的说,就是在产品前多问一些用户,看看他们对这个概念感不感兴趣。

  • 采用问卷法之前需要了解的几点人性化原则
    1、设计问卷时,别忘了自己做一次使用者,有些问题如果你自己都觉得难受,就撤掉吧。最怕的是出现让用户无法对号入座的情况,让他们感觉自己的答案不是主流答案。
    2、设计问题的选项不要互相包含,别让用户左右为难。
    3、别太追求量化的回答。以前我不觉得这个有什么问题,往往一说到要了解用户的操作习惯,立刻就出一个问题:最近上网的频率是:一个月3次以下,一个月3-10次,如此之类的。但偶尔一次看到用户填写这种题目的情况,发现这些数据其实没有价值,因为用户不是电脑,他在填写的当时很难做“如此统计工作”,数据完全是乱想填的。:P
    4、充分考虑问卷法的信度和效度,通常在企业中作的问卷,并没有经过严格的信效度验证,所以我们需要充分的参与整个调研的过程,以用更全面的了解来解读问卷的数据,来弥补“无信度‘的问题。
    5、问卷题目别太多,如果有很多的题目跳转,那么在每道题目上的序号要好好设计一番,做问卷也是一次交互,别让用户迷路了。
    6、在用户开始答卷前,大概告诉用户他需要花费多少时间,完成多少题目。尊重用户。
  • 问卷法适合解决的问题
    1、用户的日常行为习惯和生活状态,例如常上的网站,每日在网时间,目前常用的银行卡等,就是用户能客观报告出来的,说一就一的。
    2、用户的人文信息,这点比较明确不罗嗦了。但需要提醒的是,虽然现在网络上,人口普查中都有比较通用的问题和选项设置,例如年龄、职业等,但建议不要用这种通用的,应该要根据具体项目的需求来设置选项,这样能让结果更被用的上。
    3、用户的态度,例如他们喜欢什么,对什么更看重等。最常见的题目形式就是评分题,5分,7分,10分等。让用户针对一些态度语句进行重要程度评定。凡是关乎评定分数,个人认为应该是要大样本数据才能说明问题。而且,关于态度的调查,如果真的用问卷法,它对问卷信度和效度的要求都是比较高的。
    同样的现象,如果能找到对应态度的用户,进行一对一面对面的访谈,从中得到的纵向数据其实也非常有价值,因为我们不仅仅能知道用户的 态度取向,还能进一步了解他们为什么会有如此的态度取向。
    在态度的调研上,或许结合访谈法和问卷法,才能得到比较好的效果。
  • 问卷法实施步骤
    1、定义调研目标、范围,这是最重要的一步。
    2、定义调研样本特征、问卷投放方式,投放方式虽然只是一个细节,却会影响问卷信度,所以需要单独来考虑。同时要关注一下总投放量。
    3、设计问卷,在这个过程中有很多的专业技能和业务能力,但多找些内部员工来做预测,这招非常有用。在设计结束后,写下数据分析的方案。
    4、投放问卷,等。
    5、回收问卷,看看总投放量和实际回收量的差比。这个高低没有标准,但无论高低,都说明一些问题。总的思路是,看看有多少人看到了这个主题,多少人感兴趣,多少人又真正回答了问题,这样一个漏斗本身就说明了一些现象。
    6、分析数据,其实到了这一步,已经比较简单了。就是用个软件,整理一下数据,把结果计算出来即可,简单的,甚至用excel作作频次也可。当然,可以做一些深度的挖掘,例如组合一些维度来进行差异分析等。切忌在设计时完全不想分析,到分析时才发现数据完全无用。不要认为做统计分析是最难的地方,最难的是整个调研的设计。每个细节都可能会影响结果,都可能引入无关因素。我还是比较坚持专业的事情要由专业的人去做,如心理学的、应用数学的等。很多事情,到了企业就常常变成什么人都能做,有意识到就能做。但最可怕的并不是这些人做不成功,而是我们无法评估非专业人员所收集回来的数据是否可信是否真的反映了真实。用户测试云云,也是如此。在行业前期,部门成立前期,为了造势为了做到从零到1,可以放松。但做到一定阶段,拼的就是细节和精确。这个意识很重要,尤其对于部门老大。反过来其实很容易理解,如果人人都能做,还要专门的人来成立部门干嘛。
Your Name
Your Email
Your Website (optional)
2008-11-08

Ella,如此大篇幅的,还是要图文结合比较适合阅读啊~ 阅读的体验不好,但是观点很赞!

2008-11-08

问卷调查,用些奖励的东西诱惑其。
为了“用户体验”,简单点好,搞成选项行的调查如何?

2008-11-09

另外在问卷设计初期,要考虑一下问卷的维度,尤其是你在分析数据过程中需要进行显著性检验的时候。有些问卷编制者在编制问卷时,可能不会考虑维度,或者把问卷题目确定后再根据题目来确定维度,这其实是值得改进的。

iefen
2008-11-09

唧唧,帮我文档优美化,O(∩_∩)O哈哈~

选项行的调查是啥意思,大仙?通常做问卷都会避免开放式的问题,如果真的必须开放式不可,我个人还是非常倾向于做面对面的调查,呵呵,网络中用户的参与性数据其实还是不够有效的,且不灵活。而如果用电话或户访类似的渠道,却又增加了太多调查的成本。

我理解的问卷维度,就是调查的思路,包括要考察的相应因素,因素间可能存在的相关假设等等。不知道是否土豆片儿的意思呢?

2008-11-11

写的挺好。以后做问卷还是要专业人士来设计啊,业余的人提过来的问卷需求真是让人抓狂。

rockdean
2008-11-11

怎甚“厉害”两字了得,若找这样的女人做老婆会不会一天到晚像把自己放显微镜下面。

2008-11-13

其实问卷调查并不是一个完美的解决办法
有时候用户并不知道自己的想法
如果能够把用户平时的习惯进行总结
那这些数据则更有针对性

iefen
2008-11-14

嗯,是的是的,不同的研究目的需要不同的方法来支持,问卷适合于做一些趋势性的分析,而它和访谈都是适合于涉及到态度、非行为类的数据收集,用来回答“为什么”、“什么”这样的问题;

行为或者说习惯的分析,则往往可以来反映“怎么样‘。让我着迷于网络产品的分析,正是它相比于工业产品有着更多行为数据的天然优势。但坏处是其中的迷惑性数据或垃圾数据也相当的多,很多时候自行解释都比较费劲。呵呵,分析经验不足到至今也没做出什么让自己得意的研究作品。

最近前端团队给我们做了一个”表单内容记录“的数据收集工具(咱们内部叫她水晶观察者),这里所记录的数据总算简单些,可以通过分析用户在填写表单时的错误情况,来得到优化表单的问题点和着手点。

2008-11-21

同意一楼看法哈,配张图更能增加阅读体验!赞

migi
2008-12-02

拜读了,高手写的东西,很多实践磨出来的经验,数据统计分析不是那么容易,当然要看你想得到的东西。

“定义调研样本特征、问卷投放方式,投放方式虽然只是一个细节,却会影响问卷信度”,这里影响的应当是信度吧。

还想请教一下,前期的设计问卷是如何对信度进行评估的,如何修改。

migi
2008-12-02

更正:
“定义调研样本特征、问卷投放方式,投放方式虽然只是一个细节,却会影响问卷信度”,这里影响的应当是效度吧。

kmars
2008-12-05

《赢在用户:Web 人物角色创建和应用实践指南》对问卷调查已经讲得很详细了
“深度的挖掘,例如组合一些维度来进行差异分析等”我推荐个软件SigmaPlot 10.0,可以来做三维点的分布观察,也不是很难操作。

iefen
2008-12-09

To migi,我当时的确在这里想强调的是信度,这是经验的一点,不同渠道所进行的调查,其实用户的参与度会不同,虽然没有明确的数据,但我的经验是越是和用户面对面的方式,越容易获取高信度的信息,虽然所要求的收集信息的技巧会跟高。当然,这里的信度也不完全是统计意义上的信度,而跟接近“可信”。不过你倒是提醒了我,不能由于投放方式而影响了抽样的范围,否则才会影响效度。

iefen
2008-12-09

Kmars,谢谢推荐,我今天才看到,hoho,下了sigma,明天试用一把。用spss做出的图真的有够佝偻的。。

问卷法并不是用户体验专有的方法,如果真的要追求这个方法的专业度,其实它在其他领域上的应用模式也是可以让我们学习的。

2008-12-28

专业 谢谢