2021-01-28 3928

如何提高问卷的信度和效度

作者:Ivy Huang

在定量研究的问卷设计中,人们常常会提到两个词:信度和效度。听起来好像特别专业难懂,这两个词,到底什么意思?它们又意味着什么呢?

 

 

简答说来,所谓信度,字面意思就是可信度,代表着问卷访问出来的结果是可信的,一个人多次回答这份问卷,答案不会变;多个人回答同一道问题,对这道题的理解也不会出现差异。而效度,字面义意思就是有效度,即问卷能否有效回答研究目的,所问的内容是不是符合研究需求。

 

 

统计学上,曾用过一个特别直观的例子来解释信度和效度,就是射箭,如下图:

 

 

 

 

 

左边的图片,全是散射,一盘乱麻,这种就意味着问卷没有信度效度可言。

 

 

中间的图片,虽然打偏了,但都集中在一处,差异甚小,这就是高信度,低效度。

 

 

右边的图片,完全命中靶心,信度效度都达到了最好的水平。

 

 

通常,我们可以用SPSS去分析一份问卷出来的数据,信度和效度如何。但是,SPSS只能针对量表题做信效度的分析,其他题目做不来,所以其实,这个分析,也并不能代表整份问卷的数据质量。

 

 

要做一个信度和效度都比较好的问卷,其实需要更多的实践经验的积累。如果你是问卷设计的小白,又希望自己的问卷能有较好的信效度,可以试试这么做。

 

 

1、提高信度的方法

 

 

回到我们刚才说的,信度,代表着问卷访问出来的结果是可信的,一个人多次回答这份问卷,答案不会变;多个人回答同一道问题,对这道题的理解也不会出现差异。这也就意味着,我们在设计问卷的时候,需要对问题本身做到逻辑严密、易懂,确保不同的人看到它不会产生不一样的理解,导致结果偏差。

 

 

以下几个点需要特别注意:

 

 

  • 问对人,不要问不相干的人,在问卷中要设置好答题逻辑。如果你想问大家对某部影片的满意度,你就要找到看过这个影片的人,而不是随便找一个人来做;

  • 题目的题干和选项,不要用专业词汇,要用大家都懂的语言,也不要有任何的歧义,同时避免引导性语言和双重否定句式;

  • 量表题的使用是否最优(结合实际项目而定);

  • 避免调研虫多次答题,随意给答案,如果是网络问卷,可以开启答题限制,限制每个微信、每台电脑、IP地址等职能回答一次该文件。问卷网就有这个功能。

 

 

2、提高效度的方法

 

 

效度代表的是问卷拿到的结果是否能解决研究的需求。这也就要求我们在设计问卷之前,就要充分梳理好研究的目的;然后围绕目的,去细化需要收集的信息;再根据需要收集的信息,去设计相关的题目。

 

 

很多人容易在这里犯的毛病是,什么都想知道,什么都想问,不管出来的结果对主要的研究目的有没有用。其实这样做,是在大大降低问卷的效度。

 

 

我们在设计问卷的时候,必须做到:核心的问题不漏,可有可无的问题不留,无关的问题不设,绝对不要放上对研究结果没有用的题目,每一道题目,应该都是会对主要的研究目的分析有帮助的。而不是好奇害死猫,什么都问。

 

 

最后,当一份问卷设计出来,可以找一些熟悉的人做一下试访,看看问题和选项的设计是不是容易理解,会不会有歧义。这个步骤,对于问卷小白尤其需要,因为经验太少,较难形成强的主观判断。

 

 

总之,磨刀不误砍柴工,要提高一份问卷的信度效度,一定要从一开始就理清思路,不能急于求成,拿到要求就开始做设计,也不能直接套用别人的问卷。参考可以,但一定要记住,结合自己的研究需求,进行修改。