2021-01-15 1999

问卷调研怎样才算问对问题呢?

作者:调研家

我们做一个简单的测试,看看你对设计问题了解多少。

 

 

以下是10道用于调查的问题,请选出你认为问得不好的题目,并解释原因:

 

 

Q1. 您家是否有阿尔茨海默病的家族病史?
1. 是
2. 否

Q2. 您家有多少人?_______人

Q3. 过去一年您税后总收入是多少?
1. 3万以下
2. 3-5万
3. 5-8万
4. 8-10万
5. 10万以上

Q4. 您认为当前中美关系有多糟糕?
1. 非常糟糕
2. 比较糟糕
3. 一般
4. 不怎么糟糕
5. 一点都不糟糕

 
Q5. 您最喜欢以下哪个歌唱类的娱乐节目?
1. 我是歌手
2. 中国好声音
3. 跨界歌王
4. 蒙面唱将

 
Q6. 您对您当前这份工作的收入和福利是否满意?
1. 非常满意
2. 比较满意
3. 一般
4. 比较不满意
5. 非常不满意

 
Q7. 您是否同意以下说法:父母不应该为了子女的教育节衣缩食。
1. 非常同意
2. 比较同意
3. 中立
4. 比较不同意
5. 非常不同意

 
Q8. 您运动的频率如何?
1. 经常
2. 偶尔
3. 很少
4. 从不

 
Q9. 过去一年您家购买生活用品总共花了多少钱?_____元
 
Q10. 您是否曾经吸食过毒品(如大麻、鸦片、海洛因等)?
1. 是
2. 否

 

 

怎样,心理有答案了吗?一起来对一下答案。

 

 

其实,十道问题都或多或少存在一些问题,我们详细说说。

 



Q1. 您家是否有阿尔茨海默病的家族病史?

1. 是

2. 否

问题及原因:
这道题使用了太过专业的术语,然而很多受访者并不知道阿尔茨海默病就是我们常说的老年痴呆症。这将导致有些受访者即便有这样的家族病史,也会误填“否”。很多问卷设计者都是领域内的专家,但是作为专家所熟悉的术语,普通人并不一定了解。类似的问题如:您家是否是核心家庭,您对孩子的教育期望是什么等。在设计中应尽量避免使用受访者不熟悉的语言。

 

 

Q2. 您家有多少人? _________ 人

问题及原因:
这道题的问法太过含糊:是提问物理地址上居住有多少人,还是提问家庭成员有多少人?如果提问前者的话,是否应该包括同住的非家庭成员(如合租者、保姆、司机等)?如果提问后者的话,短期入住的家庭成员(如已经嫁人的暂时回家探亲的女儿)、短期外出的家庭成员(如外出旅游的家人),以及一些长期在外的家庭成员(如上大学的儿子)等应该如何考虑?此题不是决定意义上的错误,在条件限制的情况下这样问也未尝不可。但在条件许可的情况下,设计者应尽可能根据其具体的研究需求,在设计上做一些更详细的限定和说明。

 

 

Q3. 过去一年您税后总收入是多少?

1. 3万以下

2. 3-5万

3. 5-8万

4. 8-10万

5. 10万以上

问题及原因:
这道题的选项不互斥。比如一位受访者的收入是5万,他应该选择选项2还是选项3呢?更准确的选项设置可以是:3万以下,3-5万(不含5万),5-8万(不含8万),8-10万(不含10万),10万及以上。
此外,如果研究者关注的总体是高收入阶层的话,这道题还存在选项数额设置过低的问题。大部分受访者的问题及原因会堆积在选项5,其它选项则很少有人选择,这样收集到的数据并没有太多价值。

 

 

Q4. 您认为当前中美关系有多糟糕?

1. 非常糟糕

2. 比较糟糕

3. 一般

4. 不怎么糟糕

5. 一点都不糟糕

问题及原因:
这道问题有很强的引导性,在引导受访者往糟糕的中美关系方向思考。设计者在提问时应该尽量中立,此题更准确的提问方法可以是:您认为当前中美关系如何?1. 非常糟糕 2. 比较糟糕 3. 一般 4. 比较好 5. 非常好

 

 

Q5. 您最喜欢以下哪个歌唱类的娱乐节目?

1. 我是歌手

2. 中国好声音

3. 跨界歌王

4. 蒙面唱将

问题及原因:
这道问题有一定的预设性,即认为受访者都喜欢歌唱类的娱乐节目。对于不喜欢这类节目的人来说,这道题无法选择。此外,这道题的选项也不完整,即便喜欢歌唱类娱乐节目的受访者,可能也并不喜欢这四个节目中的任何一个,这道题对他们来说也无法选择。更准确的提问方法可以是:在这道问题之前先提问一道筛选问题:您是否喜欢歌唱类的娱乐节目?另外,在本题的选项中增加一个“以上都不喜欢”的选项。

 

 

Q6. 您对您当前这份工作的收入和福利是否满意?

1. 非常满意

2. 比较满意

3. 一般

4. 比较不满意

5. 非常不满意

问题及原因:
这道题是一道双重问题,即一题多问。如果受访者对收入和福利的满意程度不一样的话,将不知如何选择。所以更准确的提问方法是将此题拆分成两道题,对收入和福利分别提问。

 

 

Q7. 您是否同意以下说法:父母不应该为了子女的教育节衣缩食。

1. 非常同意

2. 比较同意

3. 中立

4. 比较不同意

5. 非常不同意

问题及原因:
这道题不是绝对意义上的错误,但因为题目与选项在一起构成了双重否定,容易导致有些受访者在理解的时候转不过弯来,从而出现不小心答错的情况。更好的提问方法可以是:您是否同意以下说法:父母应该为了子女的教育节衣缩食。

 

 

Q8. 您运动的频率如何?

1. 经常 2. 偶尔 3. 很少 4. 从不

问题及原因:
这道题有三处问题。第一,运动的概念不够清楚,比如散步是否算作运动?设计者可以根据研究的目的做具体的限定。第二,没有时间期限。一个人这个月和上个月的运动频率可能会不一样,三个月内与三个月前运动的频率可能也不一样。设计者需要界定清楚具体的时间段,比如过去一个月,或过去半年等。第三,选项太过含糊。有些人觉得每周锻炼一次就算经常,有些人觉得每周锻炼三次也算太少,因此,选项最好更具体一些,如提问每周多少次,每次多长时间等。

 

 

Q9. 过去一年您家在购买生活用品上总共花了多少钱?_________ 元

问题及原因:
这道题太难回答,对于很多受访者来说都是不太可能完成的任务,如果强行这样提问的话,只会收集到不准确的信息,或者有些受访者干脆放弃回答。改善的方式有很多,比如可以给受访者一些能够帮助其回忆的提示,如提示其应包括哪些类别的生活用品;还可以缩短回忆的周期,如将过去一年改为过去一个月,受访者填答起来会容易很多。

 

 

Q10. 您是否曾经吸食过毒品(如大麻、鸦片、海洛因等)?

1. 是

2. 否

问题及原因:
这道问题太过敏感,会导致受访者不愿意回答,或者提供虚假的回答,有些受访者甚至会因此退出访问。这样的问题应该尽量少问,在非问不可的情况下也需要讲究技巧,如采用纸笔访问或网络访问这些没有访员干预的访问方式会比面访或者电访更好一些。类似的技巧还有很多,此处不一一详述。

 

 

Checklist:避免问卷设计中的最基本错误

 

 

总的来说,问卷设计上的错误会导致我们收集到的数据不准确或没有价值,或者因受访者不愿意作答而收集不到数据。在设计问题的时候,我们一定要基于研究的需求,仔细考虑提问过程中可能出现的各种问题。以下是常见的一些基本错误的checklist,我们提问时应当尽可能避免:

 

 

▲ 问题中是否出现了专业的术语、模糊的表述、复杂的结构,或者只有部分人能理解的方言或者俚语?应确保使用的词句尽量清晰简洁、通俗易懂。

▲ 问题是否会产生歧义?应确保所有的受访者对问题的理解一致并且正确。

▲ 问题是否带有引导性(leading question)?应确保提问中立。

▲ 问题是否带有预设性(loaded question)?应避免先入为主。

▲ 是否一题多问(double-barreled question)?每道问题应该只提问一件事情。

▲ 问题是否使用了否定句型?应尽量避免否定或多重否定。

▲ 是否需要规定时间期限?在行为性问题中,对行为的频率、次数的提问应界定清楚时间区间。

▲ 选择题的选项是否设置合理?应确保选项之间互斥,并穷尽所有可能的情况。

▲ 选项中的量词是否具体?应确保所有人有一致的解读。

▲ 受访者有没有能力回答这道问题?如果没有,应该简化任务。

▲ 受访者是否愿意回答这道问题?如果不愿意,应尽量不问或者进行改进。

 

 

建议

 

 

最后,以上仅为单个独立的问题中常见的一些基本错误,在实际操作过程中,当不同的问题组合在一起,以及在不同的情境和上下文中,还可能会出现各种各样更为复杂的问题。对于这些,我们的基本建议是:

 

 

1. 借用其他调查中一些使用成熟的问题。

2. 通过反复的测试来发现和调整问题。