我們做一個簡單的測試,看看你對設計問題了解多少?
以下是10道用於調查的問題,請選出你認為問得不好的題目,並解釋原因:
Q1. 您家是否有阿爾茨海默病的家族病史?1. 是2. 否Q2. 您家有多少人?_______人Q3. 過去一年您稅後總收入是多少?1. 3萬以下2. 3-5萬3. 5-8萬4. 8-10萬5. 10萬以上Q4. 您認為當前中美關係有多糟糕?1. 非常糟糕2. 比較糟糕3. 一般4. 不怎麼糟糕5. 一點都不糟糕Q5. 您最喜歡以下哪個歌唱類的娛樂節目?1. 我是歌手2. 中國好聲音3. 跨界歌王4. 蒙面唱將Q6. 您對您當前這份工作的收入和福利是否滿意?1. 非常滿意2. 比較滿意3. 一般4. 比較不滿意5. 非常不滿意Q7. 您是否同意以下說法:父母不應該為了子女的教育節衣縮食。1. 非常同意2. 比較同意3. 中立4. 比較不同意5. 非常不同意Q8. 您運動的頻率如何?1. 經常2. 偶爾3. 很少4. 從不Q9. 過去一年您家購買生活用品總共花了多少錢?_____元Q10. 您是否曾經吸食過毒品(如大麻、鴉片、海洛因等)?1. 是2. 否
怎樣,心理有答案了嗎?一起來對一下答案。
其實,十道問題都或多或少存在一些問題,我們詳細說說。
Q1. 您家是否有阿爾茨海默病的家族病史?
1. 是
2. 否
問題及原因這道題使用了太過專業的術語,然而很多受訪者並不知道阿爾茨海默病就是我們常說的老年痴呆症。這將導致有些受訪者即便有這樣的家族病史,也會誤填「否」。很多問卷設計者都是領域內的專家,但是作為專家所熟悉的術語,普通人並不一定了解。類似的問題如:您家是否是核心家庭,您對孩子的教育期望是什麼等。在設計中應儘量避免使用受訪者不熟悉的語言。
Q2. 您家有多少人? _________ 人
問題及原因這道題的問法太過含糊:是提問物理地址上居住有多少人,還是提問家庭成員有多少人?如果提問前者的話,是否應該包括同住的非家庭成員(如合租者、保姆、司機等)?如果提問後者的話,短期入住的家庭成員(如已經嫁人的暫時回家探親的女兒)、短期外出的家庭成員(如外出旅遊的家人),以及一些長期在外的家庭成員(如上大學的兒子)等應該如何考慮?此題不是決定意義上的錯誤,在條件限制的情況下這樣問也未嘗不可。但在條件許可的情況下,設計者應儘可能根據其具體的研究需求,在設計上做一些更詳細的限定和說明。
Q3. 過去一年您稅後總收入是多少?
1. 3萬以下
2. 3-5萬
3. 5-8萬
4. 8-10萬
5. 10萬以上
問題及原因這道題的選項不互斥。比如一位受訪者的收入是5萬,他應該選擇選項2還是選項3呢?更準確的選項設置可以是:3萬以下,3-5萬(不含5萬),5-8萬(不含8萬),8-10萬(不含10萬),10萬及以上。此外,如果研究者關注的總體是高收入階層的話,這道題還存在選項數額設置過低的問題。大部分受訪者的問題及原因會堆積在選項5,其它選項則很少有人選擇,這樣收集到的數據並沒有太多價值。
Q4. 您認為當前中美關係有多糟糕?
1. 非常糟糕
2. 比較糟糕
3. 一般
4. 不怎麼糟糕
5. 一點都不糟糕
問題及原因這道問題有很強的引導性,在引導受訪者往糟糕的中美關係方向思考。設計者在提問時應該儘量中立,此題更準確的提問方法可以是:您認為當前中美關係如何?1. 非常糟糕 2. 比較糟糕 3. 一般 4. 比較好 5. 非常好
Q5. 您最喜歡以下哪個歌唱類的娛樂節目?
1. 我是歌手
2. 中國好聲音
3. 跨界歌王
4. 蒙面唱將
問題及原因這道問題有一定的預設性,即認為受訪者都喜歡歌唱類的娛樂節目。對於不喜歡這類節目的人來說,這道題無法選擇。此外,這道題的選項也不完整,即便喜歡歌唱類娛樂節目的受訪者,可能也並不喜歡這四個節目中的任何一個,這道題對他們來說也無法選擇。更準確的提問方法可以是:在這道問題之前先提問一道篩選問題:您是否喜歡歌唱類的娛樂節目?另外,在本題的選項中增加一個「以上都不喜歡」的選項。
Q6. 您對您當前這份工作的收入和福利是否滿意?
1. 非常滿意
2. 比較滿意
3. 一般
4. 比較不滿意
5. 非常不滿意
問題及原因這道題是一道雙重問題,即一題多問。如果受訪者對收入和福利的滿意程度不一樣的話,將不知如何選擇。所以更準確的提問方法是將此題拆分成兩道題,對收入和福利分別提問。
Q7. 您是否同意以下說法:父母不應該為了子女的教育節衣縮食。
1. 非常同意
2. 比較同意
3. 中立
4. 比較不同意
5. 非常不同意
問題及原因這道題不是絕對意義上的錯誤,但因為題目與選項在一起構成了雙重否定,容易導致有些受訪者在理解的時候轉不過彎來,從而出現不小心答錯的情況。更好的提問方法可以是:您是否同意以下說法:父母應該為了子女的教育節衣縮食。
Q8. 您運動的頻率如何?
1. 經常 2. 偶爾 3. 很少 4. 從不
問題及原因這道題有三處問題。第一,運動的概念不夠清楚,比如散步是否算作運動?設計者可以根據研究的目的做具體的限定。第二,沒有時間期限。一個人這個月和上個月的運動頻率可能會不一樣,三個月內與三個月前運動的頻率可能也不一樣。設計者需要界定清楚具體的時間段,比如過去一個月,或過去半年等。第三,選項太過含糊。有些人覺得每周鍛鍊一次就算經常,有些人覺得每周鍛鍊三次也算太少,因此,選項最好更具體一些,如提問每周多少次,每次多長時間等。
Q9. 過去一年您家在購買生活用品上總共花了多少錢?_________ 元
問題及原因這道題太難回答,對於很多受訪者來說都是不太可能完成的任務,如果強行這樣提問的話,只會收集到不準確的信息,或者有些受訪者乾脆放棄回答。改善的方式有很多,比如可以給受訪者一些能夠幫助其回憶的提示,如提示其應包括哪些類別的生活用品;還可以縮短回憶的周期,如將過去一年改為過去一個月,受訪者填答起來會容易很多。
Q10. 您是否曾經吸食過毒品(如大麻、鴉片、海洛因等)?
1. 是
2. 否
問題及原因這道問題太過敏感,會導致受訪者不願意回答,或者提供虛假的回答,有些受訪者甚至會因此退出訪問。這樣的問題應該儘量少問,在非問不可的情況下也需要講究技巧,如採用紙筆訪問或網絡訪問這些沒有訪員幹預的訪問方式會比面訪或者電訪更好一些。類似的技巧還有很多,此處不一一詳述。
檢查清單
Checklist:避免問卷設計中的最基本錯誤
總的來說,問卷設計上的錯誤會導致我們收集到的數據不準確或沒有價值,或者因受訪者不願意作答而收集不到數據。在設計問題的時候,我們一定要基於研究的需求,仔細考慮提問過程中可能出現的各種問題。以下是常見的一些基本錯誤的checklist,我們提問時應當儘可能避免:
建議
最後,以上僅為單個獨立的問題中常見的一些基本錯誤,在實際操作過程中,當不同的問題組合在一起,以及在不同的情境和上下文中,還可能會出現各種各樣更為複雜的問題。對於這些,我們的基本建議是:
1. 借用其他調查中一些使用成熟的問題。
2. 通過反覆的測試來發現和調整問題。