2011年8月20日 星期六

水果報副手民調的錯誤2011/8/21

蘋果日報公布,蔡英文可能的副手民調支持度,問題及調查背景如下:
Q.外傳彭淮南,蘇貞昌及林信義三人可能成為蔡英文參選總統副手,請問你支持蔡和誰搭檔參選?
有效樣本:385 (20歲以上)

調查方式:電腦語音輔助訪問
調查日期:819
抽樣方法:以全國住宅電話為抽樣母體編冊隨機抽樣
調查機構:《蘋果日報》
經費來源:《蘋果日報》
就樣本數、電腦語音輔助訪問等有基本誤差所在,今天主要是針對副手調查的問法,錯誤一事提出看法。

錯誤一、副手互相之間不是競爭關係,有個人主觀意願、也有客觀條件,如此問法,只能說是問這三個人的知名度而已,且民進黨副總統人選,是由總統自行提名即可,不用比照總統候選人產生方式,這一個題目沒有調查意義。


錯誤二、如果真的要調查這一個題目,調查問法是錯誤的,副手主要是看對候選人是加分或扣分,可以如此問法,看哪一組候選人支持度的變化。
Q1國民黨馬英九搭配吳敦義與民進黨蔡英文搭配彭淮南,請問你比較支持哪一組候選人呢?
Q2國民黨馬英九搭配吳敦義與民進黨蔡英文搭配蘇貞昌,請問你比較支持哪一組候選人呢?
Q3國民黨馬英九搭配吳敦義與民進黨蔡英文搭配林信義,請問你比較支持哪一組候選人呢?
用成三個題目,且要題目隨機出現,候選人前後順序也要隨機。如此對語音調查來說是複雜一點,且拒訪率會太高。就貴單位現實考量,至少可以如何問
Q1外傳彭淮南,蘇貞昌及林信義三人可能成為蔡英文參選總統副手,請問你喜歡誰和蔡搭檔參選?
Q1
外傳彭淮南,蘇貞昌及林信義三人可能成為蔡英文參選總統副手,請問你最不喜歡誰和蔡搭檔參選?
2008美國民主黨黨內初選,希拉蕊與歐巴馬競選,有一題題目是如此訪問,希拉蕊與歐巴馬您比較喜歡誰?希拉蕊與歐巴馬您比較不喜歡誰?結果希拉蕊喜歡度是46%%、不喜歡度也高達45%;而歐巴馬喜歡度36%、不喜歡度只有16%。雖然希拉蕊喜歡度高過歐巴馬,但歐巴馬的淨歡度遠高過希拉蕊。副手只要有一套說法就可以,如互補性(省籍、地區、性別等)、功能性、接班人培訓等都可以,並非要用民調來決定人選。

錯誤三、好的問項題目應該長的什麼樣子呢?一個好的題目引出的答案,要能夠可靠又有效測量我們所要描述的現象,在古典心理測量的意義上,『信度』是用來衡量答案的一致性程度當所要描述的狀態一致的時候,答案也是一致(Nunnally1978)。而『效度』則是評量我們所得到答案,跟我們想要描述或測量的那一些假設的真實價值彼此契合到甚麼地步(Cronbach & Meehl1955)。對採用語音調查要求信度與效度,是嚴苛一點,但如果是台灣第一或第二大報紙來說,一點也不為過。

雖然調查資料有若干偏誤的根源,這些調查結果的效度,還是以問卷設計為關鍵。
例如:請問你是甚麼時候搬到台北市?
答案可能:我小學五年級那一年、或我念大學來的、或1969年等等。這一些答案都有可能,也很合理,主要是題目沒有規範用哪一種方式回答,如果改成請問你是哪一年搬到台北市?如此就比較明確。

問卷設計有理論基礎與實務經驗,粗躁問法,不當的民調資料,毀掉水果日報名譽事小,毀了民調業的公信力與客觀性事大,學術界也只能把水果報的民調當負面與誤差的教材。

沒有留言:

張貼留言