問卷一定要做效度分析嗎

2021-01-10 SPSSAU

什麼是效度?

效度分析,簡單來說就是問卷設計的有效性、準確程度。當我們在為研究主題設計問卷時,都會希望問題實際測量到的是我們希望測量的,這樣研究的數據才能準確的說明問題。

例如,我們想了解一個班級裡學生的綜合成績情況,正式研究中如果僅測試數學一科,然後得出結論,這樣的研究有效性可能很低,原因在於實際測量的方向與研究方向之間有很大偏差。

效度分類

效度又可分為內容效度、結構效度和效標效度。

內容效度,指問卷題項對相關概念測量的合理性情況,通常是以文字來說明問卷的有效性。如通過參考文獻,或者權威來源說明問卷的權威性和有效性。還有就是通過對問卷前測並結合結果進行題項的修正等工作來充分說明問卷的有效性。(內容效度並非統計軟體進行的統計方法,對於問卷研究來講,基本上均需要進行內容效度說明。)

結構效度,指測量題項與測量維度之間的對應關係。測量方法有兩種,一種是探索性因子分析,另外一種是驗證性因子分析。其中,探索性因子分析是當前使用最為廣泛的結構效度測量方法。使用探索性因子分析進行效度驗證時,應該以量表為準,對變量或者量表分別進行分析。效標效度,如果以前有一份權威且標準的量表數據,現在依舊使用該量表進行研究,並且收集回來一份數據。以前權威標準數據作為標準,當前數據與前一份數據之間進行相關分析,如果說相關係數值較高,則說明效標效度良好。

案例應用

1、背景

為測量消費者對某產品的購買意願及影響因素(共5個分別為:因素產品, 促銷, 渠道推廣, 價格, 個性化服務),設計了一份問卷。共25題(均為量表題),其中Q1~Q15影響因素對應題項,Q16~Q19為購買意願對應題項,現希望對量表效度情況進行分析,如果有不合理題項將其進行刪除處理。

2. 操作步驟

這裡使用的是探索性因子分析以驗證問卷效度水平(1)在左側分析方法菜單欄找到【問卷研究】->【效度】

(2)將變量Q1~Q15拖拽到右側分析框內

(3)設置輸出因子個數,預期有5個維度,所以設置因子個數為5。如果沒有確定預期維度,也可以選擇讓系統輸出。

(4)點擊「開始效度分析」

3. 輸出結果

4. 分析結果

第一步:首先分析KMO值:

KMO值為0.870,大於0.6,意味著數據具有效度。同時,旋轉後累積方差解釋率為69.708%>50%,說明研究項的信息量可以有效的提取出來。

第二步:分析題項與因子的對應關係;如果對應關係與研究心理預期基本一致,則說明效度良好。

可以看到所有題項的共同度均大於0.4。除Q6與預期維度對應不符以外,其他題項均與預期對應關係一致,且題項的因子載荷係數絕對值均高於0.4。因而刪除Q6,再次分析。

題項均已滿足預期對應關係,說明效度良好,與專業情況完全相符。

第三步:對分析進行總結。

使用探索性因子分析進行效度分析,15個量表題目共分為5個維度;刪除掉Q6共一道題,最終餘下14個題項,此14項與維度對應關係情況良好,與專業預期相符。從上表可知:KMO值為0.870>0.6,通過巴特球形檢驗,累積方差解釋率值為69.708%,說明5個維度可以提取出大部分題項信息。因而綜合說明研究數據具有良好的結構效度水平。

5. 總結

效度分析只針對量表題,如為非量表題可用文字形式進行描述以測量問卷的有效性如果KMO值過低,可刪除共同度較低項,再次分析效度分析時, 很可能需要刪除題目,以便於維度和題項對應關係符合預期,最關鍵的地方在於:維度和題項對應關係是否與專業預期符合;其餘指標相應比較容易達標,最核心的是讓維度和題項對應關係保持基本一致性無論如何效度分析均不達標,可考慮以單個維度分別進行分析,有幾個維度就分析幾次(同一維度的題目一起分析,僅需要刪除掉因子載荷係數值低於0.4的題項即可,不用考慮多個維度間的邏輯對應關係)如果分析過程中刪除某題項(即刪除該題目及對應的數據),後續所有的分析都要按刪除後的問卷作為標準進行分析

相關焦點

  • 效度分析完整總結!你一定要知道的分析流程
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。尤其是效度分析過程,常常令研究人員頭痛不已。如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。
  • 問卷信效度分析的步驟
    問卷設計是科研工作中的常見問題,如何設計出高信效度問卷,臺灣學者吳明隆給出了很好的答案。應考慮問卷量表是否進行因素分析。因為因素分析時,以較大樣本分析所呈現的因素組型(factor pattern),比一個只用較小樣本所出現的因素組型,要來得穩定。進行因素分析時,量表的題項數愈多及預期要有較多的因素層面的話,應包括愈多的受試者(DeVellis)。
  • 你一定要知道的效度分析攻略
    為什麼要做效度分析 效度檢驗即檢驗問卷有效性,簡單講,就是要確定設計的題項是否合理,是否能有效反應研究人員的研究目標。 需要注意一點,問卷中會有多種類型的問題,比如單選題、多選題、填空題等。而效度分析主要針對量表題。 2.
  • 問卷信度效度之間有什麼關係如何分析
    內在信度:是指衡量研究問卷中的多個題目是否測量了同一概念或者內容,即題目之間是否具有內在一致性。這也就是大多數量表問卷所做的信度分析。外在信度:通常指不同時間測量時,是否測量結果具有一致性。比如說剛才舉例中提到的考試成績例子。
  • 問卷數據分析——區分效度
    前面介紹了合成信度相關內容,現在我們來看區分效度部分。同樣先簡介定義,然後介紹操作計算部分。由於區分效度也是伴隨因子分析進行的,其畫圖、建模以及運行等過程,與合成信度的過程一模一樣,本文中案例所用的數據與合成信度也是同一數據,文中關於畫圖等過程就省略了,大家自行參照合成信度相關內容。
  • 超級糟糕的問卷效度,要如何調整?
    做量表研究的人,或多或少都曾因為量表效度不達標困擾過,尤其在很多研究領域並沒有特別權威的經典量表可以引用。使用自製的量表來研究,容易信效度不達標,那麼如果遇到效度非常糟糕的情況時應該怎麼辦呢?如果KMO值高於0.8,則說明效度高;如果此值介於0.7~0.8之間,則說明效度較好;如果此值介於0.6~0.7,則說明效度可接受,如果此值小於0.6,說明效度不佳(如果僅兩個題;則KMO無論如何均為0.5)。通過Bartlett 球形度檢驗意味著變量之間有一定的相關性,適合使用因子分析檢驗效度。
  • 《量表信效度分析》系列文章
    轉載 | SPSS學堂各位小夥伴們,在推出《問卷設計與統計分析》系列後,有許多小夥伴來反饋怎樣設計更為優質的問卷?為了解決這一問題,學堂推出了量表信效度系列,超詳細的為大家講解如何對問卷進行試測,調整問卷結構,設計更為優質的問卷。
  • 一文掌握效度分析所有知識點!
    當信度分析不達標時,效度分析必然也不能達標。效度分析常見的有內容效度分析、結構效度分析,建議研究人員通過內容效度分析和結構效度分析這兩方面對問卷進行效度分析,如下圖所示。內容效度分析是指問卷題對相關概念測量的適用性情況,簡單來講,即題設計的合理性情況。內容效度分析可以從兩個方面進行說明。 第一,專家判斷。專家具有權威性,因此如果專家對問卷進行判斷並得出肯定,那麼可以說明問卷具有有效性。此處的專家是指行業內專家或參考量表、權威來源等。 第二,問卷預測試。
  • 效度不達標的處理方式
    在進行問卷研究時,特別是問卷中有非常多的量表題時,量表設計是否合適,量表設置有效嗎?如同信度一樣,這是非常重要的問題。如果量表設計不合理,基於此量表的數據也會受到置疑。接下來闡述效度分析(上一篇文章闡述信度分析),以及效度分析時的操作方法,如何解決出現的問題等。
  • 「乾貨分享」效度分析的幾點思考
    可見下表格:第一種內容效度是指使用文字敘述形式對問卷的合理性、科學性進行說明,比如問卷中測量量表題有著嚴謹的參考依據,問卷設計得到專家的認可等,如果有參考依據,也或者有著專家認可,那麼即是說測量項確實可以測量自己希望測量的變量;比如測量『美麗』這個變量,用了三個量表題,分別是『看起來很年輕』,『看上去五官端正』,『看上去心情很好』,這3個測量題是有著參考依據,也或者專家認為此3項確實可以測量
  • SPSSAU數據分析入門教學03:信效度分析指標
    信效度是衡量一份問卷測試結果的準確性和穩定性的依據。問卷設計完成之後到分析結束,一般要經過兩次信效度分析。一次是預調查時,一次是正式分析。2 信度與效度的關係信度是效度的基礎,必須要有信度才有效度。信度低,效度不可能高,但信度高不一定效度高。
  • 沒有信度和效度,還能叫問卷嗎?
    這種方法一般不適用於事實式問卷(如年齡與性別無法相比),常用於態度、意見式問卷的信度分析。在問卷調查中態度測量最常見的形式是5級李克特( Likert量表)。4、Cronbach's a信度係數Cronbach’sQ係數是 Cronbach於1951年創立的,用於評價問卷的內部一致性。
  • 信度分析完整流程總結,一定有你需要的
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。很多人會選擇直奔主題,點開信度分析界面,拽上所有題目就開始分析。但往往這樣「高效」的做法,總是得不到理想的結果。如何更有效獲得信度分析結果,避免無用功,今天我們就一起來探討一下。
  • 你會進行標準關聯效度分析嗎?| 量表的信效度分析(4)
    上圖中,標準量表為自殺可能性量表,其總分(連續資料)與新量表(住院患者自殺風險評估)量表總分(連續資料),進行校標關聯效度分析,此時使用的是相關係數(如Pearson或Spearman相關係數)。效標關聯效度又可分為「同時效度(concurrent validity)」和「預測效度(predictive validity)」。
  • 問卷調查:如何判斷設置的問題是有效的?
    當我們完成了問卷設計,如何判斷設置的問題是否有效呢?不妨先從問卷的質量的幾個標準來審視自己的問卷:1、我設置的問題和答案反映了理論變量嗎?2、多個答題者對問題的理解是否一致?3、答題者能否對問題作出可靠的答案?
  • 如何看懂一篇學術文章的效度和信度
    比如,工作崗位是圖書館管理員,筆試一輪中全是寬泛的性格測試;工作崗位是政策分析諮詢師,面試完全沒有問到受試者研究經驗或者測試分析能力,而是進行了一個小時漫無邊際的閒談等等 (是的,美國公務員招聘也存在諸多問題)。
  • SPSS有話說:如何得出問卷或量表的結構或維度——探索性因素分析
    探索性因素分析是依據樣本數據,根據變量間相關性的大小對變量進行分組,每組內的變量之間存在較高相關性,意味著這些變量背後有共同的制約因素,用這些公共因子來代替原始的眾多變量的過程。簡單來說,就是探索問卷的結構或維度。探索性因素分析也是在心理測驗編制過程中用來檢驗測驗結構效度的一種非常重要和有效的分析方法,通過檢驗變量(因子)與題項的對應關係。
  • 玩轉量表:量表設計與分析實戰
    內容效度是通過專家進行評價有效性,校標效度是參照一定的效度標準評價有效性,結構效度是衡量實際結果和測量概念之間的對應關係,通常用因子分析進行探索。以上就是量表的一些基本概念、典型量表的介紹。對量表有一些初步了解後,我們接下來將結合具體的項目案例,詳細介紹消費價值觀量表的設計和分析過程,手把手教你怎麼完成一份量表的編制。
  • 史上最易懂的問卷信效度分析教程!!!
    KMO值為0.789,Bartlett球形檢驗顯著性為.000,表明很適合做因子分析!同理,如果你要做整個問卷的KMO,選中所有變量即可。 注意:在KMO檢驗的結果中,會有一個旋轉成分矩陣,但那個是探索性因子分析法(EFA)的因子載荷,而不是驗證性因子分析(CFA)。只有AMOS可以做CFA (5)因子分析?? 因子分析的方法有兩類。
  • 新傳名詞解釋全整理:效度/表面效度/準則效度/結構效度/內在效度和外在效度/信度與效度的關係
    信度與效度的關係1.效度(Validity)即測量的有效度或準確度。它是指測量工具或測量手段能夠準確測出所要測量的變量的程度,或者說能夠準確、真實地度量事物屬性的程度。 2.結構效度(Construct validity)結構效度也稱構造效度或建構效度,它通過利用現有的理論或命題來考察當前測量工具或手段的效度。結構效度涉及一個理論的關係結構中其他概念或變量的測量。 5.