效度分析完整總結!你一定要知道的分析流程

2020-11-30 SPSSAU

在問卷研究中,分析問卷信效度總是不可避免的環節之一。

尤其是效度分析過程,常常令研究人員頭痛不已。

如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。

本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。

1. 為什麼要做效度分析

效度檢驗即檢驗問卷有效性,簡單講,就是要確定設計的題項是否合理,是否能有效對應著研究人員的研究預期。

需要注意一點,問卷中會有多種類型的問題,比如單選題、多選題、填空題等。而效度分析主要針對量表題

什麼是李克特量表:設計問卷你還缺這一步

2. 效度分類

效度可以分為三類:內容效度、效標效度、結構效度。

內容效度,檢驗問卷內容是否符合研究目的和要求。

效標效度,問卷測量結果與效標的相關程度。

結構效度,是指測量題項結果能夠反映預期因子(維度)的程度。

(1)內容效度

常用的檢驗效度的方法,主要通過文字描述量表的有效性。

如何進行內容效度檢驗:具體分析時建議按以下幾點分別說明,從各個角度論證問卷設計的合理性:

第一:用文字描述問卷的設計過程,包括問題設計與思路如何保持一致性;

第二:用文字描述問卷設計的參考依據,比如參考某某文獻設計問卷等;

第三:用文字描述問卷設計的過程,比如是否進行過預測試,對問卷進行過哪些修改處理等,修正的原因等;

第四:用文字描述專家或同行的認可性,比如問卷設計經過某指導教授或老師的認可,也或者相關專業人士(比如學長同學等)進行過溝通修改等。

第五:其它可用於論證問卷設計合理的說明等。

(2)效標效度

效標效度是以經典量表的測量結果作為「金標準」,與當前數據得到的結果進行相關分析,如果相關係數值較高,則說明效標效度良好。

操作方法:首先確定效標,計算問卷得分,使用pearson相關分析,考察實測得分與效標得分兩組數據的相關性。

判斷標準:相關係數越大,代表相關性越高,效度越高。

(3)結構效度

問卷結構效度分析的常用方法有兩種:探索性因子分析、驗證性因子分析。

正常情況下,針對量表數據的效度分析,均需要使用探索性因子分析進行效度的驗證說明,並且配合內容效度進行綜合說明。

① 探索性因子分析

操作方法:使用SPSSAU[效度]或[因子],放入量表題進行分析。

效度分析判斷標準:

(1)KMO值大於0.6

(2)題項在對應因子上的因子載荷係數大於0.4

(3)不存在題項與因子對應關係出現嚴重偏差

(4)共同度大於0.4

(5)累積方差解釋率大於50%

效度分析一般需要經歷多次分析,如果最終得到的結果能夠滿足以上標準,則說明維度劃分比較合理,具有良好的結構效度。

SPSSSAU會自動標出載荷係數絕對值大於0.4,共同度小於0.4的數據,便於研究者進行處理。

② 驗證性因子分析

驗證性因子分析可用於驗證聚合效度和區分效度。

操作方法:同一因子下的所有題項需放入同一個分析框裡,以此類推,有幾個維度就分別放入幾個分析框。

判斷標準:AVE和CR是聚合效度常用指標,通常情況下AVE大於0.5且CR值大於0.7,則說明聚合效度較高。

區分效度可通過對比AVE平方根與相關關係值進行檢驗。如果AVE平方根大於相關係數值,則說明區分效度良好。

更為詳細的說明可以閱讀SPSSAU文章:

問卷一定要做效度分析嗎

實用教程!驗證性因子分析思路總結

3. 常見問題

確定問卷具有良好的效度是問卷研究的必要前提,但同時想要得到良好的效度並不容易。

有一些在做效度分析時的常見問題,SPSSAU在這裡進行統一整理:

同時可以查看SPSSAU-效度分析幫助手冊,裡面有更詳細地介紹效度不達標時應該如何處理。

4. 分析思路

從分析角度看,為保證問卷質量,通常會在正式調研前,進行預調查,即小規模發放問卷,根據調研的信效度結果對問卷題項做調整,然後在進行正式調研。

預調研和正式調研中均需要進行效度檢驗。

總結

效度分析一般需要經歷多次分析,才能得到較理想的結構效度。

如果使用的是已建成熟量表,理論維度都是已知的。但是探索性因子分析結果無法匹配原量表維度,建議直接使用驗證性因子分析CFA。

相關焦點

  • 信度分析完整流程總結,一定有你需要的
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。很多人會選擇直奔主題,點開信度分析界面,拽上所有題目就開始分析。但往往這樣「高效」的做法,總是得不到理想的結果。如何更有效獲得信度分析結果,避免無用功,今天我們就一起來探討一下。
  • 你一定要知道的效度分析攻略
    尤其是效度分析過程,常常令研究人員頭痛不已。 如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。 本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。 1.
  • 問卷一定要做效度分析嗎
    結構效度,指測量題項與測量維度之間的對應關係。測量方法有兩種,一種是探索性因子分析,另外一種是驗證性因子分析。其中,探索性因子分析是當前使用最為廣泛的結構效度測量方法。使用探索性因子分析進行效度驗證時,應該以量表為準,對變量或者量表分別進行分析。效標效度,如果以前有一份權威且標準的量表數據,現在依舊使用該量表進行研究,並且收集回來一份數據。
  • 「乾貨分享」效度分析的幾點思考
    在效度分析過程中,通常會出現『變量』與『測量項』之間的對應關係嚴重偏離,即效度不達標。此種偏離可具體分為兩種情況,分別是『張冠李戴』和『糾纏不清』,『張冠李戴』指對應關係完全出錯,此種情況需要直接把『測量項』刪除掉;如果是出現『糾纏不清』,即『測量項』歸到兩個或更多個『變量』裡面都可以,但是一定在自己希望測量的『變量』裡面有出現,那麼這種情況就是『糾纏不清』,此種情況一般可以不處理。
  • SPSSAU數據分析入門教學03:信效度分析指標
    信效度是衡量一份問卷測試結果的準確性和穩定性的依據。問卷設計完成之後到分析結束,一般要經過兩次信效度分析。一次是預調查時,一次是正式分析。2 信度與效度的關係信度是效度的基礎,必須要有信度才有效度。信度低,效度不可能高,但信度高不一定效度高。
  • 你會進行標準關聯效度分析嗎?| 量表的信效度分析(4)
    上圖中,標準量表為自殺可能性量表,其總分(連續資料)與新量表(住院患者自殺風險評估)量表總分(連續資料),進行校標關聯效度分析,此時使用的是相關係數(如Pearson或Spearman相關係數)。效標關聯效度又可分為「同時效度(concurrent validity)」和「預測效度(predictive validity)」。
  • 問卷信效度分析的步驟
    應考慮問卷量表是否進行因素分析。因為因素分析時,以較大樣本分析所呈現的因素組型(factor pattern),比一個只用較小樣本所出現的因素組型,要來得穩定。進行因素分析時,量表的題項數愈多及預期要有較多的因素層面的話,應包括愈多的受試者(DeVellis)。
  • 《量表信效度分析》系列文章
    為了解決這一問題,學堂推出了量表信效度系列,超詳細的為大家講解如何對問卷進行試測,調整問卷結構,設計更為優質的問卷。為讓大家更加方便的學習信效度分析的基礎知識與應用,學堂現將《 量表信效度分析》系列文章匯總起來呈現給大家。此系列文章專門為信效度分析的初學者準備,內容全面、豐富,大家可以根據自己的需要慢慢學習,後續文章將持續更新中!
  • 問卷數據分析——區分效度
    前面介紹了合成信度相關內容,現在我們來看區分效度部分。同樣先簡介定義,然後介紹操作計算部分。由於區分效度也是伴隨因子分析進行的,其畫圖、建模以及運行等過程,與合成信度的過程一模一樣,本文中案例所用的數據與合成信度也是同一數據,文中關於畫圖等過程就省略了,大家自行參照合成信度相關內容。
  • 問卷信度效度之間有什麼關係如何分析
    什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。(內容效度並非統計軟體進行的統計方法,對於問卷研究來講,基本上均需要進行內容效度說明。)結構效度,指測量題項與測量維度之間的對應關係。測量方法有兩種,一種是探索性因子分析,另外一種是驗證性因子分析。其中,探索性因子分析是當前使用最為廣泛的結構效度測量方法。
  • 從零開始數據分析:一個數據分析師的數據分析流程
    數據分析百科給出準確定義:指用適當的統計分析方法對收集來的大量數據進行分析,提取有用信息和形成結論而對數據加以詳細研究和概括總結的過程。簡而言之就是有目的的收集數據、分析數據,使之成為信息的過程。
  • 全流程總結相關分析,讓你條理清晰完成分析
    得到最多的反饋是大家對於常見分析方法,不知道如何選擇,如何分析。雖說越實用的方法,往往也越簡單。但剛開始接觸數據分析時,確實就是會因為一些奇奇怪怪的術語不理解,讓大家產生很難懂學不會的挫敗感。為了幫大家快速度過新手期, 我們整理了一份常見分析方法的流程總結。其中包括每種分析方法的分析流程,以及每個環節中可能出現的問題及應對方法。
  • 超級糟糕的問卷效度,要如何調整?
    如果KMO值高於0.8,則說明效度高;如果此值介於0.7~0.8之間,則說明效度較好;如果此值介於0.6~0.7,則說明效度可接受,如果此值小於0.6,說明效度不佳(如果僅兩個題;則KMO無論如何均為0.5)。通過Bartlett 球形度檢驗意味著變量之間有一定的相關性,適合使用因子分析檢驗效度。
  • 從零開始數據分析:一個數據分析師的數據分析流程 | 網際網路數據...
    數據分析百科給出準確定義:指用適當的統計分析方法對收集來的大量數據進行分析,提取有用信息和形成結論而對數據加以詳細研究和概括總結的過程。簡而言之就是有目的的收集數據、分析數據,使之成為信息的過程。
  • 一文掌握效度分析所有知識點!
    通常情況下,效度分析只能分析量表題。 針對效度分析,通常會使用內容效度分析、結構效度分析(探索性因子分析)和結構效度分析(驗證性因子分析)進行效度分析。效度分析類型如下所示。結構效度分析通常使用探索性因子分析(EFA)進行驗證,即通過探索性因子分析對題進行分析,如果輸出結果顯示題和變量的對應關係基本與預期一致,則說明結構效度分析良好。 1效度分析基本說明 效度分析的目的在於判斷研究題是否可以有效地測量研究人員需要測量的變量,通俗來講就是測量問卷題是否準確有效。
  • 驗證性因子分析思路總結
    驗證性因子分析:驗證因子與分析項的對應關係,檢驗量表效度,成熟量表通常用驗證性因子分析。確認測量關係後,後續可進行路徑分析/線性回歸分析研究具體的影響關係。返回分析頁面,選擇「按MI>10調整」,再次分析。(4)模型分析在完成模型構建後,即可使用模型進行分析。驗證性因子分析主要有三個方面的功能,分別是聚合效度、區分效度、共同方法偏差。
  • 玩轉量表:量表設計與分析實戰
    量表編制流程面對研究主題時,如果有現成可用的量表當然最理想的,因為編制一份正規量表的成本較高,一方面需要具備一定的專業知識,如相關理論、信度和效度檢驗等,另一方面需要花費較多的時間通過數據檢驗量表是否可用。因此如果不是必須,更推薦使用已有成熟的量表進行研究。這裡先簡要介紹下量表編制的基本步驟和關鍵要點,後面會結合案例詳細介紹。
  • 論文裡的分析方法要用哪一種,SPSSAU告訴你答案
    在日常分析中,常會遇到不知道選擇什麼分析方法的尷尬情況出現,尤其是在面對幾種相似的方法,不知道它們之間有什麼差別,一念之差就會選錯方法。相信這樣的小盲點,依然困擾著不少人。因此,SPSSAU整理了一份相似方法的對比目錄,可以一目了然地比較出方法間的差異。
  • 快速掌握驗證性因子分析
    驗證性因子分析(confirmatory factor analysis, CFA)通常可用於四種用途:一是針對成熟量表進行效度分析,包括結構效度,聚合(收斂效度)和區分效度;二是驗證性因子分析可用於組合信度的分析;
  • 效度不達標的處理方式
    · 拖拽分析項到右側:如果量表有20個題則同時放入20個題;【切記一定是量表題目】· 設置維度個數:如果20個量表題對應4個維度則設置為4;【只有自己才知道應該分為幾個維度】點擊分析得到結果如下,包括表格和智能分析。