超全整理!你一定要知道的效度分析攻略

2020-11-30 騰訊網

在問卷研究中,分析問卷信效度總是不可避免的環節之一。

尤其是效度分析過程,常常令研究人員頭痛不已。

如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。

本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。

1. 為什麼要做效度分析

效度檢驗即檢驗問卷有效性,簡單講,就是要確定設計的題項是否合理,是否能有效反應研究人員的研究目標。

需要注意一點,問卷中會有多種類型的問題,比如單選題、多選題、填空題等。而效度分析主要針對量表題。

2. 效度分類

效度可以分為三類:內容效度、效標效度、結構效度。

內容效度,檢驗問卷內容是否符合研究目的和要求。

效標效度,問卷測量結果與效標的相關程度。

結構效度,是研究因子與測量項的對應關係是否符合預期。

(1)內容效度

常用的檢驗效度的方法,主要通過文字描述量表的有效性。

如何進行內容效度檢驗:具體分析時建議按以下幾點分別說明,從各個角度論證問卷設計的合理性:

第一:用文字描述問卷的設計過程,包括問題設計與思路如何保持一致性;

第二:用文字描述問卷設計的參考依據,比如參考某某文獻設計問卷等;

第三:用文字描述問卷設計的過程,比如是否進行過預測試,對問卷進行過哪些修改處理等,修正的原因等;

第四:用文字描述專家或同行的認可性,比如問卷設計經過某指導教授或老師的認可,也或者相關專業人士(比如學長同學等)進行過溝通修改等。

第五:其它可用於論證問卷設計合理的說明等。

(2)效標效度

效標效度是以經典量表的測量結果作為「金標準」,與當前數據得到的結果進行相關分析,如果相關係數值較高,則說明效標效度良好。

操作方法:首先確定效標,計算問卷測量得分,使用pearson相關分析,考察實測得分與效標得分兩組數據的相關性。

判斷標準:相關係數越大,代表相關性越高,效度越高。

(3)結構效度

問卷結構效度分析的常用方法有兩種:探索性因子分析、驗證性因子分析。

正常情況下,針對量表數據的效度分析,均需要使用探索性因子分析進行效度的驗證說明,並且配合內容效度進行綜合說明。

探索性因子分析

操作方法:使用SPSSAU[效度]或[因子]功能進行分析,放入量表題項。

效度分析判斷標準:

(1)KMO值大於0.6

(2)題項在該因子上的因子載荷係數大於0.4

(3)不存在題項與因子對應關係出現嚴重偏差

(2)共同度沒有小於0.4

(5)累積方差解釋率大於50%

效度分析一般需要經歷多次分析,如果最終得到的結果能夠滿足以上標準,則說明維度劃分比較合理,具有良好的結構效度。

SPSSSAU會自動標出載荷係數絕對值大於0.4,共同度小於0.4的數據,便於研究者進行處理。

驗證性因子分析

驗證性因子分析可用於驗證聚合效度和區分效度。

操作方法:同一因子下的所有題項需放入同一個分析框裡,以此類推,有幾個維度就分別放入幾個分析框。

判斷標準:AVE和CR是聚合效度常用指標,通常情況下AVE大於0.5且CR值大於0.7,則說明聚合效度較高。

區分效度可通過對比AVE平方根與相關關係值進行檢驗。如果AVE平方根大於相關係數值,則說明區分效度良好。

3. 常見問題

確定問卷具有良好的效度是問卷研究的必要前提,但同時想要得到良好的效度並不容易。

有一些在做效度分析時的常見問題,SPSSAU在這裡進行統一整理:

同時可以查看SPSSAU-效度分析幫助手冊,裡面有更詳細地介紹效度不達標時應該如何處理。

4. 分析思路

從分析角度看,為保證問卷質量,通常會在正式調研前,進行預調查,即小規模發放問卷,根據調研的信效度結果對問卷題項做調整,然後在進行正式調研。

預調研和正式調研中均需要進行效度檢驗。

總結

效度分析一般需要經歷多次重複分析。在題項與維度對應基本清晰,且符合專業意義時,才能說明問卷有較為良好的效度。

如果使用的是已有的成熟量表,理論維度都是已知的,建議直接使用驗證性因子分析CFA檢驗效度。

相關焦點

  • 效度分析完整總結!你一定要知道的分析流程
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。尤其是效度分析過程,常常令研究人員頭痛不已。如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。
  • 《量表信效度分析》系列文章
    為了解決這一問題,學堂推出了量表信效度系列,超詳細的為大家講解如何對問卷進行試測,調整問卷結構,設計更為優質的問卷。為讓大家更加方便的學習信效度分析的基礎知識與應用,學堂現將《 量表信效度分析》系列文章匯總起來呈現給大家。此系列文章專門為信效度分析的初學者準備,內容全面、豐富,大家可以根據自己的需要慢慢學習,後續文章將持續更新中!
  • 問卷一定要做效度分析嗎
    結構效度,指測量題項與測量維度之間的對應關係。測量方法有兩種,一種是探索性因子分析,另外一種是驗證性因子分析。其中,探索性因子分析是當前使用最為廣泛的結構效度測量方法。使用探索性因子分析進行效度驗證時,應該以量表為準,對變量或者量表分別進行分析。效標效度,如果以前有一份權威且標準的量表數據,現在依舊使用該量表進行研究,並且收集回來一份數據。
  • 問卷數據分析——區分效度
    前面介紹了合成信度相關內容,現在我們來看區分效度部分。同樣先簡介定義,然後介紹操作計算部分。由於區分效度也是伴隨因子分析進行的,其畫圖、建模以及運行等過程,與合成信度的過程一模一樣,本文中案例所用的數據與合成信度也是同一數據,文中關於畫圖等過程就省略了,大家自行參照合成信度相關內容。
  • 你會進行標準關聯效度分析嗎?| 量表的信效度分析(4)
    上圖中,標準量表為自殺可能性量表,其總分(連續資料)與新量表(住院患者自殺風險評估)量表總分(連續資料),進行校標關聯效度分析,此時使用的是相關係數(如Pearson或Spearman相關係數)。效標關聯效度又可分為「同時效度(concurrent validity)」和「預測效度(predictive validity)」。
  • 新傳名詞解釋全整理:效度/表面效度/準則效度/結構效度/內在效度和外在效度/信度與效度的關係
    信度與效度的關係1.效度(Validity)即測量的有效度或準確度。它是指測量工具或測量手段能夠準確測出所要測量的變量的程度,或者說能夠準確、真實地度量事物屬性的程度。 2.結構效度(Construct validity)結構效度也稱構造效度或建構效度,它通過利用現有的理論或命題來考察當前測量工具或手段的效度。結構效度涉及一個理論的關係結構中其他概念或變量的測量。 5.
  • 五一作文素材超全整理,小長假讓你輕鬆寫作文
    (1)勞動動作的詞語     整理 收拾 晾曬 縫補 清洗 擦抹 揉搓     翻炒 洗滌 澆灌     大顯身手   兢兢業業 勤勤懇懇 熱火朝天 爭先恐後     汗流浹背 大汗淋漓     (5)形容勞動場面的成語     起早貪黑 熱火朝天 任勞任怨 熱火朝天     奮勇爭先     拿來就能用,五一作文素材超全整理
  • 問卷信效度分析的步驟
    應考慮問卷量表是否進行因素分析。因為因素分析時,以較大樣本分析所呈現的因素組型(factor pattern),比一個只用較小樣本所出現的因素組型,要來得穩定。進行因素分析時,量表的題項數愈多及預期要有較多的因素層面的話,應包括愈多的受試者(DeVellis)。
  • 論文裡的分析方法要用哪一種,SPSSAU告訴你答案
    在日常分析中,常會遇到不知道選擇什麼分析方法的尷尬情況出現,尤其是在面對幾種相似的方法,不知道它們之間有什麼差別,一念之差就會選錯方法。相信這樣的小盲點,依然困擾著不少人。因此,SPSSAU整理了一份相似方法的對比目錄,可以一目了然地比較出方法間的差異。
  • 問卷信度效度之間有什麼關係如何分析
    什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。(內容效度並非統計軟體進行的統計方法,對於問卷研究來講,基本上均需要進行內容效度說明。)結構效度,指測量題項與測量維度之間的對應關係。測量方法有兩種,一種是探索性因子分析,另外一種是驗證性因子分析。其中,探索性因子分析是當前使用最為廣泛的結構效度測量方法。
  • 化學「必修一」超全知識點整理,滿滿的乾貨!
    高一馬上要結束了,很多同學對高中化學必修一的內容還是很模糊,「必修一」在整個高中學習中佔有重要的地位,如果你必修一都學不會,那在以後的化學學習中就想掉進「坑裡」,無法翻身。對於初學者來說,高中化學進入了一個新的高度,化學不僅需要反覆記憶,更重要的是學習方法,要學會總結歸納。高中化學必修一在高考中佔的分值也比較大,不要等到高三總複習回頭撿高一的內容,會耽誤你整個總複習的進度,而且效果不好。建議在高一、高二把所學的知識點吃透,等到高三總複習時,你會很輕鬆的查漏補缺,快速上分。
  • 超級糟糕的問卷效度,要如何調整?
    如果KMO值高於0.8,則說明效度高;如果此值介於0.7~0.8之間,則說明效度較好;如果此值介於0.6~0.7,則說明效度可接受,如果此值小於0.6,說明效度不佳(如果僅兩個題;則KMO無論如何均為0.5)。通過Bartlett 球形度檢驗意味著變量之間有一定的相關性,適合使用因子分析檢驗效度。
  • SPSSAU數據分析入門教學03:信效度分析指標
    信效度是衡量一份問卷測試結果的準確性和穩定性的依據。問卷設計完成之後到分析結束,一般要經過兩次信效度分析。一次是預調查時,一次是正式分析。2 信度與效度的關係信度是效度的基礎,必須要有信度才有效度。信度低,效度不可能高,但信度高不一定效度高。
  • 「乾貨分享」效度分析的幾點思考
    效度分析在學術研究中非常常見,其用於分析『測量項是否真實有效的測量自己希望測量的變量』,效度分析的研究方式有多種,通常包括內容效度,結構效度(探索性因子分析法)和區分效度或聚合效度(驗證性因子分析法)。
  • 心理學案例分析題解題技巧(你不知道的拿分攻略)
    案例分析題--拿分攻略每年的9月份都是開學季,而暑假時光總是會讓人那麼捨不得,美好的時光也總是走的很快~小編記得小時候每年暑假都會看《還珠格格》,長大後今年的暑假小編在看《陳情令》和《烈火軍校》,再怎麼惋惜,暑假還是過去了~作為考研人,追劇這件事情還是等考上研究生之後再去做吧
  • 一文掌握效度分析所有知識點!
    通常情況下,效度分析只能分析量表題。 針對效度分析,通常會使用內容效度分析、結構效度分析(探索性因子分析)和結構效度分析(驗證性因子分析)進行效度分析。效度分析類型如下所示。結構效度分析通常使用探索性因子分析(EFA)進行驗證,即通過探索性因子分析對題進行分析,如果輸出結果顯示題和變量的對應關係基本與預期一致,則說明結構效度分析良好。 1效度分析基本說明 效度分析的目的在於判斷研究題是否可以有效地測量研究人員需要測量的變量,通俗來講就是測量問卷題是否準確有效。
  • 效度不達標的處理方式
    · 拖拽分析項到右側:如果量表有20個題則同時放入20個題;【切記一定是量表題目】· 設置維度個數:如果20個量表題對應4個維度則設置為4;【只有自己才知道應該分為幾個維度】點擊分析得到結果如下,包括表格和智能分析。
  • 信度與效度的理論溯源
    1.內容效度內容效度指的是測驗所選取的項目是否符合所要測量的東西,其代表性是否適當。例如,要測量小學一年級學生的數學能力,就應該選取適合該年級的數學基本運算內容。假如選取了大學數學的高數內容,則不能測出小學一年級學生的數學運算能力,說明該試卷缺乏內容效度。
  • 信度分析完整流程總結,一定有你需要的
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。很多人會選擇直奔主題,點開信度分析界面,拽上所有題目就開始分析。但往往這樣「高效」的做法,總是得不到理想的結果。如何更有效獲得信度分析結果,避免無用功,今天我們就一起來探討一下。
  • 如何區分信度與效度之間的關係
    信度與效度兩者間的關係是歷年來的重要考點也是同學們做題時候的難點,常以單選、填空和簡答來考察大家,理解性去做題就比較容易得分,那麼今天就來為大家解讀一下這部分知識點