問卷設計與分析:效度分析

2021-02-19 統計211網

   問卷效度可以理解為問卷的有效性,也就是問卷題目在多大程度能夠反應測量內容的。如果一份問卷的效度不好,那這份問卷可能是調查不到你需要研究的內容。常用的問卷效度包含:內容效度(也稱邏輯效度)、效標效度和構念效度。

   1、內容效度

   內容效度反映的是問卷內容與廣度的適合程度,換句話說,內容效度就是研究者設計的問卷是否能夠測量到研究內容,有沒有存在跑題的現象。

   內容效度常用的評價方法是「專家評定法」,即尋找多位該領域的專家對設計的問卷進行評價,並提出意見。專家評定法是在問卷調查之前進行的。

   2、效標效度

   效標效度是問卷與效標之間的相關係數,表示問卷有效性的高低。效標是問卷測量結果有效性和意義的參照標準,其必須能夠反映測量內容的內涵。如,要調查學業自我效能感,那可以採用一般自我效能感作為效標,因為學業自我效能感屬於具體領域的概念,而一般自我效能感數據一般領域的概念,一般領域的概念包含了具體領域的概念。同時,效標的測量工具還需要是被普遍認可的,這樣才具有權威型。

   效標可以分為兩類:內容效標和關聯效標。內容效標主要是針對測量內容,關聯效標主要是針對結果。如上面的一般自我效能感就是學業自我效能感的內容效標,如果選用學業成績作為學業自我效能感的效標,那麼學業成績就是關聯效標。

   效標效度的量化計算方法是計算兩個問卷的相關係數。

   3、構念效度

   構念效度是指問卷能夠測得一個抽象概念或特質的程度。最常用的分析方法是因素分析。

   在SPSS中,使用因素分析的操作如下:分析→降維→因子分析。在因子分析界面,將問卷題目選入到「變量」中,在「描述」裡面選擇「KMO和Bartlett的球形度檢驗」,在「旋轉」中選擇「最大方差法」或者是「Promax」(本例中選擇最大方差法)。設置完成之後,點擊確定運行分析。

   在輸出結果中,首先看到的是KMO檢驗的結果,如下圖所示:


   因子分析首先需要檢驗數據是否適合進行因素分析,檢驗的方法就是KMO檢驗,要求為KMO值≥0.7,Bartlett具有顯著性(<0.05)。在本例中,KMO檢驗的結果表明,數據適合進行因子分析。

   因子分析是為了提取維度,提取維度的方法是根據特徵值是否大於1進行判斷,這一部分的結果是「總方差解釋」表格,如下圖所示:

   從上表中可以看到,特徵值大於1的因子有2個,因此可以提取兩個因子。因子1的解釋率為41.749%,因子2的解釋率為14.49%,總共解釋了56.239%的變異。方差的解釋率要求是越高越好,但有些學科定的標準是80%,有些則比較低,這個要看具體要求,並綜合因子分析的其他結果進行考慮。

   每個因子包含的題目需要根據表「旋轉後的成分矩陣」進行判定。旋轉後的成分矩陣給出的值因素負荷值,要求問卷的題目在一個因素上的負荷值越高越好,一般要高於0.4,在不同因素上的負荷值不能相近。在下表中,題目A1在因素1上的負荷值為0.68,在因素2上的負荷值為0.193,符合上述兩個要求,因此A1是符合標準,如果有題目不符合上述標準,則該題目需要考慮刪除。

   從上表中可以看到,自尊量表的10道題目均符合要求,都可以保留。根據上表可以看到,因素1報告的題目有A1、A3、A4、A7、A8、A10,因子2包含的題目有A2、A5、A6、A9。

   到此為止,因子分析的內容基本完成了。但問卷分析的內容還沒有完,還差最有一步,就是對各個因子進行命名。因子1包含的6道題目分別為:「A1大體來說,我對我自己十分滿意」、「A3 我覺得自己有許多優點」、「A4我自信我可以和別人表現的一樣好」、「A7我覺得自己和別人一樣有價值」、「A8 我十分地看重自己」、「A10 我對我自己保持積極的態度」,通過這6道題目可以看到,他們都是對自己的一個正面肯定的描述,據此我們可以將因子1命名為「正面肯定」。因子2包含的4道題目分別為:「A2 有時我會覺得自己一無是處」、「A5 我時常覺得自己沒有什麼好驕傲的」、「A6 有時候我的卻感到自己沒有什麼用處」、「A9 我常會覺得自己是一個失敗者」,從這4道題目可以看到,都是對自己的一個負面否定的描述,因此可以命名為「負面評價」。

   因子分析完成之後,一般還需要採用AMOS進行一個驗證性因素分析,分析問卷的擬合度如何(詳見之前的文章)。當這些分析都完成了,一份問卷的分析工作也就完成了,剩下的就是研究者對問卷的使用了。

相關焦點

  • 關於量表與問卷的信度效度分析
    在向拾貝數據進行統計諮詢的客戶中,經常會碰到一些關於問卷方面的知識認知能力幹預,尤其是在慢病管理和護理學的研究中。4、α信度係數法 Cronbach α信度係數是目前最常用的信度係數,其公式為:其中,K為量表中題項的總數, 為第i題得分的題內方差,為全部題項總得分的方差。從公式中可以看出,α係數評價的是量表中各題項得分間的一致性,屬於內在一致性係數。這種方法適用於態度、意見式問卷(量表)的信度分析。
  • 2、問卷數據——問卷量表的效度分析
    一份設計量表應同時具有較高的信度與效度,則該量表具有較高的內在質量。信度是效度的必要不充分條件,有信度才有效度,但有了信度不一定有效度。信度低,效度不可能高;信度高,效度未必高;效度低,信度可能高;效度高,信度必然高。具體信度度量參考:1、問卷數據——問卷量表的信度分析。  效度包含兩層含義,一是測量的是所要研究的概念而不是其他概念,二是該概念能夠被準確的測量。
  • 數據分析技術:信度與效度分析;信度和效度不僅僅能用於問卷分析!
    評分信度與效度;五個裁判打分,信度能夠表示5個裁判的打分情況是否穩定及相似;效度表示分數是否能夠真實表示出運動員或考生的真正實力。C. 問卷的信度和效度評價問卷的信度在於評價收集上來的數據是否真實可靠,也就是檢查填寫問卷的這些人是不是認真的填寫了問卷,還是亂填的。
  • 問卷一定要做效度分析嗎
    什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。效度分類效度又可分為內容效度、結構效度和效標效度。內容效度,指問卷題項對相關概念測量的合理性情況,通常是以文字來說明問卷的有效性。如通過參考文獻,或者權威來源說明問卷的權威性和有效性。
  • 問卷編制 | 信效度分析解釋
    1 信度分析 這裡有63份問卷,首先我們需要的判定的是問卷中的調查題目能否反映調查的目的和調查的意圖,問卷中的各個問題是否測量了相同的內容和信息;同時,對於調查問卷所得到的數據是否具有可靠性,就必須在對問卷分析之前做信度分析。信度本身與測量結果的正確與否無關,它的用途在於檢測問卷本身的穩定性。
  • 問卷數據的效度與信度分析
    對於這種量表數據,我們一般會先對其進行信度、效度的分析,然後判斷得到的數據是否能夠進行下一步的因子分析。下面以一個實例講解如何對李克特量表進行信度與效度的檢驗。某同學通過問卷調查的方法對遊客的旅遊動機及其影響因素進行研究,結合國內外關於民族節慶遊客動機的研究和對節慶期間的遊客進行訪談,運用因子分析從20項旅遊動機顯變量中挖掘出具有較強信服力的旅遊動機,部分問卷數據如下所示(微信後臺回復「問卷數據分析」,可獲得數據下載連結):問卷信息 受訪者一般信息
  • 問卷信效度分析的步驟
    問卷設計是科研工作中的常見問題,如何設計出高信效度問卷,臺灣學者吳明隆給出了很好的答案。應考慮問卷量表是否進行因素分析。因為因素分析時,以較大樣本分析所呈現的因素組型(factor pattern),比一個只用較小樣本所出現的因素組型,要來得穩定。進行因素分析時,量表的題項數愈多及預期要有較多的因素層面的話,應包括愈多的受試者(DeVellis)。
  • 如何用SPSS分析問卷的效度
    繼上周「如何用SPSS分析問卷信度」推文發布後,歐老師承上啟下繼續介紹——如何用SPSS分析問卷的效度
  • 問卷信度效度之間有什麼關係如何分析
    什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。當我們在為研究主題設計問卷時,都會希望問題實際測量到的是我們希望測量的,這樣研究的數據才能準確的說明問題。例如,我們想了解一個班級裡學生的綜合成績情況,正式研究中如果僅測試數學一科,然後得出結論,這樣的研究有效性可能很低,原因在於實際測量的方向與研究方向之間有很大偏差。
  • 問卷信效度分析
    一般而言,兩次或兩個測驗的結果愈是一致,則誤差愈小,所得的信度愈高,它具有以下特性:1、信度是指測驗所得到結果的一致性或穩定性,而非測驗或量表本身;2、信度值是指在某一特定類型下的一致性,非泛指一般的一致性,信度係數會因不同時間、不同受試者或不同評分者而出現不同的結果;3、信度是效度的必要條件,非充分條件。
  • 怎麼做好效度分析?
    效度分析,簡單來說就是問卷設計的有效性、準確程度。當我們在為研究主題設計問卷時,都會希望問題實際測量到的是我們希望測量的,這樣研究的數據才能準確的說明問題。效度分類效度又可分為內容效度、結構效度和效標效度。(1)內容效度,指問卷題項對相關概念測量的合理性情況,通常是以文字來說明問卷的有效性。如通過參考文獻,或者權威來源說明問卷的權威性和有效性。還有就是通過對問卷前測並結合結果進行題項的修正等工作來充分說明問卷的有效性。
  • 《量表信效度分析》系列文章
    轉載 | SPSS學堂各位小夥伴們,在推出《問卷設計與統計分析》系列後,有許多小夥伴來反饋怎樣設計更為優質的問卷?為了解決這一問題,學堂推出了量表信效度系列,超詳細的為大家講解如何對問卷進行試測,調整問卷結構,設計更為優質的問卷。為讓大家更加方便的學習信效度分析的基礎知識與應用,學堂現將《 量表信效度分析》系列文章匯總起來呈現給大家。此系列文章專門為信效度分析的初學者準備,內容全面、豐富,大家可以根據自己的需要慢慢學習,後續文章將持續更新中!
  • 效度分析完整總結!你一定要知道的分析流程
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。尤其是效度分析過程,常常令研究人員頭痛不已。如何更有效得到效度分析結果,避免無用功,今天我們就一起來探討討論。本文從分析思路角度進行全面梳理,希望能夠讓大家對效度分析有更深入地理解。
  • spss數據分析-問卷設計
    磨刀不誤砍柴工,在數據分析數據挖掘領域有一句經典話:數據和特徵決定了機器學習的上限,而模型和算法只是逼近這個上限而已。
  • 數據分析技術:信度與效度;信度和效度代表什麼?
    很多人知道信度和效度是因為問卷數據分析需要用到它們,其實信度和效度的應用範圍遠遠不止於問卷的數據分析,今天我們就來聊聊數據的信度和效度。
  • spss數據分析--問卷的設計
    在數據分析數據挖掘領域有一句經典話:數據和特徵決定了機器學習的上限,而模型和算法只是逼近這個上限而已。
  • 你一定要知道的效度分析攻略
    為什麼要做效度分析 效度檢驗即檢驗問卷有效性,簡單講,就是要確定設計的題項是否合理,是否能有效反應研究人員的研究目標。 需要注意一點,問卷中會有多種類型的問題,比如單選題、多選題、填空題等。而效度分析主要針對量表題。 2.
  • 問卷設計與統計分析——問卷如何評估效度
    溫馨提示:此處所講的效度評估是調查問卷的效度評估不是量表的效度評估,兩者是有區別的~關於量表的效度評估之後會有涉及。(1)觀察與某個題目相關的題目a 結構效度。若幾個問題測量了相同或高度相關的主題,則這幾個問題的調查結果應具有高度相關性。
  • SPSS中的數據分析—信度效度檢驗
    現階段正處在畢業季階段,很多同學可能都正在忙著去弄自己的論文和答辯很多時候我們在寫論文答辯,甚至於其他課題研究的時候都會選擇用問卷這種形式來收集數據。最後我們只需要針對問卷所取得的數據進行分析,就基本上能夠得到我們所需要的調查結果了。信度效度檢驗其實是兩個檢驗,一個是信度檢驗,另一個是效度檢驗。
  • 問卷設計與分析系列(一): 問卷編制
    而調查問卷的只能分析選擇A的有多少人,佔多少百分比,選擇B的人數是多少………。通過題目設計和分析可以看到,量表法和調查法具有明顯的區別。如果題目設計出錯了,那麼就無法進行後續的分析。目前,多數的研究採用的都是量表調查,並且是使用問卷調查進行。因此,我們有必要來了解如何設計問卷,並分析問卷。