數據分析技術:信度與效度;信度和效度代表什麼?

2021-02-19 生活統計學

很多人知道信度和效度是因為問卷數據分析需要用到它們,其實信度和效度的應用範圍遠遠不止於問卷的數據分析,今天我們就來聊聊數據的信度和效度。

什麼是信度和效度?

信度與效度是事物的兩個特徵指標,因此它們描述的對象可以是任何事物,例如,可以是人和動物,也可以桌子和椅子,而我們這裡要描述的對象是數據,研究的是數據的信度與效度。熟悉一個人,首先看他/她的外表;了解一個概念,首先從名字入手。

以上內容可以通過下面這張打靶圖來表示:數據越集中,信度越高;數據離靶心越近,效度越高。

看到這裡,善於學習的你應該要提出這個問題:信度和效度之間的關係如何?可以用一句話來總結,效度高,信度一定高;信度高,效度卻不一定高。通過打靶圖,這句話還是很好理解的,如果一組數據的效度高,說明大部分的數據點都離靶心不遠,那麼數據當然也就比較集中啦,因此這組數據的信度也就低不了,結合第三和第四幅圖就很好理解了。

數據信度和效度的用途

數據存在於生活的方方面面,什麼犄角旮旯都可以產生和記錄數據,而生活的奧秘(規律)就蘊藏在這些看起來離散沒有規律的數據背後,這也是草堂君想要介紹給大家的東西。既然數據存在於各行各業,那麼反映數據特徵的信度和效度當然也會因為領域的不同,分析它們的方法也有很大差異。下面草堂君舉三個生活例子:

儀器設備的信度與效度;儀器設備的信度和效度可以通過這些設備測量得到的數據來表示,如果測量數據的信度和效度越高,計量設備的信度和效度就越高。例如,菜市場的電子秤,同一塊肉,測量100次,如果數據的波動(標準差或方差)很小,說明這臺電子秤的信度很好;將這塊肉用校準過的另一臺電子秤測量100次,發現前100次的平均值比後100次的平均值高了68克,說明前一個電子秤的效度很差,菜攤老闆有缺斤少兩的嫌疑。根據上面介紹的內容,儀器設備的信度與效度可以直接用測量數據的標準差(方差)和平均值表示。

評分者信度和效度;因為評分者的打分數據直接關係到運動員或學生等的比賽名次或考試成績,因此評分者的信度和效度分析異常重要。這裡的評分者包括各種打分裁判(跳水、花樣遊泳、公務員面試等)和改卷老師等。

例如,為了比賽的公平,奧運會的組委會會以合適的比例選擇來自不同地區和國家的裁判組成裁判小組,避免裁判有意識或無意識的傾向於來自於同一地區或國家的運動員。除了這樣人為安排以外,有沒有從數據上對裁判的打分進行監督和評價,從而保證公平比賽的方法呢?其實是有的,這就是評分者的信度和效度分析。

 

評分者信度主要考察評分者的打分尺度是否統一,不希望出現有些評分者的打分尺度寬鬆,而有些評分者的打分尺度嚴格,或者有些裁判對自己國家的運動員打高分,而對競爭對手打低分的現象。關於評分者信度分析的內容前面推送過專門的文章,可以點擊下方連結回顧:SPSS分析技術:裁判(打分者)的信度分析。

 

評分者效度可以通過考察所有評分者每次打分的區分度來表示,例如在跳水比賽中,10名運動員跳難度係數相同的動作,比較所有6名裁判的10次打分結果(這裡的10次打分表示10個運動員成績),如果10個數據集合(每個數據集合有6個數據)之間有顯著性差異,那麼可以說明這6個裁判的打分能夠有效區分不同運動員表現的差異,也就是6個裁判的打分效度好。評分者效度的分析可以採用方差分析進行。方差分析的內容可以回顧:SPSS分析技術:單因素方差分析。

 

問卷的信度和效度;問卷的信度在於評價收集上來的數據是否真實可靠,也就是檢查填寫問卷的這些人是不是認真的填寫了問卷,還是亂填的。問卷的效度是用來研究題目的設置是否能夠有效的測量問卷設計者當初設計的初衷,也就是說檢驗問卷題目的設計是否合理。

問卷的信度分析採用的是可靠性分析,前面已經寫過文章詳細介紹過,可以點擊下方連結回顧:SPSS分析技術:問卷的信度分析。問卷的效果分析主要採用的是因子分析,因子分析又包括探索性因子分析(EFA)和驗證性因子分析(CFA)。之前同樣推送過EFA的文章,可以點擊下方連結回顧:SPSS分析技術:因子分析;至於驗證性因子分析(CFA),需要用AMOS進行分析,後面會再詳細介紹。

總結一下

從前面介紹的內容可以知道,信度分析和效度分析其實不是一種分析方法的名稱,而是一類分析方法的總稱,在不同的生活領域,信度和效度分析選擇的具體分析方法是不同的(均值和方差、秩和檢驗、方差分析、相關分析等),上面的內容只是列舉了三個生活應用來解釋這個經常被學習者誤解的概念。

 

當然,能夠用來表示數據信度和效度的分析方法遠不止這些,因此選擇合適的分析方法成為分析者頭痛的問題,草堂君教給大家一個訣竅,只要能夠表示數據可靠性或統一性的分析方法都能夠用於信度分析;只要能夠衡量數據是否準確表示考察對象真實情況的分析方法都能夠用於效度分析;把握好這個原則就不會迷惑了。

溫馨提示:

相關焦點

  • 數據分析技術:信度與效度分析;信度和效度不僅僅能用於問卷分析!
    什麼是信度和效度?信度代表的是數據的可靠性程度和一致性程度,它能夠反映數據的穩定性和集中程度。效度是指測量工具能夠準確測量出事物真實情況的能力,它能夠反映數據的準確性。 信度與效度的用途知道了信度與效度的現實含義以後,相信大家可以想到信度與效度的很多用途。我這裡列舉三個重要用途:A. 儀器設備的表現評價我們購買儀器設備的時候,都會對設備的信度和效度進行評價,我們希望購買的儀器能夠長久穩定的準確測量或生產出優質的產品,長久穩定代表信度,準確測量和生產代表效度。
  • 問卷數據的效度與信度分析
    對於這種量表數據,我們一般會先對其進行信度、效度的分析,然後判斷得到的數據是否能夠進行下一步的因子分析。下面以一個實例講解如何對李克特量表進行信度與效度的檢驗。某同學通過問卷調查的方法對遊客的旅遊動機及其影響因素進行研究,結合國內外關於民族節慶遊客動機的研究和對節慶期間的遊客進行訪談,運用因子分析從20項旅遊動機顯變量中挖掘出具有較強信服力的旅遊動機,部分問卷數據如下所示(微信後臺回復「問卷數據分析」,可獲得數據下載連結):問卷信息 受訪者一般信息
  • SPSS中的數據分析—信度效度檢驗
    今天給大家講一下關於SPSS中的數據分析——信度效度檢驗。現階段正處在畢業季階段,很多同學可能都正在忙著去弄自己的論文和答辯很多時候我們在寫論文答辯,甚至於其他課題研究的時候都會選擇用問卷這種形式來收集數據。最後我們只需要針對問卷所取得的數據進行分析,就基本上能夠得到我們所需要的調查結果了。信度效度檢驗其實是兩個檢驗,一個是信度檢驗,另一個是效度檢驗。
  • AMOS分析技術:驗證性因子分析介紹;信度與效度指標詳解
    2、新的潛在變量一定要根據實際研究情況來對其定義(到底什麼因素會同時影響內容評價、功能評價和用戶感知價值),如果實在無法定義,那麼也就沒有必要做二階驗證性因子分析了。所有驗證性分析都需要特別注意,不能完全依靠數據來建立和修改模型,而應該把數據結果作為線索,指引分析者思考在模型是否有遺漏的關係沒有考慮到,再根據實際情況修正模型。
  • 關於量表與問卷的信度效度分析
    在向拾貝數據進行統計諮詢的客戶中,經常會碰到一些關於問卷方面的知識認知能力幹預,尤其是在慢病管理和護理學的研究中。4、α信度係數法 Cronbach α信度係數是目前最常用的信度係數,其公式為:其中,K為量表中題項的總數, 為第i題得分的題內方差,為全部題項總得分的方差。從公式中可以看出,α係數評價的是量表中各題項得分間的一致性,屬於內在一致性係數。這種方法適用於態度、意見式問卷(量表)的信度分析。
  • 「傳播的信度和效度」是什麼?
    各位朋友大家好,輿論知識點集錦的單獨頁面已經做好了,以後該欄目就放在文章底部 |清博報告| 那一塊了,我們會將之前的知識點放進去,及時更新,沒有點擊收藏的朋友們,以後想看所有的知識點,就可以直接從哪裡點擊進入了~   今天為大家科普「傳播的信度和效度
  • 什麼是信度和效度?
    什麼是信度(Reliability),什麼是效度(Validity)?用搜尋引擎一搜,結果鋪天蓋地。
  • 問卷信度效度之間有什麼關係如何分析
    內部與外部可靠性信度可分為內在信度和外在信度兩類。內在信度:是指衡量研究問卷中的多個題目是否測量了同一概念或者內容,即題目之間是否具有內在一致性。這也就是大多數量表問卷所做的信度分析。什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。
  • SPSS中的數據分析—信度效度檢驗「1」
    今天咱們換個口味,給大家講一下關於SPSS中的數據分析——信度效度檢驗。 現階段正處在畢業季階段,很多同學可能都正在忙著去弄自己的論文和答辯(不知道大家在翟天臨上熱搜這個事情上有沒有做出過一定貢獻),很多時候我們在寫論文答辯甚至於其他課題研究的時候都會選擇用問卷這種形式來收集數據。
  • 問卷的信度和效度
    問卷設計的信度和效度介點洞察  張修文 一直想寫一遍關於問卷設計的信度和效度的文章,但一直苦於沒有通俗的例子解釋信度和效度,統計學理論上有大量的解釋這就是效度問題-做的事有沒有達想要的目標。達到了就是高效度,沒達到就是低效度。 二、雖然老師實現了全校第一的目標,但方法謬也。這就是信度問題-做事是不是使用了正確的方法。方法正確就是高信度,方法有問題就是低信度。 效度和信度是什麼關係呢?
  • SPSS中的數據分析—信度效度檢驗[2]
    前一篇文章[SPSS中的數據分析——信度較度檢驗]跟大家分享了在SPSS中如何對量表問卷進行信度檢驗,我們通過文章了解到了問卷的信度檢驗是通過Cronbach's α(克朗巴哈)係數法來檢測數據的信度,同時結果顯示我們用來進行展示的數據是已經通過了信度檢驗。
  • 科研方法:問卷的信度和效度
    問卷的效度可分為內容效度和結構效度。如不便用數學方法計算時,簡便易行的檢驗方法是表面效度檢驗,也稱為邏輯分析檢驗。它是請對本課題熟悉的有關專家、學者,全面審核、評價問卷的內容性能,進行邏輯有效性分析。從問題內容和邏輯關係上看問卷是否符合調查目的任務與研究需要。如果專家認為問卷的項目校好地代表了調查需要的內容範圍,那麼問卷具有內容效度。可請專家對問卷內容效度作定性評價,如效度很高、效度高、有效、較有效等。
  • 信度和效度的關係和區別
    信度是什麼?效度是什麼?信度和效度的關係和區別是怎樣的呢?下面小編為大家一一介紹:【什麼是信度】信度指測驗結果的一致性、穩定性及可靠性,一般多以內部一致性來加以表示該測驗信度的高低。信度係數愈高即表示該測驗的結果愈一致、穩定與可靠。
  • 測驗的效度和信度
    一、效度(一)效度的涵義測驗的效度指的是測驗的正確性和有效性。換言之,效度指的是測驗能在多大程度上實現測驗的目的。效度是科學測驗工具最重要的質量指標。能測出來想測量東西的程度,則效度高;測不出來,則效度低。例如:想要測量小明的身高,測量工具是秤,那麼,測量不出想要測量的東西,則效度低。
  • 問卷設計的信度和效度
    一直想寫一遍關於問卷設計的信度和效度文章,一直苦於沒有通俗的例子解釋信度和效度。
  • 區分信度和效度
    在歷年的教師招聘考試中,關於信度和效度基本每年都會有一兩道單選題考查大家,大家發現單獨從概念方面去理解是很好解釋的,但是關於他們之間的聯繫,總是容易混淆,下面就此進行區分,希望對各位考生的備考有所幫助!第一,從概念方面區分,需要我們抓住關鍵詞。
  • 信度與效度的理論溯源
    一、測驗的效度(一)效度的涵義測驗的效度指的是測驗的正確性和有效性。換言之,效度指的是測驗能在多大程度上實現測驗的目的。效度是科學測驗工具最重要的質量指標。(二)效度的類型考察效度的方法很多,根據測量的問題不同,可以分為三類,即內容效度、構想效度、實證效度。
  • 教招-信度效度的區分
    也可以這樣理解效度,效度指的是測驗工具和要測量內容的一致性。問題一:假設現在要測量一個人的體重,尺子和體重秤哪個更有效?肯定是體重秤,體重秤是專門用來測量體重的,所以它的有效性更高,效度也很高,這就是工具和要測量的內容是一致的;問題二:要測量六年級學生的英語水平,現在有三份試卷,一份是六年級的數學試卷、一份是三年級的英語試卷、一份是六年級的英語試卷,這三份試卷中,只有六年級的英語試卷能夠準確測量出六年級學生的英語水平,所以它的效度最高,三年級英語試卷難度偏低,所以效度低,而六年級的數學試卷完全和英語無關
  • 教師招聘考試:信度和效度
    對於教師招聘考試中信度、效度這兩個概念有很多考生反映在這部分花費大量時間最終卻丟掉分數,產生這種結果的原因是大家對知識點沒有理解透徹。考試中這兩個知識點以單選題、多選題、判斷題這種客觀題為主,是常考點,需要掌握定義強調的知識點是什麼,並且還要理解,所以下面將會詳細講解這兩個知識點,以便大家能夠掌握這一。
  • 新傳名詞解釋全整理:效度/表面效度/準則效度/結構效度/內在效度和外在效度/信度與效度的關係
    內在效度和外在效度如果在一項具體研究中,對上述三種效度(內容效度、準則效度、結構效度)的檢查沒有問題的話,就可以認為這一研究具有內在效度,它的資料和結論可以有效地解答所研究的問題。但是,這一研究結論的有效性能否用於其他時間、地點和對象就要涉及到外在效度的檢驗,這就要考慮樣本的代表性和特殊性,以及研究的時間、地點、情境和研究內容的普遍意義。可以說,內在效度是指一項研究的資料和結論的有效性,而外在效度是指這種研究結論的普遍有效性。 6.