作者:李侗桐;審稿:張耀文
一致性檢驗主要分為4種:(1)重測一致性,用於分析同一檢測方法多次測量的一致性;(2)觀察者一致性,用於分析不同觀察者對同一研究對象進行評估的一致性;(3)內部一致性,用於分析測量工具(如問卷)中不同問題對同一事物的測量信度;(4)診斷試驗一致性,用於判斷新方法與金標準的檢驗結果一致性。示例如下:
2.1 重測一致性
如果研發了一種新的測量工具(如,問卷或某種生物標誌物的檢測試劑),研究者會想知道該測量工具的可靠性。即,重測一致性是檢驗某一檢測方法多次測量的一致性。換句話說,分別對一位受試者進行兩次檢測,檢測結果一樣嗎?
舉例來說,在理想情況下,分別2次測量同一組受試者的血壓。如果測量工具可靠,那麼每位受試者兩次得到的血壓值應該一致。重測一致性就是對該類情況進行檢驗,分析同一組研究對象經過多測檢測後,檢測結果的一致性。示例如下:
2.2 觀察者一致性
觀察者一致性常用於分析2位及以上觀察者對同一研究對象進行評估的一致性。舉例來說,研究者擬分析2位放射科醫生對疾病嚴重程度診斷的一致性。現收集了50位研究對象的MRI檢查結果,並要求放射科醫生分別對每份MRI檢查給予最輕到最重5個等級的臨床診斷。
如果一位醫生給其中一位患者MRI的診斷為最重(5分),但另一位醫生的診斷為輕度(2分),那麼就說明這兩位醫生對該患者MRI的診斷結果不一致。我們希望得到的結果是兩位醫生對每位患者的診斷結果都基本一致,甚至完全一樣,這樣就能夠說明這兩位醫生的診斷一致性較好。觀察者一致性研究設計就是用來分析這類情況的,通過統計學方法判斷觀察者評估結果的一致性。示例如下:
2.3 內部一致性
內部一致性常應用於問卷信效度檢驗,適用於分析測量工具(如問卷)中一組題目對研究對象的測量信度。在實際研究中,很多事物或態度是不能直接被測量的,比如工作積極性,研究者常需要設計一組題目間接反映它們的真實情況。但這些題目是否可以實現研究目的,就需要我們通過統計方法進一步分析了。舉例來說,研究者擬通過5個問題測量受試者的工作積極性,內部一致性檢驗可以幫助研究者分析這5個問題在測量工作積極性上的一致性。示例如下:
2.4 診斷試驗一致性
在疾病或生物標記物的檢測上常存在金標準,但研究者往往會提出一些新的檢測方法,或方便、或便宜、或依從性更高,希望分析這些新檢測方法與金標準檢測結果的可重複性,即開展診斷試驗一致性研究。示例如下:
確定開展重測一致性或觀察者一致性研究時,我們需要進一步判斷重複測量的次數來選擇合適的檢驗方法,一般分為重複測量2次或重複測量3次及以上。
重測一致性的示例如下:
觀察者一致性的示例如下:
4.1 重測一致性或觀察者一致性
4.1.1 連續變量
(1) 重複測量2次
組內相關係數(ICC)。該檢驗常用於評價不同測量方法或觀察者對同一研究對象進行測量的結果一致性。在診斷實驗中,我們也常常使用ICC指標評價不同標準對同一組試驗結果進行診斷的可重複性。(更多閱讀:SPSS操作:組內相關係數(ICC))
(2) 重複測量3次及以上
組內相關係數(ICC)。該檢驗常用於評價不同測量方法或觀察者對同一研究對象進行測量的結果一致性。在診斷實驗中,我們也常常使用ICC指標評價不同標準對同一組試驗結果進行診斷的可重複性。
4.1.2 有序分類變量
(1) 重複測量2次
① 加權kappa係數
該檢驗方法是Kappa一致性檢驗針對有序分類變量的延伸,適用於開展重測一致性、觀察者一致性和診斷試驗一致性分析。(更多閱讀:SPSS操作:加權Kappa)
② Kendall協同係數
該檢驗又稱為Kendall’s W係數,適用於開展重測一致性、觀察者一致性和診斷試驗一致性分析。(更多閱讀:SPSS教程:Kendall's W檢驗)
(2) 重複測量3次及以上
Kendall協同係數。該檢驗又稱為Kendall's W係數,可以進行2次或多次(3次及以上)重複測量的一致性分析。
4.1.3 無序分類變量
(1) 2次重複測量
Kappa一致性檢驗。該檢驗又稱Cohen's kappa,常用於對比兩項檢驗結果的可重複性,多用於重測一致性、觀察者一致性和診斷試驗一致性分析。(更多閱讀:SPSS操作:一致性檢驗,如何計算Kappa值?)
(2) 重複測量3次及以上
Fleiss' kappa係數。該檢驗適用於分析重複測量3次及以上且測量結果是無序分類變量的重測一致性或觀察者一致性檢驗。SPSS沒有內置操作模塊,但可以通過拓展包輸出結果。
4.2 內部一致性
克朗巴哈係數(Cronbach's α)。該檢驗可以用於評價連續變量的內部一致性,也常用於檢測有序分類變量和二分類變量的內部一致性。(更多閱讀:SPSS操作:克朗巴哈係數(Cronbach's α))
4.3 診斷試驗一致性
(1) 連續變量
① 組內相關係數(ICC)
該檢驗常用於評價不同測量方法或觀察者對同一研究對象進行測量的結果一致性。在診斷實驗中,我們也常常使用ICC指標評價不同標準對同一組試驗結果進行診斷的可重複性。
② Bland–Altman分析
該方法是一種繪圖分析方法,通常以「95%一致性界限」,用圖形直觀地反映出診斷試驗測量結果的一致性。(更多閱讀:連續變量的一致性評價,教你一種圖示法『Bland-Altman法』)
(2) 有序分類變量
① 加權kappa係數
該檢驗方法是Kappa一致性檢驗針對有序分類變量的延伸,適用於開展重測一致性、觀察者一致性和診斷試驗一致性分析。
② Kendall協同係數
該檢驗又稱為Kendall's W係數,適用於開展重測一致性、觀察者一致性和診斷試驗一致性分析。
(3) 無序分類變量
Kappa一致性檢驗。該檢驗又稱Cohen's kappa,常用於對比兩項檢驗結果的可重複性,多用於重測一致性、觀察者一致性和診斷試驗一致性分析。
由醫咖會與心聯喬治心臟健康研究中心(HHRC)聯合建立的心血管研究協作網絡及數據共享平臺(CDS)已經上線!
目前開放共享的數據為「中國房顫註冊研究」,共有2.5萬多房顫數據,歡迎來申請使用數據,發表SCI論文!
平臺網址:
https://cds.mediecogroup.com/
點擊左下角「閱讀原文」,看看醫咖會既往推送了哪些統計教程。或者使用電腦打開網址:http://www.mediecogroup.com/,查看全部統計教程。
快加小咖個人微信(xys2019ykh),拉你進統計討論群和眾多熱愛研究的小夥伴們一起交流學習。