筆記|《心測》C4 測量信度

2020-12-11 詠卿先生

C4 測量信度

一、信度概述

信度定義及作用

1.定義:

信度是指測量結果的穩定性程度,即用同一測量工具反覆測量某人的同一種心理特質,則其多次測量結果間的--致性程度就叫作信度,也叫測量的可靠性。

三種等價的信度定義

(1)信度(信度係數)是一個被測團體真分數的變異數與實得分數的變異數之比。即:

(2)信度是一個被試團體的真分數與實得分數的相關係數的平方。即:

(3)信度是一個測驗x(A卷)與它的任意一個「平行測驗」x』(B卷)的相關係數。即:

2.信度的作用

(1)信度是測量過程中所存在的隨機誤差大小的反映;

(2)信度可以用來解釋個人測驗分數的意義;

(3)信度可以幫助進行不同測驗分數的比較。

二、信度的估計方法

(一)重測信度

1.含義

是指用同一個量表對同一組被試施測兩次所得結果的一致性程度,其大小等於同一組被試在兩次測驗上所得分數的皮爾遜積差相關係數。

2.使用的前提條件

(1)所測量的心理特性必須是穩定的。

(2)遺忘和練習的效果基本上相互抵消。

(3)在兩次施測的間隔期內,被試在所要測查的心理特質方面沒有獲得更多的學習和訓練。

3.誤差來源

主要是時間間隔造成的,還包括被試狀態的不穩定以及測量特質本身的不穩定。

(二)複本信度

1.含義

是指兩個平行的測驗測量同一批被試所得結果的一致性程度,其大小等於同一批被試在兩個複本測驗.上所得分數的皮爾遜積差相關係數。如果兩個複本測驗是同時連續施測的,則稱這種複本信度為等值性係數。如果兩個複本測驗是相距一段時間分兩次施測的,則稱這種複本信度為穩定性與等值性係數。穩定性與等值性係數是對信度最嚴格的測驗,其值最低。

2.使用的前提條件

(1)首先要構造出兩份或兩份以上真正平行的測驗。

(2)被試要有條件接受兩個測驗。這種條件主要取決於時間、經費等幾個方面。

3.誤差來源

(1)對於等值性係數而言,主要是由題目內容造成的,另外還有被試狀態的不穩定。

(2)對於穩定性與等值性係數而言,除題目內容的影響外,還會受時間間隔的影響。

(三)分半信度

1.含義

是指將一個測驗分成對等的兩半後,所有被試在這兩半上所得分數的一致性程度,有時也稱內部一致性係數。分半信度的計算方法和等值複本信度的計算方法類似,但還必須用斯皮爾曼—布朗公式加以校正。

2.使用的前提條件及範圍

(1)分半信度通常在只能施測一次或沒有複本的情況下使用。

(2)在使用斯皮爾曼—布朗公式時,要求全體被試在兩半測驗上得分的變異數要相等,否則就要用弗朗那根、盧侖公式校正。

(3)當一個測驗無法分成對等的兩半時,分半信度不宜使用。

3.誤差來源

主要來自於題目本身。

(四)同質性信度

1.含義

同質性信度也叫做內部一致性係數,是指測驗內部所有題目間的一致性程度。題目間一致性程度有兩層意思:(1)是指所有的題目測的都是同一種心理特質;(2)是指題目得分之間都具有較高的正相關。

2.計算及適用範圍

一種粗略的估計方法是求測驗的分半信度。還有十分方便的庫—理信度 係數和克龍巴赫α係數。荷伊特信度是荷伊特提出用方差分量比描寫測驗內部一致性的方法。

3.誤差來源

主要源於內容取樣和所研究行為的異質性。

(五)評分者信度

1.含義

是指多個評分者給同一批人的答卷進行評分的一致性程度。

2.計算

當評分者人數為兩個時,評分者信度等於兩個評分者給同一批被試的答卷所給分數的相關係數(積差相關或等級相關)。當評分者人數多於兩個時,評分者信度可用肯德爾和諧係數進行估計。

3.誤差來源

評分者之間的差異。

三、提高測量信度的方法

影響測量信度的主要因素

1.被試方面

(1)就單個被試而言,被試的身心健康狀況、應試動機、注意力、耐心等都會影響測量誤差;

(2)就被試團體而言,整個團體內部水平的離散程度以及團體的水平都會影響測量信度。同質性越大,得分分布越窄,信度越小,可能低估信度,反之則會高估信度。另外團體得分總體過高或過低都會使得分變窄,從而降低信度。

2.主試方面

(1)施測者故意製造緊張氣氛或操作不規範會降低測量信度;

(2)評分者評分標準不一,也會降低測量信度。

3.施測情境方面

在實施測驗時,考場是否安靜、光線和通風情況是否良好、所需設備是否齊備、桌面是否合乎要求、空間寬窄是否恰當等因素都可能影響測量的信度。特別地,隨著計算機和網路技術的發展,基於計算機或其他IT技術的考試已經越來越普遍,因此,考試平臺的質量、穩定性,以及考生使用機器的熟練程度等,也是常見的影響測量信度的重要因素。

4.測量工具方面:測量工具是否性能穩定是測量工作成敗的關鍵。試題的取樣、試題之間的同質性程度、試題的難度等是影響測驗穩定性的主要因素。

5.兩次施測的間隔時間:在計算重測信度和穩定性與等值性係數時,兩次測驗相隔的時間越短,其信度值越大;間隔時間越長,其信度值就可能越小。

提高測量信度的常用方法

1.適當增加測驗的長度。

注意:(1)新增項目必須與試卷中原有的項目同質;(2)新增項目的數量必須適度。(可以用斯皮爾曼—布朗預測公式)

2.使測驗中所有試題的難度接近正態分布,並控制在中等水平。

3.努力提高測驗試題的區分度。

4.選取適當的被試團體,提高測量在各同質性較強的亞團體上的信度。

5.主試者嚴格執行施測規程,評分者按照嚴格標準給分,施測場地按測驗手冊的要求進行布置,減少無關因素的幹擾。

6.測驗的間隔時間要適當。

每日書摘

相關焦點

  • 筆記|《心測》C5 測量效度 之三、提高測量效度的方法 & C6 測驗的...
    三、提高測量效度的方法影響測量效度的因素1.測驗的構成:當組成測驗的試題樣本沒有較好地代表欲測內容或結構時,測量的內容效度或結構效度必然會不高。若題目語義不清、指導語不明、題目太難或太易、題目太少或安排不當,都會降低測量效度。增加測驗的長度可以提高測量信度,進而為提高測量效度提供可能。
  • 筆記|《心測》C1 心理與教育測量概論
    「事物的屬性」是指所要測量的客體或事件的特定特徵。3.「量尺」是指測量中所使用的度量工具。4.「定量描述」是指測量的結果總是對事物屬性的量的確定。測量的基本要素一個完善的測量數量必須具備兩個基本要素,即:1.
  • 2017考研心理測量知識點:信度(一)
    (2)複本信度:考慮的誤差來源是內容取樣。   (3)分半信度:它考慮的誤差來源也是內容取樣,它與複本信度的差別是:分半信度考查一個測驗內容的兩半題目測量的是否是同一個心理特點行為。   (4)同質性信度(內部一致性係數):考慮的是測驗內容是否異質。   (5)評分者信度:考慮的誤差來源是評分者間的差別。
  • 考研心理測量知識點小結:信度
    1、信度是指:測量結果的可靠性和一致性。因為心理測驗通常測量人的行為,行為會由於各種各樣的原因,因時、因事、因地而產生變動,這些因素有些是偶然的,有些是固有的,人在完成心理測驗時的行為也會受上述因素的影響,從而使測驗結果與真實結果不完全一致,所以我們要用信度來衡量測驗的可靠性和一致性。
  • 心理學2016考研專業課心理測量知識點:信度
    (2)複本信度:考慮的誤差來源是內容取樣。   (3)分半信度:它考慮的誤差來源也是內容取樣,它與複本信度的差別是:分半信度考查一個測驗內容的兩半題目測量的是否是同一個心理特點行為。   (4)同質性信度(內部一致性係數):考慮的是測驗內容是否異質。   (5)評分者信度:考慮的誤差來源是評分者間的差別。
  • 新傳名詞解釋全整理:概念的具體化/概念的操作化/信度/再測信度複本信度/折半信度/評分者信度
    信度(Reliability)4.再測信度(Test-retest reliability)5.信度(Reliability)即可靠性,它指的是採取同樣的方法對同一對象重複進行測量時,其所得結果相一致的程度。換句話說,信度是測量結果的一致性或穩定性,即測量工具能否穩定地測量所測量的事物或變量。 4.
  • 信度和效度的檢驗怎麼做?如何提升測量工具的信效度?
    c 圖:黑點分散在一側,且大部分都遠離靶心,說明測量結果穩定性不足,且準確性也不行,即低效度低信度。d 圖:黑點均集中於靶心附近,說明測量結果既穩定又準確,即高信度高效度。由這四幅圖所表示的關係,我們可知:(1)信度低,效度不可能高。
  • 讀《管理學問卷調查研究方法 》第八章:測量(2)信度
    其下,一共包含六個模塊:信度,複本信度,重測信度,內部一致性信度,組合信度和平均方差析出量,與構成型構念的量表的信度估計。在《測量(1)》中提過,古典測量模型認為所有誤差都是隨機誤差,基於此,信度係數rxx的值被定位為:真實值的方差σt^2÷觀測值的方差σx^2。
  • 筆記|《心測》C7 心理與教育測驗的編制與實施 之一、編制心理與...
    C7 心理與教育測驗的編制與實施一、編制心理與教育測驗的基本程序編制測驗的基本程序(一)確定測驗目的1.明確測量對象:以年齡、性別、職業、受教育程度、經濟狀況、民族和文化背景等指標來區分測量對象。2.明確測量目標:明確測量什麼心理功能,是測能力、人格,還是測學業成就。還要進一步把目標具體化。3.明確測量用途:明確編制的測驗是幹什麼用的,是用於描述受測者的心理特質,還是用於診斷心理是否異常。用途不同,編制測驗時的取材範圍以及測題的難度也不盡相同。
  • 筆記|《心測》C10 測驗等值 & C12 能力測驗(上)
    測驗等值的實質和條件測驗等值就是通過對考核同一種心理品質的多個測驗形式做出測量分數系統的轉換,進而使這些不同形式的測驗分數之間具有可比性。測驗等值的條件主要有:1.同質性:被等值的不同測驗形式所測的必須是同一種心理品質,測驗的內容與範圍也應該基本相同;2.
  • 信度概述
    用以反映在相同條件下,對同一客觀事物測量若干次,測量結果的相互符合程度或一致程度,說明數據的可靠性。當使用同一測量工具重複測量某一客觀事物時所得結果的一致程度越高,則該測量工具的信度就越高。信度包含兩層含義:一是相同的個體在不同時間,以相同的泱量工具測量,或以複本測量,或在不同的情景下測量,是否能得到相同的結果,即測量結果是否隨時間和地點等因素而變化;二是能否減少隨機誤差對測驗結果的影響,從而能夠反映測量工具所要測量的真實情況,即測量結果是否具有穩定性、可靠性和可預測性。一個好的測量工具必須是穩定可靠的,且多次測量結果應前後一致。
  • 糾錯:上篇【重測信度】文章應為【SPSS統計分析案例:複本信度】!
    緊急糾錯:各位讀者朋友,上一篇微信文章【SPSS統計分析案例:重測信度】,文中出現表述錯誤,概念上介紹的是重測信度,案例操作實為複本信度
  • 百科|問卷的信度是什麼?信度檢驗又該如何實施?
    這就需要信度分析方法來評價問卷的可靠性或穩定性,它可檢測用某量表對同一事物進行重複測量後,所得結果的一致性。 1.什麼是信度 這是任何一種測量的必要條件,但不是唯一條件。信度分析主要是考察問卷的可靠性,指測量所得結果的內部一致性程度。
  • 其他信度分析方法
    上期回顧用同樣的問卷對同一被測間隔一定時間的重複測試,也可稱作「測試-再測」方法,計算兩次測試結果的相關係數。很顯然這是穩定係數,即跨時間的一致性。重測信度法適用於事實性的問卷,也可用於不易受環境影響的態度、意見式問卷。由於重測信度需要對同一樣本試測兩次,而被測容易受到各種事件、活動的影響,所以間隔時間需要適當。
  • 數據分析技術:信度與效度分析;信度和效度不僅僅能用於問卷分析!
    什麼是信度和效度?信度代表的是數據的可靠性程度和一致性程度,它能夠反映數據的穩定性和集中程度。效度是指測量工具能夠準確測量出事物真實情況的能力,它能夠反映數據的準確性。重測信度:是指用同樣的測量工具,對同一組被測者隔一定時間重複測量,考察兩次測量結果的相關程度,可以直接採用相關分析,得到的相關係數即為重測信度係數。
  • 教招-信度效度的區分
    教育學知識點中,有一個常考的知識點就是效度、信度的區分,很多人看到這個相關知識點的題就分不清,下面我們一起來梳理一下。1.效度效度是指一個測驗或測量工具能真實地測量出所要測量的事物的程度。一次測驗是否有效,主要看其是否能準確地測量所要測量的東西。
  • 教師招聘常考知識點信度與效度
    設計和編制任何一種測驗,都必須使其在效度、信度、難度和區分度方面達到一定要求,即起碼達到有效、可信,具有一定難度和區分度。此部分的知識點,考察相對較少,但是較難理解。一、信度信度是指測驗結果的穩定性或可靠性,即某一測驗在多次施測後得到的分數的穩定、一致程度。它既包括時間上的一致性,也包括內容和不同評分者之間的一致性。
  • 測驗的效度和信度
    能測出來想測量東西的程度,則效度高;測不出來,則效度低。例如:想要測量小明的身高,測量工具是秤,那麼,測量不出想要測量的東西,則效度低。(二)效度的類型根據測量的問題不同,可以分為三類,即內容效度、構想效度、預測效度。1.內容效度內容效度指的是測驗所選取的項目是否符合所要測量的東西,其代表性是否適當。
  • 教師招聘考試:信度和效度
    1、定義信度指測驗結果的一致性、穩定性及可靠性,一般多以內部一致性來加以表示該測驗信度的高低。信度係數愈高即表示該測驗的結果愈一致、穩定與可靠。比如如果說對於小明用一套卷子測了多回,小明所得分數一致的,就叫做信度比較高。效度即有效性,測量的正確性和準確性。它是指測量工具或手段能夠準確測出所需測量的事物的程度。
  • NeuroImage:心理所系統評估人腦功能連接組功能一致性指標重測信度...
    如,杭州師範大學認知與腦疾病研究中心的臧玉峰研究員和其同事於2004年提出的局部一致性指標ReHo,已經被廣泛地運用於刻畫靜息態局部腦功能連接,特別是臨床精神疾病腦功能的研究,但是,對功能一致性指標重測信度的系統考察卻仍然缺失,而信度的研究對於研究人員如何選擇計算方法和具體的測量指標具有至關重要的指導作用;對其影響因素的深入研究則關係到人腦功能連接組建立與計算標準的建立。