沒有信度和效度,還能叫問卷嗎?

2021-01-14 量化研究方法


1、重測信度


重測信度是指用同樣的測量工具,對同一組被調查者間隔一定時間重複測試,兩次測試結果的相關程度。重測信度可以通過兩種途徑進行考察:


途徑1:計算兩次測試結果的相關係數,如果經過統計檢驗,相關關係有統計學意義,則認為測量工具的信度高,否則信度低。也有人提出,測量工具的重測信度可以接受的標準是兩次測試相關係數在0.7以上


途徑2:對兩次重複測試結果進行兩個相關樣本差異的統計檢驗,如果差異有統計學意義,則認為測量工具的信度低,否則,信度高。


2、複本信度


複本信度法是讓同一組被調査者一次填答兩份問卷複本,計算兩個複本的相關係數。複本信度法要求兩個複本除表述方式不同外,在內容、格式、難度和對應題項的提問方向等方面要完全一致,而在實際調查中,很難使調査問卷達到這種要求,因此採用這種方法者較少。


3、分半信度


分半信度常用在不可能進行重複調査的情況下。其計算方法是將調查的條目分成兩半,計算這兩半測量結果的相關係數r,又稱分半信度係數,以此為標準來衡量整個量表的信度。


分半信度是將調查項目分為兩半,計算兩半得分的相關係數,進而估計整個量表的信度。分半信度屬於內在一致性信度,測量的是兩半題項得分間的一致性。這種方法一般不適用於事實式問卷(如年齡與性別無法相比),常用於態度、意見式問卷的信度分析。在問卷調查中態度測量最常見的形式是5級李克特( Likert量表)。


4、Cronbach's a信度係數


Cronbach’sQ係數是 Cronbach於1951年創立的,用於評價問卷的內部一致性。α係數取值在0到1之間,Q係數越高,信度越高,問卷的內部一致性越好。


Cronbach’s a係數不僅適用於兩級記分的問卷,還適用於多級計分的問卷。


a係數評價的是量表中各題項得分間的一致性,屬於內在一致性信度係數。這種方法適用於態度、意見式問卷(量表)的信度分析。


低信度:a<0.3.5,中信度:0.35<a<0.70,高信度a>0.7,一般的,問卷a係數在0.75以上改問卷才具有使用價值。


5、評分者信度


考察評分者信度的方法為,隨機抽取相當份數的問卷,由兩位評分者按記分規則分別給分。然後根據每份問卷的分數計算相關係數,航得到評分者信度。評分者信度也可以是一位評分者兩次評分的相關係數。如果是多個評分者或位評分者兩次以上的評分,可採用肯德爾和諧係數和 Kappa係數。肯德爾和諧係數用於等級資料, Kappa係數用於定性資料。


三、提高信度的方法


提高信度的方法問卷的信度越高,受到人、時、地物的幹擾就越低,其所能反應事實或讓人相信的程度越高,因此在問卷實施前如何有效提高信度是問卷測驗成敗的關鍵。通常提高問卷信度的方法有以下幾種方式:


1、適當延長問卷的長度


問卷題目較多,其在一定程度上排除了偶然因素的影響,從而提高了問卷的信度。但是問卷長度的增加與問卷的信度的增加並不總是成正比的,當信度係數較小時,延長問卷長度,問卷的信度係數增加較大;而當信度係數較大時,延長問卷長度對信度係數的影響就較小。


2、問卷的難度要適中


當問卷題目難度太大時,問卷得分普遍過低;當問卷題目難度太小時,問卷得分普遍較高。問卷題目太難或太易都會使問卷得分差異減小,使實得分數方差減小,從而降低了問卷的信度。


3、問卷的內容要同質


內容同質的問卷,要求答卷者具有相同的能力、知識和技能。因而為了提高問卷的信度,問卷的內容應儘量保持同質。


4、測試的時間要充分


份問卷應保證絕大多數答卷者在規定的時間內能完成測驗。當答卷者不能從容地回答所有題目時,問卷的得分就不能反映答卷者的真實情況。


5、測試的程序要統一


問卷題目要統一,指導語、回答問題的方式、分收試卷的方法和問卷測驗的時間等都要統一,這些是問卷有較高信度的基本保證。


相關焦點

  • 問卷信度效度之間有什麼關係如何分析
    內部與外部可靠性信度可分為內在信度和外在信度兩類。內在信度:是指衡量研究問卷中的多個題目是否測量了同一概念或者內容,即題目之間是否具有內在一致性。這也就是大多數量表問卷所做的信度分析。什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。
  • 問卷信效度分析的步驟
    問卷設計是科研工作中的常見問題,如何設計出高信效度問卷,臺灣學者吳明隆給出了很好的答案。3.由於人口變量的異質性關係,對於沒有足夠辨別力的人而言,使用7 點量表法,會導致信度的喪失;對於具有足夠辨別力的人而言,使用5 點量表,又令人有受限的不適感。
  • 測驗的效度和信度
    一、效度(一)效度的涵義測驗的效度指的是測驗的正確性和有效性。換言之,效度指的是測驗能在多大程度上實現測驗的目的。效度是科學測驗工具最重要的質量指標。能測出來想測量東西的程度,則效度高;測不出來,則效度低。例如:想要測量小明的身高,測量工具是秤,那麼,測量不出想要測量的東西,則效度低。
  • 如何看懂一篇學術文章的效度和信度
    比如,你想調查「流行音樂對人情緒的影響」,問卷中卻一直在問受試者對古典音樂的看法; 比如,你的研究問題是「如何提升政府部門績效」,卻只在與政府部門領導的訪談中問人家海外考察的經歷; 比如,你想理解「家花和野花對生長環境的不同需求」,卻被家花和野花的外觀吸引,只觀察了葉子和花瓣的區別而不是他們的生長環境
  • 信度和效度的關係和區別
    信度是什麼?效度是什麼?信度和效度的關係和區別是怎樣的呢?下面小編為大家一一介紹:【什麼是信度】信度指測驗結果的一致性、穩定性及可靠性,一般多以內部一致性來加以表示該測驗信度的高低。信度係數愈高即表示該測驗的結果愈一致、穩定與可靠。
  • 新傳名詞解釋全整理:效度/表面效度/準則效度/結構效度/內在效度和外在效度/信度與效度的關係
    內在效度和外在效度如果在一項具體研究中,對上述三種效度(內容效度、準則效度、結構效度)的檢查沒有問題的話,就可以認為這一研究具有內在效度,它的資料和結論可以有效地解答所研究的問題。但是,這一研究結論的有效性能否用於其他時間、地點和對象就要涉及到外在效度的檢驗,這就要考慮樣本的代表性和特殊性,以及研究的時間、地點、情境和研究內容的普遍意義。可以說,內在效度是指一項研究的資料和結論的有效性,而外在效度是指這種研究結論的普遍有效性。 6.
  • 信度與效度的理論溯源
    一、測驗的效度(一)效度的涵義測驗的效度指的是測驗的正確性和有效性。換言之,效度指的是測驗能在多大程度上實現測驗的目的。效度是科學測驗工具最重要的質量指標。(二)效度的類型考察效度的方法很多,根據測量的問題不同,可以分為三類,即內容效度、構想效度、實證效度。
  • 如何區分信度與效度之間的關係
    信度與效度兩者間的關係是歷年來的重要考點也是同學們做題時候的難點,常以單選、填空和簡答來考察大家,理解性去做題就比較容易得分,那麼今天就來為大家解讀一下這部分知識點
  • 《量表信效度分析》系列文章
    轉載 | SPSS學堂各位小夥伴們,在推出《問卷設計與統計分析》系列後,有許多小夥伴來反饋怎樣設計更為優質的問卷?為了解決這一問題,學堂推出了量表信效度系列,超詳細的為大家講解如何對問卷進行試測,調整問卷結構,設計更為優質的問卷。
  • 問卷數據分析——區分效度
    前面介紹了合成信度相關內容,現在我們來看區分效度部分。同樣先簡介定義,然後介紹操作計算部分。由於區分效度也是伴隨因子分析進行的,其畫圖、建模以及運行等過程,與合成信度的過程一模一樣,本文中案例所用的數據與合成信度也是同一數據,文中關於畫圖等過程就省略了,大家自行參照合成信度相關內容。
  • 教基每日一練:測驗的信度和效度(1.4)
    一、效度(一)效度的涵義測驗的效度指的是測驗的正確性和有效性。換言之,效度指的是測驗能在多大程度上實現測驗的目的。效度是科學測驗工具最重要的質量指標。能測出來想測量東西的程度,則效度高;測不出來,則效度低。例如:想要測量小明的身高,測量工具是秤,那麼,測量不出想要測量的東西,則效度低。
  • 2020年甘肅教師招聘教育學知識點:測驗的效度和信度
    2020年甘肅教師招聘教育學知識點:測驗的效度和信度 2020年甘肅教師招聘考試正處於緊張的備考狀態,按照往年信息來看,甘肅省教師招聘考試內容一般為教育基礎知識和教育專業知識。
  • 問卷一定要做效度分析嗎
    什麼是效度?效度分析,簡單來說就是問卷設計的有效性、準確程度。當我們在為研究主題設計問卷時,都會希望問題實際測量到的是我們希望測量的,這樣研究的數據才能準確的說明問題。效度分類效度又可分為內容效度、結構效度和效標效度。內容效度,指問卷題項對相關概念測量的合理性情況,通常是以文字來說明問卷的有效性。如通過參考文獻,或者權威來源說明問卷的權威性和有效性。還有就是通過對問卷前測並結合結果進行題項的修正等工作來充分說明問卷的有效性。(內容效度並非統計軟體進行的統計方法,對於問卷研究來講,基本上均需要進行內容效度說明。)
  • 信度、效度、難度、區分度之間有何不同?
    知識點在考試中通常以客觀題的形式出現,但是幾乎沒有識記類的考法,基本以概念反選、事例反選類單選題或判斷題為主,接下來就讓我們一起來走進這個知識:信度——是指測驗結果的穩定性或可靠性,即某一測驗在多次進行後所得到的分數的穩定、一致程度。它即包括在時間上的一致性,也包括內容和不同評分這之間的一致性。如,在不同時間測兩次相同的試卷,如果成績基本相當,那麼我們就認為測驗的信度較高。
  • 問卷調查:如何判斷設置的問題是有效的?
    當我們完成了問卷設計,如何判斷設置的問題是否有效呢?不妨先從問卷的質量的幾個標準來審視自己的問卷:1、我設置的問題和答案反映了理論變量嗎?2、多個答題者對問題的理解是否一致?3、答題者能否對問題作出可靠的答案?
  • 信度分析完整流程總結,一定有你需要的
    在問卷研究中,分析問卷信效度總是不可避免的環節之一。很多人會選擇直奔主題,點開信度分析界面,拽上所有題目就開始分析。但往往這樣「高效」的做法,總是得不到理想的結果。如何更有效獲得信度分析結果,避免無用功,今天我們就一起來探討一下。
  • 特殊問卷-量表「信度」的檢驗(SPSS:克隆巴赫α信度係數)
    可以問以下幾個問題:(1)你愛她嗎?(2)你喜歡她嗎?(3)你願意天天和她待在一起嗎?選項都是1、2、3、4、5分,分數越高,喜愛程度就越高。如果以上三個問題的結果一致性很高,比如3個問題都是5分,說明被調查者認真閱讀了每個問題,被調查者的回答是可靠的,採集的數據是可信的。
  • 信度不達標的處理方式
    在進行問卷研究時,特別是問卷中有非常多的量表題時,數據質量是基礎保障,問卷研究中排在最前面的即為數據質量分析,通常包括信度和效度分析。本身進行信度或者效度分析並非難事,但最難的事情在於如果信度或者效度不達標應該如何處理。
  • SPSSAU數據分析入門教學03:信效度分析指標
    信效度是衡量一份問卷測試結果的準確性和穩定性的依據。問卷設計完成之後到分析結束,一般要經過兩次信效度分析。一次是預調查時,一次是正式分析。1 定義信度分析用於測量樣本回答結果是否可靠,即樣本有沒有真實作答量表類題項。信度係數越高表示該測驗的結果越一致、越穩定。效度分析用於測量題項設計是否合理,通過因子分析方法進行驗證。
  • :信度與效度、創造性與智商的關係探究
    一、信度與效度   信度指的是所測量的屬性或特徵前後一致性的程度,即多次測驗的結果是否一致。一個人在多次進行某種測驗時,如果得到近乎相同的分數,那麼,可以認為該測驗穩定可靠,其信度是高的。例如,採用性格量表測量學生,他們在這一個月的結果,如果大致等於六個月前和三個月前的得分,那麼我們就認為測驗的信度較高。