信度、效度、標準化、常模各自在回答什麼
| 信度 | 效度 | 標準化 | 常模 | |
|---|---|---|---|---|
| 回答的問題 | 同一份問卷重複量,結果一不一致 | 量到的是不是原本想量的概念 | 每個人是不是在同樣的指導語、時限與計分方式下作答 | 這個分數和一群有代表性的人相比,落在哪個位置 |
| 常見的檢查方式 | 內部一致性(Cronbach's α)、重測信度、複本信度 | 專家審題(內容效度)、因素分析(建構效度)、與外部指標求相關(效標關聯效度) | 寫出施測說明:指導語、作答時限、計分規則、反向題怎麼轉換 | 對代表性樣本施測,建立平均數、標準差與百分等級對照表 |
| 論文裡要報的 | 各分量表的題數與 α 值 | 專家人數與修題結果、因素負荷量、與效標的相關係數 | 施測程序與計分方式 | 常模樣本的來源、人數與施測年份 |
| 碩士論文的自編問卷要不要做 | 要 | 要 | 要,寫清楚施測程序與計分方式即可 | 通常不用;要解讀個人分數高低的測驗才需要 |
先後順序是:信度是效度的必要條件,信度高不保證效度高。常模是解讀分數用的對照基準,本身不會讓信度或效度變高;量表先有足夠的信度與效度,建立常模才有意義。
5 題量表的 α 與標準分數怎麼算(示意)
一位教育所碩士生自編 5 題的「學習投入量表」,五點量尺,回收 200 份有效問卷。
- 信度:5 題的變異數分別是 0.80、0.90、0.70、0.85、0.75,加起來 4.00;總分的變異數是 12.50。α =(5 ÷ 4)×(1 − 4.00 ÷ 12.50)= 1.25 × 0.68 = 0.85,高於一般採用的下限 0.70。
- 標準化:200 人的總分平均 18 分、標準差 4 分。一位填答者得 22 分,z =(22 − 18)÷ 4 = 1.00,換成 T 分數是 50 + 10 × 1.00 = 60。
- 常模:分數接近常態分配時,z = 1.00 大約高於 84% 的人。但這 200 人是便利取樣,不能當成全國學生的常模,只能寫「在本研究樣本中高於平均一個標準差」。
論文的研究工具一節照這個順序寫:題數與計分方式、α 值、效度證據;沒有建立常模就不要用「正常」「偏低」這類字眼解讀個人分數。
手上有問卷資料,可以貼進信度計算器(Cronbach's α)直接算 α 與刪題後 α;題目還在草稿階段,先用問卷設計工具健檢;預試要檢查哪些項目,見問卷設計指南。
問卷設計中的心理測量學原理:效度的類型
在問卷設計中,效度是指問卷測量結果的準確性,也就是問卷是否測量到它想要測量的內容。效度分成多種不同的類型,包括:問卷設計中的心理測量學原理:信度的類型
問卷設計中的信度,是指問卷測量結果的一致性與穩定性。信度可以分為以下幾種類型: 重測信度:是指在相隔一定時間後,對同一羣受試者使用相同的問卷進行重複測量,並比較兩次測量結果的一致性。重測信度主要用於評估問卷測量結果的穩定性。 複本信度:是指編製兩份題目不同、但內容與難度相當的版本,對同一羣受試者施測,並比較兩個版本測量結果的一致性;把同一份問卷拆成兩半來比的做法叫折半信度。複本信度主要用於評估問卷測量結果的一致性。 內部分信度:是指一份問卷中的不同題目在測量同一構念時的一致性。內部分信度可以用 Cronbach's alpha 係數來表示。Cronbach's alpha 係數的範圍為 0 到 1,係數越高,問卷的信度就越好。 綜合信度:是指一份問卷中所有題目的信度。題目是對錯二分計分(例如是非題)時,內部一致性改用 Kuder-Richardson 方程式 20(KR-20)來表示,它是 Cronbach's alpha 在二分計分下的特例。Kuder-Richardson 方程式 20 的範圍為 0 到 1,係數越高,問卷的信度就越好。 在問卷設計中,信度可以通過以下幾種方法來提高: 選擇適當的題目:題目應該與研究目的相關,並能夠有效測量研究變數。 題目表述清晰:題目應該表述清楚、簡潔,避免模稜兩可或容易引起誤解的措辭。 題目長度適中:題目不宜太長或太短,太長的題目會讓受試者感到厭煩,而太短的題目則可能無法有效測量研究變數。 選項編排合理:選項應該相互獨立且沒有重疊,選項的順序也應該合理,避免讓受試者產生偏見。 預測信度:是指在測量工具完成發展之後,研究人員可能想估計該測量工具在未來樣本中的表現。如果新樣本的特性與發展工具時使用的樣本相似,預測信度通常比重測或內部一致性更能提供測試的信度。問卷設計中的心理測量學原理:常模化與標準化
問卷設計中,除了信度和效度這兩個基本的心理測量學原理之外,常模化和標準化也是非常重要的概念。常模化是指將問卷的結果與一個具有代表性的人羣的結果進行比較,以便確定受訪者的表現是否正常或異常。這可以通過將受訪者的分數與常模進行比較來實現常模化的目的在於提供一個可以比較的基準,以便確定受訪者在某個特徵或屬性上的表現是否屬於正常範圍。例如,可以將受訪者的智商分數與常模進行比較,以確定其智力水平是否屬於正常範圍。標準化是指建立一個統一的評分標準,以便不同的人在問卷中獲得的分數具有可比性。標準化的目的在於確保問卷評分的一致性和可靠性。例如,可以通過將所有受訪者的分數轉換為標準分數來實現標準化。 標準化是將測量結果轉換成具有統一意義的分數或值的過程,以便進行比較和解釋。常模化是將測量結果與一個具有代表性的人羣的結果進行比較,以便確定受訪者的表現是否正常或異常。標準化和常模化都是心理測量學中非常重要的概念,它們可以幫助研究者收集到更為可靠和有效的心理測量資料。常模化和標準化在問卷設計中非常重要,因為它們可以幫助研究者獲得更具代表性和可比性的資料。| 概念 | 定義 | 目的 | |
|---|---|---|---|
| 常模化 | 與具有代表性人羣比較 | 確定受訪者表現是否正常或異常 | |
| 基準比較 | |||
| 標準化 | 統一評分標準 | 確保評分一致性和可靠性 | |
| 轉換成統一分數 | |||
問卷設計中的心理測量學原理:信度與效度具有階段差異
信度與效度是問卷設計中兩個最重要的評估指標,但它們並非一成不變的,而是具有階段差異的。這意味著,在問卷設計的不同階段,信度與效度所反映的問題和評估方式也可能不同。問卷設計的階段與階段性的信度與效度
問卷設計可以分為三個階段:- 問卷的編製階段:
- 問卷的施測階段:
- 問卷分析的階段:
問卷設計中的心理測量學原理:信度、效度與常模化的關係
問卷設計中的心理測量學原理包括信度、效度、標準化和常模化,這些原理之間有著密切的關係,共同影響著問卷的質量與可信度。
信度、效度與常模化之間的關係:
- 信度與效度:信度是指問卷測量結果的一致性和穩定性,而效度是指問卷測量結果的準確性和有效性。信度是效度的必要條件,但信度高不代表效度一定高。問卷需要具備良好的信度,才能確保其測量結果具有穩定性和一致性,進而才能評估其效度,即問卷是否能準確測量其所要測量的指標。
- 信度與常模化:信度與常模化之間也存在著密切的關係,常模化可以提高問卷的信度。常模化是指將問卷測量結果與一個具有代表性的人羣的測量結果進行比較,以建立一個可以對照的標準。常模化可以幫助研究人員評估個體在某個測驗或問卷中的表現是否屬於正常範圍,抑或是存在顯著偏差。透過常模化的過程,研究人員可以識別出問卷中可能存在的問題,並進行必要的調整以提高問卷的信度。
- 效度與常模化:效度與常模化之間也存在著密切的關係,常模化可以提高問卷的效度。常模化可以提供一個比較基準,使研究人員能夠比較不同個體在問卷中的表現,並識別出表現異常的個體。此外,常模化還可以幫助研究人員評估問卷是否能夠有效區分不同組別的個體,例如,不同年齡組、不同教育程度組或不同職業組別等。
結論:
問卷設計中的心理測量學原理,包括信度、效度、標準化和常模化,這些原理之間有著密切的關係,共同影響著問卷的質量與可信度。信度、效度和常模化都對問卷的質量和可信度起著至關重要的作用。心理測量學家在設計問卷時,需要綜合考慮這些原理,以確保問卷能夠準確有效地測量出所要測量的指標。希望這篇文章能協助大家更瞭解問卷設計中的心理測量學原理,並在實際應用中加以活用,以設計出更為有效的問卷。信度是效度的必要條件,效度是信度的充分條件,常模化可以提高信度和效度。因此,在問卷設計中,需要同時考慮信度、效度和常模化,以確保問卷的質量和可信度。
問卷設計中的心理測量學原理結論
問卷設計中的心理測量學原理,包括信度、效度、標準化和常模化,對於問卷設計和資料分析至關重要。信度和效度是問卷質量的兩個基本指標,分別表示問卷測量結果的可靠性和有效性。標準化和常模化則可以使問卷結果更具可比性和意義。在問卷設計中,應根據研究目的和測量對象的特性,選擇合適的信度和效度指標,並採用適當的標準化和常模化方法,以確保問卷資料的質量和可信度。
信度、效度、標準化和常模化是問卷設計中不可或缺的心理測量學原理,它們共同保障了問卷的質量和可信度。研究人員在設計問卷時,應充分考慮這些原理,並將其應用到問卷設計的各個環節中,以確保問卷能夠準確、有效地測量研究對象的相關特徵或行為。
問卷設計中的心理測量學原理是複雜且多層次的,但它們也是問卷設計和資料分析的基礎。通過理解和應用這些原理,研究人員可以設計出更為有效且可靠的問卷,並從中獲得更有價值的資料。在未來的研究中,心理測量學家應繼續探索和發展問卷設計中的心理測量學原理,以進一步提高問卷的質量和可信度,並為各領域的研究提供更可靠的資料支持。
問卷設計中的心理測量學原理 常見問題快速FAQ
問:問卷設計中,如何確保問卷題項的效度?
答:確保問卷題項的效度,可以從以下幾點著手: 1. 明確定義測量目標:在設計問卷題項之前,必須明確定義要測量的目標,才能確保題項與目標相關。 2. 選擇合適的題項類型:根據測量目標,選擇合適的題項類型,如單選題、多選題或開放式題目等。 3. 確保題項的清晰性和簡潔性:題項應使用清晰易懂的語言,並避免使用專業術語或模稜兩可的詞彙。 4. 避免誘導性題項:題項不應包含誘導性的語言或暗示,以免影響受訪者的回答。
問:在問卷設計中,信度和效度之間存在什麼關係?
答:信度和效度是問卷設計中的兩個重要概念,兩者之間存在著密切的關係。信度是指問卷測量結果的一致性和穩定性,而效度則是指問卷測量結果的準確性和有效性。一般來說,信度是效度的必要條件,但信度高並不一定意味著效度高。因此,在問卷設計中,既要確保信度,又要確保效度。
問:在問卷設計中,常模化和標準化有何區別?
答:常模化和標準化都是問卷設計中的重要概念,但兩者之間存在著區別。常模化是指將問卷測量結果與一個常模羣體的結果進行比較,從而獲得受訪者在該羣體中的相對位置。而標準化是指將問卷測量結果轉換成一個具有特定意義的數值,以便於比較和分析。常模化和標準化都有其各自的優點和缺點,在問卷設計中應根據具體情況選擇合適的方法。
參考資料
- Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297–334. https://doi.org/10.1007/BF02310555
- Tavakol, M., & Dennick, R. (2011). Making sense of Cronbach's alpha. International Journal of Medical Education, 2, 53–55. https://doi.org/10.5116/ijme.4dfb.8dfd
- Cronbach, L. J., & Meehl, P. E. (1955). Construct validity in psychological tests. Psychological Bulletin, 52(4), 281–302. https://doi.org/10.1037/h0040957