信度分析概述
效度
????????效度指的是量表是否真正反映了我們希望測量的東西。一般來說,有4種類型的效度:內容效度、標準效度、結構效度和區分效度。內容效度是一種基于概念的評價指標,其他三種效度是基于經驗的評價指標。如果一個量表實際上是有效的,那么我們希望上述4種指標都比較滿意。
信度
????????是指測量的一致性。信度本身與測量所得結果正確與否無關,它的功能在于檢驗測量本身是否穩定。制作完成一份量表或問卷后,首先應該對該量表進行信度分析,以確保其可靠性和穩定性,以免影響問卷內容分析結果的準確性。
信度與效度關系
?????????效度與信度的關系是信度為效度的必要而非充分條件,即有效度一定有信度,但有信度不一定有效度。
內在信度分析
基本概念
????????內在信度也稱為內部一致性,用以衡量組成量表題項的內在一致性程度如何。常用的檢測方法是Cronbach'sα系數法和分半(Split-half)系數法。
統計原理
Cronbach'sα系數
分半信度系數?
????????是在測試后對測試項目按奇項、偶項或其他標準分成兩半,分別記分,由兩半分數之間的相關系數得到信度系數。需要進行斯皮爾曼——布朗公式校正,校正的公式為: ??
SPSS統計分析實例
????????在學生的性格特征調查中共選了10名學生在8個項目上進行測試,其數據如下表,試對其進行內在信度分析。??
序號 | 內向性 | 活動性 | 支配性 | 深思性 | 健壯性 | 穩定性 | 社會性 | 激動性 |
1 | 4 | 6 | 5 | 5 | 5 | 3 | 5 | 4 |
2 | 2 | 5 | 4 | 5 | 5 | 3 | 4 | 2 |
3 | 3 | 5 | 3 | 6 | 4 | 1 | 3 | 1 |
4 | 5 | 6 | 4 | 7 | 5 | 5 | 6 | 2 |
5 | 3 | 6 | 5 | 6 | 4 | 4 | 6 | 3 |
6 | 3 | 3 | 3 | 2 | 1 | 1 | 2 | 1 |
7 | 4 | 6 | 6 | 6 | 5 | 6 | 5 | 1 |
8 | 7 | 6 | 2 | 6 | 4 | 5 | 6 | 4 |
9 | 2 | 3 | 2 | 2 | 7 | 4 | 7 | 2 |
10 | 2 | 3 | 4 | 4 | 5 | 6 | 3 | 1 |
?
?
?
?主要結果及分析
可知α系數為0.79,其標準化后的α系數為0.79,說明量表的信度一般,還有進一步優化的必要。?
所有評估項目的描述性情況表?
????????顯示了將某一項從量表中刪除的情況下,量表的平均分、方差、每個項目得分與剩余各項目得分之間的相關系數,以該項目為自變量,所有其他項目為因變量建立回歸方程的 值以及Cronbach's ?值。從表中可以看出,“活動性”與其他項目之間的相關性最高,為0.752,而且“活動性”與其他項目的復相關系數也最高,為0.982,這表明“活動性”與其他項目的關系最為密切。同時也可以看出,如果刪除“支配性”,則其 系數變成了0.802,有所提升,但幅度并不大。?
再測信度分析
基本概念
????????同一個測驗項目,對同一組人員進行前后兩次測試,兩次測試所得分數的相關系數即為再測信度。它反映兩次測驗結果有無變動,也就是測驗分數的穩定程度,故又稱為穩定性系數。
統計原理
????????再測信度實質是求的同一量表在兩次測試中的相關系數,通常求的是如下式所示的Pearson相關系數。
?SPSS實例分析?
序號 | 內向性1 | 活動性1 | 支配性1 | 深思性1 | 健壯性1 | 穩定性1 | 社會性1 | 激動性1 |
1 | 3 | 5 | 6 | 5 | 4 | 4 | 4 | 4 |
2 | 2 | 5 | 5 | 5 | 3 | 4 | 5 | 3 |
3 | 3 | 5 | 3 | 6 | 5 | 2 | 3 | 2 |
4 | 4 | 6 | 4 | 7 | 5 | 4 | 5 | 3 |
5 | 3 | 6 | 5 | 6 | 4 | 4 | 4 | 5 |
6 | 4 | 3 | 2 | 2 | 1 | 1 | 3 | 2 |
7 | 4 | 6 | 6 | 6 | 4 | 5 | 5 | 2 |
8 | 6 | 6 | 2 | 5 | 4 | 5 | 5 | 4 |
9 | 3 | 3 | 3 | 3 | 6 | 5 | 6 | 3 |
10 | 2 | 3 | 4 | 4 | 5 | 6 | 4 | 2 |
?
內向性 | 活動性 | 支配性 | 深思性 | 健壯性 | 穩定性 | 社會性 | 激動性 | 總分 |
0.898 | 0.973 | 0.906 | 0.966 | 0.833 | 0.904 | 0.787 | 0.880 | 0.976 |
????????在對輸出的結果表進行了整理后,各相關變量,從表中可以看出可見各變量的相關系數比較高,其中總分的相關系數為0.976,說明量表的再測信度很好。?
Kendall和諧系數
基本概念
? ????????Kendall和諧系數常用于考察評分者信度。所謂評分者信度(Scorer Reliability),指多個評分者給同一批人進行評分的一致性程度。例如,在教育和心理測量中,常關心不同的評分者對同一個主觀題的評分是否一致;在醫學臨床療效評價中,常關心不同的醫生對同一個患者的評價是否一致。當評分者人數為2時,可以采用Pearson或Spearman相關系數評價一致性;當評分者人數多于2時,可以采用Kendall和諧系數考察評分者信度。
統計原理
????????Kendall和諧系數的計算公式為
????????若評分中出現相同的等級,則需要計算校正的系數。公式如下:
SPSS實例分析?
????????三名神經內科醫生對6名重癥肌無力患者分別進行肌力的評分,結果如下表所示,試評價三名醫生的評分信度,計算Kendall和諧系數。
序號 | 醫生甲 | 醫生乙 | 醫生丙 |
1 | 35 | 32 | 25 |
2 | 40 | 36 | 30 |
3 | 37 | 31 | 28 |
4 | 30 | 30 | 24 |
5 | 38 | 35 | 31 |
6 | 42 | 40 | 32 |
第1步 分析:這是一個考察幾個人對同一批患者評價一致性的問題,考慮用Kendall系數來度量。
第2步 數據組織:建立“序號”、“醫生甲”、“醫生乙”和“醫生丙”四個變量,輸入數據并保存。
第3步 Kendall系數設置:按“分析→非參數檢驗→舊對話框→K個相關樣本”順序打開“多個關聯樣本檢驗”對話框,并按下圖進行設置,之后提交系統運行。?
?