Please enable JavaScript.
Coggle requires JavaScript to display documents.
信度分析 (壹、信度的理論 (二、信度的數學定義 ((一)定義:真實分數的變異數/實得分數的變異數 = 信度係數, (二)數學表示:,…
信度分析
壹、信度的理論
一、真實分數模式的假設
(一)定義:實得分數(observed score) = 真實分數(true score) + 誤差分數(error score)
(二)各分數意義
1.真實分數:代表測量結果中真實不變的部分=學生真正的能力,但無法直接測量
2.誤差分數(測量誤差)
(1)系統誤差(偏誤):以固定、一致的方式影響測驗分數,作答者的練習、訓練、遺忘、生長
(2)非系統誤差(隨機誤差):隨機,作答者的身心狀況、測驗試題(指導語、計分)
二、信度的數學定義
(一)定義:真實分數的變異數/實得分數的變異數 = 信度係數
(二)數學表示:
(三)結論:信度的含義是指經由多次複本測驗測量所得結果間的一致性、穩定性,或估計測量誤差有多少,以反映出真實量數程度的指標
參、效標參照測驗的信度分析
一、百分比一致性的指標
2.計算:
1.定義:分析前後兩次分類決定結果是否一致
二、𝞙係數:太複雜,不提
肆、影響信度的因素及其補救措施
一、影響信度的因素
(三)試題難易程度:常模參照測驗vs效標參照測驗
(四)計分的客觀性
(二)樣本能力分配:研究生vs小學生
(五)信度估計方法(誤差來源的不同)
(一)試題題數的多寡:同性質的測驗長,愈容易涵蓋代表性教材,不容易受到猜測的影響
二、信度低時的補救措施
(一)是否測到潛在特質:
1.因素分析
2.鑑別度分析:求出個別試題和測驗總分間的相關係數=鑑別度指標
(二)補救方法
增加試題或刪除不良試題
2.校正相關係數的萎縮
貳、常模參照測驗的信度分析
(二)複本信度
1.定義:實施兩份複本測驗於同一批作答者,求取兩個得分的「複本信度係數」
2.用途:表示兩份測驗所測量到的相同潛在特質或能力之異同
3.誤差來源:試題抽樣
4.實施方式
(1)在同一個時間內連續施測(A、B卷)→反應「試題抽樣誤差」→等值係數
(2)間隔一段時間施測→同時反應「試題抽樣誤差」、「時間抽樣誤差」→穩定且等值係數
(三)內部一致性信度
K-R方法
2.用途:確定試題是否都測量到相同特質
3.誤差來源:抽樣內容的異質性誤差
1.定義:學生對試題的作答反應,分析試題間的一致性
4.基本假設:a.二元計分 b.不受作答速度影響 c.試題都是同質,僅測到相同因素
𝛂係數
2.用途:多元化計分
3.誤差來源:抽樣內容的異質性誤差
1.定義:𝛂是測驗的估計信度係數
折半方法
1.定義:利用單獨一次測驗結果,隨機分成兩半,求出「折半係數」
2.用途:表示兩半測驗的抽樣內容適當程度
3.誤差來源:抽樣誤差
4.常見兩半法:(1)隨機、(2)奇偶
(一)再測信度
1.定義:以同一份測驗於不同間對同一批學生前後重複測量兩次,求出兩次得分的「再測信度係數」
2.用途:估計測量結果經一段時間後是否保持穩定
3.誤差來源:不同時間下測量的誤差
(四)評分者信度(主觀)
1.評分者間的評分者信度
(1)等級相關係數:評分者只有2位
(2)和諧係數:評分者不止兩位
2.評分者內的評分者信度:
(1)同質性信度係數
3.誤差來源:評分者誤差
(五)共同意義:信度越高,誤差愈小。