Please enable JavaScript.
Coggle requires JavaScript to display documents.
第八章 信度的分析 - Coggle Diagram
第八章 信度的分析
意義
測驗結果的穩定性與一致性
介於0~1之間
越接近1
信度越高
分數可靠>>測量誤差小
多次測量後
平均分數>>真分數
標準差>>測量誤差
真分數的變異量無法直接算出來
評估方法
內部一致性信度
測驗題目評量到的潛在特質是否一致
影響因素：欲測量的特質是否單一且定義明確
指標
折半信度
Cronbach's α係數
其他
評分者信度
不同評分者的一致性；同一評分者的一致性
影響因素：評分規準明確性、受測者訓練程度
指標
史皮爾曼等級相關(兩個評分者)
肯德爾和諧係數(一群評分者)
複本信度
取樣不同的行為來測量時，測驗結果是否穩定
影響因素：副本相似度、抽樣行為的代表性、疲勞
有相同的測驗藍圖、難易度、鑑別度
又稱平行測驗
標準參照測驗的信度
測量結果是通過與否，not分數
指標
卡帕係數κ=(Pc-Pr)/(1-Pr)
再測信度
時間穩定性：不同時間點實施，分數是否一致
影響因素：再測時間長短、受測者能力變動、練習
測驗分數有效期限的指標
電腦軟體在信度分析上的應用
變異數=VARP(範圍)
信度=(總題數/總題數-1)*(1-SUM(每題的變異數)/總分變異數)
鑑別度=CORREL(每題與總分)
刪除鑑別度低的題目，信度up
相關的問題
水準的要求
能力測驗
最好可以0.8以上
性格類測驗
有0.7已經不錯了
與測驗要做的決策相關，越嚴肅的用途、影響越大的，信度要求越高
影響測驗信度的因素
測驗本身
題數
數量up，信up
內容
同質性，一致性up，信度up
難易度
難易度分布均勻，信度up
符合受測者能力水準，信度up
情境
干擾受測者
燈光、噪音、桌椅<<物理
測驗說明(目的、題數、作答方式)<<施測過程
避免利用時間差洩題作弊<<時間
信度的評估方式
以不同的信度測量方式，來看不同面向的穩定性
分析不同因素對測驗的影響，以便了解分數可以類推到哪些情境<<類推力理論
人為
受測者
情緒、心態
受測群體的能力相近，信度down
隨機誤差
評分者
評分一致性
類推力理論
測量標準誤(SEM)
計算方法
SEM=σ√￣1-r
測量標準誤=受測群體的標準差*(1-測驗信度)開根號
相關問題
測量標準誤的假設不盡合理>>忽略受測者的能力誤差
測量誤差與受測群體的關係>>一個人的誤差會受其他受測者影響
單一分數值與分數範圍>>分數範圍可提醒使用者注意分數誤差