Please enable JavaScript.

Coggle requires JavaScript to display documents.

信度 Reliability (六、測量標準誤(Standard Error of Measurement, SEM) (4.測量標準誤與信度的關係…

- - - - 所得分數一個標準誤以上和以下的信心帶通常用於測驗的側面圖(profile)，以協助解釋個別分數或判斷分數間的差異是否是「真的差異」，或是機遇所造成的差異
        
        b.解釋一個綜合測驗兩個分數間的差異：當信心帶的兩端重疊時，二分數間沒有「真正的差異」
        
        c.解釋同一個測驗上二個個別分數間的差異：當信心帶的兩端沒有重疊時，二個分數間便有「真正的差異」
        
        a.解釋個別分數：信心帶指出真分數位於「合理的限制」之內
    - - 比較不同測驗分數的差異
      - 差異標準誤
- - - - 測驗品質
      - 團體成分
- - - - 好的測驗內容應該具有一致性，不同的題目應該都在測量相同的東西（打中一個點）。
    - - 好的測驗不會因為不同的人來打分數而導致得分有所差異，不同的評分者應該評出相同的結果。
    - - 好的測驗應該不會受到受測者本身狀況的影響，所以不管什麼時候施策，結果應該要一樣。
- - - - 4.誤差來源
        
        同一時間
        
        正本與複本間的題目內容差異
        
        不同時間
        
        正本與複本間的題目內容差異
        
        兩次施策的間隔時間
      - 5.限制與注意事項
        
        限制：大部分的心理測驗無法使用複本信度，主要原因是幾乎90%的心理測驗沒有編制複本。
        
        若為同時施策，理想上係數應達0.8以上。有時間間隔，理想上係數應達0.7以上。誤差來源越多，就要降低對信度係數的要求。
        
        中間間隔不宜太長。時間間隔太長，可能造成學習效果。
        
        為使誤差降至最小，會盡量將正、複本同時施策。但有些測驗時間太長，就不適合同時施策。
      - 3.種類
        
        同一時間：複本立即信度
        
        不同時間：複本延宕信度
      - 6.適合何種測驗
        
        適合速度測驗
        
        適合成就測驗
        
        避免再測時的學習或練習效果
        
        學校所使用的補考相當於複本的一種應用方式
        
        避免內容曝光而破壞決策的公平性
      - 2.意義：針對同一受試者在同一時間或不同時間施策，測驗正本與複本得到分數結果的一致性。
      - 1.複本：兩個不同版本，但內容等同的評量工具。
        
        兩份測驗在內容、形式、題數、指導說明、時間限制與例題等方面，必須類似或相等。
    - - 3.適用
        
        主觀型計分的心理測驗（開放性、不限時間、不限答案內容的作答方式）或入學考試的口試、申論題、作文的評分。
      - 4.評分者信度種類
        
        A.相關係數
        
        等級分數：斯皮爾曼Spearman等級係數、肯德爾Kendall和諧係數
        
        連續分數：皮爾森Pearson積差相關
        
        排序是否相同
        
        B.符合度
        
        所給絕對分數是否相同
        
        相同分數的百分比
      - 2.誤差來源：不同計分者對同一作答反應的主觀計分標準。
      - 5.斯皮爾曼等級相關
        （兩名評分者）
      - 1.意義：指同一份測驗，由不同計分者計分，其分數結果的一致性。
      - 6.肯德爾和諧係數
        （多名評分者）
    - - 意義：同一份測驗針對同一受試者，在不同時間重複失策得到的分數結果的一致性。
      - 外部一致性信度中最常使用的方法
      - 解釋測驗分數經時間改變後的分數穩定狀況，最能直接反映該測驗的測量誤差大小。
      - 誤差來源
        
        重複施策中間的間隔時間(Interval)是誤差來源，間隔時間越長，誤差越大。
        
        間隔時間
        
        情意測驗：約2~4週
        
        時間太短可能造成練習效果或導致受試者作答厭倦，太常可能造成學習效果。
        
        認知測驗：約4~6週
      - 皮爾森積差相關
        
        當時間間隔越長，則信度係數標準應該降低。
      - 速度測驗和成就測驗「不適合」分析再測信度。
      - 影響再測信度的因素
        
        測驗性質因重測而改變
        
        難以有相同的測驗情境
        
        易受練習、記憶的影響
  - - - 3.注意：α係數受題數影響大，判斷α係數是否符合標準時，需同時考慮題目多寡。測驗有分像度或測驗時，應分別驗證各測驗的信度。
      - 4.公式
      - 2.適用：多元計分，如李克特式量表的作答（非常同意、同意、不同意、非常不同意）
      - 5.SPSS
        
        分析—信度分析—相關—alpha值
      - 1.意義：反應各題目的作答反應與測驗總分的一致性，也反應了各題目間的作答一致性。
    - - 3.注意：庫李信度類似α係數信度，容易受題數影響。
      - 4.庫李20號公式
      - 2.適用：有正確答案的測驗。
      - 5.庫李21號公式
      - 1.意義：反應各題目的作答反應與測驗總分的一致性，也反應了各題目的作答一致性。
    - - 3.應用
        
        適用於題目經過難易度排序的認知測驗與速度測驗。
        
        不適用於題目過少的測驗。
      - 4.注意事項
        
        B.在其他條件相同下，題目越多的評量工具之信度高於題目少的評量工具。
        
        C.為解決因題目增多或減少對信度係數造成的影響，Spearman和Brown發展出一個估算公式。
        
        A.評量工具的兩個部分得分之相關，估計的是半個測驗長度的信度估計值。
      - 2.相關係數
        
        以50個樣本，40個題目為例，理想上信度係數要達0.7~0.8以上。
        
        題數越多，標準越高。
      - 5.斯布校正公式
        (Spearman & Brown)
      - 1.分成兩半
  - - - 面向數為1（facet=1），即等同於古典測量理論
      - 多面向測量（facet >1），即為多維度的信度理論
    - - 目的在於幫助研究者檢驗在不同測量面向進行推論的限制
      - G研究會得到各面向影響的變異成分估計數，解決一些古典信度理論所無法解決的實務問題
      - 觀測全域各面向進行測量分數變動分析的研究
- - - - Rxx' = R^2xt = S^2t/S^2x
      - Rxx' = S^2x/S^2x-S^2e/S^2x = 1-S^2e/S^2x