Please enable JavaScript.
Coggle requires JavaScript to display documents.
第七章 試題分析 - Coggle Diagram
第七章 試題分析
說明
個別試題分析
題目發揮應有的測量功能？
題目適合受測者的程度？
有效區分不同程度的受測者？
主要分析
難易度、鑑別度、選項誘答度
試題分析
分析每個題目的功能
設計良好？不良？
目的
刪改題目的依據
主要功能
了解不同鑑別度試題的特徵>>以後可參考
了解不良試題的題幹與選項特徵>>提出改善方法
了解不同難易度試題的特徵>>以後可參考
了解優良試題與不良試題的屬性差異
常模參照測驗的題目分析
試題難易度
多元計分題的難易度
計分可能介於0~5或是1~5
(受測者的平均分數-題目分數下限)/(題目分數上限-下限)
{(高分組平均+低分組平均)/2-題目分數下限}/(題目上限-下限)
難易度指標的應用
0.5以下：困難題
0.5~0.75：中等難度
0.75以上：容易題
答對率0.25以下的很難區分是能力還是亂猜>>題目答對率應該在0.25~1.0之間
二元計分題的難易度指標
答對率
(高分組答對率+低分組答對率)取平均
特點：0~1之間；越高題目越簡單
答對題數的人/總人數
高低分組
佔人數25~33%(人數較少建議提高佔比)
試題鑑別度
二元計分題的鑑別度
高分組答對率-低分組答對率
數字大>>有鑑別度
多元計分題的鑑別度
(高分組平均-低分組平均)/(題目上限-下限)
鑑別度指標的應用
指標
0.2~0.4：尚可，可以再修
0.2以下：不佳，要修改
0.4以上：鑑別度優良
考量
難易度
太難or太簡單的題目>>放寬鑑別度標準
中等題目>>嚴格的標準
題目內容同質性
同質性低>>題目針對的內容不同>>題目與測驗總分的相關性不高>>鑑別度會比較低>>放寬標準 ex.社會科包含歷、地、公
同質性高>>能反映出單一向度能力>>相關性高>>鑑別度高>>嚴格的標準
受測群體能力差異
差異較小>>鑑別度較低>>用寬鬆的標準解釋
差異較大>>反映出試題的鑑別度
選項誘答情形分析
題型
優良試題型
高分組選正確答案遠多於低分組
低分組選答錯誤選項人數多於高分組
正確選項吸引高能力；錯誤選項吸引低能力
隨機亂答型
高低分組選每個選項的人數都差不多>>可能是亂猜
無法有效區分能力者
選項誘答力不佳型
高低分組選正確答案的人數都很多
選錯誤選項的人低分多於高分
有一兩個選項幾乎沒人選
問題：選項設計(性質、數值、敘述、長度差異)；題幹(有暗示)；題目太簡單
概念有爭議型
很像優良試題
在某錯誤選項發現，高分的人比低分的人多>>可能是爭議性選項
如果後來答案沒問題，就是受測者的學習過程有問題
解讀試題分析原則
應了解預試受測者的特性：認真答題？能力水準(影響難易度)；能力分散情形(影響鑑別度)
改良試題的參考，not篩選試題的唯一依據>>只是"量"的方面，要配合"質"的方面>>命題原則、學科內容
解讀受測者能力分布情形時，要把試題難度分布列入考慮>>難易度、鑑別度會影響受測者的測驗分數
電腦軟體在試題分析上的應用
鑑別度
分別把每一題跟總分框起來
用correl
難易度
總難易度
average那題的分數
把高低分答對率平均<<高低分分別算出平均<<高分組低分組要先排序
選項誘答
把要分析的部分複製去新的一頁
用樞紐分析表
標準參照測驗的題目分析
難易度
定義
具備能力與不具備能力者在該題目上的答對率平均
算式
(具備能力者的答對率+不具備能力者的答對率)/2
分析重點
該題難易度與測驗群體的篩選比率是否吻合
例如
通過該測式的人數比例為70%
找難易度0.7左右的(0.5~0.9也行)題目
鑑別度
定義
有效區辨是否具備該能力
算式
具備能力者的答對率-不具備能力者的答對率
適合
實作評量
教學敏感度
前側、後側
看教學是否有效