試題分析
壹、試題分析的重要性與內涵
參、效標參照測驗的試題分析
貳、常模參照測驗的試題分析
肆、試題的評鑑
二、試題分析的功用
三、試題分析的內涵
ㄧ、如何判斷試題是否優良?
1.針對試題內容進行品質分析(邏輯審查):符合教學目標
2.針對試題的統計特徵進行量化分析:難度、鑑別度、誘答力
2.補救教學的依據
3.修改課程的依據
1.改進學習的參考
4.增進編制的經驗
5.增進題庫運用的效能
常模參照測驗→量化分析→難度、鑑別度、誘答力
效標參照測驗→量化分析→難度、鑑別度、誘答力
三、鑑別度指標的分析
四、選項誘答力的分析
二、難度指標的分析
五、試題分析結果解釋的注意事項
ㄧ、試題分析的步驟
二、鑑別度指標的分析
三、選項的誘答力分析
一、難度指標的分析(效標較不在乎)
1.二元化計分:答對=1,答錯=0
2.由高往低排列二元化反應組型之原始得分
3.選取前1/4~1/3的人作為「高分組],後1/4~1/3作為「低分組」
4.計算高分組、低分組的「答對率」
5.計算試題「難度(Pi)」
6.計算「鑑別度(Di)」
7.分析選項「誘答力」
1.答對率法(最簡單,較常用)
2.范氏試題分析表法:使用常態分配機率來表示難度指標值,較複雜
含義:試題具有區別學生能力高低的功能,鑑別度指標越高,表示越能區分答對與答錯
分類
一、內部一致性法:暸解個個試題的功能是否與整份測驗的功能相一致
二、外在效度法:探索「二分變項」與「連續變項」的關係(不重要)
含義:判斷試題編制好壞與診斷學生作答反應的依據
判斷是否具誘答力原則:
1.低分組選答率不可為0 = 每個不正確選項,低分組要有人選
2.不正確選項選答率,低分組學生不可低於高分組學生 = 不正確選項選答率,低分組人數>高分組人數
2.低鑑別度指標不等於是不良試題
3.小樣本的分析結果,結論都是暫時的
1.試題鑑別度高低不隱含試題效度的大小
影響來自:1.教學品質 2.學習教材的優劣
應和教學前預先設定通過標準一致
1.教學前後表現差異=「教學敏感度指標」,可視為鑑別度指標
2.鑑別度比難度指標重要→評估教學、試題是否有效
3.設計依據
(2)受教組與未受教組的比較
(3)精熟組與非精熟組的比較
(1)教學前與教學後之比較
教學前後差異指標(PPID)=Ppost-Ppre
值域:-1.00 ~ +1.00 ; 正常教學情境:0.10~0.6 之間
可避免前測影響後測結果
受教組/未受教組的難度指標差異 D = Pi - Pu
事先決定好「通過標準」(得到80-90%分數),即達成精熟學習。
計算公式 D = Pm - Pn
分析原則
(1)不正確選項上的選答率,低分組不可以為0
(2)在不正確選項上的選答率,低分組不可以低於高分組
一、難度指標與鑑別度指標間的關係(菱形分佈)
二、挑選優良試題的標準
二、依據試題效度來挑:教學目標(學生能力)
三、依據試題品質來挑:難度、鑑別度、誘答力
一、依據測驗用途來挑:常模參照 vs.效標參照測驗
鑑別度指標至少0.25以上