測驗與評量07_如何透過難度指數與鑑別指數來評估測驗品質

這份文件深入探討了試題分析的核心功能與應用，強調其能為教師與學生提供關鍵的回饋。 如何透過難度指數與鑑別指數來評估測驗品質，並介紹了常模參照與標準參照等不同評量脈絡下的分析技術。 理想的試題應具備適中的難度與高度的鑑別力，方能有效區分學生的學習程度並提升測驗信度。此外，亦分析了誘答選項的有效性，指導教育者如何藉由數據判斷題目是否需要修改或汰換。這是一份關於如何科學化編製試卷，並確保內容效度與評量公正性的專業教學指南。 一、 難度分析 (Difficulty Analysis, P) 難度是指受試者答對試題的百分比。在教甄測驗中，難度的高低決定了分數的分配與信度。 計算方式： 通常採用「通過百分比分析法」，公式為 P=(PH +PL )/2。其中 PH  為高分組（總分前 27%）的答對率，PL  為低分組（總分後 27%）的答對率。 數值意義： P 值愈大，代表題目愈容易；P 值愈小，代表題目愈難。 理想標準： 為了讓測驗具有最高的信度，難度應保持適中。一般而言，難度最好接近 .50，理想範圍建議在 .40 至 .70 之間。 舉例說明： 某教甄教育學科題目，高分組有 80% 答對（PH =0.8），低分組有 20% 答對（PL =0.2），則該題難度 P=(0.8+0.2)/2=0.5。這是一題難度非常理想的題目。 二、 鑑別力分析 (Discrimination Analysis, D) 鑑別力是指題目能區分受試者能力高低的作用。在競爭激烈的教甄中，鑑別力是篩選優秀教師的關鍵。 計算方式： 常用「內部一致性分析」，公式為 D=PH −PL 。 數值意義： D 值介於 -1.00 至 +1.00 之間。指數愈高，鑑別力愈大。 D≥0.25： 視為具備良好的鑑別力。 D≈0： 代表該題無法區分學生好壞，可能是題目太難、太簡單或語意不清導致猜測。 D 為負值： 代表低分組答對人數反而比高分組多（反向作用），此類題目應予淘汰。 舉例說明： 若一題的 PH =0.9，PL =0.1，則 D=0.8，鑑別力極佳。若一題 PH =0.4，PL =0.5，則 D=−0.1，這表示連程度好的考生都答錯，可能題目有瑕疵，必須修改或刪除。 三、 誘答力分析 (Distractor Analysis) 這是在分析選擇題中「錯誤選項」的有效性。一個好的誘答選項（選目）必須能吸引低分組的考生。 有效選項的標準： 吸引力： 每個錯誤選項至少要有低分組的人選擇。 方向性： 低分組選擇錯誤選項的人數應多於高分組。 常見問題與修正： 無人選答： 若某錯誤選項兩組都沒人選，表示該選項毫無「誘答力」，應修改。 高分組選錯： 若某錯誤選項吸引了過多高分組考生，可能代表該選項語意不清，或其實是另一個正確答案。 舉例說明： 某題正確答案為 B，選項分析如下： 選項 A：高分組 2 人、低分組 10 人選（優良誘答）。 選項 C：高分組 0 人、低分組 0 人選（無效誘答，需修改）。 選項 D：高分組 15 人、低分組 5 人選（錯誤誘答，可能題目設計有誤，導致優秀考生誤選）。 四、 教甄命題與選題策略總結 在進行試題篩選時，應遵循以下原則以符合測驗品質： 1.優先順序： 先選擇鑑別力（D）較高的試題（至少 .25 以上），再從中挑選難度（P）適中（.40-.70）的題目。 2.內容效度： 除了統計數據，還須參考「雙向細目表」，確保題目涵蓋了應有的教學目標與內容範圍。 3.質性檢視： 數據僅是參考，仍需仔細考量題目是否有缺點、敘述是否清楚，避免受試者因為「盲目猜測」而造成測量誤差。 🧋如果您覺得這集對您有幫助，歡迎請我喝杯手搖。每一份贊助，都是我更新節目的動力!讓我能持續產出新內容！ https://cmlixl7hs00db01wh0ji6gv6x.firstory.io/join/tier/custom Powered by Firstory Hosting