測驗與評量02_國小教甄信度與效度奪分關鍵

一、 信度 (Reliability)：測驗的「一致性」與「穩定性」 信度是指測驗結果的一致程度。信度越高，代表測驗受隨機誤差的影響越小，分數越穩定。 常見類型與甄試實例： 1.重測信度 (Test-retest Reliability)： 同一份測驗在不同時間對同一群學生施測兩次，計算其相關係數。 甄試重點： 兩次施測應間隔1-2週。若間隔太短，學生會有練習效應；太長則有累積性成長問題。 2.複本信度 (Equivalent-form Reliability)： 編製兩份在題數、難度、內容上都相當的平行測驗，對同一群學生施測。 優點： 這是最好的信度估計方式，能減少練習與記憶的影響。 3.評分者信度 (Scorer Reliability)： 不同評分者對同一份非客觀性試題（如作文、申論題）評分的一致性。 甄試實例： 教師甄試的複試（口試或試教），通常會有三到五位評委，透過計算他們評分的一致性來確保公平，這就是評分者信度的應用。 4.內部一致性信度 (Internal-consistency)： 僅根據一次測驗結果估計信度。 a.折半信度： 將測驗隨機分成兩半求相關。 b.庫李信度 (KR)： 適用於「對、錯」二元計分的試題。 c. α 係數： 適用於多點量表（如李克特五點量尺）。 影響信度的因素： 測驗長度： 題目越多，信度通常越高。 樣本異質性： 學生程度差異越大（分數全距大），信度越高。 測驗難度： 難度中等的成就測驗信度較高。 二、 效度 (Validity)：測驗的「正確性」 效度是指一個測驗能達成其測量目標的程度，即「測驗是否測到了它想測的東西」。效度是測驗最重要的特徵。 常見類型與甄試實例： 1.內容效度 (Content Validity)： 測驗試題是否能代表教學目標和教材內容。 甄試實例： 老師在編製期末考卷時，應依照雙向細目表 (Two-way table) 命題，確保各單元比例配置適當，這就是為了提升內容效度。 2.效標關聯效度 (Criterion-related Validity)： 測驗分數與外在效標（如未來表現）的相關程度。 a.預測效度： 預測未來的表現。如「國小教師甄試筆試成績」是否能預測該考生未來進入職場後的「實際教學表現」。 b.同時效度： 評估目前的表現。如新編的智力測驗與已具公信力的魏氏智力測驗同時施測，看其相關度。 3.構念效度 (Construct Validity)： 測驗能測量理論概念或心理特質（如創造力、動機）的程度。 常用因素分析法或聚斂效度（與相同特質測驗高相關）、區辨效度（與不同特質測驗低相關）來驗證。 三、 信度與效度的關係 (必考核心) 這兩者的關係常被比喻為「打靶」： 1.信度是效度的必要條件，但不是充分條件。 a.測驗要有效度，必須先有信度（靶心要準，彈著點得先集中）。 b.信度高，效度不一定高（彈著點很集中，但都偏離靶心）。 c.效度高，信度一定高（打中靶心，彈著點必然集中）。 2.信度低，效度一定低。 四、 甄試計算題常客：測量標準誤 (SEM) 在解釋個別學生分數時，不能只看原始分，要考慮誤差。 1.測量標準誤： 表示個人測驗實得分數與真實分數的差距。 2.信賴區間計算： a. 68% 的機會，真實分數落在 ±1 個標準誤之間。 b. 95% 的機會，真實分數落在 ±1.96 個標準誤之間。 舉例： 若某生智力測驗 130 分，標準誤為 3，則我們有 95% 的信心說他的真實智商落在 124 至 136 之間（即 130±1.96×3）。 五、      教甄相關實驗效度 (教育研究法) 1.內在效度： 實驗處理是否真的造成了結果變化？應注意避免霍桑效應（因被觀察而表現好）或強亨利效應（控制組因競爭心而表現異常好）。 2.外在效度： 實驗結果是否能推論到其他情境？即一般化 (Generalizability) 的程度。 給考生的建議： 在國小教甄中，除了記住定義，務必理解「增加題數可提高信度」、「雙向細目表與內容效度有關」以及「信效度互為必要條件的邏輯關係」，這些都是選擇題中高頻率出現的考點。 🧋如果您覺得這集對您有幫助，歡迎請我喝杯手搖。每一份贊助，都是我更新節目的動力!讓我能持續產出新內容！ https://cmlixl7hs00db01wh0ji6gv6x.firstory.io/join/tier/custom Powered by Firstory Hosting