民國114年 高考三級 教育行政 教育測驗與統計
第1題
某教育學者擬針對某項證照考試的兩次考試成績進行比較，為了能有意 義地比較兩次考試成績的高低和解釋優劣，請問可以引用何種測驗理論 為依據，並且說明該滿足何種條件，…
題目
某教育學者擬針對某項證照考試的兩次考試成績進行比較，為了能有意 義地比較兩次考試成績的高低和解釋優劣，請問可以引用何種測驗理論 為依據，並且說明該滿足何種條件，才能達成其比較目的？（25 分）
參考解答（AI 生成，非官方）
- 一、理論依據：本題宜以項目反應理論（item response theory, IRT）為基礎，並以測驗等化（test equating）為方法。古典測驗理論（classical test theory, CTT）的分數依賴樣本與題本難度，兩次考試若題本不同，原始分數不具可比性；IRT 具題目參數與能力參數不變性（invariance），可將兩次成績轉換至共同量尺（common scale），使分數高低與優劣的解釋具意義。
- 二、等化設計：可採單一群組設計、等組設計（equivalent groups）、共同題非等組設計或平衡隨機設計。以共同題（anchor items）進行同時估計（concurrent calibration），或分別估計後求轉換係數，並以 Stocking-Lord 或 Haebara 法求加權轉換，使兩份題本落在同一量尺上，方能比較兩次成績。
- 三、必要條件：其一為單向度（unidimensionality），兩次考試須測同一構念；其二為局部獨立（local independence）；其三為模式與資料適配（model-data fit），如 Rasch、2PL、3PL 之適合度檢核；其四為共同題具代表性且數量足夠；其五為樣本具代表性、樣本數足夠；其六為測量恆等性（measurement invariance），並以 DIF 檢核題目功能之差異。
- 四、比較與解釋：等化後方可比較兩次成績之高低；若屬證照考試，尚須維持切截分數（cut score）與標準設定（standard setting）之一致性，並於比較通過率時考量群體能力組成之差異。另可計算分類一致性（classification consistency）與 Kappa 係數，說明判定結果之穩定程度。
- 五、限制與建議：若兩次考試構念不同、共同題不足或模式不適配，即不得等化，只能各自建立常模，不能宣稱可直接比較；建議事先規劃等化設計、預試與題庫建置，並公開等化歷程與等化標準誤（standard error of equating），以提升比較結果之可信度。
AI 依官方試題文字產生的參考解答，非考選部公告答案，內容僅供備考參考。