民國112年 地方三等 教育行政 教育測驗與統計
第1題
雖然目前國內有許多升學及就業考試,仍以古典測驗理論(classical test theory, CTT)作為編製、發展與分析試題的理論依據,然而卻因為該理 論…
題目
雖然目前國內有許多升學及就業考試,仍以古典測驗理論(classical test theory, CTT)作為編製、發展與分析試題的理論依據,然而卻因為該理 論具有何種缺失而逐漸式微,進而被新興的試題反應理論(item response theory, IRT)取而代之?請說明之。(25 分)
參考解答(AI 生成,非官方)
- 一、古典測驗理論的基本架構。古典測驗理論(classical test theory, CTT)以 X = T + E 為核心,假設真分數(true score)固定、誤差隨機且期望值為零、誤差與真分數相互獨立,並以信度(reliability)與測量標準誤(standard error of measurement, SEM)描述測驗精度。其參數估計高度依賴單一樣本與單一題本,成為後續各項缺失的根源。
- 二、樣本依賴(sample-dependent)與測驗依賴(test-dependent)。難度(p 值)、鑑別度(D、r)均由特定樣本算出,樣本能力分布一變,題目參數即隨之改變,難以跨群體比較;受試者原始分數又隨題目組合而異,同一人施測不同題本不可比。此種「參數與樣本、測驗相互糾纏」的特性,使題庫建置與測驗等化(equating)格外困難。
- 三、測量誤差同質性假設不切實際。CTT 以單一 SEM 概括全體受試者,隱含所有人誤差變異相同;實務上能力極端者誤差較大,缺乏個別化誤差資訊。且平行測驗(parallel forms)要求真分數相等、誤差變異相等、題目同質,現實難以完全滿足,信度估計常被高估或低估,也無法據以進行個別化判定。
- 四、量尺層級與應用上的限制。原始分數僅具次序性,卻被當作等距量尺加減平均,違反量尺假設;CTT 亦難處理遺漏作答,無法提供題目層次的訊息,不易支持電腦化適性測驗(computerized adaptive testing, CAT)、差異試題功能(differential item functioning, DIF)與多向度能力分析,難以因應現代測驗需求。
- 五、試題反應理論的優勢與代價。試題反應理論(item response theory, IRT)以機率模式連結潛在特質 θ 與作答反應,具題目參數不變性(invariance)、能力估計不受題本影響、可計算題目與測驗訊息函數、誤差隨 θ 變動等優點,故漸取代 CTT。惟其假設更強(單向度、局部獨立)、需大樣本與模式適配檢定,成本較高。
AI 依官方試題文字產生的參考解答,非考選部公告答案,內容僅供備考參考。