首頁 計算機化自適應測驗:理論與方法

第四節 CAT終止策略

字體:16+-

CAT終止策略主要可以分為兩大類:一類是定長CAT,即當被試測試的題量達到某一固定題量(如20題)則終止測試;另一類是非定長CAT。非定長CAT一般分兩類,一類是以測驗的能力估計標準誤的絕對度量標準;另一類是題庫中剩餘項目所能減少測量誤差的邊際標準,這兩類方法各有優劣(毛秀珍,辛濤,2015)。在此主要介紹非定長CAT的終止策略。

一、絕對型終止策略

如果要使能力估計標準誤小於0.2,可設置c=25。

二、相對型終止策略

因為CAT的長度與選題策略和題庫有關,為了解決作答大多的項目而精度提高幅度很小的問題,有研究者提出了可用於單維或多維項目反應理論模型的預測標準誤減少量(Predicted Standard Error Reduction,PSER)終止規則(Yao,2013)。該規則具有以下優勢:在題庫中的項目不能較大提高估計精度時,不再增加測驗長度而直接終止測驗;增加一個或更多項目,可以較大地提高估計精度;估計精度與預設精度差異不太大。

該規則根據當前能力估計標準誤規定測驗終止和繼續的條件:①如果某個能力維度或領域的當前標準誤與上一估計標準誤減小量小於臨界值α,則不再選擇考察該維度或領域上的項目,即使預先設定的標準誤未達到;②如果某個能力維度或領域的當前標準誤與上一估計標準誤減小量大於臨界值β,即使預先設定的標準誤已經達到,仍然繼續選擇考察該維度或領域上的項目(並調整相應權重);③如果某個能力維度或領域的當前標準誤不小於上一估計標準誤,並且當前標準誤與預先設定的標準誤之差小於臨界值α,則不再選擇考察該維度或領域上的項目;④如果某個能力維度或領域的當前標準誤不小於上一估計標準誤,並且當前標準誤與預先設定的標準誤之差大於2β,則繼續選擇考察該維度或領域上的項目(並調整相應權重)。常設置β>α,如β=0.05和α=0.03。