Wednesday, September 23, 2015

CDIIT 分析進度

目標: Motor-CAT

分析情況

1. 所有的motor 題目放在一起,產生一個motor 分數,
    題目fit狀況不理想,決定拆成二面向: Gross motor (GM, 56題)+ Fine motor (FM, 41題)

2. Gross motor Rasch 分析
    1. Winstep 軟體
    2. 刪題標準 0.5<Infit<1.5; outfit>1.5
    3. 刪了6題及6筆作答反應比較奇怪的資料,符合標準。


3. Fine motor Rasch 分析
    1. Winstep 軟體
    2. 刪題標準 0.5<Infit<1.5; outfit>1.5
    3. 刪了8題及6筆作答反應奇怪的資料,還有二題outfit不符合標準 (2.38, 4.00)
        困難:
        1. 刪了其中的某一題,會有新的二至三題outfit misfit。
            若misfit全部刪除,則題目階難度會有一段全部沒有(12-35個月的題目都被刪除)。
        2. 沒有作答反應看起來特別奇怪的資料可以再刪除了。
        目前決定: 保留這兩題於題庫中。

4. 下一步分析:
     1. 待與官琳學姊討論是要分析成Unidimension 還是multidimension

          1. Unidimension的作法
              1. 分別將二面向寫成CAT,決定二面向stopping rule
              2. 看ROC curve能否區辨正常發展孩童與發展遲緩孩童,決定cut-point
                   1. 待確認孩童是否有發展遲緩的資料 (依原版CDIIT分數決定?)
                   2. 待確認年齡層如何劃分
              3. 驗證 (用第二年或第三年的資料)

           2. Multidimension的作法
               1. 用Conquest結合二面向題目分析,刪題
               2. 寫成二面向CAT, 決定stopping rule
 

Wednesday, September 2, 2015

MuSiC分析流程

單面向分析 (Gross motor、Fine motor)
(1) 尋找CAT stopping rules
      (1)  跑CAT模擬分析,模擬小朋友作完所有題目
      (2)  依照題目找stopping rule
             *因為是篩檢工具(快速找出疑似有問題的孩童
                1. Reliability change <0.05
             
(2) 計算sensitivity, specificity
      (1) 確定孩童能力後,分四個年齡層,跑ROC curve,看AUC是否>0.7
      (2) 分四個年齡層,找出每個年齡層的cut point
      (3) 未來程式可設計成估計出能力後,對照cutpoint,確認孩童是否需要進一步轉介。

多面向分析(Gross motor +Fine motor 二面向)

(1) 流程同單面向,但預計施測題數較少