2014.10.13 心理測驗(八) 項目分析

Review

二分變項	連續變項
描述統計	平均(P, 理想0.5) 變異(Pq) 偏態 峰度	平均(X-bar) 變異(Si) 偏態 峰度
困難度	(1)   Pi (2)   Pi = (Pl+Ph)/2	平均(X-bar)
區辨度	Di = Ph-Pl (>0.4) 相關法	t test(高分vs低分, ES*) 相關法

note：若測量包含多個向度，則應以個別向度進行分析(如Cronbach's alpha)

「若每個題目的信、效度都好，整體測驗的信、效度也不會太差」

item reliability index

item validity index

total test score variance

「應用各題目的信、效度指標選題」

設定最低的信度水平，由高項目信度的題目開始挑起

-------------------------------------------------------------------------------------------------------------

預試

Field testing

• sample size：希望至少200人，或者題目數量的5~10倍
  (note：最低限度為題目數量+1，但品質無法講究)

Item selection

• Phi & point biserial correlation：相關數值應大於2倍的1/根號(n-1)

Table of proportions wrtcriterion

• 應用於選擇題
• 將所有人分為三等份(高分組、中等組、低分組)
• 分別看不同組別之個選項的分配百分率
• 期望看到正確選項是高分組答對率最高，依序
• 分別計算每個題目的
• 題目難度
• 鑑別度
• 與總分之相關

因素分析(factor analysis)：可幫助我們篩選題目

• 概念
• 在假設有測量誤差的情況下，用少數的因素(factor)來解釋變項間的相關
• 量表發展的運用：題目發展、效度驗證
• 因素效度：看項目檢驗的結果是否與原始設計相符(如原本預設將QoL分為生理、心理與社會三個面向，並且驗證結果洽有三個因素，主觀判斷也命名為符合原始設計的生理、心理、社會。此驗證代表其具有驗證效度
• 題目篩減：一個題目僅能屬於一個因素
  note：若一個題目與二個以上的因素具有高相關，或者與任何一個因素均為低相關，則需審視篩選之
• 因素原型矩陣(factor pattern matrix) (例：4個變項、2個因素)
• 為眾多分析中的其中一個報表
  

  	F1	F2
  X1	Y11	Y12
  X2	Y21	Y22
  X3	Y31	Y32
  X4	Y41	Y42

  note：其中的Y代表項目與因素間的關係，數值越大代表相關性越高
  note2：X1=Y11*F1+Y12*F2+E
• EFA model：
• x=Y1F1+Y2F2+Y3F3+....+E
• 假設
• X1和X2的相關估計(r12^)：可由上述的Y,F和E描述之
• 此估計相關與實際相關的差，稱為殘差(residual)
• root mean square(RMS)為殘差的根號函數，此數值小代表殘差小，使結果可接受
  note：藉由EFA發現某些項目與特定的因素相關，則藉由主觀分析項目的內容之特質，進而命名該因素(然而主觀)
  note2：通常以.3~.4為可接受之標準
• 項目特質曲線(item-characteristic curves, ICC)
• 縱軸為通過率，橫軸為總分(能力高低)
• 以圖形方式呈現作答通過率與能力之關係
• 其曲線之斜率代表區辨度
• 其通過機率為0.5的點對應到的x值代表題目難度
•