請益:練習效應相關問題

http://psychometricsindices.blogspot.com/2011/10/blog-post_4369.html
問題請見意見回覆處，謝謝!

請益項目反應理論之內容

http://psychometricsindices.blogspot.com/2011/12/item-response-theory.html?showComment=1329533362203#c1716351791708300621
問題請見以上部落格(2/17)之回覆。

請益：內在反應性之相關問題

http://psychometricsindices.blogspot.com/2011/10/blog-post_18.html?showComment=1328626426040#c7721017827440768895

註、最近一週，我的部落格（或帳號）好像怪怪的，有時候看到別/自己的新留言的時間會比張貼時間晚2-3天。
因為找不到自己上次的意見，重新張貼意見之後，上次的意見才出現。
煩請回覆第二次的提問即可，謝謝。

請益 test-retest reliability 及 intra-rater reliability 部落格之內容

問題: 請問test-retest reliability and intra-rater reliability 兩者之異同，謝謝。

請益Guttman scale部落格之內容

問題: 是否可提出Guttman scale和item response theory的關聯，謝謝。

可信改變指數(Reliable Change Index)

Reliable Change Index (RCI) determines if the pretest to posttest change score exceeds that which would be expected on the basis of measurement error.
可信改變指數能決定前後測分數差是否超過測量誤差。

Reference:Christensen, L. & Mendoza, J.L. (1986). A method of assessing change in a single subject: An alteration of the RC index. Behavior Therapy, 17, 305–308.

判斷標準:RCI>1.96代表有95％的信心水準，個案的分數變化在統計上已達顯著意義。

研究設計:對同一個案做兩次施測，以RCI值[前後測分數差除以sqrt(2倍SEM)]是否有超過1.96，來判定分數是否達統計上顯著差異。

Model paper:
Schatz P. Long-term test-retest reliability of baseline cognitive assessments using ImPACT. The American journal of sports medicine 2010;38:47-53.

臨床意義:可用來解釋單一個案的分數改變量是否達統計上顯著之意義(真實的改變)。

Note:
最原始的文獻為:

Jacobson, N. S. , Follette, W C., Revenstorf, D. , Baucom, D. H., Hahl-weg, K., & Margolin, G. (1984). Variability in outcome and clinicalsignificance of behavioral marital therapy: A reanalysis of outcomedata. Journal of Consulting and Clinical Psychology, 52, 497-504.

一開始的RCI公式為：前後測分數差除以SEM(評估標準誤)，後來才改為目前這個常用的公式。

同義詞: minimal detectable change (MDC), smallest real difference (SRD)

差異效度

Differential validity refers to finding where the computed validity coefficients are significantly different for different groups of examinees.

中文解釋：差異效度意指不同組之受測者，其效度係數有顯著的差異。

Reference: Young, J. W., & Kobrin, J. L. (2001). Differential validity, differential prediction, and college admission testing: a comprehensive review and analysis. College Board Research Report, No. 2001-6.

判斷標準：比較不同組受測者在欲驗證工具之分數與效標工具分數的相關係數，是否有達到顯著差異 (使用Fisher's z transformations)。

臨床意義：比較評估工具在不同性別、種族等族群，是否有統計上顯著的差異。達到顯著差異，代表此工具對不同族群有不同的預測程度。例如：驗證一個認知評估工具在不同性別中，預測ADL功能是否有所差別。

Model paper: Mattern, K. D., Patterson, B. F., Shaw, E. J., Kobrin, J. L., & Barbuti, S. M. (2008). Differential validity and prediction of the SAT. College Board Research Report, No. 2008-4.

研究設計：先用欲驗證的工具測量不同族群之受測者，間隔一段時間後，再使用效標工具測量已接受第一次測量之受測者，以此驗證差異效度。