第98页 信度

信度的历史和理论

DeMoivre的抽样误差理论，Pearson积矩相关是基础；斯皮尔曼结合两者，发表了“两事物间联系的证明和测量”一文（1904）。桑代克当时正在撰写《智力和社会测量理论导论》（1904），当然也会关注到此文。

观察分数=真分数+误差

测量的标准误：经典测量理论讲误差的标准差设为基本测量误差，假设是随机分布，这通常被称为测量的标准误。


定义域模型
定义域，全域，总体，三者通常描述的是一回事。


信度模型
误差来源
时间取样：重测法
项目取样：副本法。等置信度、复本信度；分半法、库德-理查逊20、阿尔法系数法、差异分数的信度。

差异分数的信度：信度高达0.9和0.7的两个测验间的差异分数的信度仅为0.33.一位患者在MMPI的剖面图上显示器抑郁症分数高于精神分裂分数，不过，很难得出他抑郁倾向高于精神分裂倾向的结论。
同一群孩子，在学年开始和学年结束时参加测验所得分数的差异，形成一个有意义的解释也不太可能。
Cronbach和Furby（1970）证明了运用差异分数来度量表换存在着很多隐患。


行为观测研究的信度
kappa统计值是评估若干观测者相互一致水平的最好方法。
kappa值范围[-1,1]，
0.75表示具有极好的一致性，0.40-0.75表示普通到良好的一致性，令人满意的；低于0.40则表明差的一致性（Fleiss，1981）
Feinstein和Cicchetti（1990）对低kappa值的计算进行了讨论。
想想现在的很多研究、报道，连数据都没有，就更不用说求数据之间的信度了。

误差来源和信度估算方法的联系

焦点样例4-1：病理学中的评分者一致性
看完之后就知道，即使被诊断为某种癌症，其实也是一个概率事件。
焦点样例4-2：信度操作指南的摘要
美国心理学会、美国教育研究协会、全美教育测量学会（1999）提出的关于信度的20调标准。
1. 应当提供总分、子分数或合成分数各自的信度和测量标准误的估计值。
……


利用信度信息
测量标准误和弹性尺码：Sm=S（1-r）^0.5
怎样的信度是可信的？足够高
为低信度做点什么？增加项目数量、因素与项目分析衰减校正