心理测量学知识——3信度.pptVIP

第三节 测验的信度 一、信度的概念 二、信度评估的方法 三、信度与测验分数的解释 四、影响信度的因素 方差 样本中各数据与样本平均数的差的平方和的平均数叫做样本方差；样本方差的算术平方根叫做样本标准差。样本方差和样本标准差都是衡量一个样本波动大小的量，样本方差或样本标准差越大，样本数据的波动就越大。 一、信度的概念 （一）信度的定义 信度是指同一被试者在不同时间内用同一测验（或用另一套相等的测验）重复测量，所得结果的一致程度。信度只受随机误差的影响。 在测量理论中，信度被定义为一组测量分数的真分数方差与总方差的比率。 公式： 一、信度的概念 （二）信度的指标 1.信度系数与信度指数——信度指数的平方就是信度系数 公式 2.测量标准误 测量的标准误与信度之间有互为消长的关系：信度越高，标准误越小；否则相反。 公式 二、信度评估的方法 不同的信度反应测验误差的不同来源，故每一种信度系数只能说明信度的不同方面，因而具有不同的意义。 （一）重测信度 （二）复本信度 （三）内部一致性信度 （四）评分者信度 二、信度评估的方法 （一）重测信度——稳定性系数 计算方法是采用重测法，即使用同一测验，在同样条件下对同一组被试者前后施测两次测验，求两次得分间的相关系数。 最适宜的时距随测验的目的、性质和被试特点而异，一般是两周到四周较宜，间隔时间最好不超过六个月。 二、信度评估的方法 （二）复本信度——等值性系数 复本信度反映的是测验在内容上的等值性。 如果复本信度考虑到两个复本实施的时间间隔，并且两个复本的施测相隔一段时间，则称重测复本信度、稳定与等值系数。 复本信度的缺点： 如果测量的行为易受练习的影响，则复本信度只能减少而不能完全消除这种影响。 由于第二个测验只改变了题目的内容，已经掌握的解题原则可以很容易地迁移到同类问题。 对于许多测验来说，建立复本是十分困难的。 二、信度评估的方法 （三）内部一致性信度 反映题目之间的关系，表示测验能够测量相同内容或特质的程度。 1.分半信度 这个相关系数就代表了两半测验内容取样的一致程度。 公式 为一半分数的相关系数，为测验在原长度时的信度估计值。 二、信度评估的方法 （三）内部一致性信度 2.同质性信度 主要代表测验内部所有题目间的一致性。 当各个测题的得分有较高的正相关时，不论题目的内容和形式如何，则测验为同质的。相反，即使所有题目看起来好像测量同一特质，但相关很低或为负相关时，则测验为异质的。 二、信度评估的方法 （四）评分者信度 一般要求在成对的受过训练的评分者之间平均一致性达0.90以上，才认为评分是客观的。 三、信度与测验分数的解释 （一）解释真实分数与实得分数的相关 信度系数可以解释为总的方差中有多少比例是由真实分数的方差决定的，也就是测验的总变异中真分数造成的变异占百分之几。 rxx为信度系数。在极端情况下， 如rxx＝1.000，表示完全没有测量误差，所有的变异均来自真实分数；若 rxx ＝0，则所有的变异和差别都反映的是测量误差。 三、信度与测验分数的解释 （二）确定信度可以接受的水平 一般原则 rxx＜0.70，测验不能用于对个人做出评价或预测，而且不能做团体比较。 0.70≤rxx ＜0.85，可用于团体比较。 rxx≥0.85，才能用来鉴别或预测个人成绩或作为。 三、信度与测验分数的解释 （三）解释个人分数的意义 作用：①估计真实分数的范围 ②了解实得分数再测时可能的变化情形。 人们一般采用95％的或然水平，其置信区间为： X－1.96SE＜XT≤X＋1.96SE （四）比较不同测验分数的差异 四、影响信度的因素 （一）样本特征 （二）测验长度 （三）测验难度 （四）时间间隔 四、影响信度的因素 （一）样本特征 1.样本团体异质性的影响 一般而言，若获得信度的取样团体较为异质的话，往往会高估测验的信度，相反则会低估测验的信度。 2.样本团体水平能力水平的影响 对于不同水平的团体，题目具有不同的难度，每个题目在难度上的微小差异累计起来便会影响信度。 四、影响信度的因素 （二）测验长度 一般来说，在一个测验中增加同质的题目，可以使信度提高。 1.测验越长，测验的测题取样或内容取样就越有代表性； 2.测验越长，被试者受猜测因素的影响就越小； 3.测验越长，有时反而会引起被试者的疲劳和反感而降低可靠性。 斯皮尔曼－布朗公式 四、影响信度的因素 （三）测验难度 洛德提出在学绩测验中，为了保证其可靠性，各类选择题的理想平均难度为： 五择一——0.70 四择一——0.74 三择一——0.77 是非题——0.85 （四）时间间隔 以再测法或复本法求信度，两次测验相隔时间越短，其信度系数越大。 历年考题 78.（ ）是