第四章 教育测量的质量指标1(信度).pptVIP

第三章　教育测量与评价的质量特性;主要内容;第一节　信度;一、信度的意义;一、信度的意义;一、信度的统计定义;1、试比较以下两次测量结果（只进行一次）的信度： 用尺子量100cm高的一个儿童，得到1cm的绝对误差；量185cm高的一位运动员，也得得到1cm的绝对误差。 要比较两种测量结果的信度，一定要看误差分数（E）对于真分数（T）所占的百分数是多少。 　　相对误差＝E/T×100%　　公式（1-3 最大绝对误差＝E/x ×100%　 公式（1-4） ; 相对误差（甲）＝1/100×100%＝1% 　　　相对误差（乙）＝1/185×100%＝0.54% 据此，度量乙的信度要比度量甲的信度高。 ;怎样估计对一组人或一个人测量多次的实测值与真值（真分数）的差异程度呢？;根据公式（1-4）可以给出信度的统计定义：;例：对5个人的某种智力因素的测验结果如表1-1，试估计测量的信度。;　　 学生　　　真分数　误差分数　　　实得分数 　A　　　　18　　　－2　　　　　16 　B　　　　9　　　 ＋1　　　　　10 　C　　　　15　　　＋2　　　　　17　　　 　D　　　　21　　　＋1　　　　　22　　　　 　E　　　　12　　　－2　　　　　10　　　　 平均数　　 15　　　　0　　　 　 15　　　 方差　　　18　　　2.8　　　　　20.8　;;第二，信度是一个被试团体的真分数与观察分数的相关系数的平方。;三、信度系数的类型与估计方法;（一）稳定性系数（ coefficient of stability ）;（一）稳定性系数;（一）稳定性系数;　　　　; ;采用重测法计算稳定系数时，要注意的问题：;（二）等值性系数（ coefficient of equivalence ）;（二）等值性系数（ coefficient of equivalence ）;（二）等值性系数（ coefficient of equivalence ）;（二）等值性系数（ coefficient of equivalence ）;（三）内部一致性系数（internal constancy）;问题：为什么不直接用奇数题总分与偶数题的部分计算出的相关系数作为整个测验的信度系数而要加以校正？;例：有一个由100题构成的量表施行于10个高三学生（分数见下表）。测验一次后，应试者即毕业离校。现在怎样评价测验结果的信度？;　　得分 被试　　;解：把有关统计量代入公式（1-10），求相关系数;2、库德尔－理查森公式法　　（Kuder Richardson reliability）;例：有一种包含6个问题的测验，10个应试者得分如下表（答对得1分，答错得0分），试估计应试者反应的一致性程度。;　　题 得　　　目 被试　　分;解： 1）列出得分矩阵，计算有关统计量：　;（2） rKR21的用法：;（四）论文式测验的信度系数;被 题 号　 试;解：1）求每题各应试者得分的方差Si2(见表列) 　　　2）求每题各应试者得分的方差之和ΣSi2 　　　　ΣSi2＝3.04＋1.36＋……＋3.04＝18.65 　　3）求所有应试者各自的总分的方差ΣST2（表格最下一行各数据的方差） 　　　　　　ST2＝68.96 　　4）代入公式（1-14）得信度系数　　　;（五）评分者信度;例：甲乙两位教师评阅10份试卷，他们对每份试卷各自所评的分数和等级列入下表，问这二位教师评分的一致性如何？;解：1）计算所需统计量：D和 D2（见表） ；N＝10； 　ΣD2＝0＋0.25＋1＋12.25＋……＋1＋0＝26 　2）将统计量N和ΣD2代入公式（1-15）;2、肯德尔和谐系数（W）;选手 N＝7　;分析： 从W=0.827来看，10人的评价较为一致。严格地讲，W值是否达到显著性水平，需要做统计假设检验。 当K等于3∽20，N等于3∽7时，可根据K和N查“W显著性检验时S的临界值表”进行检验。(???王汉澜教授主编的测量学教材P52页);在进行等级评定时，常会遇到两个或两个以上事物的等级相同，如果遇到这种情况，应采用下面的修正公式：;例：三位教师评阅四份试卷，所评等级列入下表，他们所评的等级是否一致？;;四、提高测验信度的方法;（三）提高测验信度的方法;2、测验的难度要适中。 当测验难度太大时，应试者得分普遍偏低，形成正偏态分布；反之，形成负偏态分布。在这两种分布中，得分大部分集中在低分端或高分端，分数分布的范围和分数之间的差异都较小，用这些实得分数计算出的方差也较小，从而使得信度降低。 经验表明：难度在0.40-0.70之间是合适的，也有人认为难度从0.25-0.75都利于提高测验信度。 3、测验的内容应尽是同质。 4、测验的时间要充分。 5、