十人员素质测评授课助学班.pptVIP

（三）效标关联效度 也称效标效度（criterion validity），它反映的是测验分数与外在标准的相关程度，即测验分数对个体的效标行为表现进行预测的有效性程度。 第三十一页，共51页 效标测量的注意事项： 1、效标要在理论上体现测验有效性的主要方面，即跟所研究的问题有实质性的相关 2、效标测量必须是客观的，要避免偏见的影响 3、在收集效标资料时，必须注意防止所抽取的代表性样本中个体的流失 4、效标测量必须稳定可靠，即有高的信度 第三十二页，共51页 效标污染（criterion contamination），即由于评定者知道测验分数而影响个人的效标成绩的情形。 第三十三页，共51页 （四）表面效度 表面效度是指受测者、测验结果的使用者及一般大众对于某测验的试题和形式等所作的主观判断，判断该测验能否达到其所宣称的目的。 第三十四页，共51页 表面效度的改进方法： 1、依据特定的测验目的，修改测验名称、重新安排试题的用词用字，使它显得更切题、更合理 2、改进版面设计、印刷、装订、纸质，使得整个测验看上去是经过精心设计的，进而赢得使用者的重视 第三十五页，共51页 三、影响测验效度的因素 （一）就内容效度而言：1、缺乏学科专家或资深教师参与拟题 2、双向细目表设计不良 3、预试的题数不多且品质不良，经试题分析淘汰部分试题后难以达到双向细目表上的要求 第三十六页，共51页 第一页，共51页 第一节 信度分析 一、信度的概念 信度就是指测评结果反映所测素质的一致性，也就是说测评结果的稳定性、可靠性程度，即在相似情境下，用同一测评工具对相同个体重复施测，所得结果的一致性程度。 第二页，共51页 1、信度测量的理论定义 （1） 传统的信度理论认为：一个人的测验分数X是由真实分数（T）和误差（E）两部分构成的，公式是X = T + E。 （2） 因此信度就被定义为：一组测量分数的真实方差与实得方差的比，或者是指真实方差占总方差的百分比。公式为：rxx= 第三页，共51页 （3） 根据统计学理论，真实方差与实得方差的比是一个相关系数的平方，所以我们把这种相关系数的平方叫做信度系数。 （4）计算公式为：rxx= 第四页，共51页 该定义有两点要注意：（1）信度指的是一组测验分数或一列测量的特性，而不是个人分数的特性。（2）真分数的变异数是不能直接测量的，因此信度是一个理论上构想的概念，只能根据一组实得分数作出估计。 信度设计所解决的主要问题是对测验分数的意义的概化能力，即从一次测量来推论总体（真实分数）能达到何种正确程度。 第五页，共51页 2、信度系数r 大部分的信度指标都是用相关系数来表示，即用同一被试样本所得的两组资料的相关作为测量一致性的指标，称做信度系数。 确定测验好坏的一个指标。一般的原则是： 当rxx 0.70时，测验不能用于对个人作出评价或预测，而且不能做团体间比较。 当0.70≤rxx0.85时，可用于团体比较。 当rxx ≥0.85时，才可以用来鉴别或预测个人成绩或作用。 第六页，共51页 信度的范围：0.00——1.00 几种心理测验的信度系数 信度 测验类型 低 中 高 成套成就测验 0.66 0.92 0.98 学术能力测验 0.56 0.90 0.97 成套倾向性测验 0.26 0.88 0.96 客观人格测验 0.46 0.85 0.97 兴趣问卷 0.42 0.84 0.93 态度量表 0.47 0.79 0.98 第七页，共51页 信度系数需要注意： （1）在不同情况下，对不同样本，采用不同方法会得到不同的信度系数，因此一个测验可能会不止有一个信度系数 （2）信度系数只是对测量分数不一致性程度的估计，并没有指出不一致的原因 （3）获得较高的信度系数并不是测量追求的最终目的，它只是迈向目标的一个步骤，是使测验有效的一个必要条件 第八页，共51页 二、信度的类型和估计方法 （一）重测信度 重测信度又称为稳定性系数，它的计量方法是采用重测法：用同一测验，在不同时间对同一群体施测两次，这两次测验分数的相关系数即为重测系数。 第九页，共51页 重测信度的计算方法是积差相关法，因而rxx就是皮尔逊的积差相关系数。 r=N∑xy-∑x∑y/ 重测信度的优点是：首测和再测中使用同一套测评试题，较之编制两套等值测评题目要省时