第四篇 实施篇-质量控制幻灯片.pptVIP

人才测评 曲阜师范大学经济学院 2009-1010学年第2学期 第四篇 实施篇 第十二章 人才测评的质量控制 第十二章 人才测评的质量控制 第一节 信度(Reliability) 第二节 效度(Validity) 第三节 信度和效度的关系 第四节 项目分析 第十二章 人才测评的质量控制 第一节 信度(Reliability): 1、概念 2、类型 3、信度系数 4、提高信度的方法 第一节 信度 1、概念： 信度（Reliability，可靠性） ，又称可信度是指测验结果（分数）的一致性/可靠性、稳定性，即测验结果是否反映了被测者的一贯的、稳定的真实特征。——“稳不稳定”？ 一致性：使用关于同一项目的各种测量工具测量同一对象得到的各测量结果间显示出强烈的正相关，这表明测量结果具有很高的一致性。 (consistency) 稳定性：用同一测量工具（在不同时空下）反复测评同一对象，多次测量结果差异很小，这就表明测评结果具有很高的稳定性。 (stability) 测验结果跨时间的一致性；不同评分者之间的一致性；测验内容的一致性——同一测验内的各部分题目所测的是同一种行为或行为特征； 第一节 信度 笔记本电脑消费倾向调查问卷：如果设计的不同问卷对同一群体的调查结果或者同样的问卷短期内对同一群体进行多次调查的结果, 如消费者的品牌倾向、所能接受的价位等存在高度相似,则认为调查问卷具有较高的可信度 2斤大饼的测量： 如果使用不同的秤进行测量，各测量结果基本一致——一致性高 如果使用同一杆秤进行多次测量，各次结果差异不大——稳定性高 总而言之，如果称量结果等于或非常接近2斤，那么就表明信度非常高，如果测出来的是一斤半或者是两厘米，那就说明信度有问题 第一节 信度 2、分类： 内在信度和外在信度 内在信度指的是每个测量工具量表是否测量同一概念，也就是组成量表的题项之间的内在一致性如何。内在效度的最常用的检验方法是克朗巴哈α系数。 外在信度指在不同时间进行测量时量表结果的一致性程度。外在信度最常用的检验方法是再测信度（也称重测效度），即用同一量表在不同时间对同一对象进行重复测量，然后计算其一致性程度。 第一节 信度 3、信度系数 信度指标是对信度的一种定量化的描述方式，信度指标的量化值称为信度系数，即反映信度大小的统计量。 第一节 信度 3、信度系数 总变异/方差的分解：测量值的方差等于真实值的方差与随机误差的方差之和 第一节 信度 信度系数分类 （1）再测信度（重测信度）：又称为稳定性系数。即指测评结果与以同样的测评工具（量表）、测评方式与测评对象再次测评的结果间的差异程度。其计算方法之一就是对两次测量结果求皮尔逊相关系数。 再测信度的前提假设是每个应试者对前一次测验的遗忘程度相同，而且在重测间隔间没有学过与测验有关的其他材料，或者说每人所学习的程度相同。（强调跨时间的一致性） （2）复本信度 是以两个测验复本（功能等值但题目内容不同）来测量同一群体，然后求得应试者在这两个测验上得分的相关系数（等值性系数，斯皮尔曼相关系数） 。其优点表现在：能够避免重测信度的一些问题，如记忆效果、练习效应等；减少了辅导和作弊的可能性。（强调跨形式的一致性） 第一节 信度 （3）内部一致性信度 是指测量同一素质的各测评项目分数间的一致性程度。内部一致性信度主要反映的是测验内部题目之间的关系，考察测验的各个题目是否测量了相同的内容或特质。 对一致性信度的常见分析方法有两种：拆/折/分半信度（split-half）系数和克朗巴哈α系数（指量表所有可能的项目划分方法的得到的折半信度系数的平均值）分析。 拆半信度系数的基本思路是将量表一分为二后分别计算两部分的相关系数r ，再把相关系数r代入如下校正公式： 第一节 信度 （3）内部一致性信度 克朗巴哈α系数（指量表所有可能的项目划分方法的得到的折半信度系数的平均值）： （4）评分者信度 评分者信度是指不同评分者对同样对象进行评定时的一致性。揭示的是测评结果中个体的主观误差。它主要用于分析通过面试与观察评定等主观性的测评方法获得的结果的可靠性分析。如投射测验、创造力测验、无领导小组讨论、管理者情景模拟测验等。 评分者信度分析一般采用肯德尔和谐系数公式计算出信度系数。 第一节 信度 评分者信度与测评方法对测评结果的影响： 高信度的测评者用高信度的测评方法获得高信度的测评结果； 高信度的测评者用低信度的测评方法难以获得高信度的测评结果； 低信度的测评者用高信度的测评方法难以获得高信度的测评结果； 低信度的测评者用低信度的测评方法获得的测评结果必然不可靠。 第