心理测量学基础知识.ppt

（五）评分者信度评分者信度是指多个评分者给同一批人的答卷进行评分的一致性程度。2人时：相关系数（积差相关）＞.90多人时：肯德尔和谐系数第62页，共112页，星期日，2025年，2月5日（一）解释真分数与实得分数的相关信度系数从0.0-1.0分布，代表了从缺乏信度到完全可信的所有状况。（二）确定信度可以接受的水平p374表5-3（三）解释个人测验分数的意义??真分数的置信区间（95%）=X±1.96SE?（四）不同测验分数的比较?三、信度与测验分数的解释第63页，共112页，星期日，2025年，2月5日四、影响测量信度的主要因素（一）样本特征样本团体同质性越高（个体差异越小），所得相关系数（信度）就越低。样本团体异质性越高（个体差异越大），所得相关系数（信度）就越高。样本团体平均能力水平第64页，共112页，星期日，2025年，2月5日（二）测验长度增加同质性题目，可以提高信度（三）测验难度测验难度：过难或过易都会使个体间得分差异减小，降低信度。第65页，共112页，星期日，2025年，2月5日（四）测验内容?测验内容：试题取样不当，内部一致性低，题意模糊，信度则低。（五）间隔时间间隔时间越短，信度系数越大；间隔时间越长，信度系数越低。第66页，共112页，星期日，2025年，2月5日第四节测验的效度一、效度的概念1、什么是效度？效度（validity）是指一个测验或量表实际能测出其所要测的心理特质的程度。（1）效度是一个相对的概念：每个测量工具都有自己的目的；内隐特质是通过外显行为间接测得的。（2）效度是测量的随机误差和系统误差的综合反映。（3）判断一个测量是否有效要从多方面收集证据第67页，共112页，星期日，2025年，2月5日2、效度与信度的关系（1）信度高是效度高的必要而非充分条件一个测验效度高，其信度也必然高；但一个测验信度高，其效度不一定高。?（2）测验的效度受它的信度制约rXY≤rXX一个测验的信度必然比效度高，至少相等。第68页，共112页，星期日，2025年，2月5日二、效度的估计1、内容效度内容效度（contentvalidity）是指测验题目对有关内容或行为取样的适当程度，即一个测验实际测到的内容与所要测量的内容之间的吻合程度。一个测验要有内容效度必须具备两个条件：（1）要有定义完好的内容范围（2）测验题目应是所界定的内容范围的代表性取样。第69页，共112页，星期日，2025年，2月5日2．内容效度的确定方法（1）逻辑分析法：专家根据自己的知识经验对量表的有效性（逻辑性）作出判断，也称逻辑效度。为使内容效度的判断过程更客观，一般采用下列步骤：①确定测验内容的总体范围；②编制双向细目表；③编制评定量表，从测验内容所测的技能、题目对所定义的范围的覆盖率、各种题目数量和分数的比例以及题目形式的适当性等方面，对测验作出总的评价。第70页，共112页，星期日，2025年，2月5日（2）统计方法a、两个评分者之间评定的一致性b、用两个测验复本来测同一批被试，若相关高，则内容效度可能高，但若相关低，则说明必有一个测验缺乏内容效度。c、再测法?（3）经验推测法通过实践来检验效度第71页，共112页，星期日，2025年，2月5日2、构想效度（结构效度）是指一个测验实际测到所要测量的理论结构或特质的程度，或者说测验分数能够说明心理学理论的某种结构或特质的程度。?特点：（1）具有不同理论构思的测验，其结构效度无法进行比较；（2）结构效度有时很难获得；（Rubin,1979:测量爱情）（3）结构效度没有单一的指标，是由各方面的证据累积起来进行评价的。第72页，共112页，星期日，2025年，2月5日结构效度的确定方法结构效度确立的一般步骤：（1）提出理论框架；（2）依据理论框架推演出有关测验成绩的假设；（3）用逻辑或实证的方法来证明假设。第73页，共112页，星期日，2025年，2月5日具体方法：（1）测验内部寻找证据法分析测验的内容效度：若内容效度高，说明其结构效度也高。分析被试对题目反应的特点：有无社会称许性的题目，如“当事情不顺我意时，我时常动怒。”对该题的回答，也许反映不了要测的性格。计算测验的同质性信度：分半信度、α系数、KR20、KR21第74页