第二十章 信度与效度分析-2.ppt

测量手段的信度和效度评价 ; 在科学研究中采用的主要方法有调查研究(survey)和实验研究(experimental study)。 尤其是调查研究被广泛用于公共卫生、临床医学、社会学、教育学等领域。 调查研究的重要内容之一就是制定调查表或问卷。 ; 问卷以及调查质量反映在调查结果的真实性和可靠性两个方面，应采用一定的统计指标和方法加以定量考评。 本章主要介绍信度(reliability)和效度(validity)分析方法，特别适合于各项目均为线性方式或等级方式的问卷或量表，如心理测量、教育测量、态度测量、生命质量测量等的标准化测定量表。 ;第一节 效度和信度的概念;一、 效度; 效度即测量工具(如量表)的有效性和正确性， 亦即准确度(accuracy)。意指量表测定了它打算(所要)测定的特质或功能(而不是其它特质或功能)以及测定的程度。 它包含两层意思：(1) 测量了什么； (2) 测的程度。 比如量表是否测量了生命质量，躯体功能分量表是否测量了躯体功能，其程度怎样。 ; 效度具有特殊性和相对性，即每个测量工具只对某特殊目的有效，仅能对其特定项目作正确的度量。 或者说测验的效度总是针对着要解决的问题来说的，亦即针对着打算作出的应用来建立的。 ; 收集大量资料和证据来检验测验效度的过程称为效度验证(validation)。 严格地说，任何测验在正式实施以前都应做出效度验证。 ; 由于“真实值”往往未知，所以对效度的评价常常不可能有绝对肯定的答案。尽管我们不可能证明效度，但是可以用指标来评价效度。 一般来说，有四种类型的效度：标准效度、内容效度、结构效度和区分效度。内容效度是一种基于概念的评价指标，其它三种是基于经验的评价指标。;(一) 标准效度;(二) 内容效度; 例如，对比生存质量的定义和用于测量的量表，可以得出该量表内容效度的好坏。 缺乏内容效度的测量会歪曲对所关心概念的理解，就像利用不具有代表性的样本对总体进行推断会得到错误结论一样。;(三) 结构效度;(四) 区分效度;二、信度; 信度(reliability)又称可靠性、重复性、稳定性或精密度，用以反映相同???件下重复测定结果的一致程度。 信度主要受随机因素的影响，测量结果发生的偏差往往不具有方向性。 ;;(一) 重复测量法;(二) 分半信度法; 整个量表的信度系数 R 可以利用如下的斯皮尔曼—布朗公式求得： ; 采用分半信度法测量信度的优点在于： 分半信度法只在一个时间点上进行；不受记忆效应的影响； 在重复测量法中容易出现的误差项之间的相关在分半信度法中不易出现； 从实用的角度看，分半信度法比较经济和简便。; (三) Cronbach’s ?系数法;; 分半信度法和?系数实际上都是反映量表内部的一致性(internal consistency)。 前者指的是两半量表所测分数间的一致性，后者指的是量表中条目与条目间的一致性，这是一种同质性的测量。 ;三、反应度; 反应度(responsibility to change)又称敏感度, 指内外环境变化时，若被测对象有所变化，则测量结果应该敏感地显示出反应。 通常总是利用现有知识估计不同条件下被测对象应当具有的变化，然后考察相应的测量结果，看是否确有差异。 例如，通过治疗,病人的疼痛发生了缓解，疼痛测量量表的评分应该发生相应的变化。 ;通常从以下两方面来考察测量手段的反应度：;第二节 效度的评价方法;一、定量观察的标准效度;三、半定量观察的标准效度;表20.2 200张某病 X线片的诊断结果;;第三节 信度的评价方法; 例20.2 在某大型的流行病学现场调查中，需要测量调查对象腹部皮肤皱折的厚度以评价其是否肥胖。在正式调查前对调查员进行培训，以保证调查结果真实可信。在培训结束后，安排10名调查员重复测定5名成年女性的腹部皮肤皱折厚度，结果见表20.3。那么测量结果的信度如何呢？;表20.3 10名调查员重复测量腹部皮肤皱折的厚度(mm)的结果; 在本资料中存在3项误差来源，即调查员间的差异、调查对象间的差异以及随机误差。;表20.4 10名调查员重复测量腹部皮肤皱折的厚度(mm)的方差分析表;; 在相同条件下，对同一观察对象重复测定结果的均值可靠性高于一次测量的结果。 因此，当信度未达