第五章 测量效度

（三）影响效标关联效度的因素
1、效标的选择：效标的适当性； 效标的选择：效标的适当性； 效标测量与预测源测量的时间间隔； 2、效标测量与预测源测量的时间间隔； 预测源与效标测量的信度； 3、预测源与效标测量的信度； 被试样本的特征:样本的大小、 4、被试样本的特征:样本的大小、样本的 代表性。 代表性。 效标关联效度的系数在大小上变化很 大，但一般认为.60以上是高相关。 但一般认为.60以上是高相关。 .60以上是高相关
三、结构效度
（一）结构效度的含义
结构效度（ validity):又称构想效度 又称构想效度, 结构效度（construct validity):又称构想效度, 指一个测验实际能测到所要测量的理论结构的程度， 指一个测验实际能测到所要测量的理论结构的程度， 或者说测验分数能够说明心理学理论的某种结构或特 质的程度。 质的程度。 实际测量的结果 心理学的理论结构或构想 两者关系
测验题目 所要测查的内容范围
两者关系
具备高内容效度的两个基本条件
1、所要测量的内容范围必须定义清楚，界 所要测量的内容范围必须定义清楚， 限分明，重点突出。 限分明，重点突出。 2、测验题目应是所界定的内容范围的代表 性取样。 性取样。
以“教学大纲”为例，它明确规定了教学范围、 教学大纲”为例，它明确规定了教学范围、 教学目标、每一章的知识要点、重点和难点， 教学目标、每一章的知识要点、重点和难点，这些既 是教学的纲要，也是考试命题的参照标准； 是教学的纲要，也是考试命题的参照标准； 参照教学大纲，教师命题时一是不要超纲，二是 参照教学大纲，教师命题时一是不要超纲， 题目的覆盖面要尽可能宽，三是题目要具有典型性、 题目的覆盖面要尽可能宽，三是题目要具有典型性、 代表性，四是题目的难度和区分度应合乎要求。 代表性，四是题目的难度和区分度应合乎要求。这些 都是保证题目取样能够具有较高代表性的条件。 都是保证题目取样能够具有较高代表性的条件。
3、预测效度与同时效度
预测效度(predictive validity)： 预测效度(predictive validity)：效标资料 后于测验资料获得。 后于测验资料获得。预测效度用于预测个体将 来的行为 。如SAT考试与大学GPA，招聘考试 SAT考试与大学GPA， 考试与大学GPA 与实际工作表现，等等。 与实际工作表现，等等。 同时效度(concurrent 同时效度(concurrent validity) ：效标资料 与测验资料同时获得。同时效度用于诊断现状。 与测验资料同时获得。同时效度用于诊断现状。 如学习障碍测验与学校表现。 如学习障碍测验与学校表现。
2、区分法（被试组的差异检验法）
由效标测量区分小组，考察不同小组被试在 由效标测量区分小组， 测验分数上是否有显著差异。 测验分数上是否有显著差异。 以一次招聘中的营销能力测验为例， 以一次招聘中的营销能力测验为例，区分法 的具体程序是：（ ：（1 的具体程序是：（1）一批候选人接受营销能 力测验，然后考察他们的实际营销业绩，根 力测验，然后考察他们的实际营销业绩， 据他们的营销业绩分为优等组和劣等组；（ ；（2 据他们的营销业绩分为优等组和劣等组；（2） 分析优等组和劣等组在营销能力测验的分数 上是否具有显著差异。采用t 上是否具有显著差异。采用t检验 。
阿斯丁把效标分为两个层次： 阿斯丁把效标分为两个层次：一是理论描述水 平的“观念效标” 二是操作定义水平的“ 平的“观念效标”，二是操作定义水平的“效 标测量” 理论定义与操作定义。 标测量”。理论定义与操作定义。 所谓观念效标指衡量一个测验是否有效的外在 标准， 标准，它独立于测验并可以从实践中直接获得 我们所感兴趣的行为变量。 我们所感兴趣的行为变量。 常用的观念效标有：实际工作表现、学业成就、 常用的观念效标有：实际工作表现、学业成就、 临床诊断、行为的等级评定、专门的训练成绩、 临床诊断、行为的等级评定、专门的训练成绩、 对团体的区分能力以及其他现成的有效测验， 对团体的区分能力以及其他现成的有效测验， 等等。 等等。
第五章 测量效度
本章学习目标：
1、理解效度的概念和统计学含义。 、理解效度的概念和统计学含义。 2、掌握信度和效度之间的关系。 、掌握信度和效度之间的关系。 3、掌握三种效度的概念及其估算方法。 、掌握三种效度的概念及其估算方法。 4、了解提高测量效度的途径。 、了解提高测量效度的途径。
第一节 效度的定义
效度检验的实质
实际的测量结果 测量目标
两者关系
二、效度的概念理解
1、效度是一个相对的概念。 效度是一个相对的概念。 效度是相对于一定的测量目的而言的。 效度是相对于一定的测量目的而言的。 效度不是一个全或无的概念。 效度不是一个全或无的概念。 2、效度是随机误差和系统误差的综合反映。 效度是随机误差和系统误差的综合反映。 3、效度不是直接可以测量到的，判断一个测验 效度不是直接可以测量到的， 是否有效要从多方面搜集证据， 是否有效要从多方面搜集证据，从证据去推 犹如法庭上收集证据一样) 论测验的效度 (犹如法庭上收集证据一样) 。
一、内容效度
（一）内容效度的含义
定义： 定义：指一个测验实际测到的内容与所要测量 的内容之间的吻合程度。或者说， 的内容之间的吻合程度。或者说，指测验题目 对所要测量的内容范围的代表性程度。 对所要测量的内容范围的代表性程度。 内容效度的关键问题是测验题目取样的代表性 程度。（覆盖面不够、偏题、超纲） 。（覆盖面不够 程度。（覆盖面不够、偏题、超纲）
第二节 效度的种类与确定方法
弗兰西与米西贝（ Michbel） 弗兰西与米西贝（French & Michbel）1966 提出，并被APA APA《 提出，并被APA《教育与心理测验及诊断技术 标准》所采用的效度分类法： 标准》所采用的效度分类法： 内容效度 实证效度（又称效标关联效度） 实证效度（又称效标关联效度） 结构效度(又称构想效度) 结构效度(又称构想效度) 效度是一个整合的概念， 效度是一个整合的概念，不同类型的效度 只是寻求证据的方式不同，三者有交叉重叠。 只是寻求证据的方式不同，三者有交叉重叠。
求相关系数
对效度系数的说明
效度系数告诉我们的是， 效度系数告诉我们的是，根据测验结果对效 标进行推断时的有效程度。 标进行推断时的有效程度。 没有一个迅速而简洁的规则，可以判断多大 没有一个迅速而简洁的规则， 的效度系数是有意义的。在实际工作中， 的效度系数是有意义的。在实际工作中，很 少会看到效度系数大于0.6的情况， 0.6的情况 少会看到效度系数大于0.6的情况，效度系数 0.3-0.4之间已经被认为是比较高 之间已经被认为是比较高。 在0.3-0.4之间已经被认为是比较高。 例如，假定江苏07年高考预测大学GPA 07年高考预测大学GPA的效度 例如，假定江苏07年高考预测大学GPA的效度 系数为0.4 并且该系数在统计上是显著的， 0.4， 系数为0.4，并且该系数在统计上是显著的， 我们就可以认为高考分数预测大学GPA GPA的信息 我们就可以认为高考分数预测大学GPA的信息 超过了机遇因素。 超过了机遇因素。
（二）效标关联效度的确定方法
1、相关法：计算测验分数与效标测量之间的相关系数， 相关法：计算测验分数与效标测量之间的相关系数， 称为效度系数。 称为效度系数。 根据数据特点选择积差相关、等级相关、 根据数据特点选择积差相关、等级相关、二列相关 、四分相关等计算方法。 四分相关等计算方法。
选择团体 心理测验 处理 效标测量
3、命中率（决策正确性）
预测源 成功 成功 失败 合计 效标作为 失败 合计
错误接收） A（正确接收） B（错误接收） A+B 正确接收） 正确拒绝） C（错误拒绝） D（正确拒绝） C+D 错误拒绝） A+C B+D A+B+C+D
总命中率=命中人数÷总人数 总命中率=命中人数÷ =（A+D）÷（A+B+C+D） A+D） A+B+C+D） 正命中率=命中人数÷ 正命中率=命中人数÷ 选择人数 =A ÷（A+B） A+B） 总命中率关心录取者中合格的人数与淘汰者 中不合格的人数的比率。 中不合格的人数的比率。 正命中率只关心录取者中有多少合格的人， 正命中率只关心录取者中有多少合格的人， 不关心淘汰者是否有合格的人。 不关心淘汰者是否有合格的人。
效标测量必须满足以下要求：
1、关联性:效标测量必须真正反映观念效标的 关联性: 重要方面，与观念效标具有密切的关联性； 重要方面，与观念效标具有密切的关联性； 2、可靠性：效标测量必须是稳定的； 可靠性：效标测量必须是稳定的； 3、抗偏性：效标测量必须对每个受测者是客观 抗偏性： 的、公平的； 公平的； 4、可行性：即省时、省力、省钱，易于获得。 可行性：即省时、省力、省钱，易于获得。
一、效度的含义
所谓的测量效度是指测量结果的有效性、 所谓的测量效度是指测量结果的有效性、准 确性程度， 确性程度，也就是一个测验实际能测出其所 要测量的心理特质的程度。 要测量的心理特质的程度。 效度关注两个基本问题：其一， 效度关注两个基本问题：其一，心理测验所 测查的“心理特质”是什么（测验目的）； 测查的“心理特质”是什么（测验目的）； 其二， 其二，该测验对欲测量的心理特质测查到了 什么程度？测量的准确性和有效性如何? 什么程度？测量的准确性和有效性如何?
2、测验的效度受它的信度的制约。研究发现， 测验的效度受它的信度的制约。研究发现， 效度和信度具有如下关系： 效度和信度具有如下关系：
r
2 xy
≤ r
即
xx
r ≤
xy
r
xx
用语言表达就是：效度系数的最大值受信度系 用语言表达就是： 数的制约， 数的制约， 效度系数永远不可能大于信度系 数的平方根。 数的平方根。
结构效度的特点
结构效度取决于事先假定的心理学理论。 结构效度取决于事先假定的心理学理论。 结构效度没有单一指标，确定方法更复杂、 结构效度没有单一指标，确定方法更复杂、更 综合，需要由各方面证据累积起来作出评价。 综合，需要由各方面证据累积起来作出评价。 内容效度和效标关联效度都可以作为结构效度 的证据之一。 的证据之一。