第六章 效度理论

合集下载

第六章效度

第六章效度

(3)考察测验的准则关联效度(实证效度)法 根据效标把被试分组,考察其得分差异。 根据测验得分差异把被试分组,考察其所测特 质(行为表现)的差异。
(4)实验操作法 控制某些实验条件,观察其对测验分数的影 响。 如:平时的焦虑测验分数-重大考试前焦虑 测验分数
(5)发展水平的变化 根据理论,预测:随着年龄的增长,所测心理 品质会发生什么变化。
5 建立效度方法的概化 用不同方法得到的效度指标是否一致? 不同的效度之间是否有矛盾?
二、交叉效度分析 交叉效度分析是考察效度概化能力的一种方法, 只涉及被试样本的概化。 方法:对两个独立取自同一总体的样本分别建 立预测源-效标关系,看从一个样本中得到的 效度资料是否适用于另一样本。
三 、提高测量效度的方法
1、影响测量效度的因素 A.测验的构成 项目的质量 项目数量 测验长度与效度的关系:
n测验增长倍数
B.测验的实施过程 C.被试 身心特点: 样本特点: 常模团体的同质性影响到对被试测验得分的解 释,进而影响到测验的效度。
D.效标 测量行为与所选效标的相似性越高,效度越高。 测验分数与效标行为之间是否是线性关系,如 果不是线性关系,求皮尔逊相关就会低估效度。 效标本身的测量越可靠,效度就可能越高。
2、结构效度的确定方法(★)
结构效度确立的一般步骤: (1)提出理论框架; (2)依据理论框架推演出有关测验成绩的假设; (3)用逻辑或实证的方法来证明假设。

(1)测验内部寻找证据法 A. 分析测验的内容效度:若内容效度高, 说明其结构效度也高。 B. 分析被试对题目反应的特点:有无社会 称许性的题目,如“当事情不顺我意时, 我时常动怒。” C. 计算测验的同质性信度:单一特质或?

心理学测量笔记连载第六章:效度

心理学测量笔记连载第六章:效度

心理学测量笔记连载第六章:效度1、效度测验能测量到所要测量的对象的程度。

这一定义包含着两层含义:测验测量什么?测验对测量目标的测量精确度和真实性是多少?2、效度的公式rxy = SV2/SX2它是与测量目标有关的真实分数方差与总方差的比率。

其中rxy是常用的效度表示法;SV2是“有关的真实方差”,也就是由测验所要测量的心理变量引起的方差,也叫有效方差;SX2是总方差。

3、信度和效度的差别两者所涉及的误差不同:信度仅考虑偶然的随机误差占测验总变异的比例,效度则还包括与测验无关的但稳定的测量误差。

(1)信度是效度的必要而非充分条件。

(2)效度是受信度制约的。

4、效度的性质效度的真实含义是指测验结果的效度,也就是测验结果的准确程度。

(1)效度具有相对性。

(2)效度具有连续性。

测验的有效性只有程度上的差别。

(3)效度也不是直接就可以测量到的,它是从已有的证据推理而来的。

5、效度的种类内容效度、构思效度和效标关联效度。

6、效标关联效度测验总分数与外在标20、准(效标)之间的相关程度,反映的是用测验预测个体在某种情境下行为的表现如何的有效性程度。

由于外在标准成了考察测验有效性的参照标准,因此简称为效标。

7、阿斯丁把效标分为两个层次一是理论描述水平的“观念效标”,二是操作定义水平的“效标测量”。

(1)观念效标是效标的理论定义,效标测量是效标的操作定义,效标测量必须能真正反映观念效标。

(2)效标测量的一个重要特征是客观性。

为此因做到:1 避免偏见影响效标测量,特别是以等级评定为效标4 测量时,评分者的主观偏见会有很大影响。

2 防止效标污染,即指个人的效标因评定者知道个体的测验分数(也叫预测源分数)而受到影响。

8、常用的效标学业成就、临床诊断、实际工作表现、特殊训练成绩、效标团体比较、先前有效的测验、等级评定。

9、同时效度它的效标资料是和测验分数差不多同时搜集的。

一般情况下,它可以代替预测效度。

10、预测效度的效标是经过一段时间以后才获得的,预测效度反映的是从测验分数预测任何效标情境或一段时间后被试的行为表现的程度。

效度

效度


效度是针对某个特定的测验目的的
比如,NEO是测量正常人格的,对某些特殊的人格障碍的鉴 定不一定有效。

测量的效度只有程度上的差异
有效性程度。不是“全”或“无” 的,而是“很有效的”或 “不太有效的”。
1、什么是效度:信度与效度的对比

信度的理论公式 SX=ST +SE r信= ST / SX= (SV + SI ) / SX 即信度是一组测验分数真变异与总变异(实测变异)的比值。 效度的理论公式 SX= SV + SI +SE R效= SV / SX 即效度是与测验目的有关的变异(有效变异)与总变异(实测变异)的 比值。
效标效度的类型: -同时效度:比如心理素质与心理健康同时测量。 -预测效度:人才选拔中的运用。 效标的选择: -外显、客观:智力与学习成绩 -简单、省事:案例:社会适应性量表的编制。 -科学、权威:比如用心理健康指标作为心理素质的 效标。


效标效度的估计方法
1.相关法 相关系数 回归方程 结构方程模型 2.分组法 案例:性别对性别角色认知量表的预测 3.命中率法 见下页


2.3 结构效度



术语和定义:也称构想效度、构念效度。 即测验对理论上的构想或特质的测量程度。 确定结构效度的基本步骤 首先从某一理论出发,提出某一心理特质的假 设,即构成心理特质的成分或因素,然后设计和编 制测验并进行试测,最后对测验的结果采用相关或 因素分析等方法分析,验证与理论假设的相符程度。 案例:大学生心理素质的结构效度的获得
效 度
什么是效度 效度的类型 影响效度的因素
1、什么是效度:真分数模型
个体而言 X=T+E X是观测分数,T是真分数, E是测量误差。 团体而言 SX=ST +SE 即观测分数变异数( SX)等于真分数变异数 ( ST )加上误差分数变异数( SE )。 这里误差分数变异数只是涉及到随机误差的变异

效度的名词解释

效度的名词解释

效度的名词解释效度是指一种测量工具或测试的准确性和有效性。

在心理学、教育学、社会科学和医学等领域,效度是评估研究方法和工具的重要指标。

本文将从效度的定义、类型、测量方法和影响因素等方面进行解释。

一、效度的定义效度是指测量工具或测试所测量的概念或现象的准确性和有效性。

简单来说,效度是指测量工具或测试是否能够准确地反映出所要测量的概念或现象。

例如,一份英语考试的效度是指它是否能够准确地反映出考生的英语水平。

如果一份英语考试的效度很高,那么它所测量的英语水平就会比较准确。

二、效度的类型效度可以分为内部效度和外部效度两种类型。

1. 内部效度内部效度是指测量工具或测试所测量的不同项目之间的相关性。

例如,一份数学考试的内部效度是指其中各个数学题目之间的相关性。

如果一份数学考试的内部效度很高,那么它所测量的数学能力就会比较准确。

2. 外部效度外部效度是指测量工具或测试所测量的概念或现象与其他相关概念或现象之间的相关性。

例如,一份英语考试的外部效度是指它与其他英语考试的相关性。

如果一份英语考试的外部效度很高,那么它所测量的英语水平就会比较准确。

三、效度的测量方法效度的测量方法有很多种,其中比较常用的方法有以下几种。

1. 内部一致性内部一致性是指测量工具或测试中的各个项目之间的相关性。

例如,一份数学考试中各个数学题目之间的相关性。

内部一致性可以通过计算各个项目之间的相关系数来进行测量。

2. 重测效度重测效度是指测量工具或测试在不同时间或不同场合下所测量的结果之间的相关性。

例如,一份英语考试在不同时间或不同场合下所测量的英语水平之间的相关性。

重测效度可以通过计算不同时间或不同场合下所测量的结果之间的相关系数来进行测量。

3. 交叉效度交叉效度是指测量工具或测试与其他相关测量工具或测试之间的相关性。

例如,一份英语考试与其他英语考试之间的相关性。

交叉效度可以通过计算不同测量工具或测试之间的相关系数来进行测量。

四、效度的影响因素效度的影响因素有很多,其中比较常见的因素有以下几种。

效度的名词解释

效度的名词解释

效度的名词解释
效度是指一个测试或测量工具的有效性和准确性。

在心理学、教育学、医学等领域中,效度是评估测量工具的重要指标之一。

它是指测量工具所测量的内容是否与被测量的现象相对应。

如果一个测量工具具有高效度,则说明它能够准确地测量出被测量的现象,从而可靠地评估人们的表现、能力、态度、情感等方面。

效度分为内部效度和外部效度两种。

内部效度是指测量工具的各项指标之间的相互关系,包括信度、稳定性、一致性等。

信度是指测量工具的稳定性和一致性,即测量结果的可靠性。

稳定性是指测量工具在不同时间、不同环境下所得到的结果是否一致。

一致性是指测量工具的各项指标之间是否相互协调和一致。

外部效度则是指测量工具与被测量现象之间的关系,包括相关效度、预测效度、构效度等。

相关效度是指测量工具所测量的内容与被测量现象之间的相关性。

预测效度是指测量工具能否准确地预测被测量现象的变化趋势。

构效度是指测量工具所测量的内容是否与被测量现象的内在结构相一致。

测量工具的效度是评估其是否具有正确性和准确性的重要指标。

一个测量工具的效度高,则说明它能够准确地测量出被测量的现象,从而可靠地评估人们的表现、能力、态度、情感等方面。

因此,在选择和使用测量工具时,必须考虑其效度,以保证测量结果的准确性和可靠性。

同时,在测量过程中,也应该注意对测量工具的效度进行监测和评估,以确保测量结果的正确性和准确性。

总之,效度是测量工具的一个重要指标,它关系到测量结果的准
确性和可靠性。

在选择和使用测量工具时,必须考虑其效度,并对其进行监测和评估,以确保测量结果的正确性和准确性。

第六章 效度(同等学力辅导班资料)

第六章 效度(同等学力辅导班资料)

S
2 CO
S
S
2 SP
S
2 e
2 t
三、效度的种类
1. 内容效度 2. 效标关联效度 3. 结构效度
返回
第二节 内容效度
一、内容效度的含义 二、验证测验内容效度的程序 三、内容效度的确定方法 四、适用范围 五、表面效度
一、内容效度的含义
内容效度(content validation)
测验项目对所要测量的内容范围的代表性程度。 测验的使用者希望估计测验在它所要代表的环境整 体中一个考生表现如何。 (1974) 内容关联凭证(content-related evidence) (1985) 基于考试内容的凭证(evidence based on test content )(1999)(p299)
第三节 效标关联效度
一、效标关联效度概述 二、效标 三、效标关联效度估计的方法 四、效标关联效度的应用
一、效标关联效度概述
效标关联效度(criterion-related validity)
指测验分数与外部效标之间的相关。 又称准则关联效度。
效标即效度标准。
指独立于测验结果,反映测验目的的行为参照。
三、搜集结构效度资料的方法
1.测验内方法 2.测验间方法 3.效标关联法 4.实验操作法 5.发展水平的变化
1.测验内方法
• 确定测验的内容效度 • 分析被试对项目的反应过程 • 考察测验的同质性
2.测验间方法
相容效度 计算新旧同类测验分数之间的相关 区分效度 计算不同结构的测验之间的相关 因素效度 通过因素分析找到影响测验分数的共同 因素,每个测验在共同因素上的负荷量即 每个测验与共同因素的相关,称为测验的 因素效度

第六章 经典测验理论——效度

第六章 经典测验理论——效度

二、效度的类型
2.测验间法 . 通过对几个测验的比较研究, 通过对几个测验的比较研究,找出它们 所测的共同特质, 所测的共同特质,这样便可确定这些测 验是否具有构想效度。 验是否具有构想效度。
二、效度的类型
c.相容效度(congruent validity): 相容效度( 相容效度 ): 求一个新测验与一已有测验的相关( 求一个新测验与一已有测验的相关(若无已有测 用部分有关系的测验代替) 验,用部分有关系的测验代替) 比如,我们编制了一个人格量表, 比如,我们编制了一个人格量表,经检 和已有的能有效测量人格的量表( 验,和已有的能有效测量人格的量表(如 16pf)有高度的正相关,说明我们的量表 )有高度的正相关, 也可以测量人格,有较高的效度。 也可以测量人格,有较高的效度。
一、什么是效度? 什么是效度?
公式: 公式:rxy=Sv2/ Sx2 从公式看效度也是一个理想的概念 实际中我们是通过寻求测验工具之 外的一些证据间接来证明或检验一 个测验的有效性
一、什么是效度? 什么是效度?
1、效度是个相对概念 、 一种测量工具的效度只是对一定得测量 目的有效 有效也是一定程度上到相对有效 2、效度是测量的随机误差和系统误差的 、 综合反映 3、判断一个测量是否有效要从多方面来 、 收集证据
二、效度的类型
e.因素效度: 因素效度: 因素效度 建立构想效度最为常用的方法, 建立构想效度最为常用的方法,通过对 一测验的项目进行因素分析,找到影响 一测验的项目进行因素分析, 测验分数的共同因素, 测验分数的共同因素,每个项目在共同 因素上的负荷量( 因素上的负荷量(即每个项目与共同因 素的相关), ),称做测验的因素效度 素的相关),称做测验的因素效度
二、效度的类型

第六章-效度理论

第六章-效度理论
• 效度系数越高,正确预测率越高,越能测验经费开支
四、在人员安置和分类中的重要影响
• 一、安置: • 定义:根据对被试在单一效标上的观测结
果而做出的处理和安排 • 例:分班考试将学生分配到不同班级
• 二、分类:
• 使用两个或两个以上的效标,效标的多少 取决于分类数量
• 一般采用多元回归方程,多元判别分析补 充
三、同时提高的困难
• 测验同质性:信度高,效度低 • 测验异质性:信度低,效度高
采用成套性测验: ①每一个单一性测验,信度高 ②整个成套性测验,效度高
第二节 影响因素
1、测验本身 2、测量误差 3、样本
一、测验本身
• 测验的内容、难度、区分度、长度等
• 与长度:长度越长,效度越高
• 长度增加倍,效度估计
rY(nX)
rYX
1 rXX n
rXX
• 可以求 rY ( nX ) , n
二、测量误差
• 测量误差越小,效度越高
(1)减弱校正法:
rW
rYX rXX rYY
• 注:属于理论问题,实际运用较少
(2)效标信度估计法:
rWX
rYX rYY
三、样本
• (1)代表性:代表性越强,效度越高

c 2
s2
2 e
2 c2s2
rXX
rYX


2 s 2 t

2

2 t


2 c

2 t


2 s 2 t
信度 效度
信度是效度的必要条件
2、效度受信度制约
• 有公式:rmax rXXrYY rXX表示测验信度 rYY 表示效标测量的信度
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
1、信度是效度的必要条件
• 测验分数总方差分为三部分: 2 (1)所欲测量的属性引起的方差 c (2)与所欲测量属性无关的特性所引起的方 2 差(包括系统误差) s (3)由误差引起的方差 e2 则测验分数总方差 t2 c2 s2 e2
2 2 t2 e 2 2 2 t2 c s e
• 可以求 rY ( nX ) , n
二、测量误差
• 测量误差越小,效度越高 (1)减弱校正法: rYX rW rXX rYY
• 注:属于理论问题,实际运用较少 (2)效标信度估计法: rYX rWX rYY
三、样本
• (1)代表性:代表性越强,效度越高 • (2)容量大小:容量越大,效度越高 • (3)异质性:异质性越强,效度越高 全距缩小,则会低估效度,需加以校正: r( X X) r 2 2 2 2 1 r r ( X X )
四、在人员安置和分类中的重要影响
• 一、安置: • 定义:根据对被试在单一效标上的观测结 果而做出的处理和安排 • 例:分班考试将学生分配到不同班级
• 二、分类: • 使用两个或两个以上的效标,效标的多少 取决于分类数量 • 一般采用多元回归方程,多元判别分析补 充 • 因多个效标,故需要多个测验,且测验异 质
二、效标分数预测的置信区间
• 背景:预测效标分数总会存在误差 • 假设:实际效标分数围绕着预测效标分数 呈正态分布
则可对实际效标分数进行区间估计
三、提高人才甄选的正确率
错误淘汰 (20人) 正确录取 (40人)
D B
A C
正确淘汰 (30人)
错误录取 (10人)
• 影响正确预测和错误预测的比率的因素 • (1)效度系数越高,正确预测的比率越大, 错误预测的比率越小 • (2)受效标变量上成功与失败比率影响 • (3)受测验变量上录取分数线影响
效 度 理 论
理 论 定 义
与 信 度 的 关 系
影 响 因 素
测 验 效 度 的 应 用
测 验 本 身
测 量 误 差
样 本
测 效 标 分 数 预
估计标 准误差、 效标分 数预测 的置信 区间
提高 人才 甑选 的正 确率
人员 安置 和分 类
效度与信度的比较
第三节 应用
1、预测效标分数 2、估计标准误差、效标分数预测的置信区间 3、提高人才甑选的正确率 4、在人员安置和分类中的重要影响
一、预测效标分数
• 条件:测验分数和效标分数呈线性关系 • 已知:测验的效度系数、某一被试的测验 分数 则可利用回归方程 Y ˆ Y rYX (X X ) Y X
XX YY
YY
三、同时提高的困难
• 测验同质性:信度高,效度低 • 测验异质性:信度低,效度高 采用成套性测验: ①每一个单一性测验,信度高 ②整个成套性测验,效度高
第二节 影响因素
1、测验本身 2、测量误差 3、样本
一、测验本身
• 测验的内容、难度、区分度、长度等 • 与长度:长度越长,效度越高 • 长度增加倍,效度估计 rYX rY ( nX ) 1 rXX rXX n
预测效标分数的估计值
二、估计标准误差
• 定义:预测效标分数并不一定等于实际被 测的效标分数,由预测而产生的误差,称 为估计标准误差 • 公式: 2 ˆ (Y Y ) east n2
2 1 r • 简单形式: east Y YX
1 r
2 YX
• 称为无相关系数,用K表示 • 由效度系数决定: rYX 1,K 0 表示不存在估计标准误 • ( 1) 差,即所预测的效标分数等于实际的效标 分数 rYX 0,K 1 表示效度系数对效标分 • ( 2) 数的预测毫无效力
第六章
效度理论
内容
理论定义、与信度的关系 影响因素 测验效度的应用
一、理论定义
• 在一组测验分数中,所欲测量的属性引起 的方差与测验分数总方差的比率。 即 Val

2 c 2 t
表示) c2表示所欲测量的属性引起的方差 t2 表示测验分数总方差
Val表示效度(常用 rYX
二、与信度的关系

2 2 c
2 s
rXX r YX
2 s 2 t
2 2 2 c s 2 2 2 t t t
信度 效度
信度是效度的必要条件
2、效度受信度制约
r • 有公式:
max

rXX r YY
rXX r YY
YX
表示测验信度 表示效标测量的信度
YX XX
则 r r r 取 r 最大值1,则 r r 则由公式得,效度受信度制约
• 为正确计算预测率提高的数量,先介绍以下概念:
A D • ( 1) 基本率 A B C D
A D 正确预测率 • ( 2) A B C D
• 则正确预测率提高的数量=正确预测率-基本率
A A D 正确预测率提高的数量 AC A B C D
• 效度系数越高,正确预测率越高,越能测验经费开支
相关文档
最新文档