误差及信度

合集下载

信效度

信效度

范例一
2.程序操作
分析结果1/2
• α系数=0.7984,代表十五道题目测量结果 之内部一致性具高可信度。若是想要再提 高信度,可由”CorrectedItem-Total correlation”及”Cronbach Alpha if item Deleted”两栏数字来判断删除一些 题目提高内部一致性,价格 的”CorrectedItem-Total correlation” 数字-0.0693表示「价格」与总分间的相关 非常的低,如果将之删除,则可提高α系 数至0.8156。
评分者信度≥0.90,才认为评分是客观的
肯德尔和谐系数
• 当多个评分者评多个对象,并以等级法记分时; 如,作文成绩按品质好坏评定等级为甲乙丙丁, 英语课成绩评定为ABCD等。
W 12[ R i ( R i ) / N ] /[K (N N )]
2 2 2 3
小结
所需复本的数目 所需的施测次数 一 二
• 信度乃是一个测验(A卷)与它的任意一个
平行测验(B卷)的相关系数。
r
xx

X 'X
A卷
你是一个喜欢热闹的人吗?
1=绝对是
2=是
3=不一定
4=不是
5=绝对不是
B卷
你是一个喜欢安静的人吗?
1=绝对是
2=是
3=不一定
4=不是
5=绝对不是
理解信度
是指测量工 具所获得的 结果的可靠 性
每个信度的 估计值仅指 某一特定类 型的一致性
第一节 效度概述

效度所要回答的问题
效度的含义与性质


效度和信度的关系
一、效度所要回答的问题 • 1.测验测量的是什么东西?或者说,测 验测到了它要测的东西吗? • 2.测验对它所测量的东西测量到什么程 度?

教育测量的质量指标--信度概述

教育测量的质量指标--信度概述
值),E表示误差。

E=x-T
(公式1-2
(一)信度指实测值和真值相差的程度
1、试比较以下两次测量结果(只进行 一次)的信度:
用尺子量100cm高的一个儿童,得到1cm 的绝对误差;量185cm高的一位运动员 ,也得得到1cm的绝对误差。
要比较两种测量结果的信度,一定要看误差分数(E )对于真分数(T)所占的百分数是多少。这个百分 数表示该实得分数(x)的相对误差。其计算式如下 :
rxx
1-σE2 σ2x
=1- 2.8 =0.865 20.8
(二)信度指统计量与参数之间的接近程度
❖统计量是指样本上的各种数字特征。(如样本平均数 、标准差等);参数是总体上的各种数字特征(如总体 平均数、标准差等)。 ❖在统计学中,统计量越接近参数,这个统计量的可靠 性越高。而要知道统计量与参数的接近程度,可以对参 数进行区间估计。
NXY x Y
r A1A2 [N X 2 ( X )2 ] [N Y 2 ( Y )2 ]
12 6420 280 286
[12 6594 2802 12 6912 2862
采用重测法计算稳定系数时,要注意的问题:
1、两次测验之间的时间间隔要适宜,尽可能在 较短的时距内进行。
➢ 信度(reliability):指的是测量结果的 稳定性和可靠的程度,亦即测量的结果是否 真实、客观地反映了考生的实际水平,可记 为rxx。
➢ 具体而言,可以从以下三方面来理解测量的 信度:
(一)信度指实测值和真值相差的程度
x=T+E (公式1-1)
x表示实测值,T表示真值(是未知的,可以
把多次测量的实测值的平均值作为真值的近似
2、怎样估计对一组人或一个人测量多次的实测 值与真值(真分数)的差异程度呢?

信度是反映测量中随机误差大小的指标

信度是反映测量中随机误差大小的指标

请给下面的作文评分:
热 夏天来临,总会伴随着一些炎热,我生在北方,却住在南方。 对这南方北方的热,我可是深有体会。 南方的热是闷热,而北方的热多少有一些凉爽。处在南方,这 热除了呆在家中,否则你是无法躲藏的。热不仅隐藏在太阳光中, 而仿佛是一种弥漫在空气中的颗粒,古人说心静自然凉,我看恐怕 无法适用于此,即使你在树荫中盘坐,豆大的汗珠还是会源源不断 的流下来,就连风也是热的,在这种环境中学习和工作,心也难免 有些浮躁了。在北方,天更蓝,太阳光感觉也更烈,但这并没有什 么可担心的,走路走累了,就可以在树荫下歇一会,很快汗就消了, 偶尔还会有几丝凉风吹来,使人难免有些惬意,也就可以忘记之前 的辛苦,继续向下一个目的地进发。 南方的热就像是一场旷日持久的战争,而北方的热却并不赶尽 杀绝,仍给人留有余地。在南方,白天和晚上几乎没有什么差别, 昼夜温差很小,人们也自然严阵以待,丝毫不敢松懈,在三十几度 的高温中坚持整个夏天。在北方,可就不一样,清晨和晚上是一天 中最凉快的时候,几乎是只要没有阳光时就一点也不热。正常情况 下,最高温度也就在30度左右,超过30度是很少的事,所以,人们 也就不用紧张,可以放心的,踏踏实实的度过整个夏天。 。。。。
不足
触类旁通 编制复本难
重测信度与复本信度有何异同?
小结与问题
跨时间 一致性 试题之间 有何关系?
跨形式 一致性
(三)内部一致性信度
含义 测验 各题间 一致性
题目 一致 性
同质性 信度
类型
分半 信度
1、分半信度(Split-half raliablity)
奇偶题 分半
难易:低高 两半相似: M、S 项目组间相关 分布常态
含义 程序 两等值测验 最短时间内 对同组对象 施测结果r

特殊儿童测验的信度与效度分析—测量的误差

特殊儿童测验的信度与效度分析—测量的误差
心理测量的误差
• 测量误差指的是在测量过程中由那些与 测量目的无关的变化因素所产生的一种 不准确或不一致的测量效应。
• 系统误差:由与测量目的无关的因素 引起的一种恒定而有规律的误差。只 影响准确性。
• 随机误差:由与测量目的无关的、偶 然因素引起的、而又不易控制的误差。 影响准确性和一致性
测量的随机误差来源及控制
• P = (PH + PL) / 2
• 非二分法记分项目:
• 难度的确定:取决于测验的目的和测 验性质
• 难度的等距变换:将P值化为Z分数 (查表),Δ = 13 + 4 * Z (Δ)
• 难度影响测验分数的分布形态,离散 程度
历年真题
• 某项测验中,绝大部分题目的难度值P较 大,那么被试的分数(A, B, 数小于中数 C. 中数大于众数 D. 分布呈现负偏态
• 测验项目 • 施测环境 • 被试
测量的系统误差来源及控制
• 测验项目 • 施测环境 • 被试
测量误差的估计
心理测验的项目分析
题目的难度
• 项目的难易程度 • 二分法记分项目:通过率,P = R / N,R:通
过该项目人数,N:总人数。 • 极端分组法:当被试人数较多时,则可以先将
被试依照测验总分从高到低排列,分成三组, 总分最高的27%被试称为高分组 (NH),总分最 低的27%被试为低分组 (NL),分别计算高分组 和低分组的通过率,然后求项目的难度。

信度系数计算及标准误差

信度系数计算及标准误差

StuNo.Item01Item02Item03Item04Item05Item06Item07Item08 No.00100001001 No.00200111101 No.00301001001 No.00410111101 No.00500001100 No.00600011101 No.00700100100 No.00811011101 No.00910111111 No.010******** No.01100001101 No.01210101100 No.01301011101 No.01400010101 No.01511111101 No.01601111100 No.01710101101 No.01811111101 No.01910101101 No.020******** No.021******** No.022******** No.023******** No.024******** No.025******** No.02601001101 No.027******** No.028******** No.029******** No.03010000000 No.0311******* No.03201101110 No.03300101100 No.03400001001 No.0351******* No.03600110000 No.0370******* No.03801111101 No.03900101100 No.04000101101 No.0410******* No.04200100010 No.04300110000 No.0440******* No.0450******* No.04601111101No.04800000100 No.04900101101 No.05001101101 No.0510******* No.05200111101 No.0530******* No.05411111101 No.0550******* No.05600010000 No.0571******* No.05810111101 No.0591******* No.06010001100 No.06100001100 No.06210000100 No.06300100100 No.06410100011 No.06500101110 No.0661******* No.06701111100 No.06800111111 No.06901111100 No.07001011100 No.0711******* No.07200001101 No.0731******* No.07400101101 No.07501011000 No.07610101100 No.0771******* No.07810111101 No.0790******* No.08011011101 No.0811******* No.08201001101 No.0831******* No.0840******* No.0851******* No.08601001101 No.0870******* No.08801001101 No.0891******* No.09000101101 No.0910******* No.09211001101 No.0930*******No.0951******* No.09600010000 No.09700010000 No.09811111101 No.0990******* No.10001000101 No.10101001101 No.10200001101 No.10300010111 No.10400000100 No.10500010101 No.10610011101 No.10701101101 No.10800101101 No.10910101101 No.11000111100 No.11100000110 No.11200000000 No.11310100000 No.11400100000 No.11500101101 No.11600110100 No.11701000100 No.11801100001 No.11911001101 No.12000001100 No.12100001110 No.12210001111 No.12300100000 No.12401001101 No.12511111101 No.12611100100 No.12701111001 No.12810000100 No.12901100000 No.130******** No.131******** No.132******** No.133******** No.134******** No.135******** No.136******** No.137******** No.138******** No.139******** No.14000011100No.14100000101 No.14200100101 No.14301000000 No.14400101101 No.14501111101 No.14601110101 No.14710001100 No.14810101101 No.14901101101 No.150******** No.151******** No.152******** No.153******** No.15411111111 No.155******** No.156******** No.157******** No.158******** No.159******** No.16000011101 No.16100111101 No.16200100101 No.16300011100 No.16400101101 No.16500000101 No.166******** No.16710110100 No.16800010101 No.16900110101 No.17000111100 No.17100110101 No.17200110101 No.173******** No.17400011101 No.175******** No.176******** No.177******** No.178******** No.17900100101 No.180******** No.181******** No.182******** No.183******** No.184******** No.185******** No.186******** No.187********No.188******** No.189******** No.19000001000 No.19101100100 No.19200100100 No.19300101110 No.19410110100 No.19501010100 No.19601000100 No.19701000100 No.198******** No.199******** No.20000100101 No.20100000111 No.20201111110 No.20300001101 No.20401101101 No.20501001111 No.20600000000 No.20700111101 No.20800001100 No.20901001100 No.21001101101 No.21100011101 No.21201101100 No.21301001101 No.21401000001 No.21511111101 No.21610101100 No.21711101101 No.21801111101 No.21901001101 No.22001011101 No.22111011111 No.22211111101 No.22311111101 No.22400110101 No.22511111101 No.22600101101 No.22711110101 No.22801111111 No.22911111100 No.23011111101 No.23111101111 No.23201101100 No.23311101101 No.23411111101No.23500010100 No.23611111100 No.23711111101 No.23811101101 No.23911101101 No.24000010101 No.24110111101 No.24211101111 No.24311111101 No.24411111001 No.24500011101 No.24610001100 No.24710111111 No.24811111111 No.24911110101 No.25011001101 No.25110111001 No.25211111111 No.25311111101 No.25411111101 No.25511111111 No.25601011101 No.25710101101 No.25800101101 No.25911101101 No.26011001101 No.26111101101 No.26211111101 No.26300000100 No.26410111101 No.26511111101 No.26600000110 No.26701111101 No.26801111101 No.26910111100 No.27001111101 No.27111001101 No.27200101111 No.27310001101 No.27400111101 No.27501101100 No.27611111110 No.27700111101 No.27801111101 No.27911101100 No.28001001101 No.28110101101No.28211111101 No.28300111101 No.28411111101 No.28510111101 No.28611111101 No.28711111111 No.28811111101 No.28911111100 No.29011111111 No.29111101101 No.29200011100 No.29301100100 No.29400001101 No.29510101100 No.29610001100 No.29711101101 No.29810101101 No.29911111100 No.30011101101 No.30110011100 No.30201001100 No.30311111101 No.30401111111 No.30510101101 No.30610111101 No.30711011101 No.30811111100 No.30901101101 No.31000101101 No.31111111011 No.31211101101 No.31311101101 No.31410110110 No.31511111101 No.31601111101 No.31711110101Item09Item10Item11Item12Item13Item14Item15Item26Item27 010110100 111111011 110101001 100110001 100111101 111011111 000010000 001010101 101110000 111010111 111010100 101101001 111111111 000111111 111111101 010010100 110111101 111111101 111111101 100101110 111011101 101110111 101110100 110011001 111100111 101010111 011100111 111110101 100110000 001111110 100101101 000010001 101111001 111111111 111111001 000010101 101111010 101100111 100011000 100001111 100010000 010110100 000101001 100010001 110011111 101111001101110101 111001111 100011111 011011000 011000101 111001111 001001010 111111101 100001011 010001100 100111101 110011000 100010101 100010001 000011101 100001101 001110000 100100101 110111101 001100101 111110101 111011101 101111111 000001101 000111111 100010001 010011000 001011111 101000100 100000001 111111000 111010101 100010111 111011101 111111101 011111011 110011101 111111101 111111111 010101001 111111111 110111110 111010101 111110110 000110010 100001100 111111111100010001 110100101 000011101 100000000 110110001 101110001 011101100 110100111 110110111 100101000 101010100 110010101 010010110 000001101 010011111 000101010 110001100 111010101 100010100 100111100 101000100 101000101 000011101 010010111 110000111 100111111 110110011 010011001 100010000 100111011 110011111 110010001 000000101 100100111 110110100 110011011 110001111 101010001 001001001 000100111 100010000 110110110 000001111 100010101 001111101 100000100 001011001100111101 100011100 001001100 101011111 111010110 101000111 100001101 110000101 100111111 110011111 110011110 110101111 110000111 111010101 111111000 110010100 110010101 110011000 100011010 100000000 100011011 011001101 100011001 100010111 000011001 010001001 100000100 100011101 100001101 110001101 110011101 100000111 000011101 101010000 110011111 110011101 110011010 110001111 100010100 100010100 011001000 101001111 100010111 111011101 100010000 000011111 110110100101100101 000000001 000111111 011111101 010010110 101101001 001001011 100011101 000010111 110111111 101000101 010011001 100010001 010001001 100001101 101000001 110111111 111110101 000000101 110011001 100011001 110001101 100100111 111101101 100010101 110010000 101001110 101010111 100010111 110100101 101111111 101111101 101010101 111111101 111110101 111101100 111011101 111111001 001110101 101000110 101011111 101011101 101010111 101011101 101010101 111111111 100000110011011001 111111110 101110111 111110101 110110111 001100110 111101101 111010101 101010101 111011111 111001101 101011101 101011101 111111100 111011100 110010100 110111101 100001001 101000101 110111101 101010101 100010101 101011100 100011000 111111111 110111100 100001101 101011101 001001101 101010101 111111101 001101000 001111101 101111110 111010001 111111101 101111111 111111101 101111100 101111101 110111010 111111101 111111110 111111111 111111101 101010100 100111101111111101 101111101 111111111 111011101 111111101 111111111 111110101 001110011 111111101 111111111 111111111 101111010 001001001 101110101 111101101 101111111 101111011 101110111 111111101 101111101 100001111 111011100 111110101 101111111 111110101 111111111 101111001 111011000 111111011 111111001 111111110 111110101 001111011 111011101 111111101 101110011Item28Item29Item30Item31Item32Item33Item34Item35Item36 001010101 101111111 101111001 011111101 001111101 111111111 001001111 001111111 011000101 111111111 101010111 001111011 111101101 101011111 111111111 101111001 011110111 111111111 101111111 111110101 101111001 111111101 101011101 001110101 111111101 001011101 100111101 010110111 001011101 001111000 111111101 100111011 100100100 101111111 100111111 000111000 101111101 111111101 101011010 101111111 000111101 101111100 101111000 101011001 001111101 111111101011110111 101010000 111111111 001111111 001111101 111111111 101010111 101111111 110111001 101110011 101111111 000111101 101111100 100111101 101011100 101111101 101011001 001110001 101110101 101111111 101011111 111111111 111111101 111111111 110111101 101111111 101000001 101110011 011101000 101011101 101111000 111111111 111111101 110111101 111111101 111111101 011111111 101111101 111111101 001011001 111111101 101110111 111011101 111111111 100000100 001011110 111111111101111101 011111000 100110010 001010101 101110111 101111000 001010101 001011110 101111011 101111100 100111000 101011101 101110101 100111100 001111001 110011111 101011101 101110111 101111101 011111001 001111001 010001001 101111101 101011011 001111001 111111101 001010101 101011100 111001111 001011011 101111000 111110101 101111101 111110111 001111100 111111111 001111101 001111111 101111101 100111001 011111101 101111111 101111110 101111111 111111101 100111101 101001111001011011 101111101 001000100 101110101 011111111 011111111 101011001 000111101 111111101 001111111 111111111 101111111 001111101 111110111 101111111 101111101 101110111 101011001 101010101 001011011 101111101 101011000 101111110 111111101 101100101 000110100 001101111 011111101 101110101 000111101 001011101 101111111 101111111 001111101 101111111 001101101 001111011 101111111 111111111 101111011 101111101 001000001 111111111 011111111 101010000 101111001 011110100111111111 001111100 110011101 111111001 101111101 011001001 000010101 100011001 101110101 111011101 101110101 100010011 101010011 111001011 001111111 100111101 111111111 111111001 001111000 101101101 111011001 001111011 111111101 111111111 101111100 001011101 101010111 111111111 010111111 111111111 111111111 101111111 101111111 101111111 011111111 101110111 001101011 110111101 001111011 101011111 101111101 011111111 111101111 111111101 101011111 101111111 101011110001011101 111111111 111111111 001111111 101111111 111010101 101110111 101111111 001111111 011111111 001111011 011111111 000110111 001110111 000010111 101100111 111111111 101111111 111111111 001000111 101111101 011111111 000111111 101011111 111111111 101111101 101111011 001110111 101111101 011111111 011111111 001110000 111111011 100100101 001111110 011111111 101111101 111111111 111111101 101111101 111101101 111111101 001111111 111111111 111111111 000110101 101001101101111101 101111101 111111111 101110111 111111111 101111111 101110111 001011111 101111111 010010111 101111111 101111101 101110111 011111111 101010101 101111111 101001111 110111101 111111111 111111001 100111100 101111111 101111111 101111111 011111111 101111101 100111101 101111101 111111111 100010111 101111101 111111111 101111111 101111111 001110111 001111111Item37Item38Item39Item40Item41Item42Item43Item44Item45 000001111 100111001 010010000 101011111 010111011 111011110 110111000 100111001 101111011 111111111 111111011 001001011 111011100 111111101 111111111 011011000 111111011 111001111 111011111 001011110 100010100 110011000 010100000 111010101 111011110 111010101 101001100 111110111 011001000 011110001 100011100 101011010 010101000 111011100 111111111 100000101 010111111 111011100 001001101 101011100 001111111 100110000 111010100 001010000 111111111 111111111111011100 100010000 001010011 101011001 111001110 111111110 010101001 111111101 101010100 111011010 110011110 101111011 110001010 101011001 011001111 110010101 111010101 001111010 011101110 101011010 111011111 101011101 011011101 100011100 100011111 100111101 110011010 110011100 010011101 001011101 101101010 111111111 001010111 111111101 111011110 110011001 111011110 111011010 111111111 001011101 111111111 111011011 111011111 100111111 000110000 010011110 111011010111001100 111011000 000010010 011110011 111110111 001011111 000011011 000000111 111111011 001001000 001000001 111010011 001011101 101011111 000011100 101001111 101011111 001011100 101110111 001101111 111111001 110001001 011111101 001010100 100011010 001011101 110110010 001011000 000110101 111000100 011111100 100001110 111011101 111011111 011110100 100011001 100001001 100001100 000110000 101010100 100110001 111011101 100010000 111010101 101000001 101011000 010001000001101100 000011010 000001000 010001110 111011101 111011110 100001010 111011100 111011101 111011100 111111111 001011110 110111111 011111011 000011000 000011100 111111110 110011010 111001010 100111000 101111101 101110001 101011100 011011110 101010000 000111110 010010100 010001000 101010100 100011000 101011000 100011001 111011011 001011110 101011111 100001100 111011010 001011110 111011001 010011100 001111110 101011101 111111110 111011110 000010110 010001000 101001000111000010 010110010 100100000 100101001 100110001 100010110 101010001 010010100 010011011 100100110 001010000 101111000 111010101 001011011 100111100 110001001 111111011 111011111 000110101 110011101 110011101 110011111 111011010 101011010 001111111 111011100 100011101 111101111 110110011 111111111 111111001 111111111 101101111 111111011 111111111 111111111 111101101 111111111 000011011 111111110 111101011 111101111 111101111 111011111 111100111 111011111 110100011100111110 111011111 111111111 111111110 110011101 001001101 111101111 111111111 111111111 111111100 011011000 111101111 111111111 111111111 111111110 111111111 111111111 111100110 111101011 101110111 111101111 111111110 001101111 101011111 111101111 110011000 111111010 111111111 111011011 101101111 111111111 011010001 100011010 110111011 001011110 011001110 111110100 101111111 111011111 101011010 000011111 111111111 111111111 111111111 111111011 110011111 100111111111111111 101011011 111111111 110111100 111111111 111111111 111111010 111011011 111111111 111011101 101001111 101011111 001110000 111111011 011011010 110111101 101010100 111111110 111011111 111011101 001010010 101111111 111111111 001111001 111111111 111111111 111111100 111111111 111111011 101111101 011111011 111111111 111111000 101111111 111111001 111011111Item46Item47Item48Item49Item50Item51Item52Item53Item54 110101001 110101000 110111000 110101001 010101001 110101101 100111000 100101000 000110000 111111100 001111000 110101011 111111111 110101100 110111111 111101110 110111100 111111111 111111010 010101001 010001010 010101001 111101000 010101110 010111101 111101100 110111001 110100000 110101000 010101101 010101100 011100001 101001111 111111100 001001010 110101100 111101101 111111111 010101110 111111100 111111010 010001000 110101100 000101000 011111111 111101101110111110 110111001 111101100 111111011 011001001 011101110 100101010 110111010 101111100 110011000 111111101 011101111 100110000 101100000 000111100 111110000 110110000 110110000 110111111 111101101 110101110 110111111 010111111 111101001 010111100 111101000 000100000 110101100 010001101 111101001 111101100 111111111 110001100 110111111 111111111 110101100 110111010 011101011 111111111 110101101 010111111 111111111 010100111 110101010 010000101 010101111 111101101111111100 110111110 011000110 000001101 110101101 101011100 011100110 100001111 110101001 110111010 000011000 110100110 010101111 010111100 011101001 101000000 110101000 110101000 111101110 110101110 110011101 111111100 011001111 000001001 010111011 110111101 100001000 001111110 000110011 011101000 110101010 010101001 111111101 110111000 010011011 111111110 110101001 110101101 010100101 010101100 010110000 111001100 111101110 111111111 011111000 010101000 010101101110111100 100100000 111101111 010101101 110101101 110101100 110111001 110111111 110011000 110101100 111101101 110101000 011101100 010011001 110101000 111111110 100001100 000101101 010000100 110101101 110101001 011100001 011111011 110111000 110010001 110101011 001100011 011111001 110101100 111101001 110101001 010101000 011111000 110001010 100101011 110101101 110001000 011111000 111101001 011101101 011011000 010111111 110101101 000110100 110110100 010101101100101101 001101011 100001111 011101111 110101000 100111110 110111011 111111010 001101011 111101011 110000011 000101000 110111000 110111001 011001011 111101001 111001010 110111011 111101101 111101011 110101110 110101101 010111000 111110100 111111000 010101001 111101111 100010100 100101000 111101001 101101010 010111100 010101000 110101111 110101100 110111100 110110001 101001000 110111010 110101001 110101110 110101101 011101010 110101001 110111111 100101000111111101 110111111 101111100 111111001 010100100 111111000 111101110 110101010 111101110 111101011 110101111 110101000 110101100 010100010 011001010 011111111 111111111 010111011 001111001 010101100 011111110 111101110 000101000 110111110 100111110 111101101 011101100 110001100 111011010 110111111 100000010 110101011 011111111 110101011 111101110 011111100 110111111 010101100 110010000 000101001 111101010 110101101 110111100 110111010 000101011 011111100011111000 011111100 111111011 111111011 011111100 110101101 111111100 101100110 110101001 110101100 111101101 010101011 101000001 110101000 010101100 110101101 100101110 011111111 111001001 111111101 110101010 010110101 010001111 010111011 010111001 110111100 111001110 011111111 110111011 010101010 011101101 111111100 110101001 111111100 111110011 111101111Item55SUM(A)SUM(B)SUM相关系数:0.715893LOWER13.57751081119信度系数:0.834426真分数区间(5%):6.66304425.577511181331总分标准差:113922标准误差:2.71124316.57751115153024.57751112132519.57751118173529.5775105121711.57751114122620.57751113122519.57751119203933.57751111162721.57751113132620.57751119183731.57751113173024.57751121214236.57751113132620.57751016173327.57751121204135.57751118193731.57751114122620.5775111682418.57751117112822.5775101492317.57751012132519.57751117163327.57751013142721.57751013122519.57751116153125.5775119101913.57751011102115.57751117112822.57751111122317.57751111112216.57751116173327.57751118163428.577510881610.57751114173125.57751118183630.57751010102014.57751114163024.5775109162519.5775101161711.57751110112115.5775111061610.57751116203630.57751118193731.57751116173327.57751 01181913.57751 016132923.57751 013162923.57751 012122418.57751 118183630.57751 111122317.57751 120183832.57751 014112519.57751 08122014.57751 116183428.57751 013162923.57751 01482216.57751 110112115.57751 010112115.57751 011122317.57751 19122115.57751 011102115.57751 015163125.57751 115163125.57751 116183428.57751 119183731.57751 019153428.57751 113142721.57751 117143125.57751 111152620.57751 1881610.57751 114132721.57751 01091913.57751 110142418.57751 114122620.57751 118224034.57751 115122721.57751 118193731.57751 119193832.57751 017122923.57751 117173428.57751 118153327.57751 122214337.57751 111132418.57751 119193832.57751 115203529.57751 117163327.57751 117163327.57751 076137.577514 111142519.57751 119173630.57751115153024.57751 115132822.57751 1881610.57751 14121610.57751 116183428.57751 113122519.57751 010112115.57751 113112418.57751 115163125.57751 01292115.57751 094137.577514 112142620.57751 113142721.57751 112142620.57751 114102418.57751 112122418.57751 112142620.57751 012112317.57751 08162418.57751 112142620.57751 08142216.57751 010122216.57751 112162822.57751 01171812.57751 112122418.57751 018143226.57751 110102014.57751 011102115.57751 011112216.57751 010102014.57751 116122822.57751 016102620.57751 111182923.57751 115173226.57751 111122317.57751 014152923.57751 112112317.57751 113132620.57751 11292115.57751 01192014.57751 01091913.57751 015153024.57751 113122519.57751 114193327.57751 115112620.57751 111102115.57751 110112115.57751011112216.57751 012112317.57751 0549 3.577514 015142923.57751 017153226.57751 015163125.57751 111102115.57751 112152721.57751 118183630.57751 115142923.57751 118183630.57751 119163529.57751 014142822.57751 119163529.57751 01392216.57751 110102014.57751 017193630.57751 110102014.57751 010112115.57751 0881610.57751 115163125.57751 112112317.57751 112122418.57751 115163125.57751 18111913.57751 09101913.57751 19132216.57751 11392216.57751 112132519.57751 112112317.57751 113132620.57751 113132620.57751 112142620.57751 111132418.57751 117153226.57751 110112115.57751 114152923.57751 114122620.57751 012142620.57751 011122317.57751 011142519.57751 011112216.57751 117193630.57751 118173529.57751 096159.577514 11392216.57751 01292115.57751116132923.57751 17111812.57751 111102115.57751 116112721.57751 011132418.57751 112102216.57751 19132216.57751 011112216.57751 110152519.57751 115122721.57751 111122317.57751 19122115.57751 19112014.57751 110132317.57751 114152923.57751 010112115.57751 119183731.57751 118153327.57751 16121812.57751 114163024.57751 111152620.57751 112162822.57751 116153125.57751 117133024.57751 113152822.57751 110152519.57751 010122216.57751 119203933.57751 013122519.57751 117163327.57751 120173731.57751 116183428.57751 015153024.57751 120153529.57751 119203933.57751 117183529.57751 114163024.57751 119173630.57751 113102317.57751 014173125.57751 119153428.57751 117183529.57751 118183630.57751 019153428.57751 113162923.57751 120204034.57751 014102418.57751010122216.57751 120204034.57751 120214135.57751 117183529.57751 118173529.57751 01192014.57751 017173428.57751 118203832.57751 016173327.57751 119183731.57751 114142822.57751 114193327.57751 115173226.57751 118183630.57751 013142721.57751 012162822.57751 118213933.57751 116193529.57751 117173428.57751 115163125.57751 118153327.57751 114193327.57751 113173024.57751 111132418.57751 021183933.57751 016122822.57751 115173226.57751 116183428.57751 110142418.57751 116173327.57751 120214135.57751 086148.577514 018123024.57751 115183327.57751 114142822.57751 119163529.57751 118153327.57751 019193832.57751 016143024.57751 117112822.57751 015102519.57751 121183933.57751 117193630.57751 021183933.57751 119183731.57751 110142418.57751 114163024.57751020163630.57751 117153226.57751 122214337.57751 117183529.57751 121194034.57751 122194135.57751 018173529.57751 114163024.57751 021173832.57751 117163327.57751 117173428.57751 114152923.57751 110102014.57751 115163125.57751 013112418.57751 119173630.57751 015122721.57751 118193731.57751 120173731.57751 117173428.57751 112102216.57751 118173529.57751 019173630.57751 018143226.57751 118183630.57751 120183832.57751 116163226.57751 115203529.57751 118193731.57751 116153125.57751 019153428.57751 119203933.57751 016143024.57751 119193832.57751 117183529.57751 116203630.57751UPPER 24.42249 36.42249 27.42249 35.42249 30.42249 40.42249 22.42249 31.42249 30.42249 44.42249 32.42249 31.42249 42.42249 35.42249 47.42249 31.42249 38.42249 46.42249 42.42249 31.42249 29.42249 33.42249 28.42249 30.42249 38.42249 32.42249 30.42249 36.42249 24.42249 26.42249 33.42249 28.42249 27.4224938.4224939.42249 21.42249 36.42249 41.42249 25.42249 35.42249 30.42249 22.42249 26.42249 21.4224941.4224942.4224924.42249 34.42249 34.42249 29.42249 41.42249 28.42249 43.42249 30.42249 25.42249 39.42249 34.42249 27.42249 26.42249 26.42249 28.42249 26.42249 26.42249 36.42249 36.42249 39.42249 42.42249 39.42249 32.42249 36.42249 31.42249 21.42249 32.42249 24.42249 29.42249 31.42249 45.42249 32.4224942.4224943.42249 34.42249 39.42249 38.42249 48.42249 29.42249 43.42249 40.42249 38.42249 38.42249 18.42249 30.42249 41.4224933.42249 21.42249 21.42249 39.42249 30.42249 26.42249 29.42249 36.42249 26.42249 18.4224931.4224932.42249 31.42249 29.42249 29.42249 31.4224928.4224929.42249 31.42249 27.42249 27.42249 33.42249 23.42249 29.42249 37.4224925.4224926.4224927.42249 25.42249 33.42249 31.42249 34.42249 37.42249 28.42249 34.42249 28.42249 31.42249 26.42249 25.42249 24.42249 35.42249 30.42249 38.42249 31.42249 26.42249 26.4224928.42249 14.42249 34.42249 37.42249 36.42249 26.42249 32.42249 41.42249 34.42249 41.42249 40.42249 33.42249 40.42249 27.42249 25.42249 41.4224925.4224926.42249 21.42249 36.4224928.4224929.42249 36.42249 24.42249 24.42249 27.42249 27.42249 30.42249 28.42249 31.42249 31.42249 31.42249 29.42249 37.42249 26.42249 34.42249 31.42249 31.42249 28.42249 30.42249 27.42249 41.42249 40.42249 20.42249 27.42249 26.4224923.42249 26.42249 32.42249 29.42249 27.42249 27.42249 27.42249 30.42249 32.42249 28.42249 26.42249 25.42249 28.42249 34.42249 26.42249 42.42249 38.42249 23.42249 35.42249 31.42249 33.42249 36.42249 35.42249 33.42249 30.42249 27.42249 44.42249 30.42249 38.42249 42.42249 39.42249 35.42249 40.42249 44.42249 40.42249 35.42249 41.42249 28.42249 36.4224939.4224940.4224941.42249 39.42249 34.42249 45.42249 29.4224945.4224946.42249 40.42249 40.42249 25.42249 39.42249 43.42249 38.42249 42.42249 33.42249 38.42249 37.42249 41.4224932.4224933.42249 44.42249 40.42249 39.42249 36.42249 38.42249 38.42249 35.42249 29.42249 44.42249 33.42249 37.42249 39.42249 29.42249 38.42249 46.42249 19.42249 35.42249 38.42249 33.42249 40.42249 38.42249 43.42249 35.42249 33.42249 30.42249 44.42249 41.42249 44.42249 42.42249 29.42249 35.4224937.42249 48.42249 40.4224945.4224946.42249 40.42249 35.42249 43.4224938.4224939.42249 34.42249 25.42249 36.42249 29.42249 41.42249 32.42249 42.42249 42.42249 39.42249 27.4224940.4224941.42249 37.42249 41.42249 43.42249 37.42249 40.42249 42.42249 36.42249 39.42249 44.42249 35.42249 43.4224940.4224941.42249。

3心理测量3 测量的误差及其检验

3心理测量3 测量的误差及其检验

3.2.4 影响测验信度的因素
信度是测验过程中随机误差大小的反映。 随机误差大,信度就低,随机误差小,信度就 高。 因此,在测验过程中凡能引起测量随机误 差的因素——被试、主试、测量工具本身、施 测情境等都会影响测验的信度(前面已有所提 到)。除此之外,被试样本团体的性质、测验 题数的多少、测题的难度等也是重要的影响因 素。

19

半分信度(split-half reliability) 用一种测验施测,然后把测验分成两个 等值的一半,所有被试在两半测验上得分 的相关系数(计算方法同前)便为半分信 度。 由于计算出来的相关系数只是半个测验的 相关系数,要得到整个测验的信度估计, 还需用斯尔皮曼—布朗公式加以校正 (P.45)。
23
半分信度实际上是对内部一致性的一种粗 略估计方法,但因半分的方法多种多样, 用每种半分方法求得的信度值会有所不同。 一般采取其它方法来估计内部一致性信度。 (p.46、47) 即通过估计测验各项目的得分与测验总分 之间的总体相关,去推断测验的内部一致 性。

24

评分者信度 在一些测验如投射测验、创造力测验中, 主观题的评分依赖于评分者的判断,不同 的评分者评判结果往往不一致。这也是产 生测量误差的重要来源之一。因此有必要 考虑评分者信度。 评分者信度是指不同评分者对同一份测验 评分的一致性。当测验结果是由评分者主 观评定时,评分者信度尤为重要。 例:P.48
17

复本信度 (Alternate-form reliability) 用两个等值测验对同一组被试进行测 量,两个等值测验分数之间的相关系数便 为复本信度。又称等值性系数。

用皮尔逊的积差相关公式计算 P.43
18
所谓等值测验,即两个测验是测量相同的 心理特质且在题目素材、数量题型、难度、 区分度等方面均能逐一匹配的测验。两个 等值测验可以连续施测,也可以间隔一段 时间施测。采用复本信度的前提条件是必 须能编制出两个等值测验。 它也有一定的局限性:它不能完全排除练 习和记忆的影响,一些解题的策略等技能 技巧会产生迁移效应;编制真正的等值测 验(复本)相当困难,许多测验没有复本。

测量的信度与效度

测量的信度与效度

信度的评估方法
1 2
重测信度法
通过在不同时间对同一对象进行重复测量,计算 两次测量结果的相关系数,以评估信度。
复本信度法
使用多个测量工具对同一对象进行测量,计算各 测量工具之间的相关系数,以评估信度。
3
内部一致性信度法
通过分析测量工具内部各部分之间的相关性,计 算内部一致性系数(如Cronbach's Alpha系 数),以评估信度。
04 测量误差
随机误差
定义
随机误差是由于一些随机因素引起的测量结果的 不确定性。
特点
随机误差的大小和符号都是随机的,无法预测和 控制。
示例
测量时环境的微小变化、测量仪器的微小波动等 都可能产生随机误差。
系统误差
定义
系统误差是由于测量系统本身存在的误差或测量条件不满足要求 而引起的测量结果偏差。
数据分析方法
数据分析方法的选择和运用,也会对效度产 生影响。
03 信度与效度的关系
信度是效度的必要条件
信度是指测量的一致性,即多次测量结果之间的相符程度。 如果一个测量工具缺乏信度,那么它的测量结果会不稳定, 无法为决策提供可靠依据。因此,信度是效度的必要条件, 没有信度就无法保证效度。
信度的评估方法包括重测信度法、复本信度法、Cronbach's Alpha系数法等,通过这些方法可以评估测量工具的一致性 和稳定性。
效度是信度的充分条件
效度是指测量的准确性和有效性,即测量结果是否真实反映所需测量的内容。如果一个测量工具具有 效度,那么它的测量结果是准确的、有意义的,能够为决策提供可靠依据。因此,效度是信度的充分 条件,有了效度可以进一步确认信度。
效度的评估方法包括内容效度法、结构效度法、验证效度法等,通过这些方法可以评估测量工具的准 确性和有效性。

第四章 信度与随机误差

第四章 信度与随机误差
ST2 = SV2 + SI2
最后二式合并可得 SX2 = SV2 + SI2 + SE2
二. 测量信度
? 稳定性 \ 可靠性 \ 一致性
你的观测分数在多大程度上反映了你的“真实”分数? 在不同时间测验同一个人获得的结果是一致吗?
? 人们通常把测量结果的可靠性称为信度,即测 量结果的一致性或可信性程度。
如果进行无数次测量,X的平均值等于T
? 对于一个团体来说,实得分数、真分数 和测量误差之间有如下关系: SX2 = ST2 + SE2
即实得分数的变异数 SX2等于真分数的变异数 ST2加上误差变异数 SE2
而真分数变异数可分成与测量目的有关 (有效)的变异数 SV2和与 测量目的无关但却稳定的变异数 SI2
专业资料这个假想测验的误差变异来源分析信度类型误差变异量误差变异来源复本信度间隔施测1070030时间与内容取样分半信度1080020内容取样上述二者差异030020010时间取样评分者信度1092008评分者差异误差变异总和020010008038真实变异1038062专业资料这个假想测验的误差变异来源分析真实变异误差变异时间上的稳定性复本之间的一致性评分者之间的一致性内容取样误差时间取样误差评分者间差异6220108专业资料?信度的作用反映了测量过程中所存在的随机误差大小可以用来解释个人测验分数的意义可以帮助进行不同测验分数的比较?影响信度的因素
各种信度系数相应误差变异的来源
信度系数的类型
误差变异的来源
再测信度 复本信度(连续施测) 复本信度(间隔施测) 分半信度 同质性信度 评分者信度
时间取样 内容取样 时间与内容取样 内容取样 内容的异质性 评分者间的差异
假设对100个六年级学生以两个月的时间间隔 先后施测一个创造力测验的A\B两个复本, 所得的
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
学生 X Y X· Y X2 Y2
A
B C D E F G
88
80 68 60 96 32 32
94
78 56 48 70 38 62
8272
6240 3808 2880 6720 1216 1984
7744
6400 4624 3600 9216 1024 1024
8836
6084 3136 2304 4900 1444 3844
重测信度的风险
• 练习效应 –被试可能因为练习效应导致两次测试的成绩不 一致(常常是第二次偏高) –如果所有被试在练习中得到了等量的促进
• 信度? • 但实际上,不同的被试可能从练习中获益不一致
–如何避免练习效应
重测信度的风险
再测风险1
练习在第二次 测验时得到更 高的分数
足够长的时间 去忘记
再测风险2
心理测量误差的控制
• 误差的控制 –测验的标准化!
心理测量的信度
10
生活中的例子
• 一位同学考研成绩为72分,另外一位同学得分为 74分,最后录用了72分的那位同学! –这是否意味着学院选择了能力更低的一位同学? • 为什么在有的测试中会遇到一个问题“反复”问 的情况 –“我是紧张的”;“我感到紧张束缚”(状态 /特质焦虑量表) • “你幸福吗”是一个测量幸福感好的测量工具吗? –一个项目为什么有问题?
• 项目的代表性、可理解性等
–测量对象
• 测验焦虑、测验经验、学习发展和教育、应试动机、 练习效应、反应倾向、生理变因
–测量过程
• 测试环境、测试时间、主试因素、意外干扰、评分 计分
心理测量误差的来源 • 主试对测量结果的影响 –主试的人格特点:是否善于建立良好人 际关系,是否过于严格或宽松 –主试的期望(罗森塔尔效应):人有在 不确定环境中按照可能有的线索解释情 境的倾向
心理测量的误差
心理测量误差的定义与种类
• 所有的心理测验都是不完美的并存在误差的 –成就测验 –人格测验
心理测量误差的定义
• 误差的定义 –测量误差指的是在测量过程中,那些与测量目 的无关的因素所导致的测量结果不准确或者不 一致的效应
• 误差是由与测量目的无关的变因引起的 • 误差是不准确或不一致的测量结果
以PAI人格评定问卷为例
• PAI(Personality Assessment Inventory, Leslie Morey, 1991)用于成年人的人格临床评定量表 –CPAI,中国人格评定量表,中国科学院心理研 究所,张建新课题组 • 重测信度 –非临床条件下的两个样本群体
• 临床样本估计信度的弊端
H
I J 总和∑
64
64 75 659
78
70 82 676

4992
4480 6151 46742
4096
4096 5625 47449
6084
4900 6724 48256
重测信度的计算
• 皮尔逊积差相关
• X为第一次测验的实得分数;Y为第二次测验的实 得分数;N为被试人数
例1:用某量表测验10名学生,得分记为X,16天后用原量表 对这10名同学再测一次,得分记为Y,问测验结果是否可靠?
• 分半法 –将测验分成两半,然后比较前半部分和后半部 分的题目上个体所得的分数 –前提:两部分在长度和内容上都等价 –分解测验最好的方法:问题随机分配
• 随机分配能够平衡分数中由顺序效应、难度及内容 导致的差异
分半信度系数的调整
• 一个测验中问题的数目与其信度是直接相关的, 缩短一个测验将会减少它的信度 • 在使用分半法时,我们必须对得到的信度系数进 行校正(斯皮尔曼-布朗公式)
• 皮克马力翁效应—暗示的力量 • 罗森塔尔效应—满怀期望的激励 • 生活中的相关例子
心理测量误差的来源 • 被试特点对测量结果的影响
–测验的技巧与练习因素
• 测验的技巧:熟悉测验程序及题目形式 • 练习效应:教育背景较差和经验较少者受练习因素 的影响较为显著;着重速度的测验,练习效果较为 明显
–焦虑和动机因素
什么是信度
• 心理测验是一种测量工具。在这个意义上,它与 尺子、秒表或者温度计没有什么不同
什么是信度
• 信度是决定一个心理测验有多可信的最重要的指 标之一 –指的是测量的一致性程度 –一个好的测验必须稳定可靠,即多次测量的结 果要保持一致 –但并不表明这个测验时有效的(准确性)
什么是信度
• 这个词汇测验是否可信?
心理测量误差的种类 • 误差的种类 –随机误差
• 与测量目的无关的偶然因素引起的误差,使 多次测量产生了不一致的结果 随机误差影响了一致性和准确性,而系统 误差却是恒定的,只是影响准确性 • 与测量目的无关的因素引起的一种恒定而有 规律的效应
–系统误差
心理测量误差的来源
• 误差的来源 –测量工具
复本信度
• 这种方法要求编制测验的人编制该测验的两个版 本:复本测验或等值测验 –可在短时间内重测 • 多用于前后测 –干预研究(工作记忆更新) • 最大的风险 –两个版本的测验不等值
• 成就测验较容易实现等值 • 而人格测验较难(如自尊)
–此外,范式的熟悉如何控制?
例1:用某量表测验10名学生,得分记为X,16天后用原量表 对这10名同学再测一次,得分记为Y,问测验结果是否可靠?
分测验 1.会计技能 2.计算技能 1 (0.90) 2 0.70 (0.85) 3 0.51 0.47 (0.95)
3.使用电子制 表的技术
• 对角线空格中括号内的数字是分测验的α系数, 没有加括号的是数字是分测验之间的相关系数
Another Example
Sampling
North
northeast
1
2 3 4 5
6
总和
4
17
6
28
5
16
3
19
2
17
2.00
19.44
内部一致性 vs. 同质性
• 一致性的方法来估计信度只对同质——只测验一 种特质或特征——的测验有效 –当测验不只一种特质的时候,对内部一致性的 估计会偏低 –例如,对一个应聘会计师工作的人的测量可能 需要测量其会计原理的知识、计算技巧、以及 使用电子制表的能力 –这样的测验是同质还是异质
学生 X Y X· Y X2 Y2
A
B C D E F G
88
80 68 60 96 32 32
94
78 56 48 70 38 62
8272
6240 3808 2880 6720 1216 1984
7744
6400 4624 3600 9216 1024 1024
8836
6084 3136 2304 4900 1444 3844
• 应试动机:被试参加测验的动机不同,会影响其回 答问题的态度、注意力、持久性以及反应速度等 • 测验焦虑:适度的焦虑会使人的兴奋性提高有积极 影响,过度的焦虑会使工作能力降低成绩大多偏低
心理测量误差的来源
• 被试特点对测量结果的影响 –反应定势
• (1) 求“快”与求“精确”的反应定势 • (2) 偏好正面叙述的反应定势 • (3) 偏好特殊位置的反应定势 • (4) 偏好较长选项的反应定势 • (5) 猜测的反应定势:有些被试不愿猜测;相反, 另外有些被试即使告诉他答错要倒扣分,还是无法 阻止其猜测行为
–rxx为整个测验的信度系数,rhh为两个“半测 验”上得分的相关系数(P.157) –注意:只有在分半测验时才使用这个校正公式 ,重测信度和alpha系数不用 –这样的计算是否还是存在一定问题?
将一个六个项目测验进行分半的十种可能方法
分半A的测验项目 1,2,3 1,2,4 1,2,5 1,2,6 分半B的测验项目 4,5,6 3,5,6 3,4,6 3,4,5 信度估计 0.64 0.68 0.82 0.79
不同质的量表或测试
• 对一个异质测验的内部一致性的估计,只估计一 个总体的内部一致性是不合适的 • 应该对每个同质的分测验的内部一致性进行计算 并报告 –对会计师的测验应该有三个对内部一致性的估 计:会计原理分测验的信度估计、计算技巧分 测验的信度估计、使用电子制表软件的分测验 的信度估计
不同质的量表或测试
信度的三种类型
• 考察丈量得到的长度准不准,我们可以—— –重新测量几次 –用不同的工具(e.g.,卷尺、米尺、游标卡尺 等) • 考察心理测验是否可靠,我们共有三种检验信度 的方法 –重测信度 –内部一致性(分半法或alpha系数) –评分者一致性信度
重测信度(再测信度)
• 编制测验的人让参加测试的同一批人在两种不同 情境下完成同一个测验,然后比较再次测验得分 之间的相关 –检测一个测验跨时间的一致性 –两次施测之间的间隔从几个小时到几年不等 –间隔时间是重测信度的一个重要影响因素 –测验编制者报告一个测验的重测信度时,必须 同时说明两次测验之间的间隔时间长短
–75个正常成年人,24小时后重测 –80个大学生,28天后重测
内部一致性
• 如果只能测一次,我们如何估算测验的信度
• 每把尺子上,每个刻度是一致的,既是标准长度 ,尺码是内部一致的 • 一个测验的内部一致性就意味着测验的每个问题 对测验所要衡量的属性都有相同的价值 –P.147,数学问题的例子
衡量内部一致性的方法
矛盾 平衡
情境发生改变
两次间隔时间 不要太长
复本信度
• 对同一群体实施两套在各个方面都非常相似的同 质测验
复本信度
• 这种方法要求编制测验的人编制该测验的两个版 本:复本测验或等值测验 –可在短时间内重测 • 多用于前后测 –干预研究(工作记忆更新)
工作记忆更新任务
• 前测:以水果类名词为材料 –要求被试报告最后n个词 –苹果、桃子、李子、西瓜„„ • 训练:采用数字更新任务 –23,45,67,35,69, „„ • 后测:以工具类名词作为材料 –斧头、锤子、镰刀、剪刀, „„
相关文档
最新文档