难度与区分度分析

合集下载

什么是试题的难度、区分度

什么是试题的难度、区分度

什么是试题的难度、区分度一.试题的难度(一)什么是难度难度是指试题的难易程度,是评价考试的一个非常重要的一个指标。

一个题目,如果大部分考生都能答对,那么这个题目的难度就小;如果大部分考生都不能答对,那么这个题目的难度就大。

(二)难度的计算1.单个选择题目的难度计算单个选择题的难度通常以通过率表示,即以答对或通过该题目的人数占考生人数的百分比表示。

计算公式为:P=R/N. 其中P 代表题目的通过率,R为答对或通过该题目的人数,N为全体考生人数。

P值越大,题目难度越小,答对人数越多。

2.单个非选择题目的难度计算此类题目考试结果不是只有答对或答错两种,而是具有从满分到零分之间多种结果。

计算公式为:P= X/W. 其中P为难度,X为考生在某一题目上的平均得分,W为该题目的满分。

3.整个试题的难度计算(常用)计算公式为:P= X/W. 其中P为难度,X为样本平均得分,W为试卷总分。

如满分150分的试题,考生平均得分108分,则难度为108/150=0.72如考生人数太多时,可先将考生总分从高到低排列,然后将总分最高的27%考生定为高分组,总分最低的27%考生定为低分组,分别计算两组考生的难度值,然后求它们的平均值即可。

(三)试题难度的一般要求就高考来说,难度以适中为宜,单个试题的难度以0.3--0.7之间为好,整卷以0.5--0.6之间为最佳。

一般将难度值大于和等于0.7的试题定为容易题;大于0.4和小于0.7的定为中档题;小于和等于0.4的试题定为难题。

命题时难度一般要按一定比例分配,如3:6:1或3:5:2,一般说来,容易题、难度系数为0.95-0.75,中档题为0.74-0.6,难题为0.59-0.20。

二.试题的区分度(一)什么是区分度区分度是指考试题目对考生心理特征的区分能力。

区分度高的试题能将不同水平的考生区分开来,水平高的考生得高分,水平低的考生得低分。

区分度高的考试,优秀、一般、差三个层次的学生都有一定比例,如果某一分数区间学生相对集中,高分太多或不及格太多的考试,区分度则低。

难度与区分度分析

难度与区分度分析

2、内部一致性系数
区分度的实质是试题得分与总分的相 关,因此,用相关系数表示区分度。
(1)点二列相关系数
①条件:适用于一类变量属二分称名变量
,另一类变量属连续变量。
pq ② rpb
Xp Xq .
St
③对用点二列相关计算出的数值需进行显著性检验 ,才能确定其意义。
r 其一,可以用 XP和 Xq进行差异显著性检验;
CP = (kP 1) (k 1)
k表示每个测题中可供选择的答案数目
例题:10名学生参加一个测验,有一道 题是五选一的选择题,有6人答对,请计算 这道题校正后的难度系数。
P=R/N=0.6,CP=(kP-1)/(k-1)=0.5
(2)主观性试题:得分率
①P= X Xmax
②适用范围:填空题、简答题、论述题、 计算题、作文题等。
3、标准参照测验:教师应该依据教材内容和实际 教学情况来命题或选题。
(四)难度对测验分数分布形态的影响
正偏态——难度值越接近0,测验 分数越集中于低分端;
负偏态——难度值越接近1,测验 分数越集中于高分端;
若测验的难度适当,则测验分数的 分布 正态分布;
(五)基于难度的题目分析
1、难度过低与过高的题目,原则上要淘 汰,但属于必考的知识点,需重新命题, 提高命题的难度;
(二)计算 1、以全体被试得分率为难度系数
(1)客观性试题:通过率 P=R/N
适用题型:选择题、判断题等。
例题:在100个学生中,答对第一题的30人, 答对第二题的60人,这两试题的难度值分别为:
P1
30 100
0.30
P2
60 100
0.60
难度值越小,试题越有难做;难度值越大, 试题越容易。

试卷分析:信度、效度、难度和区分度

试卷分析:信度、效度、难度和区分度

附件6、难度、区分度、信度和效度的一般说明一、难度难度是指试题的难易程度,它是衡量试题质量的一个重要指标参数,它和区分度共同影响并决定试卷的鉴别性。

一般认为,试题的难度指数在0.3-0.7之间比较合适,整份试卷的平均难度最好在0.5左右,高于0.7和低于0.3的试题不能太多。

1、难度的两种定义(1)P=1-x/w其中:x为某题得分的平均分数,w为该题的满分。

这种定义法,难度值小时表明试题容易,值大时表明试题难,最小值为0,最大值为1。

(2)P=x/w这种定义法,难度值小时表明试题难,值大时表明试题容易,最小值为0,最大值为1。

2、难度的计算(1)主观性试题的难度A、基本公式法:P=1-x/wB、极端分组法P=1-(XH+XL)/2W其中:XH为高分组的平均得分(前27%),XL为低分组的平均得分(后27%)。

(2)客观性试题的难度A、基本公式法:P=1-R/N其中:R为答对人数,N为全体人数。

B 极端分组法:P=1-(PH+PL)/2其中:PH=RH/n叫高分组通过率,RH为高分组答对人数,n为总人数的前27%。

PL=RL/n 叫低分组通过率,RL为低分组答对人数。

二、区分度区分度是区分应试者能力水平高低的指标。

试题区分度高,可以拉开不同水平应试者分数的距离,使高水平者得高分,低水平者得低分。

而区分度低则反映不出不同应试者的水平差异。

试题的区分度与试题的难度直接相关。

通常来说,中等难度的试题区分度较大。

另外,试题的区分度也与应试者的水平密切相关,试题难度只有等于或略低于应试者的实际能力,其区分性能才能充分显现出来。

1、区分度指标的评价-1.00≤D≤+1.00,区分度指数越高,试题的区分度就越强。

一般认为,区分度指数高于0.3,试题便可以被接受。

2、区分度的计算方法(1)基本公式法:D=(H-L)/N其中:D代表区分度指数,H代表高分组答对题的人数,L代表低分组答对题的人数,N代表一个组的人数即高分组与低分组人数之和。

「计算试卷的难度和区分度」

「计算试卷的难度和区分度」

试卷难度、区分度计算方法一、难度计算1、难度:指题目的难易程度,或说测验的难易程度,常以试题的通过率作为难度的指标。

难度值在0至1之间。

P>0.8试题太易;P<0.2时,试题太难。

一份试卷应该由不同难度按一定比例组成。

一般地说,P>0.8 、P<0.2的试题各占10%;P=0.2~0.4,和P=0.6~0.8的试题各占20%;P>0.4、P<0.6的中等难度试题应占60%。

整套试卷平均难度在0.4~0.6之间。

2、计算方法(1)客观性试题难度P(这时也称通过率)计算公式:P=k/N(k为答对该题的人数,N为参加测验的总人数)(2)主观性试题难度P计算公式:P=X/M(X为试题平均得分;M为试题满分)(3)适用于主、客观试题的计算公式:P=(PH+PL)/2(PH、PL分别为试题针对高分组和低分组考生的难度值)在大群体标准化中,此法较为方便。

具体步骤为:①将考生的总分由高至低排列;②从最高分开始向下取全部试卷的27%作为高分组;③从最低分开始向上取全部试卷的27%作为低分组;④按上面的公式计算。

例1:一次生物测试中,在100名学生中,高低分组各有27人,其中高分组答对第一题有20人,低分组答对第一题的有5分,这道题的难度为:PH=20/27=0.74 PL=5/27=0.19 P=(0.74+0.19)/2=0.47整个试卷的难度等于所有试题难度之平均值(包括主、客观试题)。

区分度区分度是高考试题分析的一个指标,反映了试题对考生素质的区分情况。

其数值在-1~1之间,数值越高,说明试题设计的越好。

参数含义 :反应一个题目的鉴别能力,由其可得到三方面的信息:题目能否有效的测量或预测所要了解的某些特性或正态;题目能否与其他题目一致的分辩被试;以及被试在该题的得分和测验总分数间的一致性如何。

区分度取值介于(-1,+1)。

输入高分组(即得分最高的27%)被试在该题上的通过率(PH),低分组(即得分最低的27%)被试在该题上的通过率(PD)操作 :D=PH-P LPH:等于“假设被试群体是高分组时算出来的难度值”P L:等于“假设被试群体是低分组时算出来的难度值”输出区分度(D)区分度是指测试题目对所测试的属性的鉴别力,也就是测试的效度。

信度效度难度区分度分析

信度效度难度区分度分析

信度效度难度区分度分析在教育测量和评估领域,信度、效度、难度和区分度是四个非常重要的概念。

它们对于衡量测试的质量、评估学生的学习成果以及改进教学方法都具有至关重要的意义。

接下来,让我们逐一深入探讨这四个概念。

信度,简单来说,就是指测试结果的稳定性和可靠性。

如果我们对同一批学生在相同的条件下进行多次相同的测试,得到的结果应该是相近的。

就好比用同一把尺子去测量一个物体的长度,每次测量的结果都应该差不多。

信度主要包括重测信度、复本信度和内部一致性信度等。

重测信度是在不同时间对同一批被试进行重复测量。

比如,今天对一群学生进行了一次数学测验,一周后再用相同的测验对他们进行测试,如果两次测试的成绩相近,说明这个测验的重测信度较好。

然而,重测可能会受到记忆、练习等因素的影响。

复本信度则是使用两个平行的测验(即内容、形式、难度等方面都相似)对同一批被试进行测量。

如果两个测验的结果一致性高,就表明复本信度良好。

但要编制两个高质量的平行测验并非易事。

内部一致性信度通常通过计算测验内部各个项目之间的相关程度来衡量。

例如,一份试卷中的各个题目,如果它们在测量同一个知识点或能力方面表现出较高的一致性,那么这份试卷的内部一致性信度就比较高。

常用的计算方法有克朗巴赫α系数等。

效度是指测试能够准确测量出所要测量的东西的程度。

好比射箭要射中靶心,测验也要准确测量到我们期望测量的内容。

效度主要包括内容效度、结构效度和效标关联效度。

内容效度关注的是测验内容是否涵盖了所要考查的知识和技能范围。

比如,一场语文考试如果能够全面考查学生的字词、语法、阅读理解和写作能力,那么它在内容效度方面就表现较好。

为了确保内容效度,出题者需要对教学大纲和课程目标有清晰的理解。

结构效度考察的是测验是否能够反映出所假设的理论结构或心理特质。

比如,一个智力测验是否真正测量了智力的各个方面,而不仅仅是某些表面的表现。

这需要通过复杂的统计分析和理论研究来验证。

效标关联效度则是将测验结果与一个外在的标准进行比较。

2.3难度和区分度

2.3难度和区分度

第三节难度和区分度一个测验的信度和效度在很大程度上取决于该测验的题目参数(难度和区分度),编制和筛选具有适当参数的题目是改善测验信度和效度的前提。

在通常情况下只要讨论常模参照测验中题目的难度和区分度。

一、难度受测团体中被试者在答案范围内回答题目的程度称为难度。

一般用难度指数p表示题目的难度。

1.题目难度的计算当题目的评分为多值时,受测者的得分可能是x(x=1,2,…,n,n为该题满分数)。

所谓难度指数(有时也称得分率),就是该题平由此可见,平均分越高,p值越大,题目的难度越小;平均分越低,p值越小,题目的难度越大。

当题目为二值评分(即0、1评分)时,上式可变形为其中,N是答题人数,R是答对人数。

这种难度指数也称为通过率,一般用于是非题或多项选择题。

由通过率可知,答对人数越多,p值越大,题目的难度越小;答对人数越少,p值越小,题目的难度越大。

形式为多选一的选择题有多个可能的答案供受测者选择。

选择正确答案的人数可能会受猜测机遇的影响,可供选择的答案越少,这种机遇的影响就越大。

对此,可以用公式对难度指数p进行校正。

其中,C是校正后的难度指数,p是校正前的难度指数,k是每个p题目可供选择的答案数。

2.题目难度的等距量表在进行测量时,用来表示一些对象和事件的某些特征的指标称作量表。

根据不同的单位和参照点,从低级到高级,从模糊到精确,可以用不同的量表表示。

用平均得分比率或答对人数比率表示难度,仅说明事物含有某种属性的多少,它是无相等单位,不具有等距性和可加性的顺序量表。

这种量表只能表示事物间的大小、次序关系,不能反映两个比率间的数量差异。

我们可以把这种量表转换成不仅有大小关系,而且有相等单位和规定参照点的等距量表,使其能表示题目之间难度差异的大小。

美国教育测验服务处(ETS)采用的难度指数为Δ=13+4Z,其中,Δ是正态化的等距难度指数,13是平均数,4是标准差,Z是标准正态曲线下的面积(即p值)所对应的值。

项目难度与区分度的影响因素与测量方法

项目难度与区分度的影响因素与测量方法

项目难度与区分度的影响因素与测量方法概述在项目管理中,项目难度和区分度是决定项目成功与否的重要因素。

本文将探讨项目难度和区分度的影响因素以及测量方法,以帮助项目经理更好地评估项目的复杂性和挑战性,从而制定合理的计划和策略。

影响因素1. 项目规模:项目规模是衡量项目难度和区分度的重要指标。

规模越大,涉及的功能点、团队规模、资源投入等都会增加,难度和区分度也会相应提高。

2. 技术复杂性:技术复杂性是指项目中所涉及的技术难题和解决方案的复杂程度。

如果项目需要采用前沿技术或者解决技术壁垒,那么难度和区分度就会提高。

3. 资源限制:项目中可能存在资源受限的情况,例如时间、人力、预算等。

资源限制会增加项目难度,同时也会影响项目的区分度。

4. 环境不确定性:项目所处的外部环境不确定性也会影响项目的难度和区分度。

例如,市场需求、竞争状况、法律法规等因素的变化都会对项目的进行带来影响。

测量方法1. 项目难度评估矩阵:项目难度评估矩阵是一种常用的评估方法。

通过综合考虑项目规模、技术复杂性、资源限制和环境不确定性等因素,对项目的难度进行评估和量化。

评估结果可以作为项目决策和资源分配的依据。

2. 专家访谈:专家访谈是收集项目难度和区分度信息的有效方法。

通过与相关领域的专家进行访谈,获取他们的意见和建议,以了解项目的难度和区分度。

3. 经验总结和案例分析:对过往的项目经验进行总结和分析,可以得出一些关于项目难度和区分度的规律和经验。

通过借鉴和参考这些经验,可以更好地评估当前项目的复杂性和挑战性。

4. 可行性研究报告:在项目启动前,进行详细的可行性研究,包括市场分析、技术评估、竞争情况等。

可行性研究报告可以提供对项目难度和区分度的详细分析,为项目管理提供重要参考。

结论项目难度和区分度是影响项目成功的重要因素,项目经理需要充分了解和评估项目的复杂性和挑战性,以制定合理的计划和策略。

影响项目难度和区分度的因素包括项目规模、技术复杂性、资源限制和环境不确定性等。

难度与区分度

难度与区分度



1、难度
1.2 难度的计算
01)基本公式

2. 用项目得分的平均值计算难度(当题目分数是多分值时) 当项目是用连续分数计分时,难度一般用参加测验的全体学生在该项目的平 均得分与该项目的满分的比值为指标,即:P=X/W(P为项目难度;X为 该项目的平均得分;W为该项目的满分。) 例,一组被试在某题目上得分分别为:2,5,9,10,4,8,7,5,3,0 该题目满分为10 分,则该题目的难度X/W=2+5+9+10+4+8+7+5+3+0/100=0.53
2.区分度
2.3 提高区分度的方法 01) 使题目的难度适中,使整个考试难度适中

题目的难度适中可使区分度达到最大值,因此,使难度适中是提高区分度的 重要方法。 使高能学生得高分或低能学生得低分,使分数尽量分布在整个分数量尺上。
02) 着重考察复杂的学习结果

03) 掌握区分度的评价标准(极端分组法计算的区分度评价标准)
D=(XH-XL)/N(H-L) XH为高分组得分总数 XL为低分组得分总数 H为该道题的最高分 L为该道题的最低分 N为应试总人数的25%。
2.区分度
2.2 区分度的计算
02)内部一致性系数
标准化的或大规模的测验中,多采用相关法分析试题的区分度,通过计 算某一题目得分与测验总得分或效标分数的相关系数来判定。相关越 大,区分度越高。 点二列相关:适用于二分变量(0,1记分),测量总分连续 二列相关:两个变量都是正态连续,其中一个被认为分为两类(及格、不 及格) 积差相关:非二分变量,得分具有连续性,被试团体较大时,可认为 服从正态分布。题目得分与测验总分求积差相关系数得到区分度。
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

(三)测验题目的适宜难度 1、常模参照测验:整个测验所有题目的难度系数 分布在0.30~~0.70之间,并且整个测验的难度系 数在0.50左右时,可使测验对被试有较大的鉴别 力,而且可以使测验分数接近正态分布。 2、如果测验的目的在于选拔人才,那么,测题难 度指数的平均数,应由录取率而定。 3、标准参照测验:教师应该依据教材内容和实际 教学情况来命题或选题。
例题:高中物理测验的被试共18人,高 分组和低分组若各取总人数的27%,则两 组各为5人。第五题为是非题,高分组5个 人全部答对,低分组5个人中有1个人答对 ,根据公式,该题的鉴别指数为:
5 1 0.80 >0.40 D= 5 5
2、内部一致性系数 区分度的实质是试题得分与总分的相 关,因此,用相关系数表示区分度。 (1)点二列相关系数 ①条件:适用于一类变量属二分称名变量 ,另一类变量属连续变量。 X p Xq . ②r
例题:在100个学生中,答对第一题的30人, 答对第二题的60人,这两试题的难度值分别为:
30 P1 0.30 100
60 P2 0.60 100
难度值越小,试题越有难做;难度值越大, 试题越容易。
校正难度:
CP =
(kP 1) (k 1)
k表示每个测题中可供选择的答案数目 例题:10名学生参加一个测验,有一道 题是五选一的选择题,有6人答对,请计算 这道题校正后的难度系数。 P=R/N=0.6,CP=(kP-1)/(k-1)=0.5
(3)积差相关系数 ①适用条件:非二分法记分的项目,题目 分数分布接近正态分布,测验总分为连续 变量。 XY ② XY
r N S X SY
③显著性检验: 当N>50时,采用正态分布检验, Z=
r
N -1 1- r2
当N<50时,采用t分布检验,
t=
r
N 2 1 r2
或者根据r值查“积差相关系数显著性临界值表”。
在“Old value”方框中,选择第五 个“Range”,在“Lowest through”后 的空格内输入低分组界限“83”(代表 最低分至83),在右边的“New value”方框中,选择“value”,在后面 的空格内输入“2”→“Add”,(高分组 用同样步骤)→ “Continue” →“OK”
质 量 分 析
定量分析
采用统计方法分 析试题的品质, 主要包括难度、 区分度等分析 分析试题的内容 分析试题文字的 合适性等
定性分析
一、难度的分析 (一)含义 (二)估算方法 1、得分率 2、失分率 3、极端分组法 4、卷面难度 5、难度的取值范围 (三)测验题目的适宜难度 (四)难度对测验分数分布形态的影响 (五)基于难度的题目分析
例题:在100名学生中,高分组与低分组各有 27人。其中高分组答对第一题的有20人, 低分组答对第一题的有10人。这道试题的 难度系数为:
PH 20 / 27 0.74,
PL 10 / 27 0.37,
P (0.74 0.37) 2 0.56
4、卷面难度:试卷包含的所有试题难度 的平均数 5、难度系数的取值范围是在0—1之间
二、区分度的分析 (一)定义 1、概念 2、取值范围 3、鉴别指数的评价标准 (二)计算方法 1、极端分组法 2、内部一致性系数 (1)点二列相关系数 (2)二列相关系数 (3)积差相关系数 (三)标准参照测验题目区分度的其他研究方法 (四)区分度与难度的关系 SPSS操作法
一、难度分析 (一)含义 测验的难易程度,即被试完成项目任务时所 遇到的困难程度。难度系数用符号P表示。 (二)计算 1、以全体被试得分率为难度系数 (1)客观性试题:通过率 P=R/N 适用题型:选择题、判断题等。
“Analyze”→“Compare”→“Indep endent-Samples T TEST”→选取变量 到“Test variables”→“Grouping Variable”选择“zf” →“Define Variable” →输入组别代号 →“Continue”→“OK”
(2)主观性试题:得分率 ①P= X Xmax
②适用范围:填空题、简答题、论述题、 计算题、作文题等。 例题
2、以全体被试失分率为难度系数 q=1-P 3、极端分组法 P=(PH PL)2
具体计算步骤: ①按被试的总分,将全体被试从高到低进行排序; ②从高分往下找,找出高分组;由低分往上找,找 出低分组。两组人数分别占总人数的27%; ③分别计算高分组、低分组的被试在该题目上的平 均得分; ④代入以上公式分别计算高分组和低分组被试在同 一题目上的难度系数; ⑤把 P 和 P 代入以上公式,计算这个题目的难度 H L 系数。
rpb
3 N
rpb

(2)二列相关系数 ①适用条件:两个变量都是正态变量,一 列是连续的,另一列是人为划分的二分变 量(例如,把学习成绩分为及格和不及格 等)。 ② rb X p X q . pq
St
Y
③显著性检验: Z
rb 1 Y pq N
当Z> Z 0.05 =1.96时,未达到显著性水平; 当Z > Z =1.96时,达到显著性水平。 0.05 ④求二列相关也可用费拉南根的项目分析表 直接查得r值。其步骤为:分别计算高、低 分组通过的比率,然后在 PH 、 PL 相应的 交叉处查得r值。 例题
④适用题型:填空题、简答题、论述题、计算题、作文 题等。
(三)标准参照测验题目区分度的其他研究 方法 1、对同一组学生在教学前后的测验结果 进行比较; 2、对接受教学与未接受教学的两组学生 的测验结果进行比较; 3、对已掌握组与未掌握组的学生的测验;难 度系数过大或过小,试题的区分度都不会 很好。当试题的难度为0.50时,试题的区 分度达到了最大值。
鉴别指数(D)
区分度评价
0.40以上
0.30-0.39
非常优良
良好,如能改进更好
0.20-0.29
0.19以下
尚可,用时需作改进
劣,必须淘汰或改进以提高 区分度
(二)计算方法 1、极端分组法 (1)适用范围:被试人数太多时测验的区分 度的估计
(2)公式D=
, PH -P L
(3)步骤: ①排序 ②分组 ③分别计算两组的通过率 ④按以上公式计算试题区分度。
(四)难度对测验分数分布形态的影响 正偏态——难度值越接近0,测验 分数越集中于低分端; 负偏态——难度值越接近1,测验 分数越集中于高分端; 若测验的难度适当,则测验分数的 分布 正态分布;
(五)基于难度的题目分析 1、难度过低与过高的题目,原则上要淘 汰,但属于必考的知识点,需重新命题, 提高命题的难度; 2、由于出现科学性错误而导致难度不符 ,需重新命题; 3、命题、内容均无大问题但难度不符的 题目需进行详细分析找出原因所在。
pb
St
pq
③对用点二列相关计算出的数值需进行显著性检验 ,才能确定其意义。 其一,可以用 X P和 X q进行差异显著性检验; 其二,可根据 pb 值查“积差相关系数显著性 临 2 界值表”; rpb N rpb 其三,当N>50时,若 > ,
r
在0.05水平上显著;若 > , 0.01水平上显著。 ④适用题型:选择题、判断题等(例题)
二、区分度分析 (一)定义 1、测验题目对学业水平不同的考生的区分 程度或鉴别能力,用符号D表示。 具有良好区分度的测验,实际水平高的学 生应得高分,水平低的学生应得低分。 2、取值范围介于-1至1 之间。 若D>0时,则为积极区分; 若D=0时,则说明题目无区分能力; 若D<0时,则为消极区分
3、鉴别指数的评价标准
区分度SPSS操作程序
打开数据“File”→“Open” →“Data”:
“Transform”→“computer”
“Data”→“Sort Cases”
计算高低分组的人数及其高低分组界限 ,“Transform”→“Recode” →“Into different Variables” →将要转换的变量输 入“Name”、“Label”→“Change”→ “Old and New Values”
相关文档
最新文档