培训评估是四层次模型

培训评估是四层次模型
培训评估是四层次模型

培训评估是四层次模型

第一层次是最基础的评估,是对学员对课程的满意程度。这个过程相对简单,学员基本上只需根据自己的感觉来判断对课程内容、讲师的满意度。

接着第二层次的评估就进入实质性阶段:学员到底学到了什么。这就需要通过一定的方法测量学员的学习成果。是技能类的培训,就要考察学员有没有掌握这些技能;是知识类的培训,就要考察学员对讲授的知识理解、记忆得如何;如果是态度教育,就要设定恰当的方式来测量学员对讲授内容的接受程度。总的来说,第二个层次的评估是测量学员在走出培训地点时的收获。前两个层次的评估中,培训管理部门是主动的。

道理上来说,只要做到了培训效果评估的这两个层次,培训管理部门即可以理直气壮说自己已经达到了预定的绩效--之所以有这样的判断,是因为后两者的评估根本就不是培训管理部门的职责。

进入第三层次的评估,事情就会变得复杂起来。学员多大程度上能将所学用于改变自己的行为?在多长的时间内,行为实现了怎样的改变?这些结果应该由谁来管控?培训管理部门?仅凭有限的人力,能管控全公司大量员工的行为改变吗?人事部门?同样的,仅凭有限的人力,能管控得过来吗?如果真是这样认为,显然无异于让品质管理部门来管理各部门的质量水平做法。所以真正应该在此层次担任评估主体的是部门主管。他们要通过恰当的方法,管理学员应用培训所学的幅度、深度和进度,也只有依靠他们的管控,学员改变行为的能力才能转化为实实在在的行为改变,最终带来我们渴望的绩效改善。

好多培训评估最终的结果不甚了了,主要的问题就出在第三个层次:部门主管在这个阶段中没有履行自己的职责,导致员工尽管具备改变行为进而改善绩效的能力,却因为不能形成习惯带来长期、有意识的行为改变,最终期望的绩效改善就落了空。

培训效果评估的第四个层次,实际上是对培训过程的绩效评估的延伸,将个人绩效的一部分作为有效培训带来的益处。因为培训和绩效是同处一个公司内,只要个人绩效达到了组织的预期,没有太大的必要来精确测量因培训带来的绩效收益到底为何。但这一层次的评估对评价培训的有效性来说,所担负的作用是基准性的:如果解决了实际问题,那我们就可以说整个培训过程是有效的;如果没有解决实际存在的绩效问题,则说明这个培训过程还要予以改善。当然,这并不一定意味着培训管理部门的绩效存在问题。

培训评估是四层次模型

培训评估是四层次模型 第一层次是最基础的评估,是对学员对课程的满意程度。这个过程相对简单,学员基本上只需根据自己的感觉来判断对课程内容、讲师的满意度。 接着第二层次的评估就进入实质性阶段:学员到底学到了什么。这就需要通过一定的方法测量学员的学习成果。是技能类的培训,就要考察学员有没有掌握这些技能;是知识类的培训,就要考察学员对讲授的知识理解、记忆得如何;如果是态度教育,就要设定恰当的方式来测量学员对讲授内容的接受程度。总的来说,第二个层次的评估是测量学员在走出培训地点时的收获。前两个层次的评估中,培训管理部门是主动的。 道理上来说,只要做到了培训效果评估的这两个层次,培训管理部门即可以理直气壮说自己已经达到了预定的绩效--之所以有这样的判断,是因为后两者的评估根本就不是培训管理部门的职责。 进入第三层次的评估,事情就会变得复杂起来。学员多大程度上能将所学用于改变自己的行为?在多长的时间内,行为实现了怎样的改变?这些结果应该由谁来管控?培训管理部门?仅凭有限的人力,能管控全公司大量员工的行为改变吗?人事部门?同样的,仅凭有限的人力,能管控得过来吗?如果真是这样认为,显然无异于让品质管理部门来管理各部门的质量水平做法。所以真正应该在此层次担任评估主体的是部门主管。他们要通过恰当的方法,管理学员应用培训所学的幅度、深度和进度,也只有依靠他们的管控,学员改变行为的能力才能转化为实实在在的行为改变,最终带来我们渴望的绩效改善。 好多培训评估最终的结果不甚了了,主要的问题就出在第三个层次:部门主管在这个阶段中没有履行自己的职责,导致员工尽管具备改变行为进而改善绩效的能力,却因为不能形成习惯带来长期、有意识的行为改变,最终期望的绩效改善就落了空。

层次分析法模型

二、模型的假设 1、假设我们所统计和分析的数据,都是客观真实的; 2、在考虑影响毕业生就业的因素时,假设我们所选取的样本为简单随机抽样,具有典型性和普遍性,基本上能够集中反映毕业生就业实际情况; 3、在数据计算过程中,假设误差在合理范围之内,对数据结果的影响可以忽略. 三、符号说明

四、模型的分析与建立 1、问题背景的理解 随着我国改革开放的不断深入,经济转轨加速,社会转型加剧,受高校毕业生总量的增加,劳动用工管理与社会保障制度,劳动力市场的不尽完善,以及高校的毕业生部分择业期望过高等因素的影响,如今的毕业生就业形势较为严峻.为了更好地解决广大学生就业中的问题,就需要客观地、全面地分析和评价毕业生就业的若干主要因素,并将它们从主到次依秩排序. 针对不同专业的毕业生评价其就业情况,并给出某一专业的毕业生具体的就业策略. 2、方法模型的建立 (1)层次分析法 层次分析法介绍:层次分析法是一种定性与定量相结合的、系统化、层次化的分析方法,它用来帮助我们处理决策问题.特别是考虑的因素较多的决策问题,而且各个因素的重要性、影响力、或者优先程度难以量化的时候,层次分析法为我们提供了一种科学的决策方法. 通过相互比较确定各准则对于目标的权重,及各方案对于每一准则的权重.这些权重在人的思维过程中通常是定性的,而在层次分析法中则要给出得到权重的定量方法. 我们现在主要对各个因素分配合理的权重,而权重的计算一般用美国运筹学

家T.L.Saaty 教授提出的AHP 法. (2)具体计算权重的AHP 法 AHP 法是将各要素配对比较,根据各要素的相对重要程度进行判断,再根据计算成对比较矩阵的特征值获得权重向量k W . Step1. 构造成对比较矩阵 假设比较某一层k 个因素12,,,k C C C 对上一层因素ο的影响,每次两个因素i C 和j C ,用ij C 表示i C 和j C 对ο的影响之比,全部比较结果构成成对比较矩阵C ,也叫正互反矩阵. *()k k ij C C =, 0ij C >,1 ij ji C C =, 1ii C =. 若正互反矩阵C 元素成立等式:* ij jk ik C C C = ,则称C 一致性矩阵. 标度ij C 含义 1 i C 与j C 的影响相同 3 i C 比j C 的影响稍强 5 i C 比j C 的影响强 7 i C 比j C 的影响明显地强 9 i C 比j C 的影响绝对地强 2,4,6,8 i C 与j C 的影响之比在上述两个相邻等级之间 11 ,,29 i C 与j C 影响之比为上面ij a 的互反数 Step2. 计算该矩阵的权重 通过解正互反矩阵的特征值,可求得相应的特征向量,经归一化后即为权重向量 12 = [ , ,..., ]T k k k kk Q q q q ,其中的ik q 就是i C 对ο的相对权重.由特征方程 A-I=0λ,利用Mathematica 软件包可以求出最大的特征值 max λ 和相应的特征向 量. Step3. 一致性检验 1)为了度量判断的可靠程度,可计算此时的一致性度量指标CI :

柯氏评估模型复习课程

柯氏评估模型 又称柯氏四级培训评估模式(Kirkpatrick Model),由唐纳德.L.柯克帕特里克(Donald.L.Kirkpatrick)提出,是世界上应用最广泛的培训评估工具,在培训评估领域具有难以撼动的地位。 柯氏培训评估模式,简称“4R”,主要内容: Level 1 反应评估(Reaction) :评估被培训者的满意程度; Level 2.学习评估(Learning):测定被培训者的学习获得程度; Level 3.行为评估(Behavior) :考察被培训者的知识运用程度; Level 4.成果评估(Result):计算培训创出的经济效益。 也有人在这个基础上发展了第五级即Level 5.投资报酬率评估(ROI)。 柯氏培训评估模式的四个阶段 阶段一、学员反应:在培训结束时,向学员发放满意度调查表,征求学员对培训的反应和感受。问题主要包括: 对讲师培训技巧的反应 对课程内容的设计的反应 对教材挑选及内容,质量的反应 对课程组织的反应 是否在将来的工作中,能够用到所培训的知识和技能

学员最明了他们完成工作所需要的是什么。如果学员对课程的反应是消极的,就应该分析区分是课程开发设计的问题还是实施带来的问题。这一阶段的评估还未涉及培训的效果。学员是否能将学到的知识技能应用到工作中去还不能确定。但这一阶段的评估是必要的。培训参加者的兴趣,受到的激励,对培训的关注对任何培训项目都是重要的。同时,在对培训进行积极的回顾与评价时,学员能够更好地总结他们所学习的内容。 阶段二、学习的效果: 确定学员在培训结束时,是否在知识,技能,态度等反面得到了提高。实际上要回答一个问题:“参加者学到东西了吗?”这一阶段的评估要求通过对学员参加培训前和培训结束后知识技能测试的结果进行比较,以了解是否他们学习到新的东西。同时也是对培训设计中设定的培训目标进行核对。这一评估的结果也可体现出讲师的工作是否是有效的。但此时,我们仍无法确定参加培训的人员是否能将他们学到的知识与技能应用到工作中去。 阶段三、行为改变: 这一阶段的评估要确定培训参加者在多大程度上通过培训而发生的行为上的改进。可以通过对参加者进行正式的测评或非正式的方式如观察来进行。总之,要回答一个问题:“人们在工作中使用了他们所学到的知识,技能和态度了吗?”尽管,这一阶段的评估数据较难获得,但意义重大。只有培训参与者真正将所学的东西应用到工作中,才达到了培训的目的。只有这样,才能为开

评估模型

如何评判培训目标的达成,分析培训是否给受训者带来知识的改变和能力的提升,最终给企业和社会带来效益,企业培训效果评估管理在现代企业中日益凸显其重要性。 多模式的企业培训效果评估 企业培训效果评估管理是指收集企业和受训者从培训当中获得的收益情况,以衡量培训是否有效的过程。培训效果评估通过不同的测量工具评价培训目标的达程度,并据此判断培训的有效性以作为未来举办类似培训活动时的参考。其目的是便于企业在选择、调整各种培训活动以及判断价值的时候做出更明智的抉择。培训效果评估产生于上世纪50年代,经过半个多世纪的发展,经历了从定性评估到定量评估、分层次评估到分阶段评估等阶段,在这里笔者介绍二种类型的评估模式。 分层次评估模式 分层次评估模式主要有柯克帕特里克(Kirkpatrick)的四层次企业培训评估模型、考夫曼(Kaufman)的五层次评估模型、菲力普斯(Phillips)的五级投资回报率(ROI)模型等。 柯克帕特里克模型是迄今为止国内外运用最广泛的模型。由威斯康星大学教授唐纳德?柯克帕特里克于1959年提出来的,他按照评估的深度和难度递进的顺序将培训效果分为4个层次:反应层、学习层、行为层和结果层。 反应层即受训人员对培训项目的反应和评价,是培训效果评估中的最低层次。它包括对培训师、培训管理过程、测试过程、课程材料、课程结构的满意等。 学习层该层次的评估反映受训者对培训内容的掌握程度,主要测定学员对培训的知识、态度与技能方面的了解与吸收程度等。 行为层行为层是测量在培训项目中所学习的技能和知识的转化程度,学员的工作行为有没有得到改善。这方面的评估可以通过学员的上级、下属、同事和学员本人对接受培训前后的行为变化进行评价。 结果层它用来评估上述(反应、学习、行为)变化对组织发展带来的可见的和积极的作用。此阶段的评估上升到组织的高度,但评估需要的费用、时间、难度都是最大的,是培训效果评估的难点。 考夫曼(Kaufman)扩展了柯克帕特里克的四层次模型,他认为培训能否成功,培训前的各种资源的获得至关重要,因而应该在模型中加上这一层次的评估。他认为,培训所产生的效果不仅仅对本组织有益,它最终会作用于组织所处的环境,从而给组织带来效益。因而他加上了第五个层次,即评估社会和客户的反应。

柯氏四级培训效果评估法

柯氏四级评估模型,八个字来说,即是反应(一级),学习(二级),行为(三级),结果(四级)。 培训评估标准有四级: 1.反应标准(一级评估) 用于对表面效果的测评,通过学员的情绪、注意力、赞或不满等对每一个接受培训的人员对培训效果作出评价评价,结合所有人员的总体反应可以得出对培训效果的基本评价。 2.学习标准(二级评估) 培训学习到了什么培训内容方法是否合适、有效,培训的每一学习过程是否满足和达到了培训所提出的要求 3.工作行为标准(三级评估) 分析培训是否带来了人员行为上的改变。培训的目的是提高能力,而能力是通过行为表现出来的。因此,评价培训的效果就要看受训者在工作行为上发生的可观察变化及培训前后的变化程度。 4.组织成果标准(四级评估) 培训的最终评价应该是以组织的工作绩效为标准。也就是说,工作行为的改变带来的是工作绩效的提高。因此,可以直接对接受培训之后的员工工作业绩,以及所在工作部门、科室的集体工作成绩进行测量、分析和判断,确定培训的效果。 以上四个方面主要是从培训实施者的角度对培训进行评价。培训评价的核心是:考察培训的手段和方法是否有利于提升工作绩效。

培训评估四级标准比较表 二、评估时机 1.一级评估在培训中进行☆二级评估在培训中培训结束时进行2.三级评估在培训结束三个月之后的工作中进行,或在工作中实施与培训内容相关的工作时进行 3.四级评估在培训后半年、一年后从工作绩效中进行评估,或在与培训内容相关的绩效考核中进行 三、评估方法 1.一级评估多采用培训效果问卷调查、与参训人面谈、培训时观察等方法进行。 2.二级评估采用的方法有:课程中测验或考试,培训效果调查问卷,参训人员培训心得报告等。 3.三级评估。几个月后,以局部调查或访问的方式,访问受训人、受训人直属主管、受训人同事或部属,根据工作量有无增加、工作素质有无提高、工作态度有无变化、处理工作是否感到比前熟练等等进行评估。 4.四级评估。绩效考核法,如过绩效考核,发现员工受训后,在工作数量、工作质量、工作态度、工作效率上,均能达到工作标准的要求,则表示培训卓有成效。 四、评估调查 通过组织和讨论,让参加过培训员工对其所经历的培训发表看法和意

数学建模之层次分析法

第四讲层次分析法 在现实世界中,往往会遇到决策的问题,比如如何选择旅游景点的问题,选择升学志愿的问题等等。在决策者作出最后的决定以前,他必须考虑很多方面的因素或者判断准则,最终通过这些准则作出选择。 比如选择一个旅游景点时,你可以从宁波、普陀山、浙西大峡谷、雁荡山和楠溪江中选择一个作为自己的旅游目的地,在进行选择时,你所考虑的因素有旅游的费用、旅游地的景色、景点的居住条件和饮食状况以及交通状况等等。这些因素是相互制约、相互影响的。我们将这样的复杂系统称为一个决策系统。这些决策系统中很多因素之间的比较往往无法用定量的方式描述,此时需要将半定性、半定量的问题转化为定量计算问题。层次分析法是解决这类问题的行之有效的方法。层次分析法将复杂的决策系统层次化,通过逐层比较各种关联因素的重要性来为分析、决策提供定量的依据。 一、建立系统的递阶层次结构 首先要把问题条理化、层次化,构造出一个有层次的结构模型。一个决策系统大体可以分成三个层次: (1) 最高层(目标层):这一层次中只有一个元素,一般它是分析问题的预定目标或理想结果; (2) 中间层(准则层):这一层次中包含了为实现目标所涉及的中间环节,它可以由若干个层次组成,包括所需考虑的准则、子准则; (3) 最低层(方案层):这一层次包括了为实现目标可供选择的各种措施、决策方案等。 比如旅游景点问题,我们可以得到下面的决策系统: 目标层——选择一个旅游景点 准则层——旅游费用、景色、居住、饮食、交通 方案层——宁波、普陀山、浙西大峡谷、雁荡山、楠溪江 二、构造成对比较判断矩阵和正互反矩阵 在确定了比较准则以及备选的方案后,需要比较若干个因素对同一目标的影响,从额确定它们在目标中占的比重。如旅游问题中,五个准则对于不同决策者在进行决策是肯定会有不同的重要程度,而不同的方案在相同的准则上也有不同的适合程度表现。层次结构反映了因素之间的关系,但准则层中的各准则在目标衡量中所占的比重并不一定相同,在决策者的

培训效果评估-实际案例

培训评估 培训评估的层次与内容 在评估培训效果方面,当前对培训评估进行系统总结的模型占主导地位的仍然是“柯氏(Kirkpatrick)模式”的四层次模型(详见表1),这种评估工具较为实用,它不仅要求观察学员的反应和检查学员的学习结果,而且强调衡量培训前后的表现和公司经营业绩的变化。柯氏将评估活动分为四个级别,对培训效果进行评估。 阶段一、学员反应: 在培训结束时,向学员发放满意度调查表,征求学员对培训的反应和感受。问题主要包括: 1、对讲师培训技巧的反应 2、对课程内容的设计的反应 3、对教材挑选及内容,质量的反应 4、对课程组织的反应 5、是否在将来的工作中,能够用到所培训的知识和技能 阶段二、学习的效果: 确定学员在培训结束时,是否在知识,技能,态度等反面得到了提高。实际上要回答一个问题:“参加者学到东西了吗?”这一阶段的评估要求通过对学员参加培训前和培训结束后知识技能测试的结果进行比较,以了解是否他们学习到新的东西。同时也是对培训设计中设定的培训目标进行核对。这一评估的结果也可体现出讲师的工作是否是有效的。阶段三、行为改变: 这一阶段的评估要确定培训参加者在多大程度上通过培训而发生的行为上的改进。可以通过对参加者进行正式的测评或非正式的方式如观察来进行。总之,要回答一个问题:“人们在工作中使用了他们所学到的知识,技能和态度了吗?”尽管,这一阶段的评估数据较难获得,但意义重大。只有培训参与者真正将所学的东西应用到工作中,才达到了培训的目的 阶段四、产生的效果: 这一阶段的评估要考察的不在是受训者的情况,而是从部门和组织的大范围内,了解因培训而带来的组织上的改变效果。既要回答“培训为企业带来了什么影响?”可能是经济上的,也可能是精神上的。如产品质量得到了改变,生产效率得到了提高,客户的投诉减少了等等。

柯氏(kirkpatrick)培训四级评估模型

评估是为了改进培训质量、提高培训效果、降低培训成本。针对评估结果,重要的是要采取相应的纠偏措施并不断跟踪。、 培训评估的方法及层次 在培训效果方面,当前对培训评估进行系统总结的模型占主导地位的仍然是“柯氏(Kirkpatrick)模式的”四层次模型,这种评估工具较为实用,它不仅要求观察学员的反应和检查学员的学习效果,而且强调衡量培训前后的表现和公司经营业绩的变化。柯氏将 评估活动分为四个级别,对培训效果进行评估 柯氏(kirkpatrick)培训四级评估模型 一级评估要注意学员的反应。因为无论教师怎样认真细致地备课,只要学员对某些课题不感兴趣,他们就不会认真地进行学习;反应层评估是指受训人员对培训项目的看法,包括对材料、老师、设施、方法和内容的等等的看法。反应层评估的主要方法是问卷。问卷调查是在培训项目结束时,收集受训人员对于培训项目的效果和有用性的反应,受训人员的反应对于重新设计或继续培训项目至关重要。反应问卷调查易于实施,通常只需要几分钟时间。如果设计适当的话,反应问卷调查也很容易分析、制表和总结。问卷调查的缺点是数据是主观的,并且是建立在受训人员在测试时的意见和情感之上的。个人意见的偏差有可能夸大评定分数,而且,在培训课程结束前的最后一节课,受训人员对课程的判断很容易受到经验丰富的培训协调员或培训机构的领导者富有鼓动性的总结发言的影响,加

之有些受训人员为了照顾情面,所有这一切均可能在评估是减弱受训人员原先对该课程不好的印象,从而影响评估结果的有效性。 二级评估需要检查学员所学的东西。这种检查可能以考卷形式进行,也可能是实际操作;学习层评估是目前最常见、也是最常用到的一种评价方式。它是测量受训人员对原理、事实、技术和技能的掌握程度。学习层评估的方法包括笔试、技能操练和工作模拟等。培训组织者可以通过笔试、绩效考核等方法来了解受训人员在培训前后,知识以及技能的掌握方面有多大程度的提高。 三级评估试图衡量学员工作表现的变化。这是为了记录学员是否真正掌握了课程内容并运用到了工作中去,如果他们没有深究学以致用,那么就说明培训对每个参加的人而言都是一种浪费;行为层的评估往往发生在培训结束后的一段时间,由上级、同事或客户观察受训人员的行为在培训前后是否有差别,他们是否在工作中运用了培训中学到的知识。这个层次的评估可以包括受训人员的主观感觉、下属和同事对其培训前后行为变化的对比,以及受训人员本人的自评。这种评价方法要求人力资源部门建立与职能部门的良好关系,以便不断获得员工的行为信息。培训的目的,就是要改变员工工作中的不正确操作或提高他们的工作效果,因此,如果培训的结果是员工的行为并没有发生太大的变化,这也说明过去的培训是无效的。 四级评估要衡量培训是否有助公司业绩的提高。如果一门课程达到了让员工改变工作态度的目的,那么就需要考察这种改变是否对提高公司的经营业绩起到了应有的作用。结果层的评估上升到组织的高度,即组织是否因为培训而经营得更好了?这可以通过一些指标来衡量,如事故率、生产率、员工流动率、质量、员工士气以及企业对客户的服务等。通过对这样一些组织指标的分析,企业能够了解培训带来的收益。例如人力资源开发人员可以分析比较事故率,以及事故率的下降有多大程度归因于培训,从而确定培训对组织整体的贡献。 柯氏四级培训评估模式 柯氏四级培训评估模式(Kirkpatrick Model)由国际著名学者威斯康辛大学(Wisconsin University)教授唐纳德.L.柯克帕特里克(Donald.L.Kirkpatrick )于1959年提出,是世界上应用最广泛的培训评估工具,在培训评估领域具有难以撼动的地位。 柯氏四级培训评估模式简介 柯氏四级培训评估模式(英文) 柯氏四级培训评估模式,简称“4R” ,主要内容: Level 1 反应评估(Reaction):评估被培训者的满意程度;反应评估是指受训人员对培训项目的印象如何,包括对讲师和培训科目、设施、方法、内容、自己收获的大小等方面的看法。反应层评估主要是在培训项目结束时,通过

层次分析法模型

二、模型的假设 1、假设我们所统计与分析的数据,都就是客观真实的; 2、在考虑影响毕业生就业的因素时,假设我们所选取的样本为简单随机抽样,具有典型性与普遍性,基本上能够集中反映毕业生就业实际情况; 3、在数据计算过程中,假设误差在合理范围之内,对数据结果的影响可以忽略、 三、符号说明

四、模型的分析与建立 1、问题背景的理解 随着我国改革开放的不断深入,经济转轨加速,社会转型加剧,受高校毕业生总量的增加,劳动用工管理与社会保障制度,劳动力市场的不尽完善,以及高校的毕业生部分择业期望过高等因素的影响,如今的毕业生就业形势较为严峻、为了更好地解决广大学生就业中的问题,就需要客观地、全面地分析与评价毕业生就业的若干主要因素,并将它们从主到次依秩排序、 针对不同专业的毕业生评价其就业情况,并给出某一专业的毕业生具体的就业策略、 2、方法模型的建立 (1)层次分析法 层次分析法介绍:层次分析法就是一种定性与定量相结合的、系统化、层次化的分析方法,它用来帮助我们处理决策问题、特别就是考虑的因素较多的决策问题,而且各个因素的重要性、影响力、或者优先程度难以量化的时候,层次分析法为我们提供了一种科学的决策方法、 通过相互比较确定各准则对于目标的权重,及各方案对于每一准则的权重、这些权重在人的思维过程中通常就是定性的,而在层次分析法中则要给出得到权重的定量方法、 我们现在主要对各个因素分配合理的权重,而权重的计算一般用美国运筹学家T、L、Saaty教授提出的AHP法、 (2)具体计算权重的AHP 法 AHP法就是将各要素配对比较,根据各要素的相对重要程度进行判断,再根据 W、 计算成对比较矩阵的特征值获得权重向量 k

培训效果评估方法

培训效果评估方法 一个完整的培训流程应该包括四个步骤。培训需求分析——根据需求设计、选择培训课程——具体的授课过程——效果评估。 ---反应层面:内容、讲师、方法、材料、设施、场地、报名的程序等。对这个层次的评价,首先要有总体的评价,比如询问学员:你感觉这个课怎么样?你会向其他人推荐这个课吗?但是这样容易产生一些问题,比如以偏概全,主观性强,不够理智等。因此还必须有涉及以上内容的更细致的评估方法。适合的方式有问卷、面谈、座谈、电话调查等。 ---具体衡量的尺度,可以采取4分法(极好、好、一般、差)、5分法(极好、很好、好、一般、差),或者7分法(1到7分)、10分法(1到10分)。一般而言,5分法比较容易操作,但区分度不如7分法。 ---这个层面的评估易于进行,是最基本、最普遍的评估方式。但它的缺点显而易见,比如,因为对老师有好感而给课程全部高分;或者因为对某个因素不满而全盘否定课程。 ---以下解决办法值得尝试,比如:强调评价的目的,请求大家配合;鼓励大家写意见、建议;与历史数据或其他公司数据比较;对大公司来讲,在全面铺开某个课程之前先试讲;结合使用问卷、面谈、座谈等方式;不同主题的课一起开时,要及时反馈,马上填问卷等。 ---学习层面,评估方法有:考试、演示、讲演、讨论、角色扮演等多种方式。 ---这个层面的评估的优点有:对培训学员有压力,使他们更认真地学习;对培训讲师也是一种压力,使他们更负责、更精心地准备课程和讲课;学习是行为改善的第一步。 ---但问题在于,压力是好事也可能是坏事,有可能使报名不太踊跃。再者,这些测试方法的可靠度和可信度有多大?测试方法的难度是否合适?对工作行为转变来说并非最好的参考指标。 ---应对这些问题的办法主要就是采用合适的评估方式。比如,对那些基于知识的培训(包括技能培训)采用考试的方式;对要认真对待结果的正式培训也应该考试,并展开讨论。如果采用演示、讲演、讨论、角色扮演等方式,应事先让学生知道规则、时间及考核者。 ---行为层面,主要有观察、主管的评价、客户的评价、同事的评价等方式。 ---这个层面的评估的好处是:培训的目的就是改变学员的行为,因此这个层面的评估可以直接反映课程的效果;可以使高层领导和直接主管看到培训的效果,使他们更支持培训。 ---但是,这个层面的评估要花很多时间、精力,人力资源部门可能忙不过来;问卷的设计非常重要却比较难做;因为要占用相关人员较多时间,大家可能不太配合;员工的表现多因多果,如何剔除其他因素的影响,也是一个问题。

培训效果评估的经典模型

(一)柯克帕特里克评估模型 1、柯克帕特里克的培训评估模型的内容它不仅观察受训人员的反应和检查学习的结果,还衡量培训前后的表现和公司经营业绩的变化。该模型将评估分为反应、学习、行为及结果四个层次。 2 、柯克帕特里克评估模型的假设。 该模型基于以下4个重要的假设 (1)培训评估有4个不同的准则,分别是反应、学习、行为和结果; (2)这4个准备的排列是依据培训评估所获得信息的价值来依次递增的; (3)反应层次最常采用,因为这个层次的评估非常容易,而评估结果则较少采用,因为该层次评估难度很大; (4)这 4 个准则之间存在着层次秩序的交互关系,也就是说,若受训人员的反应是正面的,他们可能学习更多;学习的越多,他们的行为改变的越多,如果他们的行为改变,这通常是绩效改善的标志。 3、柯克帕特里克评估模型的拓展 Alliger和Janek (1989)的研究发现,有12篇文章试图报告各个层级之间的 相关关系,但是,这些研究并没有发现反应层次和其他3个层次之间存在的关联。 柯克帕特里克评估模型中的反应仅仅是从情感上进行评估的,而对培训效用大小的反应则更加重要。 因为效用型反应与培训迁移的相关更大。在学习层次上,原柯克帕特里克评估模型仅仅注重受训人员当时陈述性知识 学习的评估,而受训人员的程序性知识掌握得如何,直接影响到培训迁移的程度,并且他们得出了效用型反应与培训迁移的相关,要比传统评估中的学习与培训迁移的相关要大。 (二)考夫曼的5 层次评估模型 考夫曼对柯克帕特里克的4层次模型进行了拓展,即增加了第5个层次——评估社会和顾客的反应,以及培训的可行性。该评估模型超越了单个组织的范畴,重视培训的正外部性,其目的是评估培训项目给社会带来的价值。 (三)菲利普斯培训效果评估模型 1 、菲利普斯培训效果评估流程 评估分为十个步骤:制定培训目标——确定评估计划和基础数据——培训期间的数据收集——培训结束后的数据收集——培训效果鉴别——将数据转化为货币——确定培训成本——确定无形收益——计算投资回报率——实施业务影响响研究。

机器学习中关于模型评估方法总结

1模型评估 我们在建立模型之后,接下来就要去评估模型,确定这个模型是否有用。 在实际情况中,我们会用不同的度量去评估我们的模型,而度量的选择取决于模型的类型和模型以后要做的事。 1.1二分类评估 二分类模型的评估。 1.1.1业界标准叫法 二分类评估;分类算法。 1.1.2应用场景 信息检索、分类、识别、翻译体系中。 1.1. 2.1新闻质量分类评估 对于新闻APP,其通过各种来源获得的新闻,质量通常良莠不齐。为了提升用户体验,通常需要构建一个分类器模型分类低质新闻和优质新闻,进而进行分类器的评估。

1.1. 2.2垃圾短信分类评估 垃圾短信已经日益成为困扰运营商和手机用户的难题,严重影响人们的生活、侵害到运营商的社会公众形象。 构建二分类器模型对垃圾短信和正常短信进行分类,并进行二分类评估。 1.1.3原理 1.1.3.1混淆矩阵 混淆矩阵(Confusion Matrix)。来源于信息论,在机器学习、人工智能领域,混淆矩阵又称为可能性表格或错误矩阵,是一种矩阵呈现的可视化工具,用于有监督学习,在无监督学习中一般叫匹配矩阵。 混淆矩阵是一个N*N的矩阵,N为分类(目标值)的个数,假如我们面对的是一个二分类模型问题,即N=2,就得到一个2*2的矩阵,它就是一个二分类评估问题。 混淆矩阵的每一列代表预测类别,每一列的总数表示预测为该类别的数据的数目,每一行代表了数据的真实归属类别,每一行的数据

总数表示该类别的实例的数目。 图1 2*2混淆矩阵图 阳性(P,Positive): 阴性(N,Negative): 真阳性(TP,True Positive):正确的肯定,又称“命中”(Hit);被模型预测为正类的正样本。 真阴性(TN,True Negative):正确的否定,又称“正确拒绝”(correct rejection),被模型预测为负类的负样本。 伪阳性(FP,false Positive):错误的肯定,又称“假警报”(false alarm);被模型预测为负类的正样本。 伪阴性(FN,false Negative):错误的否定,又称“未命中”(miss);被模型预测为正类的负样本。 灵敏度(Sensitivity)或真阳性率(TPR,Ture Negative Rate):又称“召回率”(recall)、命中率(Hit Rate)。在阳性值中实际被预测正确所占的比例。TPR=TP/P=TP/(TP+FN)

如何评估培训工作的有效性

如何评估培训工作的有 效性 Standardization of sany group #QS8QHH-HHGX8Q8-GNHHJ8-HHMHGN#

如何评估培训工作的有效性 作为咨询顾问,经常需要“泡在企业”,当然也少不了各类内部研讨会。在为中国联通某省分公司服务期间,客户在培训方面提出的问题很有代表性,技术人员专业人员们认为公司开展的培训不足,层次也不高,对业务帮助不大;负责培训的项目经理说人力资源部对培训非常重视,一直在加强培训服务和管理,尽可能争取各类培训名额和培训机会,好像员工不太满意,领导也不太满意;公司的管理层则认为开展了那么多的培训,培训所花费的代价不低,到底成效如何,如何掌握培训的成果。事实上,这三个典型问题都涉及了培训工作有效性的衡量问题,它是一个企业的培训体系有效与否的关键环节。 不管由于企业的特点导致其培训体系在形式上如何不同,一个培训体系要有效,都不能缺少管理循环PDCA四个环节。在培训体系内的PDCA循环,可以这样描述,P(plan)即培训规划/计划,就是人力资源专业人员和直线管理者共同收集需求、分析需求、拟定计划、沟通并根据企业策略变化确定调整计划;D(do)即培训的组织与实施,就是根据已确定的教育培训计划和企业的突发性培训需求,着手课程的设计、培训讲师的确定、培训场地的准备、相关辅助材料及开课等组织工作;C(check)即培训评估,就是对培训取得的效果、资料、文件的评估,以及评估之后的反馈;A(action)即培训工作的改进,也就是根据反馈的信息修正下一次的教育培训行动,或是对整个培训体系的改进方案实施。

在培训体系的PDCA循环中,培训评估环节(check)是提高培训体系有效性的基础工作。一方面培训评估的结果是人力资源部门向上级汇报的重要资料之一,让公司管理层和业务管理者认识到培训能帮助业务部门产生绩效是重视、认可、支持和推进培训工作的关键任务;另一方面通过培训评估产生的信息,从课程角度可以提供给讲师以优化课程和讲课的效果,从培训组织角度可以提高培训服务水平,提高学员的满意度,从改进和优化教育培训体系角度可以提高培训工作的整体绩效。 既然培训评估不可或缺,如何对培训工作进行评估就非常重要。如何开展培训的评估?以下重点介绍培训评估的四层次,主要的关注点和相关的衡量指标。 培训的评估重点关注四个层次,缺一不可,这四个层次是:反应(reaction)、学习(learning)、行为(behavior)、结果(results)。在反应层次的评估上,必须评估学员对教育培训的满意程度(或喜爱程度);在学习层次的评估上,必须评估学员对培训内容的了解及吸收程度(由思考如何应用而产生学习);在行为层次的评估上,必须评估学员对培训内容的应用及熟练程度(由学习而改变行为或习惯);在结果层次的评估上,必须评估培训内容使学员之个人绩效及其组织绩效提升的程度(因行为改变而产生具体结果)。 在反应层次评估上,培训中,最常使用的评估方法为单向的人力资源专业人员的“随堂观察”,以及双向的“学员访谈”。在培训后,最常使用的方法是单向的《问卷调查/课程评估表》,也常使用双向的“访谈学员”。

常见的培训评估方法及其应用

常见的培训评估方法及其应用 当前对培训评估进行系统总结的模型占主导地位的仍然是柯克帕特里克(Kirkpatrick)的四层次评估法,不过其他不少研究者也针对该模型的不足提出了自己的评估模型,主要有:考夫曼五层次评估法、CIRO评估法、CIPP模型、菲力普斯投资回报率评估模型。 (一)柯氏四层次评估法 柯氏四级培训评估法由国际著名学者威斯康辛大学教授唐纳德.L.柯克帕特里克(Donald.L.Kirkpatrick)于1959年提出,是世界上最早、应用最广泛的培训评估工具,在培训评估领域具有难以撼动的地位。 柯氏四层次评估法,简称“4R”,其主要内容是: Level 1 反应评估(Reaction):评估被培训者的满意程度。 反应评估是指受训人员对培训项目的印象如何,包括对讲师和培训科目、设施、方法、内容、自己收获的大小等方面的看法。反应层评估主要是在培训项目结束时,通过问卷调查来收集受训人员对于培训项目的效果和有用性的反应。这个层次的评估可以作为改进培训内容、培训方式、教学进度等方面的建议或综合评估的参考,但不能作为评估的结果。 Level 2.学习评估(Learning):测定被培训者的学习获得程度。 学习评估是目前最常见、也是最常用到的一种评价方式。它是测量受训人员对原理、技能、态度等培训内容的理解和掌握程度。学习层评估可以采用笔试、实地操作和工作模拟等方法来考查。培训组织者可以通过书面考试、操作测试等方法来了解受训人员在培训前后,知识以及技能的掌握方面有多大程度的提高。 Level 3.行为评估(Behavior):考察被培训者的知识运用程度。 行为的评估指在培训结束后的一段时间里,由受训人员的上级、同事、下属或者客户观

如何进行有效的培训效果的评估

如何进行有效的培训效果的评估 培训效果的评估,主要包括四个层面:反应层面反应层面需要评估以下几个方面:内容、讲师、方法、材料、设施、场地、报名的程序等。对这个层次的评价,首先要有总体的评价,比如询问学员:你感觉这个课怎么样?你会向其他人推荐这个课吗?但是这样容易产生一些问题,比如以偏概全,主观性强,不够理智等。因此还必须有涉及以上内容的更细致的评估方法。具体衡量的尺度,可以采取4分法(极好、好、一般、差)、5分法(极好、很好、好、一般、差),或者7分法(1到7分)、10分法(1到10分)。一般而言,5分法比较容易操作,但区分度不如7分法。这个层面的评估易于进行,是最基本、最普遍的评估方式。但它的缺点显而易见,比如,因为对老师有好感而给课程全部高分;或者因为对某个因素不满而全盘否定课程。以下解决办法值得尝试,比如:强调评价的目的,请求大家配合;鼓励大家写意见、建议;与历史数据或其他公司数据比较;对大公司来讲,在全面铺开某个课程之前先试讲;结合使用问卷、面谈、座谈等方式;不同主题的课一起开时,要及时反馈,马上填问卷等。学习层面学习层面主要的评估方法有:考试、演示、讲演、讨论、角色扮演等多种方式。 这个层面的评估的优点有:对培训学员有压力,使他们更认真地学习;对培训讲师也是一种压力,使他们更负责、更精心地准备课程和讲课;学习是行为改善的第一步。但问题在于,压力是好事也可能是坏事,有可能使报名不太踊跃。再者,这些测试方法的可靠度和可信度有多大?测试方法的难度是否合适?对工作行为转变来说并非最好的参考指标。应对这些问题的办法主要就是采用合适的评估方式。比如,对那些基于知识的培训(包括技能培训)采用考试的方式;对要认真对待结果的正式培训也应该考试,并展开讨论。如果采用演示、讲演、讨论、角色扮演等方式,应事先让学生知道规则、时间及考核者。行为层面行为层面的评估,主要有观察、主管的评价、客户的评价、同事的评价等方式。这个层面的评估的好处是:培训的目的就是改变学员的行为,因此这个层面的评估可以直接反映课程的效果;可以使高层领导和直接主管看到培训的效果,使他们更支持培训。但是,这个层面的评估要花很多时间、精力,人力资源部门可能忙不过来;问卷的设计非常重要却比较难做;因为要占用相关人员较多时间,大家可能不太配合;员工的表现多因多果,如何剔除其他因素的影响,也是一个问题。一般可以考虑以下解决办法:小心选择适合这样做和值得这样做的课程,如公司行为、时间管理等。注意选择合适的评价时间,即在培训结束多长时间后再来评价:间隔时间太短,学员可能还未熟练掌握,难以反映培训的长期效果;间隔时间太长,多因多果的影响增强,难以评测。主管的配合很重要。要取得学员主管的配合,首先要让他了解,学员参加这样的培训有利于其更好地工作;其次深入地沟通评估的目的和方法,并在批准这个培训时就让他知道他在事后需要予以配合。充分利用咨询公司的力量。因为这个层面的评估比较复杂、专业,占用的时间和精力也很多,人力资源部门要充分借用咨询公司的经验和人力,有些事情可以外包出去。结果层面把企业或学员的上司最关注的并且可量度 的指标,如质量、数量、安全、销售额、成本、利润、投资回报率等,与培训前进行对照。这种评估方式的优点显而易见,因为企业及企业

培训效果评估

培训效果的评估 一、培训评估的目的 员工培训是人力资源管理的重要内容,通过培训能持续提升员工的知识、技能与工作态度,从而为企业战略的实施提供强有力的人才保障,为企业在市场竞争中赢得竞争优势。培训效果评估是培训的最后一个环节,科学的培训效果评估对于公司了解培训投资的收益、界定培训对公司的贡献有重要的作用。 二、评估对象 此次培训效果的评估主要是针对本公司中层管理人员中参加培训的学员 三、评估层次的选定 目前,国内外运用最为广泛的培训评估方法,是由柯克派崔克(Kirkpatrick,1959)提出的培训效果评估模型,在这个模型中,培训效果评估包括四个阶段的评估: 1.反应层次评估–对培训的组织和实施以及培训本身的质量进行评价; 2.学习层次评估–评价学员对培训内容的掌握情况; 3.行为层次评估–评价培训给学员带来的行为上的改变; 4.绩效层次评估–评价培训是否使学员和组织的工作绩效得到提升。 从培训评估的深度和难度来看,柯氏培训评估模型依次包括反应层、学习层、行为层和绩效层四个层次。从理论上讲,随着培训评估层次的提高,可以看到培训所带来的更深层次的影响,能够发现培训项目的价值。但是,由于包括人、财、物在内的资源因素的限制,不可能对所有的培训项目都进行四个层次的培训效果评估。因此,在开展培训效果评估之前,对于每个培训项目,建行必须有针对性地选择培训效果评估的层次。 常用的、决定培训效果评估层次的方法是决策树分析法(如下图)。通过决策树分析来取舍每个培训课程的评估层次。但是无论是哪一个培训项目,第一层次的评估-反应层次评估都是必须的。

从以上决策树的分析来看,此次关于企业中层管理者的培训属于行为性的,因此,我们决定对于反应层次和行为层次进行分析。 四、效果评估实施方法和步骤 此次关于中层管理者的培训经过为期141天的,共三期培训,每一期培训结束后都要进行受训人员的满意度和意见的调查。通过调查问卷的方式,来调查受训人员的满意度,通过座谈法等方式询问受训人员的意见和建议。最后在每期培训结束后都将这些意见和建议进行汇总分析,然后对下一学期培训计划进行修改完善,以帮助我们及时改正培训活动中出现的问题。最后,在第三期培训结束后对这三期培训进行总体的整理和存档,为下一次培训打下理论基础和提供宝贵的经验。下面就反应层次和行为层次两个层次进行分别详细的实施步骤: (一)学员反应层次的评估 反应层次的评估是指在培训刚结束之后,培训学员对培训项目的主观感受。反应层次分析主要是针对一期、二期结束后进行,信息获得最容易、最直接,是最基本、最普遍的评估方式。这个层次关注的是学员对培训项目及其有效性的知觉。 1、评估内容 反应层次的评估包括对培训组织实施、培训后勤支持等两个方面的评估。两个方面包括

“柯氏(Kirkpatrick)”四层次模型

“柯氏(Kirkpatrick)”四层次模型 当前对培训评估进行系统总结并占主导地位的是“柯氏(Kirkpatrick)”四层次模型。这种工具实用,易于贯彻到企业实际的培训评估中,它不仅观察学员的反应和检查学习结果,还衡量培训前后的表现和公司经营业绩的变化。该模型将评估分为四个级别,如下:一级评估需要注意学员的反应。反应层评估是指学员对培训项目的看法,包括对讲义、师资、设施、方法和内容等的看法。反应层评估的主要方法是问卷调查。问卷调查是在培训结束时,收集学员对于培训的效果和有用性的反应,学员的反应对于重新设计或继续培训项目至关重要。反应问卷调查易于实施,通常只需要几分钟时间。如果设计适当,反应问卷调查也很容易分析、制表和总结。问卷调查的缺点是其数据主观,很大程度建立在学员个人意见上。学员意见的偏差有可能夸大评定分数,而且,在培训结束前,学员对课程的判断很容易受到经验丰富的培训员或培训机构领导者富有鼓动性的总结的影响,所有这一切均可能在评估时减弱学员原本对该培训的印象,从而影响评估结果的有效性。 二级评估需要检查学员所学知识。这种检查可能以考卷形式进行,也可能是实际操作;学习层评估是目前最常见、也是最常用到的一种评估方式。它是测量学员对原理、事实、技术和技能的掌握程度。学习层评估的方法包括笔试、技能操练和工作模拟等。培训组织者可以通过笔试、绩效考核等方法来了解学员在培训前后,知识及技能方面有多大程度的提高。另外,强调对学习效果的评价,也有利于增强学员的学习动机。 三级评估试图衡量学员工作表现的变化。这是为了记录学员是否真正掌握了课程内容并运用到工作中去。如果他们没有学以致用,那么就说明培训对学员是一种浪费。行为层的评估往往发生在培训结束后的一段时间,由上级、同事或客户观察学员的行为在培训前后是否有差别,是否在工作中运用了培训所学知识。这个层次的评估可以包括学员的主观感觉、下属和同事对其培训前后行为变化的对比,以及学员本人的自评。这种评价方法要求培训部建立与职能部门的良好关系,以便获得员工的行为信息。培训目的是要提高员工工作中的效率,因此,如果培训后员工的行为并没有发生太大的变化,这也说明过去的培训是无效的。 四级评估要衡量培训是否有助公司业绩的提高。如果培训达到了让员工改变工作态度的目的,那么就需要考察这种改变是否对提高公司的经营业绩起到作用。结果层评估上升到组织的高度,即组织是否因培训而经营得更好。这可以通过一些指标来衡量,如事故率、生产率、员工流动率、质量、员工士气等。通过对这些组织指标的分析,企业能够了解培训带来的收益。例如培训主管可以比较事故率,分析事故率下降有多少归因于培训,从而确定培训对企业的贡献。 中华英才网人才研究中心

柯氏(Kirkpatrick)四层次模型

HR工具-文本范例 “柯氏(Kirkpatrick)”四层次模型 当前对培训评估进行系统总结并占主导地位的是“柯氏(Kirkpatrick)”四层次模型。这种工具实用,易于贯彻到企业实际的培训评估中,它不仅观察学员的反应和检查学习结果,还衡量培训前后的表现和公司经营业绩的变化。该模型将评估分为四个级别,如下:一级评估需要注意学员的反应。反应层评估是指学员对培训项目的看法,包括对讲义、师资、设施、方法和内容等的看法。反应层评估的主要方法是问卷调查。问卷调查是在培训结束时,收集学员对于培训的效果和有用性的反应,学员的反应对于重新设计或继续培训项目至关重要。反应问卷调查易于实施,通常只需要几分钟时间。如果设计适当,反应问卷调查也很容易分析、制表和总结。问卷调查的缺点是其数据主观,很大程度建立在学员个人意见上。学员意见的偏差有可能夸大评定分数,而且,在培训结束前,学员对课程的判断很容易受到经验丰富的培训员或培训机构领导者富有鼓动性的总结的影响,所有这一切均可能在评估时减弱学员原本对该培训的印象,从而影响评估结果的有效性。 二级评估需要检查学员所学知识。这种检查可能以考卷形式进行,也可能是实际操作;学习层评估是目前最常见、也是最常用到的一种评估方式。它是测量学员对原理、事实、技术和技能的掌握程度。学习层评估的方法包括笔试、技能操练和工作模拟等。培训组织者可以通过笔试、绩效考核等方法来了解学员在培训前后,知识及技能方面有多大程度的提高。另外,强调对学习效果的评价,也有利于增强学员的学习动机。 三级评估试图衡量学员工作表现的变化。这是为了记录学员是否真正掌握了课程内容并运用到工作中去。如果他们没有学以致用,那么就说明培训对学员是一种浪费。行为层的评估往往发生在培训结束后的一段时间,由上级、同事或客户观察学员的行为在培训前后是否有差别,是否在工作中运用了培训所学知识。这个层次的评估可以包括学员的主观感觉、下属和同事对其培训前后行为变化的对比,以及学员本人的自评。这种评价方法要求培训部建立与职能部门的良好关系,以便获得员工的行为信息。培训目的是要提高员工工作中的效率,因此,如果培训后员工的行为并没有发生太大的变化,这也说明过去的培训是无效的。 四级评估要衡量培训是否有助公司业绩的提高。如果培训达到了让员工改变工作态度的目的,那么就需要考察这种改变是否对提高公司的经营业绩起到作用。结果层评估上升到组织的高度,即组织是否因培训而经营得更好。这可以通过一些指标来衡量,如事故率、生产率、员工流动率、质量、员工士气等。通过对这些组织指标的分析,企业能够了解培训带来的收益。例如培训主管可以比较事故率,分析事故率下降有多少归因于培训,从而确定培训对企业的贡献。 仅供参考

相关文档
最新文档