软件检测实验室能力验证方案研究

合集下载

实验室能力验证须知

实验室能力验证须知

实验室能力验证须知1、能力验证的定义能力验证是指利用实验室间比对来确定实验室检测/校准能力的活动。

它是确保实验室维持较高的校准和检测水平而对其能力进行考核、监督和确认的一种验证活动。

参加能力验证计划,可以为实验室提供评价其出具数据可靠性和有效性的客观证据。

2、什么情况下做能力验证CNAS-RL02 准则对能力验证的要求:4.2.3只要存在可获得的能力验证,合格评定机构初次申请认可的每个子领域应至少参加过1次能力验证且获得满意结果(申请认可之日前3年内参加的能力验证有效)。

子领域的划分和频次的要求应满足CNAS公布的能力验证领域和频次表。

4.2.4只要存在可获得的能力验证,获准认可合格评定机构应满足CNAS 能力验证领域和频次要求且获得满意结果。

对CNAS能力验证领域和频次表中未列入的领域(子领域),只要存在可获得的能力验证,获准认可合格评定机构在每个认可周期内应至少参加1次。

从准则上看,不管是获得认可的实验室还是初次申请认可的实验室,能力验证是要主动去参加的。

3、能力验证的意义实验室和检查机构等可以通过利用能力验证这种外部质量保证(EQA)工具,识别与同行机构之间的差异,补充其内部质量控制技术,为自身的持续改进和质量管理提供信息;实验室的用户、监督和管理机构、评价机构等可通过利用CNAS能力验证结果,判断实验室和检查机构等是否具有从事校准/检测活动的能力,以及监控他们能力的持续状况。

具体表现如下:3.1识别实验室间的差异能力验证通过使用实验室所得的结果与指定值的比较,对其从事某项检测、校准和检验活动的表现进行独立评价,从而识别实验室结果与参考值(参照值)以及实验室之间的差异。

能力验证可以为实验室的工作质量或水平是否满意以及是否需要对潜在的问题进行调查给出预警。

3.2比较方法或程序对于某些实验室而言,可尝试通过能力验证来评价实验室使用某种新的或者非常规方法进行检测/测量的工作质量。

在某些情况下,能力验证计划会给出所有实验室所用方法的汇总和比较。

实验室能力验证程序

实验室能力验证程序

文件制修订记录1.0目的为本所实验室定期参加国家、行业组织的能力验证计划及实验室间比对计划活动,以考察、监控实验室进行检测工作的持续能力,特制定本程序。

2.0范围本程序适用于本所实验室参加的所有能力验证计划及实验室间比对计划活动。

3.0职责3.1技术负责人3.1.1负责联系能力验证计划和实验室间比对计划,组织相关检测人员参加。

3.1.2整理上报验证或比对结果,对验证或比对结果进行评价、分析和反馈。

3.1.3实验室间比对的实施计划、验证或比对结果不满意时,制定纠正措施计划。

3.2检测组3.2.1负责制定活动的具体实施计划,并按计划组织实施,准时将检测结果报送技术负责人。

4.0工作程序4.1定义4.1.1能力验证计划:为确定实验室在特定领域的检测/校准能力而设计和运作的实验室间比对。

它是由认可机构或其授权/认可的机构组织和运作的。

4.1.2实验室间比对计划:由其他机构(如行业或专业领域)组织和运作的实验室间比对活动。

4.2申报4.2.1技术负责人根据实验室所承担检测项目的实际情况,积极主动与组织能力验证的单位联系,落实参加的能力验证计划。

4.3实施4.3.1由技术负责人向检测室发出“参加能力验证及实验室间比对活动的通知”,组织相关人员讨论参加能力验证及实验室间比对活动的计划,将具体要求和说明传达至实施活动计划的检测人员。

4.3.2检测组根据验证或比对计划的要求制定具体实施计划,填写《能力验证及实验室间比对实施计划表》。

实施计划内容包括:验证或比对项目名称、检测样品、检测方法、检测仪器、实施日期、实施进度要求、实施负责人等。

实施计划由技术负责人审核。

4.3.3根据实施计划安排,检测室组织实施,安排项目实施负责人检测。

4.3.4项目实施负责人根据有关检测方法的要求,在规定的时间期限内完成检测工作,检测结果经检测组负责人审核后交技术负责人。

4.3.5技术负责人将结果汇总,及时上报组织能力验证和实验室间比对的单位。

能力验证计划设计方案

能力验证计划设计方案

能力验证计划设计方案引言:能力验证计划是一种评估个人或团队在特定领域的能力和知识水平的有效工具。

本文旨在设计一个能力验证计划,旨在促进员工的专业发展和组织的整体效能提升。

I. 背景分析在开始设计能力验证计划之前,需要对组织的特点和需求进行综合分析。

以下是我们对组织的背景分析:1. 组织背景介绍组织的规模、行业和现有人才发展策略。

2. 业务需求明确组织在特定领域的关键业务需求和目标。

3. 个人发展需求了解员工在职业发展方面的需求和意愿以及他们所需要的支持。

II. 目标设置为了确保能力验证计划达到预期效果,我们需要设立明确的目标和指标。

以下是我们建议的目标:1. 提高员工的专业能力通过能力验证计划,培养员工在特定领域的专业知识和技能,提高工作绩效。

2. 推动组织的创新和竞争力通过能力验证计划,激发员工的创新思维和解决问题的能力,为组织的持续发展提供支持。

3. 促进员工的职业发展通过能力验证计划,为员工提供个人发展机会,帮助他们实现职业目标并增强自我认同感。

III. 能力验证计划设计根据以上的背景分析和目标设置,我们提出以下设计方案:1. 课程开发和培训根据组织的业务需求和员工的个人发展需求,设计相关的课程和培训内容,包括知识传授、技能培养和案例研究等。

2. 能力测评工具选择适当的能力测评工具,以客观评估员工的专业能力和知识水平,帮助他们了解自己的优势和改进的空间。

3. 实践机会和项目驱动为员工提供实践机会和项目驱动的工作任务,让他们能够将所学的知识和技能应用到实际工作中,并不断改进。

4. 导师和辅导支持为员工安排导师或提供辅导支持,帮助他们理解和克服职业发展中的挑战,提供指导和建议。

5. 定期评估和反馈定期评估员工的能力和表现,给予及时的反馈和建议,帮助他们成长和改进。

IV. 实施与评估一个有效的能力验证计划的实施与评估是必不可少的。

以下是我们的建议:1. 实施计划在实施之前,确保有一个具体的时间表和清晰的责任分工。

能力验证在校准和检测实验室的应用与思考

能力验证在校准和检测实验室的应用与思考

0 引 言
能 力 验证 是 利 用 实验 室 问 比对 , 照 预 先制 定 按 的准则 评价 参加 者 的能力 , 也称 能力 验证活 动 , 含 包
实施质 量控 制 ; 对子领 域 和频次进 行 修订 。
对 于 合格 评 定 机 构而 言 , 将 能力 验 证作 为 重 要
要 的外 部质 量评 价 活 动 , 照规 则 及 相 应认 可准 则 按 的规定 参S l 力 验 证 和利 用 能 力 验证 结 果 , 按 要 il 并
21 0 2年 弟 4别
文 章 编 号 : 0 — 37 2 1 )4 0 3 — 0 1 5 38 (0 2 0 — 0 9 4 0
能 力验证在校准和检测实验室 的应用与思考
陈业 正
( 江西 省计 量测 试研究 院 , 昌 南 300 ) 302

要: 能力验证是 中国合格评定 国家认可委员会 ( N S ( C A ) 以下 简称 “ 可委 ” 对 合格评定 机构能力进 行评 价的 主要 认 )


人员 的培训 、 知识 、 经验 及其 变动情 况 ;
内部 质量 控制 情况 ; 检测 、 准和检 查结 果 的用途 ; 校 检测 、 准和检 查技 术 的稳定性 等 。 校
现 就 如何 卓 有 成效 地 开展 能力 验证 工 作 , 之 使
成 为实 验室 检测 结果 质 量 控 制 的关 键 质 量 活 动 , 结




合 近年 来工作 实 践 , 一点认 识 和体会 。 谈


l 能 力 验证 规 则 介 绍
认 可委 在 2 1 00年 1 2月 3 0日发布 《 能力 验证 规 则 》 C A — I 2 2 1 ) 以下 简 称 “ ( N S R_ :00 ( D 规则 ” , 于 )并 2 1 年 2月 1日起 实 施 , 有 的 《 01 原 能力 验 证 规 则 》

实验室的能力验证

实验室的能力验证

割样 品检 测计 划 : 分割 样 品检 测 计划 包 括 把 某 种 样
计 划 等类 型 。实验 室可 以根 据 其 自身 的 特点 和 情 况 , 有 选 择 地开 展或 参加 这项 活 动 。
品分成 两份或 几份 , 个 参 加 实 验室 检 测 一 份 。与 实 验 每 室间检测计 划不 同的是 , 割 样 品检测 计 划 通 常 只有 数 分
抽取 次级 样 品 , 同时 分发 给参加 检测 的实 验室 共 同检测 。 完成 检测后 , 检测 结果 返 回协 调 机构 与公 议 值 或 指定 将 值相 比对 , 以表 明各 个 实验 室 和 参 加 的实 验 室 整 体 组 的 能力 。实 验室 问检 测计划 的检 测样 品应 : 被检 测物 品是从 材料 源 ( 可 以理 解 为 散 样 样 品 的 也
和环境 实验 室 。
报告 等方面应具 有足够 的资格 、 能和经 验 , 技 包括 适 当的 技术技 能 、 统计 技能 、 管理技 能以及与他 人 紧密合 作 。
对 于某些特 定 的实验 室 问比对 的运作 , 必要 时 , 协调
者可 能需 要列 出一个 或 多个适 当的人 选 , 成顾 问小组 组
计划 、 实验室 间检 测 计划 均 包 含 多个 实验 室 参 加 。认 可 机构 、 定机 构和 其他组 织 在校 准领域 应用 能力验 证 时 , 法 通常采用 测量 比对 计划 ; 在检 测领 域应 用能力 验证 时 , 通 常采用 检测 实验室 间检 测计划 。
能力 验证 技术 根 据 检 测 物 品 的性 质 、 用 的方 法 和 使 参加 实验 室 的数 目而变 化 。大部 分 能力验 证具 有共 同 的 特征 , 即将 一个 实 验 室所 得 的结果 与其 他 一 个 或 多个 实

检测实验室的能力验证

检测实验室的能力验证

检测实验室的能力验证陈震平张卫凌(福建省电力试验研究院,福建福州350007)摘要:对检测实验室参加的3次能力验证结果进行分析,比照GB/T 15481—2000《检测和校准实验室能力的通用要求》,探讨实验室存在的不足,总结经验。

关键词:检测实验室;能力验证中图分类号:TMB9文献标识码:B文章编号:1006-0170(2007)03-0045-02FUJIAN DIAN LI YU DIANG ONG第27卷第3期2007年9月IS S N 1006-0170CN 35-1174/TM1前言随着我国对外交流的增多,检测实验室的能力逐步与国际接轨。

实验室取得CNAS (中国合格评定国家认可委员会)评审认可,其检测结果即得到国际认可机构的承认,是实验室能力提升的重要标志。

要获得认可,首先必须根据GB/T 15481—2000《检测和校准实验室能力的通用要求》建立管理体系和技术体系。

技术体系中的一项重要内容是:实验室利用质量控制程序监控检测和校准结果的有效性。

实验室间比对或能力验证最能体现实验室的能力。

本文对福建省电力试验研究院环保实验室(以下简称环保实验室)进行的3次实验室间比对及能力验证结果工作进行分析,总结经验。

2能力验证实验室质量控制的内容包括:定期使用有证标准物质进行内部质量控制、参加实验室间比对或能力验证、利用相同或不同方法进行重复检测、对存留物品进行再检测以及分析一个物品不同特性结果的相关性。

实验室间比对或能力验证,是一种有效的外部质量保证活动,是其内部质量控制技术的补充,最能体现实验室能力。

3验证结果分析3.1验证结果一2004年3月,CNAL 组织54个实验室进行编号为CNAL T 0145工业废水中重金属离子的化学分析能力验证,对环保实验室提供的总砷、总铬、镉和铅含量检测结果,给出了表的结论。

从表1看出,环保实验室首次参加CNA L 组织的能力验证,有三个项目获得满意结果,一个项目离群。

实验室检测能力验证整改报告范本

实验室检测能力验证整改报告范本

实验室检测能力验证整改报告范本一、引言本实验室检测能力验证整改报告是针对实验室在最近一次能力验证中发现的问题进行整改和改进措施的总结,旨在提高实验室的检测能力和质量管理水平。

本报告将对能力验证的整个过程进行分析,并针对问题提出改进措施和建议。

二、检测能力验证结果分析根据最近一次实验室检测能力验证的结果分析,在多个项目的检测中发现了以下问题:1.检测仪器设备不稳定:在能力验证过程中,发现仪器的测量数据出现大幅度的波动,不符合标准要求。

2.校准和验证不及时:部分仪器的校准和验证时间超期,过期时间较长,导致测试结果的准确性无法得到保证。

3.人员操作不规范:部分实验人员的操作规程不符合标准,没有按照标准的程序进行操作,导致测试数据的准确性受到影响。

4.质量控制不完善:对于质量控制的操作和记录不完善,没有建立稳定的质量控制体系。

三、整改措施和建议1.更新仪器设备:针对仪器设备不稳定的问题,建议对现有的设备进行维修或更换,确保仪器设备的稳定性和准确性。

2.优化校准和验证管理:制定明确的校准和验证计划,并及时执行,确保校准和验证的有效性和及时性。

3.加强培训和规范操作:定期组织培训,提高实验人员的操作规程意识和技能水平,确保操作符合标准要求。

4.建立质量控制体系:建立健全的质量控制措施和流程,完善质量控制记录,确保每次检测均能得到准确和可靠的结果。

5.增加内部质量评审:定期组织内部质量评审,对实验室的各项质量管理措施进行评估和改进,提升实验室全面质量管理水平。

四、整改计划为了确保整改措施的有效执行和改进效果的实现,制定了如下整改计划:1.更新仪器设备:在一个月内,对不稳定的仪器设备进行维修或更换。

2.优化校准和验证管理:制定校准和验证计划,并确保每项计划按时执行。

3.加强培训和规范操作:每半年组织一次操作规程与技能培训,并定期进行考核和评估。

4.建立质量控制体系:在三个月内,建立质量控制体系并完善相关的记录和流程。

实验室能力验证实施办法

实验室能力验证实施办法

实验室能力验证实施办法第一章总则第一条为保证规范、有效地开展实验室能力验证活动,根据水利部《关于加强水质监测质量管理工作的通知》(水文[2010]169号),制定本办法。

第二条本办法所称的能力验证,是指利用实验室间指定检测数据的比对,确定实验室从事特定测试活动的技术能力。

第三条本办法适用于水利系统各级监测机构实验室能力验证的组织、运作、纠正措施和结果利用等活动。

第二章组织管理第四条水利部水文局负责组织水利系统水质监测实验室能力验证活动,并按规定向中国合格评定国家认可委员会(英文缩写:CNAS)报送有关材料。

第五条水利部水环境监测评价研究中心(以下简称:部中心)受水利部水文局的委托,负责编制实验室能力验证计划,组织实施能力验证活动。

第六条各级监测机构应积极参加水利系统水质监测能力验证活动。

水利工程管理单位直属的水质检测实验室,可以根据条件和需要,自愿申请参加。

第三章能力验证工作程序第七条水利部水文局下达实验室能力验证计划,组建专家组,按《利用实验室间比对的能力验证第1部分:能力验证计划的建立和运作(GB/T 15483.1)》的有关要求,编制能力验证计划实施方案。

第八条部中心作为实验室能力验证计划的实施机构,根据专家组编制的能力验证计划实施方案,编制作业指导书,制备能力验证样品,并按《能力验证样品均匀性和稳定性评价指南(CANS-GL03)》要求进行样品均匀性和稳定性检验。

第九条专家组负责审核实施机构起草的作业指导书和制备的能力验证样品。

审核通过后,方可启动能力验证计划。

第十条各级监测机构根据要求,自愿报名参加能力验证计划。

一般应在考核前两周向部中心提交《水利系统水质监测能力验证报名表》。

第十一条部中心向所有参加能力验证的监测机构及时寄送《能力验证样品接收状态确认表》、《能力验证试验结果报告单》和能力验证测试样品。

第十二条参加能力验证的监测机构收到能力验证样品后,应尽快进行测试,并在规定时间内上报结果报告单等材料。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

软件检测实验室能力验证方案研究王欣中国电子技术标准化研究所摘要本文分析了目前国内外软件检测机构能力验证方案的现状与需求,提出了一种针对软件检测实验室的能力验证方案,并就实施能力验证过程中各个主要环节应注意的主要问题及其解决方案进行了探讨。

由于篇幅限制,本文只提出了概要的设计思想,并未就具体技术细节进一步展开。

1.引言近年来,各地建立了大批第三方软件产品检测实验室,到目前为止已超过50家。

这些机构承担了国内几乎全部软件产品的外部测试工作,其中很多实验室的业务还介入到了企业的开发过程中。

这些实验室检测能力的高低,将直接影响某个地区软件行业的发展。

不同于传统检测实验室,软件产品检测实验室的能力往往无法通过传统的方法得到。

例如,针对传统的检测与校准实验室,可以采取不同实验室对同一标准物质进行测量,然后对测量结果进行比对的手段。

而对于软件产品检测实验室,这种方法的意义就显得并不明显。

因此,需要一种针对软件产品检测实验室的新的能力验证方案。

这种方案目前在国内和国际上都还没有形成。

本报告通过对软件检测实验室能力验证方案的现状、需求和技术发展趋势的分析,结合曾经举办过的一些能力验证活动的实际数据,列举出了建立一整套严密验证方案所面临的几大重点课题,并尝试着就这些课题给出了某种可行的解决方案。

最终,本报告试图通过以上分析,给出一条理论上可行的解决途径,作为建立第三方软件检测实验室能力验证方案的一种参考,供相关人员研究。

2.正文2.1.现状分析软件产业的飞速发展极大地提高了生产力,促进了社会发展。

随之而来的问题就是如何来有效地规范市场上众多的软件产品,如何有效地鉴别软件产品质量的优劣,从而保护消费者利益,引导软件产业健康发展。

无疑,最直接和最有效的手段就是对软件产品实施检测。

正是基于这个原因,近年来国内成立了很多从事软件检测业务的机构。

但是如何来验证这些检测机构是否真的具备从事相应检测业务的能力呢?如何来验证这些检测机构出具的检测结果是否准确有效呢?这显然是企业、用户以及管理部门共同关心的关键问题。

目前,为了保证检测结果的公正、科学,软件产品的检测任务通常由中立的第三方软件检测机构来承担。

这些检测机构在开展检测业务之前须经过国家实验室认可委员会的认可。

认可后的各个实验室之间,相同业务范围内的检测结果应是互相认可并一致的。

然而,由于软件实验室相对于传统实验室的特殊性,很多检测实验室通过认可之后,在同样业务范围内的检测能力仍然相差很多,往往造成彼此间的检测数据不一致。

截止到2006年,国内各类第三方软件检测实验室已经达到了一定数量(超过50家),覆盖了我国大部分的行政区域,在软件产业比较发达的地区,实验室的数量更加集中,例如北京地区,各种检测实验室达到7、8家。

上海、广州等地区也有多家实验室同时开展工作。

这些实验室中,绝大部分是由于“双软认证”任务的需要建立起来的,所以实验室的检测业务能力范围多数均为GB/T17544和GB/T16260。

但由于这两个标准本身的一些原因导致的各个实验室理解上的差异,以及实际检测能力上的差别,经常出现某一产品在某地区通过检测后,在另外一个地区无法通过当地实验室检测的情况。

为解决这种状况,除了继续加强标准化工作以外,急需出台专门面向软件检测实验室的能力验证制度。

软件检测实验室能力验证方案的最终用户虽然是各个第三方软件检测实验室,但这一方案发挥的效果对国内软件市场的影响力是不可估量的。

在国外,软件检测实验室主要通过市场机制进行约束和调控,有关能力验证方面的资料非常少。

而国内的检测实验室统一受国家认证认可监督管理委员会监督管理。

国家认证认可监督管理委员会于2006年3月13日发布了《实验室能力验证实施办法》,于2006年5月1日起施行。

这标志着国家对于各类检测实验室能力验证的重视已经达到了新的高度。

而到目前为止,有关软件检测实验室能力验证的方法、工具还是空白,所以研制专门面向软件检测实验室的能力验证工具是管理部门的迫切需求。

只有掌控了检测机构的实际能力,才能规范整个软件检测行业,进而促进软件产业的健康发展。

这一办法既表明了国家加强实验室管理的态度,也对软件检测实验室的能力验证问题提出了严峻的挑战。

另一方面,软件检测实验室和其他检测、校准实验室有很大差别,无法运用传统手段进行能力验证。

作为实验室管理机构的中国实验室国家认可委员会,目前对软件检测实验室的认可工作基本上仍然以对其他领域实验室的认可准则为依据,这本身在很大程度上并不适合于软件检测实验室。

为了解决这个问题,国际标准化组织专门发布了技术文件ISO/IECTR13233:1995《Information technology--Interpretation of accreditation requirements in ISO/IEC Guide 25--Accreditation of Information Technology and Telecommunications testing laboratories for software and protocol testing services》,国家认可委正在将该技术文件转化为《检测和校准实验室认可准则(CNAL/AC01)在软件检测实验室的应用附加指南》。

该文件在一定程度上针对软件检测实验室进行了调整,并提出了部分合乎软件检测实验室实际需求的要求条款。

但是一直到目前为止,有关软件检测实验室能力验证方案的问题,国内外都没有可借鉴的参考方案。

2.2.总体方案根据《实验室能力验证实施办法》中第二条的规定,“本办法所称的能力验证,是指利用实验室间指定检测数据的比对,确定实验室从事特定测试活动的技术能力。

”参考传统实验室的这种比对活动,都是采取标准物质作为测试对象,对各个参加能力验证的实验室的实际测量结果进行比较分析,最终得出结论。

作为软件检测实验室,其能力验证的原理也是如此,只是在某些具体问题上与其他实验室差别较大。

这些问题在下面的章节中会详细讨论,这里先给出能力验证的总体设想方案和其中的几个主要环节(这些方案和环节中并没有考虑组织管理上的诸多因素,那部分内容不在本报告的讨论范围之内):设想方案:建立一套《软件检测实验室能力验证用测试对象库》,也就是一个可以任意组装和拆卸的软件模块库,这些模块或大或小对应着GB/T16260中规定的质量特性、子特性或是度量元,当我们要开始一次能力验证时,确定了要使用的质量模型之后,就从库中抽取合适的模块,组装成测试对象。

主要环节:(1)设定能力验证范围(2)制备测试对象(3)分发并实施测试(4)收集测试结果并进行统计分析针对上面列出的4个主要环节,我们一一讨论其解决方案及可行性。

2.3.主要课题(1)设定能力验证范围在这个环节中,我们的任务主要是以下几个方面:a.确定检测依据和范围目前的软件检测实验室,其业务范围主要是GB/T17544和GB/T16260。

其中GB/T16260已经修订,而与之配套使用的GB/T17544的修订工作还没有结束。

这两个标准是针对所有软件产品的通用标准,覆盖了软件产品的全部质量特性。

但是一般来说,一个软件产品并不会涉及到全部这些质量特性。

那么哪些质量特性在验证范围内,哪些不在验证范围内,要给出明确的说明。

这些质量特性在GB/T16260中又被分为了子特性和度量元,因此,在确定了检测依据和范围之后,应给出本次能力验证使用的质量模型。

b.确定结果数据的要求定义了质量特性范围之后,要对测试结果数据有明确要求。

如果测试的依据只是GB/T17544,那么由于该标准并未对测试后产生何种数据进行规定,因此必须在这一环节中给出明确要求。

例如,要求给出Buglist,统计错误和失效的数量,进行错误分布分析等等。

同时,由于这些错误与失效的严重性级别是不同的,因此,还有必要对错误的分级进行统一的定义,并要求结果数据中给出相应的级别描述。

如果测试的依据中包括了GB/T16260,那么由于该标准中将各个质量特性划分为子特性,并进一步细分为度量元,且给出了将各个度量元测试结果归结为数值的方法,因此在这一环节中应给出进行比对测试时使用的质量模型。

也就是说,应列出需要各个实验室提供结果数据的那些度量元的列表。

(2)制备测试对象这个环节是整个能力验证方案中最为艰难的一个环节。

其主要问题集中在以下几个方面:a.标准结果数据的问题其他实验室使用的测试对象是标准物质,其标准的结果数据是已知的;而软件由于其自身的特殊性,标准的结果数据几乎是无法获得的。

要解决这一问题,方法有两个。

一是向测试对象植入错误,并在结果分析时只考虑这些植入的错误。

这种方法针对功能性比较有效,但是对于其他质量特性,效果不明显。

二是对测试对象进行反复测试,使结果数据尽量逼近真实数据。

这种方法理论上是可以实现的,但是由谁来进行测试是个问题。

单独选取一家检测机构进行测试很难达到效果;而如果选取多家反复进行测试,测试对象就变得公开。

b.测试对象对标准的覆盖程度问题除了结果数据的问题,整套的能力验证方案必须覆盖GB/T中规定的所有质量特性,依靠一个单一的测试对象很难达到这一标准,因此,应该采取测试对象库的方式。

也就是说,设计一套可以任意组装和拆卸的软件模块库,这些模块或大或小对应着GB/T16260中规定的质量特性、子特性或是度量元,当我们要开始一次能力验证时,确定了要使用的质量模型之后,就从库中抽取合适的模块,组装成测试对象,分发给实验室进行比对测试。

这部分工作的工作量极其庞大,而且涉及了软件开发、软件测试、软件标准化等不同领域,需要大量的投入。

鉴于目前软件检测市场上的需求,可以先从功能性方面的模块入手。

(3)分发并实施测试这个环节和传统实验室的能力验证没什么重大区别,可以按照以往经验进行操作。

(4)收集测试结果并进行统计分析如果要求结果数据是针对度量元的数值,那么就要给出每个度量元可以接受的结果数值范围。

这个结果数值范围的确定,应通过严密的数学分析,借助统计学的某些概念和公式最终导出。

这需要协同其他行业的专家一起来完成。

如果要求的结果数据是Buglist形式,不能只考虑最终发现缺陷的个数,而应对应标准的缺陷列表,为每个缺陷分配权值,再依据加权后的标准缺陷列表,为各个实验室打分。

权值的分配,同样需要软件领域和数学领域的专家协同工作来一起完成。

3.小结通过上述探讨,本文提出的解决方案的核心思想,是建立一套《软件检测实验室能力验证用测试对象库》。

由于工作量和市场需求的问题,考虑先从功能性方面的5个子特性14个度量元入手。

同时,在软件实验室能力验证的实施过程中,还应注意质量模型的设定、结果数据的要求以及结果数据的评判标准等方面的问题。

4.参考文献表GB/T 16260.1-2006 《软件工程产品质量第1部分:质量模型》GB/T 16260.2-2006 《软件工程产品质量第2部分:外部度量》GB/T 17544-1998 《信息技术软件包质量要求和测试》《实验室能力验证实施办法》ISO/IEC TR13233:1995 《Information technology--Interpretation of accreditation requirements in ISO/IEC Guide 25--Accreditation of Information Technology and Telecommunications testing laboratories for software and protocol testing services》。

相关文档
最新文档