《大数据平台数据标准》编制说明

合集下载

数据展示平台需求规格说明书

数据展示平台需求规格说明书
数据清洗(data cleaning)
通过指定的规则发现及纠正数据中可识别的错误,检查数据的一致性、处理无效值和缺失值等。
数据转换(data transformation)
将数据从一种组织形式变为另一种组织形式的过程。
数据加载(data loading)
将清洗、转换好的数据保存到目标数据库的过程和行为。
5.3.1能源21
5.3.2主要经济指标24
5.3.3税收26
5.3.4产业32
5.3.5产值34
5.3.6创新36
5.3.7开放40
5.4综合管理42
5.4.1功能描述42
5.4.2功能结构42
5.4.3数据描述43
5.4.4界面原型46
5.5二次开发46
5.5.1功能描述46
5.5.2界面原型47
数据展示平台
需求规格说明书
1.引言1
1.1文档编制目的1
1.2阅读对象1
1.3项目建设背景1
1.4术语表2
1.5参考资料3
2.概述3
2.1项目建设目标3
2.2项目建设内容3
2.3与其他系统关系4
2.3.1服务器端运行环境4
2.3.2客户端运行环境
3.业务需求5
3.1总体数据流程5
4.系统功能规划6
4.1系统功能架构6
4.2功能需求列表7
5.功能需求10
5.1演示模式10
5.1.1功能描述10
5.1.2功能结构10
5.1.3界面原型10
5.2基本情况14
5.2.1功能描述14
5.2.2功能结构14
5.2.3数据描述15
5.2.4界面原型20
5.3经济情况20

《PB级多源异构大数据平台构建和数据开放及规模化运营系列标准》

《PB级多源异构大数据平台构建和数据开放及规模化运营系列标准》

种 数据 的格 式、语义 、加工周期等 ,并规范 了基 于元数
据 的数 据质 量追 溯机 制。
用合 作。
80
企 业 动态 Bu s i n e s s D y n a mi c s
P B 级 多 源异构 大 数 据平 台构 建和 数 据 开放 及规 模化 运 营 系列 标 准 获2 0 1 6 年 中国通信标 准化协会科学技术奖 二等奖
主要完成单位 :中国联合网络通信集 团有 限公司
主要完成人 :魏进武 、张云 勇、范济安 、李卫 、王志 山、靳淑娴 、裴小燕 、霍玉嵩 、顾霞 、陈 勇
据建模 以及数据结果安全输 出的大数据纵 向服务框架 。 2 ) 在流程方面 ,规范 了大 数据平台能力开放 ,数据 采集到运营 的管理 、业务 两类流程的协 同和穿透 ,形成 了大数据开放 的运营体 系与业务开展 的标准化流程 。 3 ) 在数据方面 ,覆盖运营商全 网5 种数据 ,规范 了5
据 平 台 的功 能 体 系 和技 术 架 构 ,构 建 了 从 资 源 供 给 到 数
4社会效 益 1 ) 公 共 治理 :服 务于 国家 统计 局 、公安 、政 府应 急 、国家旅游局等8 个 以上部委办 。 2 ) 便民服务 :环沈 阳经济 圈出行易、乘车易 以及停 车 、出行等服务 。 3 ) 对外推广 :入选 “ 大 数据 治国理政案例” ,获得 T MF “ 以客户 为中心”卓越奖 ;在第 二、第三届世界 互 联 网 大会 上 发布 1 5 项沃 指数 产 品和多项 行业大 数据应
4 ) 在开放服务 方面 ,规范了云化大数据平 台内部各 个 关键 模块 之间以及平台与外部系统之 间的接 口,规范 了数据 开放服务和交付 ,促进跨行业数据 的融合开放 , 带 动产业发展新型业务形态。 2具体成果 该项 目累计 输 出行业 标准 ( 含 立项 及报 告) 4 5 项, 主导 完成 国际 建 议 1 1 项 , 附加 知 识 产权 包 括 受 理 发 明专 利 1 0 8 项( 其 中1 5 项 已授 权 ) ,授权 软件 著作 权3 8 项 ,出版 专著4 部 ,发表 论文4 1 篇 ,并将落地成果 推向 H a d o o p 、Op e n t a c k 等开源社 区。 3经济效益 1 ) 收入 贡献 :对企业 内部实现 了精准 营销、存量经 营、数据合作等 ,辅助拉动主营业务 的营收。 2 ) 成本节约 :实现 了基础资源环 境的 自动化部署能

团体标准大数据企业认定管理规范编制说明

团体标准大数据企业认定管理规范编制说明

团体标准编制说明标准名称大数据企业认定管理规范发布单位武汉市大数据协会标准编号T/WHBDA XX—2019 1、项目现状及编制或修订目的和意义随着社会的飞速发展,科技水平日新月异,各种信息呈现爆炸式的增长。

近年来,数据的重要作用正被越来越多的行业所关注,正深刻的改变着人们的生活与工作方式,数据资源已经成为当今世界最为重要的战略型资源。

在此背景之下,以物联网、大数据、云计算等新一代信息技术成为企业发展的核心竞争力,在医疗、政务、交通等领域广泛应用,形成了一系列大数据产业链。

武汉市大数据协会作为代表武汉市大数据企业的行业组织,此次大数据企业认定管理规范的发布,将更好的鼓励科技企业积极开发大数据相关产品与技术,并为政府对大数据协会相关政策支持提供依据。

标准的发布也将引导大数据企业的合理、合规运营,提高大数据安全,规范行业健康发展。

2、确定标准的主要内容、依据、指导思想、制修订的基本原则、附录标准主要内容说明:本标准规定了大数据企业认定的术语与定义、大数据企业业务范围、组织与实施要求、认定管理要求。

标准制订的依据:本标准制定的主要依据是《武汉市大数据企业认定管理暂行办法》(武网发〔2015〕46号),同时参考其它省市相关文件及制度。

此外,还实地考察调研了中金数据(武汉)超算技术有限公司、武汉达梦数据库有限公司、九派(武汉)全媒体股份有限公司、武汉大数据产业发展有限公司、东湖大数据交易中心股份有限公司、湖北省楚天云有限公司、武汉企鹅能源数据有限公司、武汉源启科技股份有限公司等大数据相关企业,研论了标准要求中的规定,并结合实际情况确定了适合的认定要求。

标准修订指导思想:为促进我市大数据产业健康快速发展,规范我市大数据企业认定管理工作,制定《大数据企业认定管理规范》。

标准制(修)订的基本原则:大数据企业的认定应遵循突出企业主体,鼓励技术创新,实施动态管理,坚持客观、公正、公开、透明的原则。

4、主要试验、验证结果本标准中规定,申请认定的大数据企业须具备的必要条件a)具有企业法人资格,其注册地及工商、税务、统计关系在武汉市;b)近一个会计年度的大数据产品(或服务)销售收入占公司年度总收入的比例符合如下要求之一①最近一年销售收入小于2000万的企业,比例不低于50%;②最近一年销售收入大于2000万且小于5000万的企业,比例不低于40%;③最近一年销售收入大于5000万小于1亿元的企业,比例不低于30%;④最近一年销售收入大于1亿元的企业,比例不低于20%;⑤传统产业大数据融合企业,近一个会计年度的大数据技术产品(服务)采购金额不低于年度营业成本的3%,或大数据技术研发费用不低于公司研发总费用的30%。

《政务数据资源分级分类指南》编制说明

《政务数据资源分级分类指南》编制说明

内蒙古自治区地方标准《政务数据资源分级分类指南》(征求意见稿)编制说明一、编制简况2018年5月按照原内蒙古自治区质量技术监督局2018年第一批内蒙古自治区地方标准制修订项目计划,内蒙古大数据发展管理局启动了《政务数据资源分级分类指南》的制定。

起草单位为内蒙古大数据管理局、中国电子技术标准化研究院、北京国脉互联信息顾问有限公司等,主办单位为内蒙古大数据发展管理局,归口单位为内蒙古自治区大数据局。

主要起草人为:全鑫、孙卫、袁慧君、古庆、包瑞林、应智强、董建敏、崔连伟、卫凤林。

二、制定标准的必要性和意义2015年9月,国务院发布的《促进大数据发展行动纲要》提出“2018年底前建成国家政府数据统一开放平台,率先在信用、交通、医疗、卫生、就业、社保、地理、文化、教育、科技、资源、农业、环境、安监、金融、质量、统计、气象、海洋、企业登记监管等重要领域实现公共数据资源合理适度向社会开放”。

政务信息资源分类是电子政务的基础性,是政务信息资源采集、加工、存储、保护和使用的必要工具。

项目编制组结合我区电子政务和大数据建设实践,调研我区政务信息资源的分布情况和数据特征,分析政务信息资源开放需求,运用标准化的思维和系统工程的方法论对政务信息资源进行规范化的重新组织,建立数据开放和共享标准规范,使数据资源在整合、应用过程中实现统一标准化管理,提升数据资源的整体应用价值。

本标准规定了政务信息资源的分类原则和方法,为政务信息资源目录体系提供分类方案,为政务信息资源分类体系的建立和维护提供了依据。

本标准与政务信息资源目录标识符编码规则相结合,可以对政务信息资源进行识别、导航和定位,以支持政务部门间政务信息资源的交换与共享。

本标准以我区发展电子政务的需求为导向,以支持政务信息资源的交换与共享为目的,是实现政务信息资源交换和共享的基础。

因此,对政务信息资源进行分级分类指南,是非常必要的。

三、主要起草过程2018年5月内蒙古自治区质量技术监督局下达标准计划任务后,内蒙古大数据管理局讨论确定成立标准编制组,由内蒙古大数据管理局牵头,中国电子技术标准化研究院、北京国脉互联信息互联有限公司等单位参与编制。

《数字化实验室 数据控制和信息管理要求》团体标准 编制说明

《数字化实验室 数据控制和信息管理要求》团体标准 编制说明

《数字化实验室数据控制和信息管理要求》团体标准编制说明一、项目背景工业互联网是新一代信息技术与工业经济深度融合的全新经济生态、关键基础设施和新型应用模式,通过人、机、物的全面互联,实现全要素、全产业链、全价值链的全面连接,将推动形成全新的生产制造和服务体系。

数字化实验室,是在数字经济背景下,运用新一代数字与智能技术,推动实验室战略、业务、研发、管理、服务、财务、供应链等全流程的数字化升级转型,从而形成经营管理敏捷化、产品服务个性化、质量管控智能化、组织边界弹性化、创新网络开放化、价值体系生态化的新型实验室。

近年来,监管部门对于实验室业务数据的监管数字化要求提升:认监委上传报告编号、强制检定系统纳入统一上报系统,校准服务纳入公示平台;新版实验室管理体系ISO/IEC 17025-2017§7.11,RB/T214-2017§4.5.16数据信息管理,都对实验室信息系统也提出更高要求,强调了“数据”的重要性。

越来越多的实验室意识到了数字化转型升级对于自身及行业发展的重要性。

实验室开展数字化转型的目的是在支撑业务发展的同时降低质量和管理风险,以客户为中心推动高效运营,创造新的基于数字或者信息的绩效提升,并持续引领管理的升级与变革。

数据是数字化实验室的关键因素,必须执行系统的方法,从而能够充分保证,在数据生命周期内,所有的记录和数据均是完整可靠的。

实验室数字化领域大量使用前沿的新技术、新方法,是目前大量实验室乃至检验检测行业转型升级的方向。

同时,也面临组织架构不清晰,管理要求不明确等共性问题。

不论是在数字化转型升级的实践中,还是在监管部门开展资质认定的活动中,对实验室使用的信息化数字化系统,尤其是数据的管理,都存在一些困惑。

因此,开展数字化实验室标准化工作的研究,不论对于管理部门、行业协会,还是检验检测机构而言,都有非常重要和迫切的现实意义,也是一个典型的通过标准化支持引领新技术领域创新的实践案例。

大数据平台测试标准

大数据平台测试标准

大数据平台测试标准一、引言大数据平台的测试是确保平台的稳定性、可靠性和性能的关键步骤。

本文档旨在定义大数据平台测试的标准和流程,以确保测试的一致性和有效性。

二、测试目标1. 确保大数据平台的功能符合需求规格说明书中的要求。

2. 确保大数据平台的数据完整性和准确性。

3. 确保大数据平台的性能满足预期的要求。

4. 确保大数据平台的可用性和稳定性。

5. 确保大数据平台的安全性,保护数据的机密性和完整性。

三、测试策略1. 功能测试:验证大数据平台的各项功能是否按照需求规格说明书中的要求正常工作。

2. 数据完整性测试:验证大数据平台的数据是否完整、准确,并与源数据保持一致。

3. 性能测试:评估大数据平台的性能,包括数据处理速度、吞吐量和响应时间等指标。

4. 可用性测试:测试大数据平台的可用性和稳定性,包括故障恢复、容错能力和负载均衡等方面。

5. 安全性测试:评估大数据平台的安全性,包括身份验证、访问控制和数据加密等方面。

四、测试环境1. 硬件环境:包括服务器、存储设备和网络设备等。

2. 软件环境:包括操作系统、数据库管理系统和大数据平台软件等。

3. 数据环境:包括测试数据集和测试数据生成工具等。

五、测试流程1. 测试计划:编制详细的测试计划,包括测试范围、测试目标、测试策略和测试资源等。

2. 测试设计:根据需求规格说明书,设计测试用例,包括功能测试用例、性能测试用例和安全性测试用例等。

3. 测试执行:按照测试计划和测试设计,执行各项测试,并记录测试结果和问题。

4. 缺陷管理:对测试中发现的问题进行记录、跟踪和管理,包括缺陷的分类、优先级和状态等。

5. 测试报告:编制详细的测试报告,包括测试结果、问题统计和建议改进等。

6. 测试评审:对测试过程和测试结果进行评审,确保测试的有效性和一致性。

六、测试指标1. 功能测试指标:包括功能覆盖率、功能正确性和功能可用性等。

2. 数据完整性测试指标:包括数据准确性、数据一致性和数据完整性等。

《基于大数据的智慧家庭服务平台评价技术规范 第4部分:智慧卧室》编制说明

《基于大数据的智慧家庭服务平台评价技术规范 第4部分:智慧卧室》编制说明

中国标准化协会标准《基于大数据的智慧家庭服务平台评价技术规范第4部分:智慧卧室》编制说明一、工作简况1、背景介绍在2019年上海AWE上,大多数家电企业转向AIoT赛道,说明智能单品已经不能满足用户的体验需求,智能家电已经从单纯的连接转向"智能+"赋能,智能家电场景的联动会给用户带来更好的体验;智能将回归节能、健康、安全等消费本质。

当然,智能单品产品的普及,也积累了海量的“数据宝库”,这些数据可以支撑、服务智能家电从智能单品转入场景联动的“智能+”阶段,利用物联网、大数据、人工智能技术等技术,通过搭建智慧家庭健康数据应用平台,从被动服务用户,转向主动服务用户,减少用户的日常干预,为用户提供“无感”的舒适、健康生活。

目前市场上的产品在用户健康数据的收集和使用等方面体现为碎片化、差异化;整个行业缺乏基于云计算、大数据平台的智能家电的生理健康数据应用标准,也造成了目前对健康数据应用混乱的局面,行业需要制定关于智慧家庭场景、健康的标准,能够有效地对用户健康数据的应用规则和效果进行评判,有利于引导智能家居行业的发展和规范市场,也有利于提高用户体验。

标准的起草将填补智慧家庭场景、健康等标准的空白。

2、任务来源规范了智慧卧室结构模型,并充分利用卧室的智能空调、智能枕、温湿度计、空气净化器等设备产生的数据,指导企业运用物联网、云计算、大数据等技术,为用户提供及时、便利的健康建议和计划,并给用户带来好的智能体验。

由青岛海尔空调器有限总公司、中国家用电器研究院、中家院(北京)检测认证有限公司等共同向中国标协提出申请,经立项通过并印发了中国标协【2019】66号文件,项目名称:《基于大数据平台的智慧家庭健康数据应用评价技术规范智慧卧室》。

注:由于平台不只是健康数据内容,经行业征集和专家讨论,标准名称由《基于大数据平台的智慧家庭健康数据应用技术规范智慧卧室》,改为《基于大数据的智慧家庭服务平台评价技术规范智慧卧室》。

《公共数据元规范》浙江省地方标准(征求意见稿)编制说明【模板】

《公共数据元规范》浙江省地方标准(征求意见稿)编制说明【模板】

《公共数据元规范》浙江省地方标准(征求意见稿)编制说明一、项目背景公共数据元是将公共数据主管部门、公共管理和服务机构(国家机关、法律法规授权的具有管理公共事务职能的组织以及燃气、水务、电力、通信、公共交通、民航、铁路等公共服务运营单位)的基础、通用数据元以描述内容属性作为依据进行分类,并对数据元属性、数据元构成、数据元管理进行统一规范。

公共数据元规范保障基础数据的流通性和互操作性,是浙江省公共数据标准化建设和管理的基础内容且具有重要意义:(一)公共数据元规范为推进浙江省数字化改革提供基础支撑。

各部门系统建设更多以功能为核心,缺乏统一的数据标准,基础数据标准缺失使得各系统建设时易浮现异构现象,信息共享和业务协同存在障碍。

《浙江省数字化改革总体方案》 (浙委改发〔2022〕2 号)将制定公共数据元规范列为 2022 年度数字化改革作战图中的一项重要任务。

制定公共数据元规范,可有效提高公共数据元的标准化程度,减少信息资源互联互通障碍,保障底层数据的准确率和实时共享,为深入推进数字化改革和一体化数据资源体系建设发挥基础性作用。

(二)构建符合浙江实践的公共数据元规范是推进公共数据标准化建设的重要措施。

公共数据元规范是在 GB/T 19488.1-2004 《电子政务数据元第1 部份:设计和管理规范》基础上,对基础库和各部门信息资源涉及的高频使用数据元进行梳理与分析,构建包括自然人类、法人类、信用类等6 个类别的公共数据元体系,形成符合浙江实践的基础数据标准,用于指导各地、各部门基础数据标准化建设,确保公共数据标准化工作有序推进。

(三)实施公共数据元规范是提高基础数据质量、促进各部门数据可靠共享的重要保障。

公共数据元规范对关键、基础的公共数据进行标准化重组织提供规则,明确通用属性描述、数据元分类与编码、管理与使用等内容,形成数据语义标准统一的公共数据元设计与管理规范,促进数据在整合、应用过程中实现统一标准的管理,有利于提高数据质量,保障各部门数据实现交换与共享。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

内蒙古自治区地方标准《大数据平台数据标准》
(征求意见稿)编制说明
一、工作简况,包括任务来源,起草单位,协作单位,主要起草人;
2019年6月按照内蒙古自治区市场监督管理局2019年第一批内蒙古自治区地方标准制修订项目计划,批准文号为:内市监标准字[2019]170号,内蒙古大数据发展管理局启动了《大数据平台数据标准》的制定工作。

起草单位为内蒙古自治区大数据发展管理局、内蒙古大学图书馆、内蒙古自治区大数据与云计算标准化委员会、内蒙古自治区发改委社会信用管理中心、内蒙古自治区标准化院信息中心、浪潮集团、内蒙古大学、中国电信股份有限公司内蒙古分公司、新华三技术有限公司等。

归口单位为内蒙古自治区大数据发展管理局。

主要起草人为:崔连伟、张建军、刘实、常亮、郭新灵、张文辉、李敏、崔波、孟晖、李向前、万磊。

二、制定标准的必要性和意义;
国务院2015年8月31日印发《国务院关于印发促进大数据发展行动纲要的通知(国发〔2015〕50 号)》和国务院办公厅2017年5月3日印发《政务信息系统整合共享实施方案》(国办发[2017]39号)明确要求建设相关标准体系,加快建立政府部门、事业单位等公共机构的数据标准和统计标准体系,推进数据采集、政府数据开放、指标口径、分类目录、交换接口、访问接口、数据质量、数据交易、技术产品、安全保密等关键共性标准的制定和实施同时加快建立大数据市场交易标准体系。

开展标准验证和应用试点示范,建立标准符合性评估体系,充分发挥标准在培育服务市场、提升服务能力、支撑行业管理等方面的作用。

积极参与相关国际标准制定工作。

今年,党的十九大中再次提出,要“推动互联网、大数据、人工智能和实体经济深度融合”,为我国大数据领域的建设给出了指导意见。

《内蒙古自治区“十三五”信息化发展规划》要求推进政务大数据开发和共享利用。

进一步加快人口、法人单位、电子证照、空间地理、统计、金融、信用体系等基础信息资源库共建共享,加快推进政府数据共享开放目录、指南和清单、整合形成自治区政府数据统一共享交换开放平台,促进政务在线协同和数据创新应用。

围绕医疗卫生、文化教育、社会信用、综合治税、社会保障、食药监管、环境保护、电子监察、应急管理和法律监督等需求迫切、效益明显的业务需求,积极推进扩部门、跨地区、跨层级的信息共享和业务协同。

内蒙古自治区人民政府办公厅2017年3月14日印发“内蒙古自治区人民政
府专题会议纪要”《研究自治区大数据发展工作有关事宜》([2017]12号)明确要求完善制度体系。

结合自治区的大数据产业发展规划,进一步研究“十三五”时期大数据发展的战略重点、目标任务和具体措施;抓紧形成政务数据目录清单,推进各行业数据归集整合,实现跨地区、跨层级、跨部门互认共享;建立政府数据标准体系。

为推进政府数据资源整合、共享开放、创新应用,搭建创新创业平台,促进内蒙古自治区大数据产业发展,通过政府数据开放共享标准制定及标准体系建设咨询服务,编制大数据标准体系,编制数据采集、存储、流通、分析、可视化以及政府数据开放、分类目录、交换接口、访问接口、数据质量、数据交易、技术产品、数据安全、数据开放共享标准规范已迫在眉睫。

三、主要起草过程;
2019年6月内蒙古自治区质量技术监督局下达标准计划任务后,内蒙古大数据发展管理局讨论确定成立标准编制组,由内蒙古大数据发展管理局牵头,中国电子技术标准化研究院、新华三技术有限公司等单位参与编制。

2019年7月,完成内蒙古自治区大数据产业标准化需求调研,针对内蒙古自治区大数据相关业务、应用和系统及内蒙古自治区大数据服务产业标准的现状、趋势和需求进行调研,为了正确把握内蒙古自治区大数据应用方、技术提供方、工具提供方对标准的需求,以保证标准的实用性和有效性。

2019年8月,形成《大数据平台数据标准》草案,并面向专家征求意见。

2019年9月,形成标准征求意见稿。

四、制定标准的原则和依据,与现行法律、法规、标准的关系;
本标准以服务内蒙古自治区各级跨部门、跨地区的各行业数据的安全、有序、共享和开放为目标,在整合内蒙古自治区大数据产业相关的需求、供给、集成、分析等各方资源的基础上自主制定。

该标准与现行法律、法规、强制性国家标准及相关标准协调配套,无冲突情况。

五、主要条款的说明,主要技术指标、参数、试验验证的论述;
本标准分为8个章节:范围、规范性引用文件、术语和定义、缩略语、概述、数据质量评价维度、质量保证、数据质量评分方法。

第6章“数据质量评价维度”从八个维度对数据质量进行评价,分别是:完整性、规范性、一致性、准确性、唯一性、关联性、时效性、可访问性。

每个评价维度包含对该维度的概述信息以及评价标准,通过此八个维度保证数据质量。

第7章“质量保证”通过四个阶段对数据进行治理,保证数据质量,五个阶段分别为:数据标准体系建设、数据采集阶段治理、数据存储阶段治理、数据使用阶段治理、数据全流程治理。

第8章数据质量评分方法主要介绍评分规格及评分公式,通过对规则进行评分、任务评分、绩效评分直接反应数据质量优劣。

六、重大意见分歧的处理依据和结果;
无重大分歧。

七、采用国际标准或国外先进标准的,说明采标程度,以及国内外同类标准水平的对比情况;
本标准未采用国际、国外标准。

八、其他应说明的事项。

建议推荐性标准。

《大数据平台数据标准》内蒙古自治区地方标准编写组
2019年8月。

相关文档
最新文档