综合管理服务大数据平台建设与应用示范项目可行性研究报告
第一章项目总论
一、项目名称
综合管理服务大数据平台建设与应用示范项目。
二、项目申报单位
主要申报单位：
项目建设性质
新建。
三、项目建设地点
四、项目建设内容
建设城市管理综合信息服务平台，推进海量信息集中与交换共享，通过可视化方式呈现“智慧”整体运行“体征”，及各地实时状态，全面铺开智慧城市感知、监控、实时响应体系网络，建设集资源统计动态展示、指挥调度、辅助决策支持、一体化融合通信、智能预警、城市信息发布等功能为一体的综合管理平台。
五、建设期限
本项目建设工期为24个月（2016年3月-2018年2月）
六、项目总投资
本项目总投资3000万元人民币。
七、资金来源
本项目总投资3000万元人民币，其中拟申请国家补贴600万元，其余资金企业自筹。
八、可行性结论
该项目投资3000万元人民币，项目建设工期为24个月。通过项目的投资规模、建设期限、建设内容及社会效益等方面内容，经过专家的论证得出结论，该项目建设内容符合国家产业政策，投资计划合理，建设规模适度，建设资金落实到位，技术上非常可行。
第二章项目的意义和必要性
一、意义
随着城市的快速发展，社会、经济、人口等信息急剧增长，地理信息系统的应用变得越来越广泛，信息共建共享成为城市信息化建设的一项重要任务，也是面向服务时代建设发展的必然要求。据统计，80%以上的政府部门都需要使用地理信息。实践已经证明，以地理信息为基础，实现多种社会城市信息的集成与融
合，服务于政府管理和决策分析，为国民经济建设和社会发展提供支撑，具有非常重要的意义。
二、必要性
自然资源与空间地理信息资源是电子政务的重要基础信息资源，是不可或缺的信息化基础软设施。为了更好地满足各业务部门的应用需求，采用网络、硬件、数据库、GIS、遥感影像、软件开发等技术构建一个能够持续发展的城市管理综合信息服务平台，与人口信息、企业信息、社会经济信息进行整合，将遥感影像、地址数据、政务信息图层等现有的政务地理空间信息资源进行集中管理和提供共享服务，并解决安全性、可靠性、高效性等问题，为政府各部门提供一个政府内部统一的综合地理空间信息服务窗口，以满足各部门对地理空间信息数据的共享应用需求，辅助领导进行决策，提高业务办理效率，为社会公众查询空间信息和参与内建设与管理提供便捷、高效的现代化服务载体，提高域发展核心竞争力。
第三章国内外发展现状
一、国外现状
国外研究现状自20世纪90年代以来，信息技术作为代表的高新技术飞速发展，促进着世界经济、政治和文化等各个领域发生着深刻的变革。为了迎接新的挑战，占据主导地位，美国率先
提出实施国家信息基础设施和全球信息化基础设施计划；与此同时，欧洲也开始实施信息社会的战略；亚洲国家新加坡也制定了建设东南亚“智慧岛”的知识经济发展战略。为此，智慧城市的概念不断涌现，并越来越受到各界关注。在智慧城市中最明显的特征就是将城市的规划、建设、管理与服务进行一体化、数字化发展，而智慧城市正是其中一个重要部分。
国外学者关于智慧城市这个领域的研究主要集中于两个方面，一方面是数字化环境下的城市行政管理行为，也就是“城市管理”问题。另一方面是研究数字技术工具对城市管理的辅助作用。“城市管理”问题在20世纪末期初见，在本世纪越发明显，到现在为止仍是一个比较新的课题。
有学者对城市管理进行了定义，认为城市管理在广义上是指在电子技术的支持下，整个社会的运行和组织形式，这里包括对经济和社会资源的综合治理；在狭义上是指政府与非政府组织的经济、社会互动，以及政府内部在运行中运用电子技术易化政府行政及简化办事程序，并提高民主化程度。在信息化城市发展的模式中，政府的自主权不断减少，而公众的参与权正在不断提升。
还有些国外学者通过对欧洲一些城市的调查，研究了城市管理方式给政府与公众带来的好处，认为信息技术是对传统行政的有益补充；美国和韩国的大学学者们通过安全性、实用性、内容丰富性、服务种类、公众回应与参与程度等几个因素进行考察，对全世界几十个主要城市的城市管理和数字民主发展水平进行
了评价，同时也揭示了发展中国家与发达国家在城市管理方面存在的差距。由此可见，国外有关智慧城市的研究比较深入，且经验颇深，值得我国学习与借鉴。
三、国内现状
目前，随着科技的发展，我国社会各界人士对城市管理极为重视，尤其国家在进行城市发展规划时，更是重视城市管理给城市发展带来的利弊。较为普遍性的观点认为，城市综合管理是现代信息技术在城市管理中的应用。它是一个关于城市建设的系统，该系统是基于单元格划分和城市部件、事件管理理法，建立起城市的管理数据库，以对城市管理对象实现数字化和标准化的管理。这不仅有助于城市管理体制创新和管理流程重塑，也有助于政府更好地动观城市动态，把握城市发展动向，从而进一步解决城市管理中信息滞后、管理被动、职能不清等问题，进一步提升了城市管理水平，提升了城市管理的品质。
第四章项目建设方案
一、建设目标
城市综合管理服务大数据平台是利用最新的信息化技术搭建起来的一个城市综合管理信息平台，它通过使用大数据、物联网、云计算、智能计算、空间信息等技术，实现电子政务、日常监管、综合服务等业务的信息化，逐步实现城市综合管理服务的
智能化。
二、建设方案
城市综合管理服务大数据平台建设包括数据库建库、城市大数据管理综合服务系统。
（一）数据库建库
1、数据采集
空间数据主要是来源于各个部门提供的图件、CAD数据、SHP 数据、遥感影像、无人机航拍影像等。三维全景数据则通过移动测量系统以及全景影像处理技术实现采集。
采集的手段包括：
1）系统对接：
各业务系统通过共享交换平台与基础数据库进行对接，通过
系统实现数据的共享交换；
2）系统导出表：
通过系统导出表格利用光盘的方式实现数据的共享交换；
3）电子表格：
提交word表、excel表实现数据的共享交换；
4）纸质文件：
提交纸质文件实现数据的共享交换；
5）直接采集：
通过外业采集、内业录入的人工方式实现数据的采集。
6）无人机快速采集：
依托无人机遥感系统的机动灵活、经济便捷的技术优势，采用无人机作为遥感平台进行低空监测和摄影，以获取低空高分辨率遥感数据为应用目标，可以快速数据采集。
2、数据加工处理
采集后的数据需要进行加工处理，遥感影像需要进行几何校正、图像增强、图像融合等操作，各个部门提供的CAD数据需要转换为SHP数据，然后做拓扑分析，全景数据需要做图片拼接处理等。
数据检查
对采集的数据在符合性和规范性方面进行检查。包括图形拓扑检查、属性准确性检查、图属一致性检查等，对于不符合质量要求的数据，重新进行修改，修改之后再次提交。数据质量合格
的，数据进入清洗比对库进行比对。
数据入库
对于加工处理、并经过检查后的数据，采用空间数据库引擎，将其批量入库，这样可以被地图文档、专题图文档、报表等调用。（二）城市综合管理服务大数据系统
以云计算、大数据、移动互联网、空间信息技术为支撑，以城市公共业务库为载体，通过手机、平板、电脑等多种终端面向政府决策、行业管理、公众服务的分层级、分类别、空间化、信息化的综合信息展示服务，建成数据内容全面、服务功能强大、应用领域广泛、全市统一的综合信息展示系统。
综合信息展示系统以基础地理信息为载体，整合全地表数据、规划数据、经济社会、城市运行等信息，通过海量数据的集成，在满足安全的前题下，实现面向政府、政府部门、社会公众的分类分层分级服务。解决部门间信息共享的孤岛问题。
图 1综合信息展示系统
1、数据架构
图 2数据架构
2、城市综合信息管理
用于管理系统后台中的场景、地形和各类GIS矢量数据服务，提供基本的数据服务配置、管理能力；同时，针对应用用户的不同角色进行用户的角色管理，给不同角色的用户配置不同的用户数据访问权限、图层控制权限、读写权限控制等权限。
（1）数据服务管理
系统提供对应地形影像数据、外部矢量数据、专题数据服务管理、服务设置与显示、服务编辑等功能。
1）加载影像数据服务
系统支持影像数据服务的加载与管理。
2）加载各类专题GIS数据
系统支持ArcSDE数据库文件、Shapefile文件的加载与管理功能。
比如专题规划图、行政划图、污染源分布图、道路专题图。
（2）部门管理
系统提供对政府各部门的账户管理能力，可以对任意部门进行创建、修改等操作。
（3）角色权限管理
系统提供对登录角色的管理功能。对于不同的登录角色，系统提供以角色为单位的权限配置管理，不同的角色，系统管理员可以配置不同的账户权限，如：使用功能权限、GIS图层访问权限以及场景编辑读写权限等。
（4）密码管理
系统提供管理员最高权限，提供密码修改权限。
（5）人员管理
系统提供对登录用户的人员账号和密码管理。
（6）日志管理
系统提供对所有登录用户的操作日志管理。
3、城市基础服务展示
（1）基础信息服务应用
提供基础底图展示：包含行政划，行政名称，道路路网，道路名称，电子地图，影像图、卫星图。
图 3基础底图展示
（2）城市规划服务应用
提供城市规划信息展示：包含现有和未来商业、住宅、服务域分布。
图 4城市规划信息展示
（3）城市基础设施应用
提供城市基础设施应用展示：包含交通基础设施、电力基础设施、燃气基础设施、给排水基础设设施、环卫基础设施。
图 5城市基础设施应用展示
（4）城市国土服务应用
提供土地利用现状信息展示：包含土地权属信息展示、国有集体、建设用地等。
图 6土地利用现状信息展示
城市人口分布服务应用展示，提供高密度住宅、低密度住宅、待改善人工住宅分析展示等。
图 7城市人口分布服务应用展示
（5）城市服务应用
提供城市景点分布，客流量统计分析展示。
（6）城市公共服务设施应用
提供医院（医院类型，救治种类）、学校等分布，收容人口量等
（7）城市社服务应用
提供社内的常住人口、流动人口、特殊人群（老人、孤寡老人、残疾人员、党员、团员、现任干部、居民代表等）进行信息展示，并与公安、民政、卫生、房管等部门交换数据，获得及时、准确、全面的人员信息，便于社会和民政部门的统计与调查，实现人口完整信息的统一存储、统一展示、统一利用，为平台其他功能模块提供居民人口信息支撑。
（8）城市企业服务应用
提供城市企业服务信息，高新技术企业，制造型企业，污染企业、交税大户，重点企业的分布，安排就业情况等的信息展示。
4 、城市综合信息检索
（1）常规检索
通过关键词的输入，进行常规性检索，系统自动调取后台的数据服务接口，通过访问的数据以及关键词进行检索结果反馈；并将结果展示出来，对于超出当前显示结果页面的，提供多页显示以及翻页显示操作。
（2）空间检索
通过空间位置的输入，进行空间检索，系统自动调取后台的数据服务接口，通过访问的数据以及位置参数进行检索结果反馈；并将结果展示出来，对于超出当前显示结果页面的，提供多页显示以及翻页显示操作。
空间检索，可以根据缓冲，出入一定的缓冲范围，进行范围内的结果反馈，也可以基于单点位置信息进行结果反馈。
（3）综合检索
结合上述的检索方式，系统自动调取后台的数据服务接口，通过访问的数据以及空间位置，关键词等进行检索结果反馈；并将结果展示出来，对于超出当前显示结果页面的，提供多页显示以及翻页显示操作。
5、城市管理综合展示
城市管理综合展示平台将以“城市、人、环境、发展”为主题，通过数据可视化的呈现反映当前城市管理的现状，为城市管理者提供及时的分析和报告，辅助决策。通过该平台，城市管理者能够及时全面了解城市管理各个环节的关键指标，以分析预
测等手段，提高管理能力。平台初步规划有如下模块：（1）城市经济财税综合分析
包括全经济运行情况分析，财政收入分析等。
图 8重点产业收入占比（数据虚构）
（2）城市资产综合分析
包括国有土地资产运营情况分析，无形资产营运情况分析，资源开发利用情况分析，城市载体运营情况等。
（3）城市建设综合分析
包括城建工程与资金投入情况，城建工程在全的分布情况，城建工程的类型分析，城市功能片与服务功能情况，文明施工情况，拆迁安置情况等。
（4）城市人口综合分析
包括各域人口规模及分布情况，常住人口与流动人口分析，便民服务设施配备情况，就业与失业情况，健康状况、低保状况等。
图 9城市月最低生活费组成（数据虚构）
（5）城市交通综合分析
包括道路面积及公共汽车、出租车拥有情况，公共交通客流量统计及预测分析，城市居民出行特征及强度评估，交通拥堵情况分析，私人汽车拥有量，车辆停放管理情况等。
图 10交通事故情况（数据虚构）
（6）城市环境综合分析
包括城市绿化覆盖率、园林绿地占比情况；环境统计信息、环境监测信息、环境监测点分布信息、污染源普查信息、环境质量评价、环保措施；违章违建情况、流动摊点治理情况等（7）城市发展综合分析
包括热点事件、综合指数统计（包含社会景气指数、居民幸福指数、社会包容指数、人均GDP指数、消费指数等）、产业结构与发展情况（重点展示信息化、教育、等重点抓的产业情况）等。
图 11居民幸福指数（数据虚构）
6、城市智慧应用专项分析展示
通过各类智慧应用汇集的数据进行统计，将统计数据基于BI分析结果进行展示，提供专题展示应用。
7、城市智能报告分析
改变传统的人工汇总报告模式，针对城市发展进行BI数据
分析报告输出，实现自动打印。
三、技术基础
（一）大数据关键技术介绍
1.大数据采集技术
数据是指通过RFID射频数据、传感器数据、社交网络交互数据及移动互联网数据等方式获得的各种类型的结构化、半结构化（或称之为弱结构化）及非结构化的海量数据，是大数据知识服务模型的根本。重点要突破分布式高速高可靠数据爬取或采集、高速数据全映像等大数据收集技术；突破高速数据解析、转换与装载等大数据整合技术；设计质量评估模型，开发数据质量技术。
2.大数据预处理技术
主要完成对已接收数据的辨析、抽取、清洗等操作。1）抽取：因获取的数据可能具有多种结构和类型，数据抽取过程可以帮助我们将这些复杂的数据转化为单一的或者便于处理的构型，以达到快速分析处理的目的。2）清洗：对于大数据，并不全是有价值的，有些数据并不是我们所关心的内容，而另一些数据则是完全错误的干扰项，因此要对数据通过过滤“去噪”从而提取出有效数据。
3.大数据存储及管理技术
大数据存储与管理要用存储器把采集到的数据存储起来，建
立相应的数据库，并进行管理和调用。重点解决复杂结构化、半结构化和非结构化大数据管理与处理技术。主要解决大数据的可存储、可表示、可处理、可靠性及有效传输等几个关键问题。开发可靠的分布式文件系统（DFS）、能效优化的存储、计算融入存储、大数据的去冗余及高效低成本的大数据存储技术；突破分布式非关系型大数据管理与处理技术，异构数据的数据融合技术，数据组织技术，研究大数据建模技术；突破大数据索引技术；突破大数据移动、备份、复制等技术；开发大数据可视化技术。
4.大数据分析及挖掘技术
大数据分析技术。改进已有数据挖掘和机器学习技术；开发数据网络挖掘、特异群组挖掘、图挖掘等新型数据挖掘技术；突破基于对象的数据连接、相似性连接等大数据融合技术；突破用户兴趣分析、网络行为分析、情感语义分析等面向领域的大数据挖掘技术。
（二）系统网络结构
1.系统需求分析
由于近年来互联网上计算数据的总量呈爆炸式增长，据不完全统计，仅2010年初到现在，互联网上的数据传输量就达到175EB，不到一年的数据量超过了过去9年的数据量总量。按照需求规划的1860家媒体数据量也是相当庞大的，所以监测系统必须要具备采集、存储、分析互联网媒体中海量数据的能力，而且产品还对数据采集周期有一定要求，负责采集数据的爬虫系统
需要具备非常高的抓取效率。系统将来需要处理的数据量肯定将会越来越多，所以在设计整个系统架构时，需要充分的考虑系统各个模块（主要是采集、存储、分析）的扩展性，采用分布式集群设计。
2.系统拓扑方案设计
网络采用星型网络拓扑结构,并采用分层方式设计。简化网络结构，提高数据传输效率。网络核心交换到服务器，形成千M 到千M传输，网络接入层设计、内部网络服务。
网络核心采用一台华为的H3C S5024E核心交换机。交换机提供1000M以太网端口，与网络的其他部分连接，组成1000M主干网络，为了保证整个网络的可靠性，核心交换机配置冗余引擎和双电源。
Internet数据首先通过防火墙过虑进入二层交换机，经过前端软防火墙的策略检测，最终到达服务器，并访问资源。
服务器集群内包括两台蜘蛛服务器，三台分布式数据存储和分析服务器，一台数据中心服务器，一台数据备份服务器（与数据中心服务器以热备方式工作，此结构为冗余设计，在数据中心出现问题时，可由交换机自动将数据切换至备份服务器。），一台管理服务器。服务器全部采用成熟的企业版linux 系统，免费快速安全，系统对用户数据、资料的安全性，以及网络带宽都要比较高，网络的负载能力强，存储空间大，前面准备采用asa 5540，对一些非法用户入侵限制，访问规则，对数据包的检测过
大数据产业发展试点示范项目申报书
附件2： 2018年大数据产业发展试点示范项目 申报书 项目名称： 申报方向： 申报单位：（加盖单位公章） 推荐单位：（加盖单位公章） 申报日期：年月日 工业和信息化部编制
填表须知 一、申报单位应仔细阅读《关于组织开展2018年大数据产业发展试点示范项目申报工作的通知》的有关说明，如实、详细地填写每一部分内容。 二、除另有说明外，申报表中栏目不得空缺。申报书要求提供证明材料处,请在附件中进行补充，附件1为申报单位基本信息相关证明补充材料，附件2为申报示范项目相关证明材料。 三、申报主体所申报的项目需拥有自主知识产权，对提供参评的全部资料的真实性负责，并签署申报主体责任声明（见附件3）。 四、申报材料要求盖章处,须加盖公章,复印无效,申报材料需加盖骑缝章，并将证明材料作为附件一并交由推荐单位邮寄。 五、除表格一、二以外，其他填报格式要求：幅面编辑。 2.正文字体3号仿宋，单倍行距；一级标题3号黑体；二级标题3号楷体。
三、申报项目详细介绍 1.项目基本情况 （1）项目承担方资质与能力 （申报主体资质、资源整合共享能力、注册用户规模、技术基础、孵化能力、技术成果转化等。） （2）项目实施方案 （技术建设方案、服务推广及成果转化、保障措施、进度安排、预期目标、效益分析、风险分析、成长性分析等。）（3）项目负责人与项目团队实力 （项目负责人资质及工作经验、项目团队人员素质和类似项目经验等、团队人员参与省部级及以上科研项目情况。）（4）产学研用联合协作情况 （产学研用情况、协同创新能力。） （5）项目实施的创新性 （技术创新、模式创新及相关知识产权） （6）项目的可推广性 （示范意义及推广价值、推广可行性、推广范围。） 2.项目实施情况 （1）项目实施主体、服务对象及适用场景 （2）项目实施情况 （已开展工作情况，如申报多个示范项目领域，需分领域综合描述；目前存在哪些问题和难点，计划如何解决。） 3.下一步实施计划 （下一步建设的主要内容、进度安排、风险控制等。）
大数据平台建设方案
大数据平台建设方案 项目需求与技术方案） 、项目背景 十三五”期间，随着我国现代信息技术的蓬勃发展，信息 化建设模式发生根本性转变，一场以云计算、大数据、物联网、移动应用等技术为核心的“新IT ”浪潮风起云涌，信息化应用进入一个“新常态”。*** （某政府部门）为积极应对“互联网+” 和大数据时代的机遇和挑战，适应全省经济社会发展与改革要求，大数据平台应运而生。 大数据平台整合省社会经济发展资源，打造集数据采集、数据处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数据平台，以信息化提升数据化管理与服务能力，及时准确掌握社会经济发展情况，做到 “用数据说话、用数据管理、用数据决策、用数据创新”,牢牢把握社会经济发展主动权和话语权。 二、建设目标 大数据平台是顺应目前信息化技术水平发展、服务政府职能改革的架构平台。它的主要目标是强化经济运行监测分析，实现企业信用社会化监督，建立规范化共建共享投资项目管理体系，推进政务数据共享和业务协同，为决策提供及时、准确、可靠的信息依据，提高政务工作的前瞻性和针对性，加大宏观调控力度，促进经济持续健康发展。 1、制定统一信息资源管理规范，拓宽数据获取渠道，整合 业务信息系统数据、企业单位数据和互联网抓取数据，构建汇聚式一体化数据库，为平台打下坚实稳固的数据基础。 2、梳理各相关系统数据资源的关联性，编制数据资源目录， 建立信息资源交换管理标准体系，在业务可行性的基础上，实现数据信息共享，推进信息公开，建立跨部门跨领域经济形势分析制度。 3、在大数据分析监测基础上，为政府把握经济发展趋势、
预见经济发展潜在问题、辅助经济决策提供基础支撑。 三、建设原则 大数据平台以信息资源整合为重点，以大数据应用为核心，坚持“统筹规划、分步实施，整合资源、协同共享，突出重点、注重实效，深化应用、创新驱动”的原则，全面提升信息化建设水平，促进全省经济持续健康发展。 1、统筹规划、分步实施。结合我省经济发展与改革领域实际需求，明确总体目标和阶段性任务，科学规划建设项目。先期完成大数据平台的整体架构建设，后期分步完成业务系统的整合及相互间数据共享问题。 2、整合资源、协同共享。对信息资源统一梳理，建立经济发展与改革信息标准资源库和数据规范，逐步消灭“信息孤岛”，加快推进数据资源整合，建设共享共用的大数据中心，实现业务协同。 3 、突出重点、注重实效。以用户为中心，以需求为导向， 以服务为目的，突岀重点，注重实效，加强平台可用性和易用性。 4、深化应用、创新驱动。深入了解用户需求，密切跟踪信息技术发展趋势，不断深化应用、拓展新技术在应用中的广度和深度，促进跨界融合，丰富管理和服务手段。 四、建设方案 为了保证项目的顺利进行和建设目标的可行性，我们采取如下几种建设方案。 1、数据采集方案。 我们统一信息资源标准规范，建立多维度数据库，拓宽 数据来源，通过不同的方式汇聚数据，增强分析力度，提高 监测预警的准确性和时效性。 1、预留接口，支持其它系统各种数据的上传导入处理。 将现存有关经济运行业务系统中的历史数据和时效数据，过上传数据文件至服务器、分析提取有效数据导入服务器数
知名汽车制造企业大数据应用
某知名汽车制造企业大数据应用背景 随着互联网和移动互联网的兴起，越来越多有购车需求的用户会到网上查询相关信息，进行车型、价格、性能等各方面的比较。同时，论坛、微博、贴吧等互联网社交平台也成为用户发表用车感受，讨论汽车品牌的主要阵地，互联网渠道正成为车企最主要的营销阵地，对互联网汽车用户数据的整合和利用，成为汽车企业洞察消费者和市场，明智决策的关键。 企业问题与需求 1、该汽车企业可获得用户数据越来越多，包括官网、minisite、CRM等各渠道来源数据，这些都是非常重要的一方数据，可以最直观的了解对该汽车品牌有需求的目标人群，但这些数据分散于各业务系统中，迫切需要进行整合和应用。 2、汽车行业竞争激烈，国产、合资、日系、德系等各系品牌众多，市场越来越细分，消费者选择的不确定性越来越高，车企需要全面了解用户相关信息，从而更有针对性的进行销售、营销等方面的工作，从而更好的消费者对本品牌的选择。 3、自媒体时代，人人都成为媒体，很多该购车用户会在垂直论坛、贴吧、微博上谈论品牌及竞品，该企业希望能汇总和分析这些舆论数据，及时发现和处理负面信息，同时助力销售线索的拓展。 941大数据服务联盟解决方案 大数据项目整体架构 1、建立大数据云平台，整合各渠道数据
941大数据服务联盟服务方负责基础设施的投入、建设及运维（包括硬件与软件），为该车企建立大数据云平台，通过部码的方式采集官网、Minisite 等线上渠道的用户数据，并与企业内部CRM等数据整合。同时，该企业还接入了用户数据库，基于5.5亿的用户画像数据，补充该企业一方数据无法支持的年龄、购买偏好、媒体偏好等维度的用户数据。 2、标签化用户，生成和管理用户画像 企业一方数据与941大数据服务联盟服务方三方数据融合后，基于标签系统，结合产品及业务需求，生成该车企的微观和宏观用户画像，其中微观画像为单个用户的画像，通过关键ID即可查询人口属性、汽车用户属性、内容偏好等信息。宏观画像为特定用户群画像，包括本品牌相关人群，竞品相关人群等，通过微观/宏观用户画像信息，该企业的市场及销售人员一方面可以准确定位每款车型的潜在用户，包括收入、偏好、学历等各方面特征，从而进行精准的用户细分和市场营销；一方面可以清楚的了解每款车型的用户对产品的关注点，如油耗，外观，空间等，从而在产品设计，营销等方面进行针对性的优化。 3、搭建大数据舆情分析系统，第一时间发现和处理负面信息 以往，该企业的品牌部门为了解用户舆情，都是以人工的方式去各类垂直网站收集用户舆情信息，这种方式繁琐、消耗很多的人力和时间，而且收集的信息也不够全面和实时，本期项目中，941大数据服务联盟服务方为该企业搭建了大数据舆情分析系统，基于大数据抓取工具，抓取互联网微博、论坛数据，贴吧、汽车垂直网站等用户舆情数据，实时、全面的获取该企业旗下各款车型的舆情数据。
城市大数据平台白皮书》解读：智慧城市中的应用
《城市大数据平台白皮书》解读：智慧城市中的应用 日前，中国信息通信研究院正式发布《城市大数据平台白皮书》，阐述了城市大数据的概念和内涵，分析了建设城市大数据平台对于破解智慧城市建设难题的意义，并介绍了我国城市大数据平台的发展现状。 同时，白皮书还提出了城市大数据平台的通用技术架构，梳理了城市大数据平台的运营模式，并就城市大数据平台发展给出了相应的建议。 什么是城市大数据? 随着数据处理技术的不断进步，人们对于数据应用的意识不断提高，人们生活和各行业运行产生的数据呈现爆发式增长，形成了城市大数据。 城市大数据是指城市运转过程中产生或获得的数据，及其与信息采集、处理、利用、交流能力有关的活动要素构成的有机系统，是国民经济和社会发展的重要战略资源。用简单、易于理解的公式可以表达为：城市大数据=城市数据+大数据技术+城市职能。 城市大数据的数据资源来源丰富多样，广泛存在于经济、社会各个领域和部门，是政务、行业、企业等各类数据的总和。同时，城市大数据的异构特征显著，数据类型丰富、数量大、速度增长快、处理速度和实时性要求高，且具有跨部门、跨行业流动的特征。 按照数据源和数据权属不同，城市大数据可以分为政务大数据、产业大数据和社会公益大数据。政务大数据指的是政务部门在履行职责过程中制作或获取的，以一定形式记录、保存的文件、资料、图表和数据等各类信息资源。产业大数据指的是在经济发展中产生的相关数据，包括工业数据、服务业数据等。 此外，还有一些社会公益大数据。当前，城市大数据多数为政务大数据和产业大数据，所以城市大数据的主要推动者应为一个城市的政府和相关的具有一定数据规模的企业。
为保障城市运转的安全高效，智慧城市建设需要对海量的数据资源进行收集、整合、存储与分析，并使用智能感知、分布式存储、数据挖掘、实时动态可视化等大数据技术实现资源的合理配置。因此，城市大数据是实现城市智慧化的关键支撑，是推动“政通、惠民、兴业”的重要引擎。 新型智慧城市发展面临挑战 数据驱动的新型智慧城市发展面临诸多问题。白皮书认为，虽然当前各级地方政府和企业都在积极探索智慧城市建设，但仍存在着特色不明、体验不佳、共享不足等问题。究其根源在于，未能实现城市大数据资源与城市业务的良好融合。 具体而言，挑战包括三个方面：一是信息系统烟囱林立，阻碍数据共享;二是数据治理普遍薄弱，价值大打折扣;三是数据管理水平不一，缺乏整体联动。 如何应对新型智慧城市建设中的困难和挑战?白皮书认为城市大数据平台的建设能够发挥积极作用，具体表现在三个方面。 一、通过数据汇集加速信息资源整合应用 第一，城市大数据平台建立了数据治理的统一标准，提高数据管理效率。通过统一标准，避免数据混乱冲突、一数多源等问题。通过集中处理，延长数据的“有效期”，快速挖掘出多角度的数据属性以供分析应用。 通过质量管理，及时发现并解决数据质量参差不齐、数据冗余、数据缺值等问题。 第二，城市大数据平台规范了数据在各业务系统间的共享流通，促进数据价值充分释放。通过统筹管理，消除信息资源在各部门内的“私有化”和各部门之间的相互制约，增强数据共享的意识，提高数据开放的动力。通过有效整合，提高数据资源的利用水平。 二、通过精准分析提升政府公共服务水平 在交通领域，通过卫星分析和开放云平台等实时流量监测，感知交通路况，帮助市民优化出行方案;在平安城市领域，通过行为轨迹、社会关系、社会舆情等集中监控和分析，为公安部门指挥决策、情报研判提供有力支持。 在政务服务领域，依托统一的互联网电子政务数据服务平台，实现“数据多走路，群众少跑腿”;在医疗健康领域，通过健康档案、电子病历等数据互通，既能提升医疗服务质量，也能及时监测疫情，降低市民医疗风险。 三、通过数据开放助推城市数字经济发展 开放共享的大数据平台，将推动政企数据双向对接，激发社会力量参与城市建设。一方面，企业可获取更多的城市数据，挖掘商业价值，提升自身业务水平。
大数据的应用及带给企业的挑战
大数据的应用及带给企业的挑战 随着信息技术特别是信息通讯技术的发展，互联网、社交网络、物联网、移动互联网、云计算等相继进入人们的日常工作和生活中，全球数据信息量呈指数式爆炸增长之势。根据国际数据公司IDC发布的研究报告，预计全球数据量大约每两年翻一番，到2020年全球将达到35ZB的数据信息量。随着前所未有巨量数据信息的聚集，“大数据”已得到广泛关注。本文将分企业数据、机器数据和社会化数据三类，针对企业数据处理面临的挑战、机器数据应用场景、社会化数据带来的变革展开讨论。 1、企业数据处理面临的挑战 中国的企业已经认识到大数据蕴含着巨大的商业价值，但国内互联网巨头作为率先使用大数据技术的用户，仅仅是基于开源软件自主开发大数据应用，未形成企业级的个性化应用。 (1)非结构化和结构化数据的统一及整合 随着互联网和通信技术的迅猛发展，企业中的数据类型早已不是单一的以文本为主的结构化数据，还充斥着广泛存在于社交网络、物联网、电子商务等之中的网络日志、音频、视频、图片、地理位置信息等多类型的数据。这些数据称为非结构化数据。据统计，企业中
85%的数据属于非结构化数据。但是企业现有的数据处理方法仅适用于结构化数据，无法将大量的非结构化数据与结构化数据进行统一、整合，就无法发掘数据中的价值。 (2)跨业务平台数据的关联 当今企业环境中存在着：不同业务模块的数据分布在不同的系统平台，这些被割裂的数据在单一业务平台无法得到有效利用；不同业务模块的数据无法实现共享、关联；仅对关键业务的数据进行收集、整合和利用，非关键业务的数据被忽视等现状。企业中的数据由于业务模块的划分而被割裂开来．单一业务模块的数据价值远远小于所有业务模块数据关联起来进行分析运用，企业将如何实现跨业务平台数据的关联与整合将面临巨大的挑战。 (3)面向数据的实时分析 随着经济的飞速发展，企业所面临的市场行情也在瞬息万变，企业曾经惯用的事后处理机制已经不能应对，企业需要实时洞察业务运营状态，以便迅速应对不断变化的市场形势。 企业业务的运营状态将体现在海量数据的快速处理和有效进行 实时分析的基础上。但随着大数据的爆炸式增长，与企业相关的数据可能在无限量的不断增长，这些不断变化的数据，需要企业进行全面、实时的分析。
大数据处理技术的总结与分析
数据分析处理需求分类 1 事务型处理 在我们实际生活中,事务型数据处理需求非常常见,例如：淘宝网站交易系统、1２306网站火车票交易系统、超市ＰOＳ系统等都属于事务型数据处理系统。这类系统数据处理特点包括以下几点: 一就是事务处理型操作都就是细粒度操作,每次事务处理涉及数据量都很小。 二就是计算相对简单，一般只有少数几步操作组成，比如修改某行得某列; 三就是事务型处理操作涉及数据得增、删、改、查,对事务完整性与数据一致性要求非常高。 四就是事务性操作都就是实时交互式操作,至少能在几秒内执行完成； 五就是基于以上特点,索引就是支撑事务型处理一个非常重要得技术. 在数据量与并发交易量不大情况下,一般依托单机版关系型数据库,例如OＲＡＣLＥ、MＹSQL、SQＬSERVER,再加数据复制（DataGurａd、RＭAＮ、ＭｙSQＬ数据复制等)等高可用措施即可满足业务需求。 在数据量与并发交易量增加情况下，一般可以采用ORＡLＣＥRAC集群方式或者就是通过硬件升级（采用小型机、大型机等，如银行系统、运营商计费系统、证卷系统)来支撑. 事务型操作在淘宝、1230６等互联网企业中,由于数据量大、访问并发量高，必然采用分布式技术来应对,这样就带来了分布式事务处理问题，而分布式事务处理很难做到高效，因此一般采用根据业务应用特点来开发专用得系统来解决本问题。
２数据统计分析 数据统计主要就是被各类企业通过分析自己得销售记录等企业日常得运营数据,以辅助企业管理层来进行运营决策。典型得使用场景有:周报表、月报表等固定时间提供给领导得各类统计报表;市场营销部门,通过各种维度组合进行统计分析,以制定相应得营销策略等． 数据统计分析特点包括以下几点: 一就是数据统计一般涉及大量数据得聚合运算，每次统计涉及数据量会比较大。二就是数据统计分析计算相对复杂，例如会涉及大量goｕpbｙ、子查询、嵌套查询、窗口函数、聚合函数、排序等；有些复杂统计可能需要编写ＳQＬ脚本才能实现． 三就是数据统计分析实时性相对没有事务型操作要求高。但除固定报表外,目前越来越多得用户希望能做做到交互式实时统计； 传统得数据统计分析主要采用基于ＭＰP并行数据库得数据仓库技术.主要采用维度模型,通过预计算等方法，把数据整理成适合统计分析得结构来实现高性能得数据统计分析，以支持可以通过下钻与上卷操作,实现各种维度组合以及各种粒度得统计分析。 另外目前在数据统计分析领域,为了满足交互式统计分析需求，基于内存计算得数据库仓库系统也成为一个发展趋势,例如SAP得HANA平台。 3 数据挖掘 数据挖掘主要就是根据商业目标，采用数据挖掘算法自动从海量数据中发现隐含在海量数据中得规律与知识。
大数据应用示范工程
大数据应用示范工程 一、科研大数据应用 （一）海洋大数据应用示范工程 建立集数据采集、存储、处理、分析、共享、应用等为一体的海洋大数据应用示范工程，实现多元海量多源异构海洋立体数据的获取、传输、存储、管理一体化。打造面向政府决策和市场应用的海洋数据产品，服务支撑海洋预报、防灾、救援、渔业、科研等行业，培育形成海洋数据产品制作和推广体系。建设完善青岛市“海洋＋”体系，提供高可靠性海洋监测、高安全性数据管理、高权威性数据发布，实现海洋监测数据的有效共享和综合利用。 （二）科技大数据应用示范工程 推动由公共财政支持的科研活动获取和产生的科学数据逐步开放共享，实现重要科研数据的汇集、保存、管理和共享利用。对各类科技资源进行大规模整合，搭建层次清晰、覆盖面全、内容准确的科技资源数据库，形成覆盖国民经济主要领域、分布合理、互联互通的科技资源服务体系，为生产生活提供精准、高水平的科技数据服务。充分发挥科技数据资源支撑创新的作用，进一步完善科技创新综合服务体系。 二、民生大数据应用
（三）医疗健康大数据应用示范工程 建成统一权威、互联互通的市、区两级人口健康信息平台，完善人口健康信息服务体系，推进信息便民服务，健全居民电子健康档案、电子病历和全员人口基础资源数据库。 促进健康医疗大数据在临床医疗、公共卫生、决策监管等领域的研究与应用。推进精准医疗、智慧医疗，建设我市健康医疗大数据中心。推进健康医疗临床科研大数据研究与开发，依托现有资源建设一批脑血管、肿瘤、老年病和儿科等临床医学数据中心，构建临床决策支持系统；推进公共卫生大数据应用，完善疾病敏感信息预警机制，及时掌握和动态分析人群疾病发生趋势，推进疾病危险因素监测评估，提高突发公共卫生事件预警和应急响应能力；培育健康医疗大数据应用新业态，加快构建健康医疗大数据产业链，推进健康医疗与养生、养老、家政等服务业协同发展。 进一步完善居民健康信息服务平台，实现网上预约就诊、移动支付、检查检验结果查询、远程医疗和个人健康维护等相关应用。 （四）交通治理大数据应用示范工程 以青岛市“多位一体”平行交通运用示范工程为主线，全方位汇聚GIS-T交通地理信息专项数据和公路、铁路、水运、民航、物流、城市道路、城市客运、两客一危、停车、稽查、应急等交通领域数据资源，结合环境与气象数据、城市人口与岗位分布数
智慧城市及大数据技术的应用
智慧城市及大数据技术的应用 摘要：在智慧城市的发展中，大数据技术为城市规划提供了更多的数据资源他，通过先进的大数据技术为城市建设进行数据收集和分析处理，参考数据内容对城市进行合理的规划和建设，同时满足城市的发展要求，使智慧城市的规划建设水平提升。基于此，本文主要分析了大数据技术在智慧城市管理中的价值及应用。 关键词：大数据；智慧城市管理；应用 引言 智慧城市的建设与推广可以为人们提供更加舒适、愉悦、有活力的城市形态。而大数据技术的应用不仅可以加快智慧城市的建设速度，实现城市管理的智能化，还可以创新智慧城市管理模式，实现智慧城市的网络化管理、精细化管理以及信息化管理。 1大数据概述 1.1大数据概念 大数据技术又叫做巨量技术，在应用中难以使用一般的软件进行信息处理，大数据有较多的种类，在处理的速度上有着较高的要求。使用随机的数据难以对大数据进行处理，同时应利用数据库技术等进行处理，使数据能够得到高效的处理。在处理海量数据的时候，对数据进行处理的时候需要使用预测模型技术和关联规则挖掘技术等。大数据在应用中的算法比较简便，通过网络技术和智能传
感器技术的应用，使大数据对城市的运行情况进行全面的监控，还可以对空间的情况进行了解，使城市的数据获取和处理效率提升，同时在数据的使用中具有较强的智能化特点[1]。 1.2大数据在智慧城市规划中的优势 大数据智慧城市规划中具有较多的优势，包括：大数据技术使城市规划有了更多的信息数据，能够提供丰富的资源，并且涉及到了多个行业之中的数据信息，范围比较广，例如交通行业等，使城市的规划有更完善的条件，同时大数据技术可以使城市测绘的准确性提升，使规划顺利进行。其次，在城市的规划中，需要大量的数据支持，同时通过数据进行存储，使城市的规划建设有更多的数据资源，并且提供海量数据平台，使数据的丢失问题得到有效的解决。在智慧城市规划中，大数据技术能够将数据孤立的问题排除，使数据之间的联系性加强，同时实现了数据的开放性，提升了数据的服务水平，使数据能在城市规划中发挥出重要的作用，保证了规划建设的质量。 2智慧城市管理中常用的大数据技术分析 由于智慧城市中的数据具有一定的复杂性与多源性，要想保证智慧城市中各种数据的应用效率，并将之转换成优质的数据资产，就必须要对这些数据进行科学合理的管理与处理[2]。 2.1大数据采集技术 大数据采集技术指的是对物联网、互联网以及各大机构信息系统网中的数据进行提取、转换以及加载的技术，可以为智慧城市管
2018年京津冀大数据综合试验区大数据协同应用示范项目申报
附件1 2018年京津冀大数据综合试验区大数据 协同应用示范项目申报书 项目名称： 申报单位：（加盖单位公章） 推荐单位：（加盖单位公章） 申报日期：年月日 河北省工业和信息化厅编制 - 1 -
填表须知 一、申报单位应仔细阅读《关于组织申报京津冀大数据综合试验区大数据协同应用示范项目的通知》的有关说明，如实、详细地填写每一部分内容。 二、除另有说明外，申报表中栏目不得空缺。申报书要求提供证明材料处,请在附件中进行补充，附件1为申报单位基本信息相关证明补充材料，附件2为申报示范项目相关证明材料。 三、申报主体所申报的项目需拥有自主知识产权，对提供参评的全部资料的真实性负责，并签署申报主体责任声明（见附件3）。 四、申报材料要求盖章处,须加盖公章,复印无效,申报材料需加盖骑缝章，并将证明材料作为附件一并交由推荐单位邮寄。 五、除表格一、二以外，其他填报格式要求：1.A4幅面编辑。 2.正文字体3号仿宋，单倍行距；一级标题3号黑体；二级标题3号楷体。 - 2 -
一、申报单位基本信息 单位名称全称（如实填写） 申报联系人姓名手机职务传真邮箱 注册资本法定代表人单位注册地址 单位办公地址 组织机构代码 /三证合一码 单位性质□政府机关□事业单位□社会团体□国有企业□民营企业□外资企业□合资企业□国有控股企业□国有参股企业 其他（请注明）： 是否上市公司 □否 □是（上市时间：，上市地点：，股票代码：）是否有业务出口 □否 □是（主要出口地点：） 三年主要经济指标2015年2016年2017年总资产 总负债 主营业务收入 利润 - 3 -
税金 研发 大数据业务收入 研发能力 （提供证明材料） （获得的专利、标准、知识产权等）研发人员 规模 申报单位简介（技术水平、主营业务、市场销售、主要客户、资源整合共享能力、技术成果转化能力、省内外配套等方面基本情况等方面不超过400字） - 4 -
兖矿集团大数据平台建设
兖矿集团大数据平台建设 完成单位：兖矿集团有限公司 兖州煤业股份有限公司 兖矿集团信息化中心 西安兖矿科技研发设计有限公司 一、项目承担单位基本情况 兖矿集团是以煤炭、煤化工、电解铝及机电成套装备制造、金融投资等为主业的省属国有企业。兖州矿区开发建设始于1966年，1976年7月成立兖州矿务局，1996年3月整体改制为国有独资公司，1999年5月成立兖矿集团。 二、大数据平台建设背景 近年来，兖矿集团作为传统能源企业必须对企业管理方式、运营方式、发展方式、业务流程进行颠覆性创新。企业的战略转型，信息化是重要支撑，加强企业管控必须有可靠的内、外部数据支持，因此在集团层面进行数据整合、统一数据标准成为迫切的需求。 三、大数据平台建设基本情况 (一)项目建设思路及目标 兖矿集团大数据平台建设，以兖矿集团改建国有投资公司
战略发展规划为指导，首先对兖矿集团信息化进行高阶诊断及业务流程优化，针对集团公司在计划、财务、投资等业务管理领域的信息化建设现状进行诊断分析。 然后根据信息化建设高阶诊断结果,列出兖矿集团信息化建设与业务流程优化问题清单。依据问题清单对集团各业务部门流程进行优化，在此基础上，建设大数据软件平台，利用大数据技术对重点流程进行分析，为兖矿集团公司改革提供支持。 (二)项目建设主要内容 矿集团信息化经过多年的发展，各业务应用系统已经基本建设完成，具备了良好的数据基础。针对数据没有整合，业务流程没有优化这些需求，兖矿集团大数据平台的实施主要按照信息化高阶诊断与业务流程优化、大数据软件平台实施两大部分内容开展。 1、信息化高阶诊断与业务流程优化 通过信息化高阶诊断旨在发现现有信息化管控模式、业务能力是否能够支撑集团公司战略转型，存在哪些问题，并提出整改方案。 诊断过程主要按照现状调研、问题诊断、领先实践对比分析、提出改进方案、对改进方案进行优先级排序五个步骤进行。 现状调研以现场访谈与问卷调查为主，对18个集团总部部
大数据应用的五个典型应用场景
大数据应用的五个典型应用场景 来源：中国计算机报时间：2015-03-24 11:31:09 作者： 数据观在网上查找的大数据应用的几个典型场景，分享给大家！ "数据将成为一种战略性原料，每一个企业、科研团队和政府，都有责任有目的地搜集、处理、分析、索引数据。"电子科技大学互联网中心主任周涛号召企业投身大数据，对大数据怦然心动的企业也确实很多。但基于对全球95个国家、26个行业的1144名业务人员和IT 专业人士的广泛调研，IBM发现，大多数企业都已经认识到'大数据'改善决策流程和业务成效的潜能，但他们却不知道该如何入手。 的确，在主动或被动迎接大数据时代之时，企业管理人员迫切需要在实干之前，明确很多问题的答案：3V之外大数据还具备何种属性？什么是大数据解决之道的要素？大数据实施是否有章可循？...... 以《分析：大数据在现实世界中的应用》白皮书为引子，IBM的大数据战略努力令企业的诸多疑惑迎刃而解。在此基础上，以"智慧的分析洞察"为核心的IBM大数据价值体系中的五大典型业务需求和对应的落地实践，形象化地展现了大数据如何驱动企业商业价值的增长。 IBM全球副总裁兼大中华区软件集团总经理胡世忠 明确发力点 在大数据和分析领域，IBM公认已经具备了充分的技术优势。IBM全球副总裁兼大中华区软件集团总经理胡世忠表示："数据构成了智慧地球的三大元素：物联化(instrumented)、互连化(interconnected)和智能化(intelligent)，而这三大元素又改变了数据来源、传送方式和利用方式，带来'大数据'这场信息社会的变革。作为大数据领域的领导者，IBM正在利用领先方法论和全面大数据技术帮助企业重新思考已有的IT模式；助力企业进行基于这场信息革命的业务转型，获取竞争机遇和不可估量的商业价值。" 要实现这一愿景，有必要知晓企业对应用大数据的认知程度和接受程度。IBM商业价值研究院和牛津大学赛德商学院联手实施了一项调研，并共同撰写发布了《分析：大数据在现实世界中的应用》白皮书。 在该白皮书中，现阶段企业对大数据的观点得到全方位体现，它们着手实践大数据的方式被完整揭示，而它们在利用大数据获取商业价值增长方面的进展也被一一披露。 基于翔实的广泛调研，IBM得出了数个颇具参考价值的结论：未明确大数据的定义是企业混淆大数据的最主要原因；企业对大数据的采用还处于初级阶段(大多数企业目前主要是理解概念(24%)或者定义与大数据相关的路线图(47%))；以客户为中心是大数据的首要任务成为共识；内部数据是企业内大数据的主要来源但大量未开发的价值隐含在内部系统中；不确定性以及技能的缺失使得社交媒体等外部数据源未得到充分利用；缺乏先进的分析技能是从大数据中获得最大价值的主要障碍。 德华安顾人寿董办主任王洪涛现身说法。长期耕耘于保险行业的他表示，大数据在保险行业的潜力巨大：保险行业使用大数据，现在还大多停留在"集约使用"阶段；保险公司拥有丰富的客户数据、交易数据和接触数据，但数据量的积累，往往导致"数据坟墓""现象的发生；保险行业没有广泛培养出大数据智慧应用的意识和能力。他认为，保险行业利用大数据，一要集约地用，二要智慧地用。后者指的是利用数据挖掘，发现保险行业内的新知识，在这方面，保险行业仍然处于开拓期。 为了进一步明确大数据定义，IBM首先完善了大数据的新属性：Veracity(真实性)。IBM 全球企业咨询服务部业务分析与优化服务大中华区总经理段仰圣表示："真实性是当前企业
综合管理服务大数据平台建设与应用示范项目可行性研究报告
第一章项目总论 一、项目名称 综合管理服务大数据平台建设与应用示范项目。 二、项目申报单位 主要申报单位： 项目建设性质 新建。 三、项目建设地点 四、项目建设内容 建设城市管理综合信息服务平台，推进海量信息集中与交换共享，通过可视化方式呈现“智慧”整体运行“体征”，及各地实时状态，全面铺开智慧城市感知、监控、实时响应体系网络，建设集资源统计动态展示、指挥调度、辅助决策支持、一体化融合通信、智能预警、城市信息发布等功能为一体的综合管理平台。 五、建设期限 本项目建设工期为24个月（2016年3月-2018年2月）
六、项目总投资 本项目总投资3000万元人民币。 七、资金来源 本项目总投资3000万元人民币，其中拟申请国家补贴600万元，其余资金企业自筹。 八、可行性结论 该项目投资3000万元人民币，项目建设工期为24个月。通过项目的投资规模、建设期限、建设内容及社会效益等方面内容，经过专家的论证得出结论，该项目建设内容符合国家产业政策，投资计划合理，建设规模适度，建设资金落实到位，技术上非常可行。 第二章项目的意义和必要性 一、意义 随着城市的快速发展，社会、经济、人口等信息急剧增长，地理信息系统的应用变得越来越广泛，信息共建共享成为城市信息化建设的一项重要任务，也是面向服务时代建设发展的必然要求。据统计，80%以上的政府部门都需要使用地理信息。实践已经证明，以地理信息为基础，实现多种社会城市信息的集成与融
合，服务于政府管理和决策分析，为国民经济建设和社会发展提供支撑，具有非常重要的意义。 二、必要性 自然资源与空间地理信息资源是电子政务的重要基础信息资源，是不可或缺的信息化基础软设施。为了更好地满足各业务部门的应用需求，采用网络、硬件、数据库、GIS、遥感影像、软件开发等技术构建一个能够持续发展的城市管理综合信息服务平台，与人口信息、企业信息、社会经济信息进行整合，将遥感影像、地址数据、政务信息图层等现有的政务地理空间信息资源进行集中管理和提供共享服务，并解决安全性、可靠性、高效性等问题，为政府各部门提供一个政府内部统一的综合地理空间信息服务窗口，以满足各部门对地理空间信息数据的共享应用需求，辅助领导进行决策，提高业务办理效率，为社会公众查询空间信息和参与内建设与管理提供便捷、高效的现代化服务载体，提高域发展核心竞争力。 第三章国内外发展现状 一、国外现状 国外研究现状自20世纪90年代以来，信息技术作为代表的高新技术飞速发展，促进着世界经济、政治和文化等各个领域发生着深刻的变革。为了迎接新的挑战，占据主导地位，美国率先
大数据对企业有什么作用
大数据是工具，那么它究竟对企业会有什么作用呢？了解了大数据的作用，才能让大数据更好的服务自身。其实，从传统企业的运行流程来看，大数据主要能够在了解用户、锁定资源、规划生产、做好运营、开展服务等方面，帮上企业的忙。 大数据作用 1、大数据可以使你更加贴近用户 今天的客户和以往有很大不同。互联网的兴起使他们能够在购买一个产品之前彻底和孜孜不倦地研究它，并且他们可以和无数的人交流以得知他们应该和哪家公司做生意。大数据可以让你更好地定位这些善变的消费者，并找出他们想要的究竟什么。 2、大数据将为你的企业带来优势 企业都建立在传统之上。任何一个有着几十年经营传统的行业都相信，在该行业有一种正确的做事方式，如果这种方式没有被破坏就不必去修正它。禧金信息科技大数据所拥有的一个重要的价值就在于，它可以让你真正仔细地研究和分析一个企业在各个方面的先入为主的观念，这些观念你可能从来都没考虑到。当涉及到实验和试图创新时，大数据能带来更丰富的数据量，这意味着你就可以得到一个更好的优势超来过你的竞争对手。 3、帮企业规划生产 大数据不仅改变了数据的组合方式，而且影响到企业产品和服务的生产和提供。通过用数据来规划生产架构和流程，不仅能够帮助他们发掘传统数据中无法得知的价值组合方式，而且能给对组合产生的细节问题，提供相关性的、一对一的解决方案，为企业开展生产提供保障。 过去的所谓商业智能，往往大多是“事后诸葛亮”，而大数据则让企业可预测未来的走向，帮助企业做到“未雨绸缪”。大数据的虚拟化特征，还将大大降低企业的经营风险，能够在生产或服务尚未展开之前就给出相关确定性答案，让生产和服务做到有的放矢。
大数据在智慧城市建设中的实际应用
大数据在智慧城市建设中的实际应用 大数据在智慧城市建设中的实际应用 2015-09-26 07:38:00 来源：数据观 手机看新闻扫描到手机楼盘消息早知道扫一扫，用手机看本文更加方便的分享给朋友评论 当前，全球范围内城市化进程不断推进。随着互联网和信息化的发展，在云平台、大数据和物联网等技术的支持下，率先在美国“智慧星球”概念下诞生的“智慧城市”，逐渐成为当今世界各国城市建设的发展趋势和选择。 一国外案例 自21世纪初期，美国、英国、德国、荷兰、日本、新加坡、韩国等先一步开展了智慧城市的实践，诞生了许多经典案例。 1. 迪比克 美国第一个智慧城市，也是世界第一个智慧城市，它的特点是重视智能化建设。为了保持迪比克市宜居的优势，并且在商业上有更大发展，市政府与IBM合作，计划利用物联网技术将城市的所有资源数字化并连接起来，含水、电、油、气、交通、公共服务等，进而通过监测、分析和整合各种数据智能化地响应市民的需求，并降低城市的能耗和成本。该市率先完成了水电资源的数据建设，给全市住户和商铺安装数控水电计量器，不仅记录资源使用量，还利用低流量传感器技术预防资源泄漏。仪器记录的数据会及时反映在综合监测平台上，以便进行分析、整合和公开展示。 2. 纽约 通过数据挖掘，有效预防了火灾。据统计，纽约大约有100万栋建筑物，平均每年约有3000栋会发生严重的火灾。纽约消防部门将可能导致房屋起火的因素细分为60个，诸如是否是贫穷、低收入家庭的住房，房屋建筑年代是否久远，建筑物是否有电梯等。除去危害性较小的小型独栋别墅或联排别墅，分析人员通过特定算法，对城市中33万栋需要检验的建筑物单独进行打分，计算火灾危险指数，划分出重点监测和检查对象。目前数据监测项目扩大到2400余项，诸如学校、图书馆等人口密集度高的场所也涵盖了。尽管公众对数据分析和防范措施的有效性之间的关系心存疑虑，但是火灾数量确实下降了。 3. 芝加哥 通过“路灯杆装上传感器”，进行城市数据挖掘。在人们的生活里，无处不在的传感器被应用在了芝加哥市的街边灯柱上。通过“灯柱传感器”，可以收集城市路面信息，检测环境数据，如空气质量、光照强度、噪音水平、温度、风速。芝加哥城市信息技术委员会提供的资料表明，“灯柱传感器”不会侵犯个人隐私，它只侦测信号，不记录移动设备的MAC和蓝牙地址。在今后几年“灯柱传感器”将分批安装，全面占领芝加哥市的大小街区，每台传感器设备初次采购和安装调试成本在215～425美元之间，运行后的年平均用电成本约为15美元。该项目得到了思科、英特尔、高通、斑马技术（Zebra Technologies）、摩托罗拉以及施耐德等公司的技术和资金支持。 4. 西雅图 利用数据节省电力能源。该市与微软和埃森哲（Accenture）合作了一个试验项目，以减少该地区的能源使用。该项目收集并分析从市区建筑物管理系统中得来的众多数据集，通过预测分析，找出哪里可以减少能源使用，或者根本不需要使用能源。项目的目标是将该地区的电力消耗减少25%。 5. 伦敦 利用数据管理交通。在2012年奥运会期间，负责运行伦敦公共交通网络的公共机构“伦敦运输（Transport for London）”，在使用者增加25%的情况下，使用收集自闭路电视
智慧城市中的大数据挖掘与应用
智慧城市中的大数据挖掘与应用 数字城市技术把基础地理数据、正射影像、街景景象数据、全景影像数据、三维模型数据结合在一起，在政务网上，通过注册可以进行服务共享，在公共平台、互联网、公网上，通过二次开发可以提供各种交通、导航、旅游、文物、购物等服务系统。物联网能够实现人与人、人与机器、机器与机器的互联互通，实现智慧城市的各种应用。 智慧城市中的大数据挖掘与应用 智慧城市蕴含大数据 城市是生存繁衍最好的地方，城市是社会交往的地方，是文化享受的地方，按照城市的职能，我们让它智能化，比如智慧安防、智慧环保、智慧能源、智慧城管、智慧养老、智慧国土规划、智慧社区、智慧家居都是让人有更好的环境来生存繁衍。在经济发展方面，可以推动智慧制造、工业互联网、物联网。在文化
享受方面，可以考虑智慧户外流媒体、智慧教育、智慧旅游等等。在社会交往方面，有智慧交通、购物、社会综合管理。 在智慧城市的建设和应用中，将产生从TB到PB级越来越多的数据，从而进入大数据时代。2011年，Science专刊指出大数据时代已经到来，美国工程院院士也指出大数据可以让我们实现海量数据在预测、建模、可视化和发现新规律等方面应用的时代就要到来，奥巴马总统宣布美国政府正式启动大数据研究发展计划，奥巴马认为大数据就是未来世界的“石油”，这个计划要超过以前提出的“信息高速公路计划”，智慧城市建设的潮流已经到来。 空间数据方面，空间的传感器资源，美国有185颗卫星，中国有91颗卫星，到2020年中国将有200多颗卫星，卫星每天往回传输的数据可以达到PB级，空间数据资源、处理资源、空间信息资源、地学知识库资源，这些资源都可以传到网上，通过可视化的服务，利用云计算环境，包括计算资源、网络资源和存储资源，来保证服务质量。 “天地图”挖掘海量数据 为了充分研究这些海量空间大数据，我们研发了一个软件，叫做“天地图”，“天地图”的数据已经超过了TB级，目前已经超过100TB。利用“4+1”倾斜相机城市三维模型，贵阳做了很多三维建模工作。通过大数据，我们可以监测上海的地表下沉问题，把雷达数据放在一起，进行数据分析和挖掘，自动地、随时地检测地表下沉，不同地区的下沉速度不同，上海大概每年下沉20毫米，远郊区和市中心都在下沉。我们的检测结果同上海市国土局对比，精度可以达到3.9毫米和2.5毫米。我们已经对上海、苏州、天津、广州等很多大城市进行了自动检测。我们还监测了三峡，将来还要监测高铁。
大数据处理综合处理服务平台的设计实现分析范文
大数据处理综合处理服务平台的设计与实现 （广州城市职业学院广东广州510405） 摘要：在信息技术高速发展的今天，金融业面临的竞争日趋激烈，信息的高度共享和数据的安全可靠是系统建设中优先考虑的问题。大数据综合处理服务平台支持灵活构建面向数据仓库、实现批量作业的原子化、参数化、操作简单化、流程可控化，并提供灵活、可自定义的程序接口，具有良好的可扩展性。该服务平台以SOA为基础，采用云计算的体系架构，整合多种ETL技术和不同的ETL工具，具有统一、高效、可拓展性。该系统整合金融机构的客户、合约、交易、财务、产品等主要业务数据，提供客户视图、客户关系管理、营销管理、财务分析、质量监控、风险预警、业务流程等功能模块。该研究与设计打破跨国厂商在金融软件方面的垄断地位，促进传统优势企业走新型信息化道路，充分实现了“资源共享、低投入、低消耗、低排放和高效率”，值得大力发展和推广。 关键词：面向金融，大数据，综合处理服务平台。 一、研究的意义 目前，全球IT行业讨论最多的两个议题，一个是大数据分析“Big Data”，一个是云计算“Cloud Computing”。中
国五大国有商业银行发展至今，积累了海量的业务数据，同时还不断的从外界收集数据。据IDC（国际数据公司）预测，用于云计算服务上的支出在接下来的5 年间可能会出现3 倍的增长，占据IT支出增长总量中25%的份额。目前企业的各种业务系统中数据从GB、TB到PB量级呈海量急速增长，相应的存储方式也从单机存储转变为网络存储。传统的信息处理技术和手段，如数据库技术往往只能单纯实现数据的录入、查询、统计等较低层次的功能，无法充分利用和及时更新海量数据，更难以进行综合研究，中国的金融行业也不例外。中国五大国有商业银行发展至今，积累了海量的业务数据，同时还不断的从外界收集数据。通过对不同来源，不同历史阶段的数据进行分析，银行可以甄别有价值潜力的客户群和发现未来金融市场的发展趋势，针对目标客户群的特点和金融市场的需求来研发有竞争力的理财产品。所以，银行对海量数据分析的需求是尤为迫切的。再有，在信息技术高速发展的今天，金融业面临的竞争日趋激烈，信息的高度共享和数据的安全可靠是系统建设中优先考虑的问题。随着国内银行业竞争的加剧，五大国有商业银行不断深化以客户为中心，以优质业务为核心的经营理念，这对银行自身系统的不断完善提出了更高的要求。而“云计算”技术的推出，将成为银行增强数据的安全性和加快信息共享的速度，提高服务质量、降低成本和赢得竞争优势的一大选择。
大数据技术与应用专业详细解读
大数据技术与应用专业详细解读 大数据技术与应用专业是新兴的“互联网+”专业，大数据技术与应用专业将大数据分析挖掘与处理、移动开发与架构、人软件开发、云计算等前沿技术相结合，并引入企业真实项目演练，依托产学界的雄厚师资，旨在培养适应新形势，具有最新思维和技能的“高层次、实用型、国际化”的复合型大数据专业人才。 专业背景 近几年来，互联网行业发展风起云涌，而移动互联网、电子商务、物联网以及社交媒体的快速发展更促使我们快速进入了大数据时代。截止到目前，人们日常生活中的数据量已经从TB(1024GB=1TB)级别一跃升到PB(1024TB=1PB)、EB(1024PB=1EB)乃至ZB(1024EB=1ZB)级别，数据将逐渐成为重要的生产因素，人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。大数据时代，专业的大数据人才必将成为人才市场上的香饽饽。当下，大数据从业人员的两个主要趋势是：1、大数据领域从业人员的薪资将继续增长；2、大数据人才供不应求。 图示说明：2012-2020年全球数据产生量预测 专业发展现状 填补大数据技术与应用专业人才巨大缺口的最有效办法无疑还需要依托众多的高等院校来培养输送，但互联网发展一日千里，大数据技术、手段日新月异，企业所需要的非常接地气的人才培养对于传统以培养学术型、科研型人才为主要使命的高校来说还真有些难度。幸好这个问题已经被全社会关注，政府更是一再提倡产教融合、校企合作来创办新型前沿几
乎以及“互联网+”专业方向，也已经有一些企业大胆开始了这方面的创新步伐。据我了解，慧科教育就是一家最早尝试高校校企合作的企业，其率先联合各大高校最早开设了互联网营销，这也是它们的优势专业，后来慧科教育集团又先后和北京航空航天大学、对外经济贸易大学、贵州大学、华南理工大学、宜春学院、广东开放大学等高校在硕、本、专各个层次开设了大数据专业方向，在课程体系研发、教学授课及实训实习环节均有来自BAT以及各大行业企业一线的技术大拿参与，所培养人才能够很好地满足企业用人需求。 专业示例 笔者在对慧科教育的大数据技术与应用专业做了专门研究，共享一些主要特色给大家参考： 1.培养模式 采用校企联合模式，校企双方（即慧科教育集团和合作校方）发挥各自优势，在最大限度保证院校办学特色及专业课程设置的前提下，植入相应前沿科技及特色人才岗位需求的企业课程。 2.课程体系 笔者对慧科教育的大数据技术与应用做了专门研究，现分享一下慧科专业共建的课程给大家参考。慧科教育集团的专业课程重在培养学生的理论知识和动手实践能力，学生在完成每个学期的理论学习后，至少有两个企业项目实战跟进，让学生在项目中应用各类大数据技术，训练大数据思路和实践步骤，做到理论与实践的充分结合。 大数据专业的课程体系包括专业基础课、专业核心课、大数据架构设计、企业综合实训等四个部分。