大数据的特征及引发的管理变革

全国迁入热市
北京迁出热省
大数据产生洞察力
百度大数据观察：上网时间分布
25
大数据：分析现状到预测未来
莱切斯特郡(Leicestershire)警察局和世界其他警察局一样,花费很长时间, 通过艰苦努力收集犯罪细节, 然后还要花更多的时间分析收集到的数据,得 到破案线索。后来,由于Leicestershire警察局使用了GIS系统,警察工作变 得更为容易。现在,调查人员将犯罪的地点、时间、作案方法等大量数据输 入到GIS中,GIS输出彩色的地图或图形。利用GIS,警察可以在地图上复制 事件,根据嫌疑犯或作案的交通工具在不同地点出现的情况勾画案情。当案 情发展时,图形也会随之改变。GIS还能帮助警方官员将犯罪事件与嫌疑犯 联系在一起。
2020/5/7
技术产品 网络环境 计算方式
6
1、信息技术产品的演化
2020/5/7
7
例：可穿戴与手势用户界面
2020/5/7
8
2、网络环境的演进与融合
Client / Server
PC / LAN
大型机 小型机/WAN
Internet Internet 物联网
IPv4
IPv6 3G/4G
60年代 70年代 80年代 90年代
PB
Semi-structured
EB
All the above
ZB
Variety
多样的数据类型
发现数据价值
Volume 海量的数据规模
基于大数据的管理创新
1）数据驱动的创新应用 2）用户行为驱动决策 3）实时分析与智能处理
2020/5/7
21
2）数据驱动创新应用——分析预测
基于网络用户 搜索热词监测 对流感进行早 期预警和预测
✓ 数据去噪 ✓ 模型校准
基于网络数据挖掘和社会媒体扩散的流感跟踪技术
1. Ginsberg, Jeremy, et al. "Detecting influenza epidemics using search engine query data."
22 Nature 457.7232 (2009): 1012-1014. 2020/5/7
主要应用 科学计算 部门内部 组织之间 全球(互联)
00年代
网络融合
用户规模 小
小
中
大
无所不在
信息类型 数据
2020/5/7
数据 数据文本 多媒体
多媒体
、智能
化
9
趋势1：移动互联网
下一个周期——移动互联网
1970S 大型主机及小型机
1980S 个人计算机
2020/5/7
1990S 桌面端互联网
2000S 移动互联网
3、计算方式的演进与发展
Google的CEO埃里克.斯米特2006年8月提出“云计算”：
将网络连接起来的浩大的数据资源、计算资源、服务资源、设施
资源进行统一管理、协调，形成一个内容丰富、能量强大的资源
服务202体0/5/7系，按照社会和用户需求进行分配的提供。
15
小结：以大数据为代表的新一代信息 技术时代的来临
案例引入：踩踏事件发生前后
2020/5/7
1
1
案例引入——外滩踩踏惨剧
事后，网上关于大数据的讨论——政府管理 如何利用大数据？
2020/5/7
2
尤其在数据疯狂产生的今天
交易型数据
机器数据
社交数据
组织数据
▪数量 ▪结构化 ▪生产能力
▪速度 ▪半结构化 ▪数据提取
▪种类 ▪高度非结构化 ▪精确性
▪种类 ▪高度非结构化 ▪数量
2020/5/7
17
二、大数据的特征及引发的管理变革
1、大数据的4V特征 2、基于大数据的管理创新 3、新的创新模式出现：创新2.0
பைடு நூலகம்
2020/5/7
18
1、大数据的4V特征
1、体量Volume 海量数据：超规模、大容量
2、多样性Variety 多源异构性：不同形式（如文本、图像 、音频、视频等）；非结构化
Web2.0-搜索/社交时代：UGC（用户生产内容），个性化传播 强化，网际协作普及为主要特征的网络社会自媒体时代形成。 以个人为主体的大众传播。Blog、Tag、SNS、RSS、wiki、微 信等。（移动互联网、智能终端、云计算）
Web3.0-大互联时代：人与人、人与物交互、人物全面互联、 精确感知、准确表达、智慧解读的时代。人类将赋予物质世 界的自我表述、自我展现的机能，实现更高形态与物质世界 20的20/5和/7 谐共生的智慧。（物联网、云计算、大数据……） 14
内容
一、大数据是信息技术发展的必然结果 二、大数据的特征及引发的管理变革 三、大数据时代如何推进政府管理创新
内容
一、大数据是信息技术发展的必然结果 二、大数据的特征及引发的管理变革 三、大数据时代如何推进政府管理创新
2020/5/7
5
一、大数据是信息技术发展的必然结果
信 息 技 术 的 发 展
智能手机 平板电脑 电子阅读嚣 车载电子 移动电视 数字家庭 随身游戏机 ……
10
趋势2：物联网的兴起
2020/5/7
11
例：随处可见的采集与显示
2020/5/7
12
三种网络形态与阶段划分
Web1.0-门户时代：信息总量剧增，全球信息互联，信息综合 提供，网络数据检索为主要工具。信息传播仍然是机构为主 体的公共传播。大型门户网站等。（网站及其应用）
2. Butler, Declan. "When Google got flu wrong." Nature 494.7436 (2013): 155.
22
“政府数据”+“网络数据” 分析艾滋病分布情况
2020/5/7
23
大数据有助于更好地把握社会行为！
全国迁出热市
百度后台每天数十亿次ＬＢＳ（基 于地理位置的服务）数据进行 计 算 分 析 ， 展 现 春 节 前 后 广人 州口迁出热市 大迁徙的轨迹与特征。据百度 相关负责人介绍，春运期间， 通讯是人们在迁徙过程中最基 本的需求之一，因此手机网民 与迁徙人群重合度极高。
3、价值密度 Value
低价值密度：大量的不相关信息、需深 度分析
4、速度Velocity
实时分析：流信息、即时需求、时间容 错
2、基于大数据的管理创新
Streams Real time Near time
Batch
Velocity 快速的数据流转
Value
Structured
TB
Unstructured
技术产品
新
便携性、智能化、交互
互联网+
一
性、随性化、移动性
深刻的技
物联网
代
网络环境 术变革 移动互联网
信
融合与泛在：大互联、
云计算
息
开放性、泛在化
智慧城市
技 术
计算方式
分布式、平台化、虚拟
化、扩展性
大数据应用
2020/5/7
16
内容
一、大数据是信息技术发展的必然结果 二、大数据的特征及引发的管理变革 三、大数据时代如何推进政府管理创新