社保大数据分析平台整体解决方案

并行导出
文档数据
外部数据源
企业级数 据仓库
• •
外部数据源可以是关系型数据库或者数据仓库，包括：Oracle、SqlServer、PostgreSql、 Mysql，支持基于JDBC的数据源连接； 也可以是各种文档文件：Log日志、多媒体文件等；
接口层——API接口
存储层通过对外提供API接口，供上层应用和外部系统访问。 支持类型包括：REST、HTTP、SOAP。
数字仪表盘
Alerts & Proactive Notification
门户
OLAP
BI展现支撑组件
展现场景配置支撑
Integrated Backplane Services Oriented Architecture
统一数据指标模型
大 数 据 管 理 平 台
Scorecards & Dashboards
ETL的详细结构
OA系统 数据抽取 Oracle 销售Cube分区 数据清洗
Report
Report
财务Cube分区 话务系统 SQLServer
R源自文库port
数据仓库
财务Cube分区 数据转换
Report
HR系统
DB2 采购Cube分区
Report
上报数据
Excel
数据整合
Report
16
Intuitive Business Intelligence
商业智能报表分析应用的三层架构
企业经营驾驶舱 高层管理人员
企业层级 绩效管理、仪表板、计分卡、KPI
商业分析
点数据（Dashboard/KPI）
经理人员
部门层级 Ad-Hoc查询、OLAP、深度分 析、透视表、分析图
面数据（动态分析报表）
静态查询 基层员工
个人层级 日常营运、标准报表
线数据（静态查询报表） Reporting Service
内建丰富的统计分析图形
多样化的表格及数据样式设定
- 提供十多种预设配色样式供使用者选取，也可自行组合出新的样式
完整的安全控管体系
- 提供八层权限控管机制，可根据组织阶层与职位设定
Reporting
& Ad-hoc
数据源及接口
应用层——海量数据的分析预测
• 在基于
大数据的社会保险统计分析项目中，预测模块是以统计分析海量数据库为基础，
利用经济学、人口学、数理统计、精算科学等理论，通过建立不同的经济模型，进行政策模 拟。并根据各种数据的历史发展与成长情况，做出相应的长期趋势预测分析和风险分析，对 确保政策的制定、执行和完善提供定量性的依据。
低下的数据管理性能 沉重的维护成本
问题
惊人的储存成本
大数据产品体系
大数据平台
云挖掘引擎
社保大数据 顶层设计
云ETL
BDP 分布式 数据存储和数据
处理平台
离线挖掘算法引擎
客服上网话单查询 手机上网行为分析 / 精准营销 广告引擎 社交网络传播分析
Stream 流数据处理 引擎
基于语义的即席分析
在线挖掘算法引擎
统一规则 转换引擎
统一资源 数据视图
安全管理 元数据管理 集群监控 安全管理
社保信息序列化存管
分布式数据库
MapReduce
分布式存储
社保数据库库
北京
上海
……
BDP平台——整合社保数据
BDP
备注
接口层——并行数据导入/导出
分布式存储系统
并行导入
分布式数 据库
分布式文 件系统
分布式数 据仓库
关系型数 据库
预测分析子系统
未来人口发展趋势
未来基金收支余发展趋势
长期精算平衡分析
人 口 预 期 寿 命 分 析
整 体 人 口 抚 养 比 分 析
参 保 人 口 抚 养 比 分 析
缴 费 收 入 分 析
待 遇 支 出 分 析
偿 付 能 力 分 析
长 期 封 闭 精 算 平 衡 检 验
债 务 估 计
长 期 敏 感 性 分 析
CDR PCI Network Data Store and Merchandise Data CRM Employee Scheduling
Data Mining Enterprise Data Warehouse
一个典型省BI系统投资：1300万美金
有多少IT投资继续被“O”, “E”, “M” 恐龙们吃掉
•
•
同时也可以提供URL页面链接地址，供外部系统嵌入到自己的
应用中。
应用层——让我们发现大数据背后的价值
商业智能(BI)是快速,准确,即时提供有价值的 信息给最终决策者进行分析的一种技术
应用层BI技术架构
多维分析
动态表格
图形化报表
UNIFIED WEB INTERFACE
Advanced Analysis
实时报表 实时规则引擎
内容总览
业务背景和需求分析
目录
社保大数据解决方案
信息资源中心建设方案
问与答
功能架构
展示层 社 保 数 据 管 理 分 析 平 台
查询，分析，BI展现，数据挖掘
接口层
并行数据导入导出
Web接口 （REST/SOAP… ）
管理层 流程管理 任务调度
数 据 层
集 群 协 调 服 务
OLAP-Cube设计
多维数据集结构
支持多维度数据结构
拖拉式的智能分析报表设计
最创新的BI分析技术
打造企业管理驾驶舱
22
企业管理驾驶舱实景
23
企业管理驾驶舱实景
24
前端数据应用展示实例
一键式的统计分析功能
水平分析 结构(百分比)分析 环比 对比 80/20法则分析 排名 Top/Bottom 分析 Z型图分析 YTD/QTD/MTD 分析 移动平均 统计分布分析 达成率分析 波士顿矩阵分析 周转率分析 均值分析
没有标准化的产品 ……
4
Operational Data Source
旧架构难以管理和使用海量数据
Data Warehouse Data Warehouse Generation Management Meta Data Data Marts Extract, Transform & Load Data Warehousing Query, Report ing Data Analysis OLAP Portal Users Data Staging
社保大数据分析平台整体解决方案
内容总览
业务背景和需求分析
目录
社保大数据解决方案 信息资源中心解决方案
问与答
社保数据量逐渐增大
数据膨胀！
备注
社保大数据带来的大挑战
海量数据如何存储 数据导入导出的时间成本 旧数据只能用旧版本软件读取
异构平台的数据迁移
查询性能低下 非结构化难存储，难分析
高昂的维护成本