经营分析系统建设方案书.docx
经营分析系统建设方案书

经营分析系统建设方案书目录1概述 (3)1.1建设背景 (3)1.2建设目标 (4)1.3系统建设原则 (4)2总体设计 (5)2.1设计思想 (5)2.2体系架构 (7)2.2.1硬件架构 (7)2.2.2软件架构 (9)2.2.3功能组织架构 (12)2.3系统关键技术 (13)2.3.1数据仓库 (13)2.3.2联机分析 (14)2.3.3数据挖掘 (16)2.4阶段性实施 (18)2.4.1数据仓库的阶段性发展 (18)3系统功能 (18)3.1系统业务功能 (19)3.1.1经营发展概况分析 (19)3.1.2业务及产品使用 (19)3.1.3客/用户级分析 (21)3.1.4缴费/欠费分析 (22)3.2系统管理功能 (22)3.2.1系统监控和维护管理 (22)3.2.2系统参数配置管理 (23)3.2.3系统权限管理 (23)3.2.4操作日志管理 (24)3.2.5版本管理 (24)1概述1.1 建设背景现代企业经营环境呈现出以下三个方面的特征:客户(C ustomer)至上经济全球化使得市场上产品的更新换代周期越来越短,技术的发展使得市场上可替代产品的出现越来越快,因此,面对客户越来越个性化、多样化的消费需求,企业不得不提供更加丰富的产品和服务来满足客户的需求。
竞争(C ompetition)越来越激烈当一个行业发展处于上升势头时,参与市场的竞争者就越来越多,而且都以追求更加卓越为目标。
市场变化(C hange)市场变化已成为业界常态;不仅如此,变化的速度、范围及影响越来越快。
客户的消费需求在发生变化、对手的竞争模式在发生变化,这种变化是持续不断地,而且频率在加快,因此,企业市场应对策略的产生和应用速度是保持竞争力的重要手段,而市场应对策略的制定需要真实、及时的市场经营信息的支持。
面对上述以3C为主要特征的现代企业经营环境,电信运营商需要更准确、更及时地了解自己的客户和业务情况,了解客户发展的渠道性能,了解竞争对手的经营情况,以便及时地推出服务措施,满足客户越来越个性化的需求。
某公司业务运营效率支撑分析系统建设方案

某公司业务运营效率支撑分析系统建设方案公司业务运营效率支撑分析系统建设方案一、项目背景及目标随着经济的快速发展和市场的不断扩大,公司的业务量和规模不断增长。
如何提高业务运营的效率和效益,成为了公司迫切需要解决的问题。
因此,本项目旨在建设一套业务运营效率支撑分析系统,以提高公司的业务运营效率和决策水平。
二、系统需求分析1. 数据收集与整合:将公司各部门的业务数据、财务数据、人力资源数据等收集并整合到一个统一的数据库中,方便数据的查找和分析。
2. 数据分析与报告生成:基于收集到的数据,系统能够对各类业务数据进行分析和挖掘,通过生成报告的形式向管理层提供决策支持的依据。
3. 管理仪表盘:为了方便管理层对业务运营情况的掌握,系统需要提供一个直观的仪表盘,将各项指标以图表的形式展示出来。
4. 预测与优化:通过建立数学模型和算法,系统能够对业务运营情况进行预测和优化,以提高运营效率和决策水平。
5. 数据安全与权限管理:系统需具备良好的数据安全性和权限管理机制,保证敏感数据的安全和合理的数据访问权限。
三、系统架构设计1. 数据库设计:建立一个包含各个模块数据的统一数据库,包括业务数据、财务数据、人力资源数据等。
2. 数据仓库设计:在数据库中建立数据仓库,将各类数据进行集成和整理,以方便数据的分析和挖掘。
3. 数据分析与挖掘模块:基于数据仓库中的数据,利用数据挖掘算法和分析模型,对各类业务数据进行分析和挖掘,提供决策支持的依据。
4. 报告生成模块:通过数据分析结果,生成相应的报告,并以图表的形式展示出来,方便管理层查看和分析。
5. 仪表盘设计:设计一个直观的仪表盘,将各项运营指标以图表的形式展示出来,方便管理层对业务运营情况进行监控和评估。
6. 预测与优化模块:建立数学模型和算法,对业务运营情况进行预测和优化,提供决策支持和运营建议。
7. 数据安全与权限管理模块:实施严格的数据安全控制和权限管理,确保数据的安全性和合理的数据访问权限。
智慧企业经营分析平台建设方案

对关键指标进行预警提 示
P20
财务分析——科目多维度分析
主要功能
按供应商、部门、客户、 员工、费用项目、资产 类别、组织机构等核算 维度展示科目余额表相 应值。
对列维度数据,支持右 键选择增加列或删除列
业务价值
通过对报表进行多维度 组合分析,为企业提供 立体化、多视角的、有 渗透力的数据,帮助企 业进行具有预测性的、 潜在的业务分析。
饼图展示收入占 比,点击联动整 个页面。
业务价值
帮助企业了解产品的市 场反应,指导企业制定 合理的营销政策进行积 极的产品结构调整,以 提高企业的竞争力。
通过圈的大小和密度区 分,点击可联动整个页 面。
支持钻 取
P11
销售分析——销售信用
主要功能
展现客户信用排名、客 户信用等级占比、客户 信用明细、整体信用状 况、整体授信额度以及 使用额度和超标比例等 常用分析指标。
界面设计——用户类型
主要功能
分配经营分析平台用户 类型,明确各类用户的 权限范围。
管理中心
用户
新建用户 管理权限 新建报表 编辑/浏览报表 新建报表 编辑/浏览报表
管理员 用 户 类 型
开发用户
业务价值
增强数据安全性。
普通用户
浏览报表
PS:新增用户后,必须设置密码才能登录经 营分析平台,不支持无密码登录。
P31
界面设计——报表控件
主要功能
提供丰富的报表控件, 如指示器、饼图、散点 图、漏斗、多页签等, 适应多种应用场景。
业务价值
多样化的控件图表展示, 使业务具体化、形象化, 能够准确察觉数据问题, 从而洞察业务问题。
P32
界面设计——报表控件
主要功能
经营分析系统的需求模版

XX需求框架目录第一章总则 (4)1.1概述 (4)1.2起草单位 (4)1.3版权 (4)1.4解释权 (4)第二章整体框架与指标体系 (4)2.1框架说明 (4)2.2维度体系 (5)2.3指标体系 (5)第三章基础性指标 (5)3.1在线类 (5)3.1.1实时在线 (5)3.1.2历史在线 (6)3.2用户类 (7)3.2.1总视图 (7)3.2.2新增用户 (8)3.2.3活跃用户 (9)3.2.4付费用户 (10)3.2.5流失用户 (11)3.3收入类 (12)3.3.1总视图 (12)3.3.2道具收入 (13)3.3.3时长服务收入 (14)3.3.4包月收入 (15)3.3.5营销活动收入 (15)第四章游戏内容指标 (16)4.1P-玩家类 (16)4.1.1个体属性状态 (16)4.1.2个体属性变化 (16)4.1.3群体属性状态 (17)4.1.4群体属性变化 (17)4.2E-游戏元素类 (18)4.2.1货币体系总况 (18)4.2.2货币用户分布 (18)4.2.3其他E系统总况 (19)4.3PVE/PVP-游戏交互类 (20)4.3.1概述 (20)4.3.2 PVE (20)4.3.3 PVP (21)第一章总则1.1概述为了使运营开发部对于游戏产品经营分析系统的支撑更加平台化和专业化,在数据处理上,需要从数据统计技术和业务需求的分析设计两方面入手,进行经验的提炼和沉淀。
业务需求框架正是基于对过往需求分析、未来需求走势预测以及典型应用场景综合得出的针对游戏产品的分类需求框架,旨在为项目策划、运营人员提供经营分析系统的需求模版以及为系统开发人员提供设计参考等。
1.2起草单位本需求框架文档的起草单位为XXXX运营部运营开发部。
1.3版权本需求框架文档的版权属于XXXX运营部运营开发部。
1.4解释权本需求框架文档的解释权属于XXXX运营部运营开发部。
第二章整体框架与指标体系2.1框架说明经营分析系统业务需求框架分为基础性指标和游戏内容指标两大类。
经营分析系统建设NG2-BASS2硬件规划

经营分析系统NG2-BASS2硬件规划ABC有限公司目录1系统扩容方案 (1)1.1系统能力需求分析 (1)1.1.1 用户数量及业务量的预测 (1)1.1.2 系统能力计算模型参数 (2)1.1.3 主机系统处理能力计算 (3)1.1.4 存储容量需求计算 (4)1.1.5 存储能力总需求 (7)1.1.6 流量经分平台 (8)1.2系统建设方案 (15)1.2.1 网络建设方案 (15)1.2.2 主机系统建设方案 (16)1.2.3 存储部署方案 (18)1.2.4 备份系统 (18)1.2.5 系统软件建设方案 (19)1扩容方案扩容方案与往年类似,重点考虑三方面因素:1、HP+DB2方式要换;2、考虑云方案部署(互联网数据+手机上网数据)3、机房经分相关机器撤销1.1 需求分析1.1.1 用户数及业务量预测用户数及话单数现状如下(201*年9月数据以及201*年6月份的数据对比):由于NG2-BASS 3.5工程的规划用户数按3750万通话用户数,4250万在网用户数来进行设计,目前暂未达到规划用户数,但是平均每用户的话单数增长了18%。
因此,本期考虑的处理能力和存储容量的增加主要是为了实现新增业务功能,迁移、替换使用年限达到或超过7年的服务器,以及将各地市数据集市部署于独立分区等目标。
9月份每天人均话单数为12.59张(以到达用户数计算)。
与去年数据对比,GPRS话单数几乎增长了一倍,NG2-BASS3.5规划中每用户每天话单数按12条计算。
本方案按每用户每天15张话单来计算业务量。
其中6条为流量业务,9条为语音等其它业务。
虽然GPRS话单数已经超过语音话单数,但是数据仓库数据库中语音话单存储远大于流量业务的话单。
我们将把流量业务数据和非流量业务数据分开存放,流量业务数据将放在基于云计算的大数据处理平台中存储和加工,加工完毕后最终的应用数据回吐到传统数据仓库中进行存储和处理,其它数据仍然放在传统数据仓库中进行存储和处理。
某集团经营分析体系方案

某集团经营分析体系方案某集团经营分析体系方案一、引言随着市场竞争的日益激烈,企业经营的成功与否越来越依赖于对市场的深入了解和科学分析。
为了提高某集团的经营管理水平,制定了一套全面的经营分析体系方案,以帮助集团进行更好的决策和战略规划。
二、分析目标1.实现全面了解: 通过分析体系的建立,实现对企业内外环境的全面了解,包括行业动态、竞争格局、市场需求等方面的信息,帮助企业制定符合市场趋势的发展战略。
2.深入分析问题: 通过对企业各方面数据和信息的分析,发现存在的问题和潜在的机会,为企业提供决策参考和改进方向。
3.预测未来趋势: 利用历史数据和市场情报,对未来市场走势进行预测,帮助企业准确把握市场变化,调整经营策略。
三、分析内容1.行业分析: 对所在行业的发展趋势、市场规模、竞争格局进行研究,找出机会和挑战,为企业的战略决策提供依据。
2.企业内部分析: 对企业内部的资源配置、组织结构、运营流程等进行分析,发现存在的问题和改进的空间,提出有效的改进措施。
3.市场分析: 研究市场需求、消费行为、消费者喜好等方面的信息,帮助企业定位目标受众,制定市场营销策略,并预测市场未来发展趋势。
4.竞争对手分析: 对主要竞争对手的产品、定价、渠道等进行分析,发现竞争优势和劣势,制定应对策略,提高企业竞争力。
5.财务分析: 对企业财务数据进行分析,了解企业的盈利能力、资金运营情况、风险承受能力等,帮助企业做出财务决策。
6.风险评估: 针对企业面临的各类风险,如市场风险、经营风险等进行评估和分析,制定相应的风险防范措施,保障企业的稳定发展。
四、分析方法1.定量数据分析: 利用数据挖掘和统计分析技术,对大量的定量数据进行分析,如销售数据、财务数据等。
通过数据的比较、计算和建模,帮助企业发现趋势和规律,为决策提供科学依据。
2.定性数据分析: 对某些无法用数值表示的数据,如市场调研结果、消费者需求等进行分析和归纳,通过专业知识和经验进行判断和预测,为企业提供定性的决策依据。
经营分析系统设计

经营分析系统设计作者:张丁丁来源:《消费电子·理论版》2013年第12期摘要:首先介绍经营分析平台的功能,其次针对河北联通经分系统的现状提出改进的建设思路及建成后的效果。
关键词:经营分析;ODS;EDW;数据集市中图分类号:TP311 文献标识码:A 文章编号:1674-7712 (2013) 24-0000-01一、系统概述(一)数据整合ODS在对企业运营数据的整合过程中能够实现以下三个统一:(1)统一数据模型。
由ODS承载企业数据模型(EDM),促进企业各系统数据逻辑模型的统一。
在MBOSS体系内新建或改造的系统,其数据模型应向ODS所承载的企业数据模型靠拢。
数据模型是各系统及应用间交互的基础,通过数据模型的统一,减少系统及应用间复杂的转换,提高系统、应用、接口的效率。
(2)统一数据标准。
ODS中建立标准的数据编码目录,源系统数据依据标准的数据编码目录,经过整合后进入ODS中存储,实现企业数据的标准化与统一存储。
(3)统一数据视图。
基于ODS所存储的数据,支撑实现统一数据视图,使企业在客户、产品、资源等视角获取到的信息是一致的,提升客户、企业内部管理人员与分析人员对系统的感知。
(二)数据存储数据存储完成ODS系统中各种数据的存储。
存储数据按照功能的划分,主要分成接口数据层、整合数据层和汇总数据层。
数据首先由源系统被抽取到接口数据层,在该层进行转换处理之后进入整合数据层,整合层数据经过整合及计算操作存储到汇总层。
(三)数据共享ODS将各生产系统的数据整合后,在系统上基于整合好的数据提供查询、报表、计算等应用外,ODS还将系统内整合好的数据以数据共享的形式提供给其它系统。
ODS主要提供两种数据共享方式,一种是准实时批量数据提供;另一种是实时查询服务。
准实时批量数据提供即ODS系统将获取到的生产系统的数据以准实时提供给其它需要此数据且对数据实时性要求相对不高的生产系统,以减少生产系统间的网状接口,例如ODS可向客服和营销提供来自CRM系统的用户号码信息等;同时ODS还可将整合好的跨系统数据以准实时批量数据提供方式提供给外系统,以配合外系统支撑部分客户销售服务流程等。
企业经营分析体系规划

企业经营分析体系规划袁彬悠1. 经营分析的定义企业经营分析是适应市场表现和竞争的需要,于本世纪初由美国银行家亚历山大·沃尔开创,并由会计学家和管理专家不断充实,而逐步形成的一门新兴应用科学,在商业分析信息化之后,经营分析得到的广泛的发展和应用。
经营分析运用定量分析、业务分析和行为分析相结合的方法,对企业进行综合分析的一种现代经营分析体系。
分析内容主题一般包括:企业经营综合分析、财务分析、市场分析、销售分析、供应链分析、产品组合分析、产品规划和研发分析等,对于特殊行业,还有行业竞争分析以及行业主题分析。
经营分析的内容方式注重经营状况总结和经营规划方式,即运营管理和决策支持相结合。
经营分析决定了一个公司运营管理水平和自我完善进化的能力,是公司在激烈市场竞争中的重要管理统筹手段。
2. 经营分析的步骤经营分析主要对现状进行分析,然后提出业务改善和管理提升的方案和规划。
经营分析的步骤需要标准化和规范化,以利于整个组织经营信息、决策信息和其他信息的流通顺畅。
经营分析主要采用会议形式进行,会议的内容和方式可以借助垂直方式进行垂直信息收集、汇报和决策规划下达。
参考集团和子公司管控结构,集团设立业务管理中心进行战略、组织绩效、经营分析、流程和项目等基础管理。
在集团层面,由业务管理中心或董事办组织,按组织架构,每月定期分别召开集团层面和子公司层面的经营分析会议。
集团经营分析会议参加人员分别为集团领导、子公司高层,每个汇报人的时间往往不超过45分钟,会议时间一般为月中上旬。
具体的汇报次序由组织部门拟定,一般顺序为业务管理中心、财务中心、各子公司。
在子公司层级,由子公司总裁办组织,会议参加人员为公司领导,部门负责人,每个汇报人的时间不超过30分钟,具体的汇报次序由总裁办拟定,会议时间为集团总部经营分析会前后均可,报告顺序可参考集团总部的顺序。
经营分析会议的主要方式是参考本部门或公司组织绩效和GS(Goal Setting,目标设定),关键成功因数和部门职责的基本原理,进行效率,成本,绩效差距、项目任务进展等分析。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
经营分析系统建设方案书目录1概述1.1 建设背景现代企业经营环境呈现出以下三个方面的特征:➢客户(C ustomer)至上经济全球化使得市场上产品的更新换代周期越来越短,技术的发展使得市场上可替代产品的出现越来越快,因此,面对客户越来越个性化、多样化的消费需求,企业不得不提供更加丰富的产品和服务来满足客户的需求。
➢竞争(C ompetition)越来越激烈当一个行业发展处于上升势头时,参与市场的竞争者就越来越多,而且都以追求更加卓越为目标。
➢市场变化(C hange)市场变化已成为业界常态;不仅如此,变化的速度、范围及影响越来越快。
客户的消费需求在发生变化、对手的竞争模式在发生变化,这种变化是持续不断地,而且频率在加快,因此,企业市场应对策略的产生和应用速度是保持竞争力的重要手段,而市场应对策略的制定需要真实、及时的市场经营信息的支持。
面对上述以3C为主要特征的现代企业经营环境,电信运营商需要更准确、更及时地了解自己的客户和业务情况,了解客户发展的渠道性能,了解竞争对手的经营情况,以便及时地推出服务措施,满足客户越来越个性化的需求。
如何在现代企业竞争环境中充分利用自己的综合业务优势、保持并增强市场竞争能力,也是电信运营商亟待解决的关键问题。
电信运营商经过长期的发展,现有的基础数据已经逐渐丰富,但是普遍存在一个共同要面对的情况,就是这些基础数据源的数据相对独立,关联性小,但只要一旦能够充分利用这些数据,那么经过整合的数据的利用价值将大大提升,为整合成具有分析价值的“信息”数据提供了条件。
综上所述,解决问题的关键就在于如何充分利用好电信业务运营支撑系统长期以来产生的以及还在继续产生的业务数据和客户数据,将这些数据按照分析的要求进行集成,组织成支持企业经营过程的有价值信息,甚至知识。
1.2 建设目标系统建设以集团要求为出发点,从宏观上以收入情况分析、业务使用情况分析、竞争情况分析、客/用户情况分析、营销管理分析、营业情况分析、客服质量分析以及其他专题分析等功能分析点为分析要素,并结合固定/预定义报表、即席查询、OLAP分析、常规图展示、信息告警以及数据挖掘等实现手段,对电信业务、市场情况进行全面、深入地分析。
1.3 系统建设原则在系统建设过程中,将遵循以下原则:整个系统的建设将按照三层架构的原则进行建设。
经营分析系统在逻辑结构上包含数据获取层、数据存储层和数据访问层。
◆整个系统的建设将采用统一规划、分步实施、完善优化、步步见效的方式,既要满足当前内蒙电信对分析的迫切需求,同时也要考虑整个系统的演进,满足未来系统作为一个完善的决策支持系统的要求;◆经营分析系统将充分考虑系统的开放性,满足多技术、多系统的无缝集成;充分考虑系统的灵活性和可扩展性,支持未来对新业务、新产品统计分析的需求。
◆经营分析系统建设将考虑充分的保密与安全管理体制。
避免企业机密数据泄漏。
◆在技术选型上,经营分析系统将采用成熟、稳定、先进的产品,同时在软硬件产品的选型上应具有一定的前瞻性,避免今后因业务拓展需要更换系统构件的可能性;在系统建设中,产品的各个构件按产品化的原则进行设计建设,尽可能减少各子系统之间的信息耦合度。
◆经营分析系统将采用统一的系统间的接口、数据标准和接口方式。
系统提供的数据将能满足系统内部对数据的实时要求,支持并实现和各相关外部系统的连接。
◆经营分析系统的开发与建设将分阶段循序渐进地进行。
由于本系统关联的外部系统较多,为将系统建设风险降至最低,本次系统工程建设需要分步实施,对系统进行多次割接。
2总体设计2.1 设计思想系统的建设涉及到数据库、数据仓库、联机分析处理(OLAP)、数据挖掘、人工智能和统计学等多种学科与技术的交叉,同时必须考虑多种系统平台与工具的集成,因此系统的技术实现必须遵循以下要求:➢开放性为保证系统的开放性,系统构建中要尽量使用主流的硬件平台(主机、网络设备等)和软件平台,遵循业界开放式标准,支持系统建设中涉及的各种网络协议、硬件接口、数据接口等,为未来的系统扩展奠定基础。
同时为了保证数据仓库的开放性,在数据模型建立时,数据存储中应充分考虑对未来业务发展的最大支持(如:客户数据/用户数据的处理上考虑较为全面的采集,模型建立中使用独立的客户数据域,为CRM系统使用客户/用户数据奠定基础),使相关系统能够顺利地使用该数据仓库。
➢扩展性系统的扩展性应包含硬件、软件和应用等多方面的扩展,同时扩展性优劣的一个重要指标是系统并行能力。
在系统建设中,应从这几个方面综合考虑,选择扩展性强的硬件平台和软件工具,并在应用设计时充分考虑可扩展性。
在系统建设中,应充分借鉴目前业界的建设经验,吸取教训,少走弯路,保证应用的可扩展性。
➢安全性系统安全管理主要包括网络安全管理、主机和操作系统安全管理、数据库安全管理、数据访问权限管理等组成。
网络安全管理通过采用路由器、防火墙、通信服务器等多种硬件设施来保障网络安全,防止系统受到非法入侵,保证数据的安全性,同时设置网络密码保护,确保通过Web 页面访问系统时数据传输的安全性。
主机和操作系统安全管理通过设置主机密码、操作系统级别的不同用户、口令,确保系统稳定性和安全性,并建议通过磁盘阵列进行数据备份,在系统发生意外情况时,保证系统数据能够得到及时恢复。
按照中国电信业务要求,结合具体的数据情况并充分考虑建设维护成本,应提供适当的系统备份、数据恢复等策略。
数据库安全管理通过设置不同等级的数据库用户权限、角色权限,防止数据库受到恶意攻击;对于后台数据库数据,原则上只开放读取权限,避免数据库数据受到肆意修改;在数据库操作上,应严格权限、密码管理,针对不同的操作,只授予相应的权限;对于重要的数据库数据做到定期异地备份。
作为反映企业核心竞争力的业务分析数据必须采取相应的安全保护措施。
在数据访问层,系统提供灵活的权限机制分配和管理使用者对数据资源的访问。
➢实用性结合不同部门、不同的业务需求,合理的构建分析模型(按主题、地市、部门建立不同的OLAP分析模型),以及合理地组织数据(特别是有效又合理的数据粒度、分析模型的数据总量控制),保证了查询效率与响应时间。
对现有业务运营系统影响小,是系统的基本设计要求,因此必须采取恰当的数据抽取策略和控制机制来达到这一目标。
系统对大多数使用人员提供通过浏览器访问方式,并且提供多种图表展现方式(如:柱状图、饼图、多维透视表等),只要能使用浏览器,就能使用本系统。
另外通过门户与OA融合,系统向个性化的方向发展,使人机接口、展现方式更多样化、实用化。
整体上说,系统应达到“易理解”、“易学习”和“易操作”的要求。
➢知识性随着应用的深入,数据源的不断增加,数据仓库将成为知识的海洋,并提供多样化的查询手段将知识展现在使用人员面前,以提高系统的应用水平和应用价值。
➢可靠性系统应有良好的可靠性,能保证7*24的应用服务。
➢延续性系统建设应考虑现有类似功能的涵盖和扩展。
2.2 体系架构从技术角度而言,核心部分就是预先考虑好逻辑架构的稳定性,当应用要求不同时,在同样逻辑架构基础上对物理实施进行适当的调整和修改,就能保证系统的稳定运行。
以下我们将从硬件、软件、功能等方面讨论系统的逻辑架构。
2.2.1硬件架构2.2.1.1架构图及说明服务器架构图如下所示:说明:1、图中绿色圆框中各主机是为从系统长远建设所需要并行性而设计的,在系统建设初期,由于系统压力较小,从投资效益而言,也可先以单机形式考虑;2、系统建设初期,报表查询服务器、数据挖掘服务器、WEB服务器、管理监控服务器等也均可以并入OLAP服务器,随系统扩展后可分别单独移出。
➢数据仓库服务器数据仓库服务器主要承担着从接口将数据按数据仓库模型进行整理、规范和组织的作用,确保数据的全面、完整和正确。
其硬件配置应具有灵活的扩展性、并性行,支持1-N台服务器并行扩展,当系统资源不足时,能够通过升级设备或增加设备(处理器、内存、网络容量等)的方式来扩展资源,线性提升系统性能。
➢OLAP ServerOLAP Server承担着集市的关系型数据向多维数据转换,生成多维分析CUBE 并接受客户端访问的功能;其硬件配置应支持1-N台服务器的镜像、分布式的处理来满足不断增加的访问压力,防止服务器的过载。
➢报表查询服务器报表查询服务器负担着用户即席报表、预定义报表访问功能,其硬件配置应支持1-N台服务器的并行扩展进行负载均衡,分散用户的访问请求,提升访问性能。
➢数据挖掘服务器数据挖掘服务器主要完成数据挖掘服务功能,为支持其功能开发及性能提升,系统硬件配置应考虑并行性,可在其功能所需资源不足时,通过增加或升级瓶颈资源来提升性能,满足应用需要。
➢Web服务器Web服务器主要负担最终用户访问经营分析门户网站的压力,为保证访问响应的速度,其硬件配置应支持并行扩展性,支持负载均衡,能适时分布处理用户请求,减轻服务器访问压力,提升访问性能。
➢管理监控服务器管理监控服务器负担对系统运行状况进行监控、管理、分析等功能。
2.2.1.2主机系统基本要求➢要求采用多机群集系统或海量并行处理系统(MPP);➢多机群集或海量并行处理系统中的每个主机/节点支持同时处于工作状态,并根据配置的情况运行相同或者在不同的应用(或应用模块),保证主机的资源充分利用;➢要求系统整机平均无故障时间(MTBF)不低于10000小时;➢系统能够提供并行处理能力,平均50,峰值100;➢系统能够提供线性可扩展能力,提供从2TB到20TB的扩展能力;➢主机处理能力满足所有业务的应用,而且有30%的性能余量;➢计算机系统设备应具有较大的扩充能力,包括系统处理能力的扩充、存储容量的扩充、I/O能力的扩充、节点数的扩充等等;并支持CPU的升级或节点的平滑扩充;➢维护管理及开发工具,能顺利地进行服务器的管理维护;➢根据实际需要,在保证安全的前提下服务器可以灵活接入DCN网,即可以考虑以ATM、100Base-T或10Base-T、千兆以太网等方式接入。
2.2.2软件架构在数据仓库中形成基础分析数据存储后,应根据业务及管理等实际的需要建立适合各种应用的数据集市。
数据仓库、数据集市中蕴含的信息可以通过报表、OLAP分析、即席查询、数据挖掘及预警等形式向经营分析系统使用人员展现。
系统体系结构分为三层,即数据获取层、数据存储层和数据展现层,另外元数据管理贯穿整个系统建设。
如下图所示:2.2.2.1数据获取层数据获取层功能是将数据从数据源经过必要的抽取、清洗、转换等处理后加载到数据仓库系统中,即ETL过程。
为保证数据的正确性,在ETL的每一环节都必须对数据进行审计。
ETL具有统一调度、监控和管理功能。
处理过程支持校验点功能,当因某种原因使处理过程中断时,可以从最近校验点开始恢复处理过程。