高校数字校园数据中心建设方案建议书

高校数字校园数据中心建设

方案建议书

目录

一、项目概述 (4)

1.1建设背景 (4)

1.2建设目标 (5)

1.3建设原则 (6)

1.4云平台技术打造大数据与高性能优势 (8)

二、需求分析 (10)

2.1现状分析 (10)

2.2总体建设 (10)

2.2.1XXX高校校园云平台需求 (11)

2.2.2大数据分析需求 (13)

2.2.3高性能需求 (15)

三、数据中心总体规划 (16)

四、云数据中心建设规划 (19)

4.1 资源池规划 (20)

4.2 资源池规划内容 (22)

4.3 虚拟化软件选型规划 (25)

4.4 云管理平台建设规划 (26)

4.5数据中心统一管理平台规划 (29)

五、大数据建设规划 (31)

5.1大数据平台规划 (31)

5.2 大数据架构介绍 (36)

5.3新型分布式处理技术基础 (37)

5.4 分布式文件系统 (37)

5.5 MapReduce计算框架 (38)

5.6数据管理与分析 (40)

5.7 分布式数据库 (40)

5.8 Hive数据仓库 (41)

5.9 大数据调优服务 (41)

六、高性能建设规划 (44)

6.1高性能平台建设内容 (44)

6.2高性能平台总体性能要求 (44)

6.3节点配置详解 (45)

6.3.1计算节点（大数据DataNode节点） (45)

6.3.2GPU节点 (45)

6.3.3八路胖节点 (46)

6.3.4管理节点（NameNode节点） (47)

6.3.5 IO节点（JobTracker、TaskTracker节点） (47)

6.3.6存储系统 (48)

6.3.7计算网络 (48)

6.3.8 TSDM集群部署软件介绍 (53)

6.3.9 备份还原软件介绍 (55)

6.3.10集群并行环境介绍 (56)

七、机房建设规划 (57)

八、方案配置清单 (58)

一、项目概述

1.1建设背景

遍布全球的互联网络正在无时无刻、无所不在地渗透到人们工作、生活和学习中，成为推动社会发展的强大动力。在商业化的世界中，众多企业正在把自己转变成一种称为“数字神经系统”的新型组织，让企业能够以数字神经系统的方式对内部业务流程、知识共享和网络商务进行整合，快速响应全球化的竞争。

高校不仅承担着人才培养的重任，还承担了一些前沿科技和技术的研究。同样，作为培养和造就新世纪人才的教育系统和学校，也面临同样的社会环境变化趋势。然而，很多学校却明显落在了互联网络时代的后面，尽管学校已经采用了一些先进的设备和工具，但是还在沿用千百年来的传统教学方法和管理模式。电化教学设备、电脑乃至校园网都变成了利用率很低的简单摆设，真正起决定性变化的管理和教学的方法和模式却没有随着社会发展的大趋势进行相应变革。面对知识全球化和民族素质提高的教育要求，以及一系列的教育市场化竞争的挑战，“数字化校园”正在日臻成熟并发挥越来越重要的作用。

“数字化校园”的目标就是为了使校园的使用者可以更有效的利用校园来开展教学、科研活动并更方便快捷地进行学习、生活。因此校园的主人：学生——教师——管理人员就成为数字化校园的服务对象，他们的主要校园活动：教学——科研——管理——生活就成为数字化校园的内容主体。“数字化校园”的目标用一个词来表示就是服务”，为学生、教师、管理人员提供更好的服务就是数字化校园的宗旨。

目前云计算、互联网+、大数据分析、移动和物联网发展迅猛，数以亿计的用户通过互联网服务时时刻刻都产生大量的交互，这些交互通过手持设备、RFID、无线传感器产生大量的数据，IDC预计到2020年全球数据将增加到35ZB （1ZB=1024EB、1EB=1024PB），是2009年的45倍，其中80%以上为非结构化数据。这些需要处理的数据量越来越大、增长迅猛，而业务需求和竞争压力对数据处理的实时性、有效性又提出来更高的要求，常规的数据库技术手段根本无法应付与处理。由此而生产了Big Data技术来处理此类问题。大数据技术将是

IT领域新一代的技术与架构，他将帮助人类从大量、复杂的数据中提取价值，它可以帮助决策者在储存的海量信息中挖掘出需要的信息，并且对这些信息进行分析研究，从而发现重要的趋势信息。因此大数据的有效管理和挖掘将成为未来竞争和增长的基础，并日益成为企业的生产要素和战略资产，预计也将带来新一轮生产率的提升和消费者体验改善，类似工业革命的大数据时代已经来临，我们有理由相信未来大数据的产业规模将会至少以万亿美元来进行衡量。大数据将给IT行业开拓一个新的黄金时代，作为成都重要的高校我们有义务在这些前沿科技上做出对人类、社会、四川、成都有帮助的研究并造福人类、造福四川和成都。

云计算是一种新型的信息资源管理和计算服务模式，是继大型计算机、个人电脑、互联网之后信息产业的一次革命。云计算可将分散的计算、存储、服务资源有机整合起来管理和服务，转变了传统IDC运行管理理念，是未来计算的发展方向。云计算以其资源动态分配、按需服务的设计理念，具有低成本解决海量信息处理的独特魅力。云计算+大数据将会为现有的数据中心增加可用性特点能高效地、安全地运营；另一方面，并能降低数据中心的能源消耗和运行成本；我们对云计算的理解是：云计算一种基于网络的支持异构设施和资源流转的服务供给模型，它提供给客户可自治的服务，实现资源的按需分配、按量计费。云计算导致资源规模化，促进分工的专业化，使得资源供应商和用户都更加关注于自己的业务，有利于降低单位资源成本，促进全社会的开拓创新。

浪潮从事教育行业已经有数十年经验，致力于帮助教育用户提供一体化的数字化校园解决方案，在教育行业有数量众多的成功案例，浪潮承诺站在用户角度，寻求最为合理的解决方案，最大限度满足客户需求。

1.2建设目标

本次建设目标为：利用云计算技术打造XXX高校大数据分析、高性能应用等高校科研基础平台。

云计算资源中心建设后，将包括校园云计算虚拟化中心、大数据分析、和高性能计算中心，并为此三个中心提供统一管理平台。通过云计算资源中心的建设，物理资源将被组织起来统一调配和供应，提供给学校各学院、部门、教师及学生使用。并且通过云数据中心为学校提供大数据分析和高性能计算服务。