浪潮云海云数据中心操作系统V3.2_快速部署指南V1.0_20141015

浪潮云海·云数据中心操作系统V3.2 Inspur In-Cloud DataCenter Operating System

快速部署指南

浪潮（北京）电子信息产业有限公司

2014年10月

目录

1. 前言 (3)

1.1. 背景 (3)

1.2. 适用范围 (3)

1.3. 术语表 (3)

2. 系统环境 (4)

2.1. 物理拓扑 (4)

2.2. 环境配置 (7)

3. 系统部署 (12)

3.1. vCenter (12)

3.2. 存储配置 (13)

3.3. 部署Diana环境 (13)

3.4. 系统使用的注意事项 (28)

3.5. 卸载Diana环境 (28)

4. 附录 (30)

4.1. 配置本地yum安装源 (30)

4.2. 手动修改各WEB服务配置文件 (30)

1.前言

1.1.背景

本文档是Diana项目的简要系统部署配置说明书，依据此说明书，可以完成Diana系统正常运行所依赖的基本环境。

1.2.适用范围

本文档适用于设计人员、开发人员、测试人员以及系统实施人员等。

1.3.术语表

序号术语说明性定义

1 vCenter VMware的虚拟化管理平台，本文档中通常简写为VC。

2 Cluster若干ESX物理主机的集合（主机上挂载存储）。

3 iVirtual 浪潮虚拟机管理平台

2. 系统环境

2.1. 物理拓扑

2.1.1. 简单拓扑（单网环境）

iVirtual 管理节点vCenter Server

云海OS 各管理服务自服务节点服务RabbitMQ Server iAot Master MySQL Server

超级/域管理员

自服务用户（组织管理员/用户）

NFS 存储

iAot Agent 节点

iAot Agent 节点

图2.1-1

● 一套物理网络环境； ● 云海OS 各管理服务、自服务节点各服务、MySQL Server 、RabbitMQ Server 以及iAot

的Master 节点部署在同一台节点上； ● vCenter Server 一台单独的节点； ● iVirtual 一台单独的节点； ● NFS 存储一台单独的节点；

● iAot(自动部署) Agent 单独的节点 云海OS 所在节点配置 详细说明

硬件配置

处理器 8核 网卡 2块网卡

硬盘 大容量，最好上TB 内存

16GB 网络 控制网

操作系统

1、 CentOS 6.4 X86_64

2、 系统安装时，选择最小化安装模式（Minion

安装模式）

3、 系统所需的必备软件包请参见下面图片示

例 其他

防火墙开放以下端口：

443、8080、3306、21、8000、8999、5000

表2.1-2

关于安装操作系统时所必须要安装的软件包，请按照下图勾选：

图2.1-3

图2.1-4

图2.1-5

图2.1-6

如果你的操作系统没有安装图形桌面或者是默认的最小Minion安装，则可以使用附录4中的《配置本地YUM安装源》的方式安装上图所需的软件包。

这里，假设你已配置好本地YUM安装源，那么，下面执行以下命令，即可完成上图所需软件包的安装：

●yum groupinstall "X Window System"

●yum groupinstall base

●yum groupinstall "Java Platform"

●yum groupinstall "Large Systems Performance"

●yum groupinstall "Performance Tools"

●yum groupinstall "Network file system client"

●yum groupinstall "Networking Tools"

●yum groupinstall "Legacy X Window System compatibility"

2.1.2.复杂拓扑（双网隔离）1- 主控节点各服务集中式部署1、典型部署–控制中心各服务集中式部署

云海OS各管理服务节点

ISM服务

超级管理员/

域管理员

vCenter/iVirtual计算节点

VNC控制

台代理

自服务用户(组织管理员/组织用户)

iWorkflow服务

iCompute服务

iAsset服务

iMonitor服务

iCharge服务

iAuth服务

ICM服务

iBase服务

iTrouble服务

NFS存储

iAot Agent节点

图2.1-5

此种部署方式，采用基本的双网隔离方案，将管理服务与用户服务在网络访问上分开。

其中，云海OS各管理服务节点上，可以采用各管理服务集中式部署方式，比如，将MySQL Server、RabbitMQ Server、iAot Master、iCompute、iNetwork、iStorage、icm等管理服务部署在同一台节点上。

2.1.

3.复杂拓扑（双网隔离）2- 主控节点各服务分布式部署

在资源较充足的情况下，各管理服务可以采用分布式部署方式，即，将各管理服务分散部署到各自的一台物理机或虚拟机上，以减轻管理节点的压力。

这里，拓扑图省略。

2.2.环境配置

2.2.1.vCenter/iVirtual及计算节点

1、vCenter/Esxi当前支持版本为5.0、5.1 、5.5

2.2.2.主控节点

主控节点可以部署在物理机器上，也可以是一台虚拟机。推荐虚拟机方式。

主控节点配置详细说明

硬件配置处理器随部署拓扑决定，至少8核

网卡至少2块网卡

硬盘大容量，最好上TB

内存随部署拓扑决定，至少16GB内存

网络控制网

操作系统1、CentOS 6.4 X86_64

2、系统安装时，选择最小化安装模

式（Minion安装模式）

3、系统所需的必备软件包请参见下

面图片示例（2.2-2 - 2.2-5）

其他防火墙开放以下端口：

443、8080、3306、21、8000、8999、

5000

表2.2-1

关于安装操作系统时所必须要安装的软件包，请按照下图勾选：

图2.2-2

图2.2-3

图2.2-4

图2.2-5

如果你的操作系统没有安装图形桌面或者是默认的最小Minion安装，则可以使用附录4中的《配置本地YUM安装源》的方式安装上图所需的软件包。

这里，假设你已配置好本地YUM安装源，那么，下面执行以下命令，即可完成上图所需软件包的安装：

●yum groupinstall "X Window System"

●yum groupinstall base

●yum groupinstall "Java Platform"

●yum groupinstall "Large Systems Performance"

●yum groupinstall "Performance Tools"

●yum groupinstall "Network file system client"

●yum groupinstall "Networking Tools"

●yum groupinstall "Legacy X Window System compatibility"

2.2.

3.ISM节点

?对于单网环境下，ISM同主控节点一样，可以是物理服务器，也可以是虚拟机（推荐虚拟机方式）；

?在双网隔离环境下，ISM应部署于物理服务器上，以保证双网隔离；

对于物理服务器配置要求如下：

ISM节点详细说明

服务器硬件处理器随部署拓扑决定，至少4核

网卡至少2块网卡

硬盘无要求

内存随部署拓扑决定，至少4G内存

网络控制网、业务网

操作系统1、CentOS 6.4 X86_64

2、系统安装时，选择最小化安装模

式（Minion安装模式）

2、系统所需的必备软件包请参见下面

图片示例（图2.2-7、2.2-8）

表2.2-6

图2.2-7

图2.2-8

2.2.4. FTP 数据存储

用于存放FTP 数据文件和配置文件用。

该存储是NFS 类型的存储，可以通过物理服务器或虚拟机搭建而成。 该存储与主控节点和ISM 节点之间的关系为： 1、 对于简单拓扑

FTP 数据存储

主控/ISM 节点

NFS

（/usr/local/proftpd ）

图2.2-5

2、 对于复杂拓扑

ISM 节点

FTP 数据存储

主控节点

NFS

NFS

（/usr/local/proftpd ）

（/usr/local/proftpd ）

图2.2-6

2.2.5.VNC控制台代理

VNC控制台代理，可以单独部署于一台节点，也可以部署于ISM节点上。

它的作用就是在双网隔离环境下完成VNC控制台转发、信道加密功能。

其基本原理就是通过WebSocket实现信道加密传输、数据包转发。因此，部署时，VNC 控制台代理节点要求能够在网络上PING通ISM节点。

其具体配置要求为：

VNC控制台代理节点详细说明

服务器硬件（或虚拟机）处理器无要求

网卡至少2块网卡硬盘无要求

内存无要求

网络控制网、业务网

操作系统CentOS 6.4 X86_64

表2.2-7

3.系统部署

3.1. vCenter

1、在虚拟机上安装Windows 2008操作系统（默认用户名：administrator，密码：123456a?）；

2、设置网络配置：IP、网关、子网掩码、DNS等；

3、在虚拟机中安装vCenter软件；

4、安装vCenter成功后，使用VMware vSphere Client客户端，在vCenter中新建数据中心；

5、在数据中心中新建群集（对应VCD中的资源池），打开vSphere DRS功能，其它默认：

图3.1-1

6、在“主机和群集”视图，为群集添加主机，根据具体环境要求，可以灵活配置群集下主

机的数量。配置完成后，结果如下图：

图3.1-2

3.2.存储配置

1、对于对HA要求高的客户，希望把虚拟机文件全部存放在共享存储而非本地存储中，就

需要做如下配置：

①如下图，在“主机和群集”视图，点击左侧主机（如“10.7.33.121”），选择右侧的“配

置”标签，单击“存储器” “删除”，将不需要的本地存储删除。

图3.2-1

3.3.部署Diana环境

3.3.1.适用于简单拓扑的部署方式

在简单拓扑结构下，主控节点、ISM节点及VNC控制台代理节点是部署在同一台机器上的。

3.3.1.1.虚拟机模板部署方式

我们会提供一个VMWare/iVirtual ovf格式的虚拟机模板文件。然后，直接在某一vCenter/iVirtual上直接导入此模板即可。

具体步骤为：

1、在vCenter中导入Inspur_Diana_controlcenter_ism_deploy_v1.0.ovf模板；

2、将事先搭建好的FTP数据存储（NFS）挂载到主控/ISM节点上的/usr/local/proftpd

目录下，使用的挂载命令为：

mount –t nfs IP:NFS服务导出目录 /usr/local/proftpd –o nolock

[EX]：

mount –t nfs 10.7.33.200:/mnt/stor /usr/local/proftpd –o nolock 并将该命令写入配置文件/etc/rc.local 。在这里，一定不要将/mnt/stor写成：/mnt/stor/ 。

3、做以下配置文件修改操作，主要涉及iauth服务以及iresource服务：

1）、对于istorage服务

●修改/etc/hosts文件，将上面的NFS存储信息加入进去；

【EX】：

10.7.33.200 https://www.360docs.net/doc/1617550323.html, nfs-200

●进入安装包中的modules/istorage/tools/proftpd目录下

●执行其中的安装脚本，完成FTP服务器的安装

【命令】：

./install.sh 1

●在/usr/local/proftpd目录下，建立一个systemvm 目录；

【命令】：

mkdir –p /usr/local/proftpd/systemvm

●将系统虚拟机文件目录vRouter上传至刚创建好的systemvm目录下；

●进入

/usr/local/inspurtomcat/webapps/istorage/WEB-INF/classes目

录下，修改配置文件incloudConfig.properties:

修改ftpStore字段值为上面搭建的NFS服务器地址；

【EX】：

# ftp 数据存储配置:[NFS]//nfs ip/nfs point

ftpStore = [NFS]//10.7.33.200/mnt/stor

3.3.1.2.安装包部署方式

1、主控/ISM节点配置要求：

主控节点配置详细说明

硬件配置处理器随部署拓扑决定，至少4核

网卡至少2块网卡

硬盘无要求

内存随部署拓扑决定，至少4G内存

网络控制网

操作系统1、CentOS 6.4 X86_64

2、系统安装时，选择最小化安装模

式（Minion安装模式）

3、系统所需的必备软件包请参见下

面图片示例（2.2-2 - 2.2-5）

其他防火墙开放以下端口：

443、8080、3306、21、8000、8999、

5000

表3.3-1

关于操作系统所需的软件包，只需满足以下要求即可，请见下图：

图3.3-2

图3.3-3

图3.3-4

图3.3-5

如果你的操作系统没有安装图形桌面或者是默认的最小Minion安装，则可以使用附录4中的《配置本地YUM安装源》的方式安装上图所需的软件包。

这里，假设你已配置好本地YUM安装源，那么，下面执行以下命令，即可完成上图所需软件包的安装：

●yum groupinstall "X Window System"

●yum groupinstall base

●yum groupinstall "Java Platform"

●yum groupinstall "Large Systems Performance"

●yum groupinstall "Performance Tools"

●yum groupinstall "Network file system client"

●yum groupinstall "Networking Tools"

●yum groupinstall "Legacy X Window System compatibility"

2、安装前的配置过程：

1）、修改操作系统时间为当前正确的时间点

[EX]：

date –s “20140826 11:08:20”

2)、将事先搭建好的FTP数据存储（NFS）挂载到主控/ISM节点上的

/usr/local/proftpd目录下（请先使用mkdir –p /usr/local/proftpd命令创建该目录），使用的挂载命令为：

mount –t nfs 10.7.33.200:/mnt/stor /usr/local/proftpd –o nolock 并将该命令写入配置文件/etc/rc.local（注意，/usr/local/proftpd后面没有”/”）

【注意】：

对于iVirtual虚拟化类型，需要额外配置NFS存储，具体为两种情况：

●iVirtual是新部署的，则iVirtual需要使用Diana的NFS：

iVirtual管理节点第一次启动tomcat后，修改如下配置文件：/usr/local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/globa lConfig.properties的如下字段：

nfsserver.exportPath=10.7.33.200:/mnt/stor

其中nfsserver.exportPath改为Diana的nfs路径，修改完成后重启ivirtual服务：/etc/init.d/ivirtual-manager restart。

●iVirtual已经使用（存在客户的虚拟机），这种情况下Diana需要共用iVirtual管理

节点的NFS，因此，需要在Diana部署完成后，进入Diana的Tomcat目录：

进入/usr/local/inspurtomcat/webapps/istorage/WEB-INF/classes目

录下，修改配置文件incloudConfig.properties:

修改ftpStore字段值为iVirtual的NFS服务器地址；

【EX】：

# ftp 数据存储配置:[NFS]//nfs ip/nfs point

ftpStore = [NFS]//10.7.33.100/nfs

其中ip为iVirtual管理节点使用的IP，与iVirtual管理节点下

usr/local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/g lobalConfig.propertiess文件中的nfsserver.exportPath路径一致。

3）、修改/etc/hosts文件，将上面的NFS存储信息加入进去；

【EX】：

10.7.33.200 https://www.360docs.net/doc/1617550323.html, nfs-200

4）、在/usr/local/proftpd目录下，建立一个systemvm 目录；

【命令】：

mkdir –p /usr/local/proftpd/systemvm

将vmware系统虚拟机文件目录vRouter上传至刚创建好的systemvm目录下；

5）、将ivirtual系统虚拟机文件inspur-router.tar.gz上传至/usr/local/proftpd目录下；

6）、修改系统中进程所能打开的文件数目

a）、修改/root/.bashrc:

# 添加如下的行

ulimit –n 65535

b）、source /root/.bashrc

7）、将云海的tomcat服务设置为开机自启动，将命令写入配置文件/etc/rc.local：ulimit -n 65535

/etc/init.d/inspurtomcat restart

8）、关于短信猫的配置环境，请参考《Linux平台短信发送功能配置总结.doc》

3、解压安装包

EX：

tar xzvf diana-1.0.0-20140731.tar.gz

4、进入解压后的目录Diana

EX:

cd diana

图3.3-6

5、执行安装脚本文件

./install.sh

图3.3-7

6、在安装过程中，会检测系统是否安装Mysql以及已安装的版本，如果系统已安装，会

提示用户是否覆盖，并安装新版本。

Mysql Server has existed at system, which version is 5.6.19.

Do you want to use it directorly or reinstall a newer version? please making your choice: [1] or [2]

选择1则使用系统已有版本，选择2则会自动先进行卸载以前的版本，并备份数据目录到文件夹/var/lib/mysql_bak下，然后重新安装新版本的Mysql。

另外，如果选择1，还会提示是否需要重新导入数据：The need to re-import data?

Please making your choice [y] or [n] …

选择y，则会重新初始化数据。选择n，则会保留原有数据.

图3.3-8

7、在安装过程中，会检测rabbitmq server是否已安装，如果没有被安装，则会提示

是否需要安装rabbitmq server 到系统中。

图3.3-9

8、在安装过程中，会提示是否需要一键安装所有服务。

若选择【1】，会把所有服务安装到系统中。

若选择【2】，则会依次提示是否需要安装各服务，此时，可根据实际情况自由选择【y】

or【n】。

iauth服务

ibase服务

imonitor服务

iasset服务

icompute服务

inetwork服务

istorage服务

icharge服务

iworkflow服务

itrouble服务

icm服务

ism服务

iresmonitor服务

iaot服务

图3.3-10

【注意事项】

对于iaot服务，会提示是否安装master，选择y，则会自动安装master 。

至于iaot agent服务，需要手动安装（具体可以参见3.3.2章节的iaot服务部署及配置额外说明）

iaot-master: