FusionInsight大数据平台实验手册

FusionInsight大数据平台实验手册

前言

概述

本文档主要描述eLab网站功能与前台界面操作，用于指导实验参与者进行远程虚拟化实验预定与操作。

读者对象

本文档主要适用于以下人员：

●FusionInsight大数据学员

●FusionInsight大数据讲师

第2页, 共122页

目录

前言 (2)

一、安装FusionInsight实验 (7)

1.1 安装准备 (7)

1.1.1 准备硬件 (7)

1.1.2 准备操作系统 (8)

1.1.3 准备工具和软件 (14)

1.1.4 准备数据 (15)

1.1.5 物理组网拓扑 (18)

1.2 安装过程 (18)

1.2.1 检验软件包 (18)

1.2.2 生成配置文件 (21)

1.2.3 配置并检查安装环境 (37)

1.2.4 安装双机Manager (43)

1.2.5 安装集群 (46)

二、日常维护实验 (53)

2.1集群、服务、实例实验 (53)

第3页, 共122页

2.1.1 添加服务 (53)

2.1.2 启动、停止、重启及删除服务 (56)

2.1.3 导出服务的配置数据 (57)

2.1.4 导入服务的配置数据 (58)

2.1.5 配置服务参数 (59)

2.1.6 添加角色实例 (61)

2.1.7 启动、停止、重启及删除角色实例 (63)

2.1.8 导出角色实例的配置数据 (64)

2.1.9 导入角色实例的配置数据 (65)

2.1.10导出集群的配置数据 (66)

2.1.11 导入导出集群安装模板 (67)

2.2 OMS备份恢复实验 (68)

2.2.1 备份Manager数据 (68)

2.2.2 恢复Manager数据 (72)

2.3集群健康检查 (81)

2.3.1 执行健康检查 (81)

2.3.2 查看并导出检查报告 (84)

2.3.3 配置健康检查报告保存数 (86)

第4页, 共122页

2.3.4 管理健康检查报告 (87)

三、业务操作实验 (89)

3.1 创建用户实验 (89)

3.1.1 流程概述 (89)

3.1.2 创建角色 (90)

3.1.3 创建用户组 (95)

3.1.4 创建用户 (96)

3.2安装Client (98)

3.2.1 安装客户端 (99)

3.2.2 使用客户端 (103)

3.2.3 切换多实例的客户端 (104)

3.3 HDFS实验 (105)

3.3.1 创建HDFS角色 (105)

3.3.2 使用HDFS客户端实验 (107)

3.4 HBase实验 (109)

3.4.1 创建HBase角色 (109)

3.4.2使用HBase客户端 (112)

3.4.3 HBase 创建/更改/删除/启动/禁用表 (113)

第5页, 共122页

3.5 Extract Transform Load实验 (115)

3.5.1从HDFS导入数据到HBase (115)

3.5.2从HBase导出数据到HDFS (119)

第6页, 共122页

一、安装FusionInsight实验

(本实验预估时间2.5小时)

1.1 安装准备

1.1.1 准备硬件

FusionInsight HD系统支持通用的X86服务器（不限于服务器），可根据自身需求灵活选择。

节点硬件要求

请确保每台服务器满足表1要求。

第7页, 共122页

1.1.2 准备操作系统

操作系统版本要求

FusionInsight HD各节点操作系统需要符合以下要求：

∙所有节点采用同一种操作系统，即SuSE、RedHat或CentOS三选一，本次使用SUSE Linux Enterprise Server 11 SP3

∙要求各节点的操作系统均为全新安装。

∙各节点root用户的密码必须一致。

∙SuSE操作系统内核版本不能为“3.0.101-0.40.1”（版本号可使用#uname -r命令查看）。

第8页, 共122页

磁盘分区要求

FusionInsight HD系统中磁盘共主要分为以下几种类型：

∙操作系统盘：OS盘，存在于所有节点，用来存放各节点操作系统，有固定的分区要求。

∙元数据盘：包括管理节点元数据盘和控制节点元数据盘，存在于管理节点和控制节点。

用来存放FusionInsight HD元数据，包括管理进程数据和控制进程数据。

∙Hadoop数据盘：存在于数据节点，用来存放FusionInsight HD的Hadoop数据。

∙Solr数据盘：存在于数据节点上，用来存放Solr的元数据和索引数据。

∙Kafka数据盘：存在于数据节点上，用来存放Kafka数据。

∙Streaming数据盘：存在于数据节点上，存放Streaming Supervisor及workers的数据。

∙Redis：存在于数据节点上，存放Redis数据库数据。

∙OS系统盘盘分区要求表2所示：

第9页, 共122页