Module 14 FusionInsight HD 产品维护
hcna(bigdata)-单选题

1.Spark是用以下那种编程语言实现的?A.CB.C++C.JAVAD.Scala2.FusionInsight Manager对服务的管理操作,下面说法错误的是?A.可对服务进行启停重启操作B.可以添加和卸载服务C.可以设置不常用的服务隐藏或显示D.可以查看服务的当前状态4.FusionInsight HD的Loader在创建作业时,Connector有什么作用?A.确定有哪些转换步骤B.提供优化参数,提高数据导入/导出性能C.配置作业如何与外部数据进行连接D.配置作业如何与内部数据进行连接5.下列哪个HDFS命令可用于检测数据块的完成性?A.hdfs fsckB.hdfs fsck /-deleteC.hdfs dfsadmin -reportD.hdfs balancer –threshold 16. YARN中设置队列QueueA的最大使用资源量,需要配置哪个参数?A.yarn_scheduler.capacity.root. er-limit-factorB.yarn_scheduler.capacity.root. QueueA.minimum-user-limit-factorC.yarn_scheduler.capacity.root. QueueA.stateD.yarn_scheduler.capacity.root. QueueA.maximum- capacity7.FusionInsight Manager 对服务的配置功能说法不正确的是A、服务级别的配置可对所有实例生效B、实例级别的配置只针对本实例生效C、实例级别的配置对其他实例也生效D、配置保存后需要重启服务才能生效8.关于fusioninsight HD安装流程,说法正确的是:A 安装manager>执行precheck>执行preinstall>LLD工具配置>安装集群>安装后检查>安装后配置B LLD工具配置>执行preinstall>执行precheck>安装manager>安装集群>安装后检查>安装后配置C安装manager> LLD工具配置>执行precheck>执行preinstall>安装集群>安装后检查>安装后配置D LLD工具配置>执行preinstall>执行precheck>安装集群>安装manager>安装后检查>安装后配置9.关于Kerberos部署,描述正确的是?A. Kerberos仅有一个角色B. Kerberos服务在同一个节点上有两个实例C. Kerberos服务采用主备模式部署D. Kerberos服务必须和LDAP服务部署在同一个节点10.某银行规划fusioninsight HD集群有90个节点,如果控制节点规划了3个,那集群中数据节点推荐规划多少最为合理?A.87B.85C.90D.8618.用户集群有 150 个节点,每个节点 12 块磁盘(不做 RAID,不包括 OS 盘),每块磁盘大小 1T,只安装 HDFS,根据建议,最大可存储多少数据?A、1764TBB、1800TBC、600TBD、588TB20.FusionInsight HD 节点不支持那种主机操作系统?A、Suse 11.1B、RedHat 6.5C、CentOS 6.4D、Ubuntu 11.0421.HBase shell命令中,哪个可以查看当前登陆的用户和权限组?e_permissionB.whoamiC.whoD.get_user23. Fusionsight HD manager界面Hive日志收集,哪个选项不正确?A、可指定实例进行日志收集,比如制定单独收集METASTORE的日志B、可指定时间段进行日志收集,比如只收集2016-1-1 到2016-1-10的日志C、可指定节点IP进行日志收集,例如仅下载某个IP的日志D、可指定特定用户进行日志收集,例如仅下载userA用户产生的日志27. FusionInsight HD 三层组网适合多少节点的集群规模?A、30 节点以下B、100 节点以下C、100-200 节点D、200 节点以上30.Hadoop系统中关于客户端向HDFS文件系统上传文件说法正确的是?A.客户端的文件数据经过NameNode传递给DataNodeB.客户端将文件划分为多个Block,根据DataNode的地址信息,按顺序写入每一个DataNode中C.客户端根据DataNode的地址信息,按顺序将整个文件写入每一个DataNode中,然后由将文件划分为多个BlockD.客户端只上传数据到一个DataNode,然后由NameNode负责Block复制31. FusionInsight HD 系统中,HBase的最小处理单元是region,user region和region server之间的路由信息是保存在哪?A.ZookeeperB.HDFSC.MasterD.Meta表34. 通过 FusionInsight Manager 不能完成以下哪个操作?A、安装部署B、性能监控C、权限管理D、虚拟机分配39. 关于 Hbase 的 Region 分裂流程 split 的描述不正确的是?A、Split 过程中并没有真正的将文件分开,仅仅是创建了引用文件B、Split 为了减少 region 中数据大小,从而将一个 region 分裂成两个 regionC、Split 过程中该表会暂停服务D、Split 过程中被分裂的 region 会暂停服务43. 关于FusionInsight Manager关键特性,说法正确的是?A.能够针对整个集群,某个服务器进行健康检查,不能够针对节点进行健康检查B.Manager引入角色的概念,采用RBAC的方式对系统进行权限管理C.整个系统使用Kerberos管理用户,使用Ldap进行认证,通过CAS实现单点登录D.对于健康检查结果,不能够导出检查报告,只能够在线查看44.查看kafka某topic的partition详细信息时,使用如下哪个命令?A. bin/kafka-topics.sh –createB. bin/kafka-topics.sh –listC. bin/kafka-topics.sh -describeD. bin/kafka-topics.sh -delete45. FusionInsight Hadoop 集群中,在某个节点上通过 df-hT 查询,看到的分区包含以下几个:/var/log Raid 1/srv/BigData Raid 1/srv/BigData/hadoop/data5 Non-Raid/Raid0/srv/BigData/solr/solrserver3Non-Raid/Raid0/srv/BigData/dbdata_om Raid 1这些分区所对应磁盘最佳 Raid 级别的规划组合是?A、Raid0、Raid1、Raid0、Non-Raid、Raid-1B、Raid1、Raid1、Non-Raid、Non-Raid、Raid1C、Raid0、Raid0、Raid0、Raid0D、Non-Raid、Non-Raid、Non-Raid、Non-Raid、Raid146. FusionInsigh HD 系统中 HDFS 默认 Block Size 是多少?A、32MB、64MD、256M47. FusionInsigh HD部署时,同一集群内的Flume server节点建议至少部署几个?A、1B、2C、3D、448. FusionInsight HD 系统设计日志不可以记录下面那些操作?A、手动清除告警B、启停服务实例C、删除服务实例D、查询历史监控50.Hadoop的HBase不适合哪些数据类型的应用场景?A.大文件应用场景B. 海量数据应用场景C. 高吞吐率应用场景D. 半结构化数据应用场景53. 安装 FusionInsight HD 的 Streaming 组件时,Nimbus 角色要求安装几个节点?A、1B、2C、3D、454. 关于FusionInsight HD 中Loader作业描述正确的是?A.Loader将作业提交到Yam执行后,如果Loader服务出现异常,则此作业执行失败B.Loader将作业提交到Yame执行后,如果某个Mapper执行失败,能够自动进行重试C.Loader作业执行失败,将会产生垃圾数据,需要用户手动清除D.Loader将作业提交到Yam执行后,在该作业执行完成前,不能再提交其他作业56. Hadoop 平台中,要查看 YARN 服务中一个 application 的信息,通常需要使用什么命令?A、containerB、applicationattemptC、jarD、application57.在FusionInsight集群规划部署时,建议管理节点最好部署()个,控制节点最少部署(),数据节点最少部署()A.1,2,2B.1,3,2C.2,3,1D.2,3,359. FusionInsight HD安装过程中,执行Preinstall操作不能完成哪项功能?A.修改OS,确保OS满足FusionInsight HD的安装要求B.安装MangerC.格式化分区D.安装OS缺失的RPM包60. SolrCloud 模式是集群模式,在此模式下 Solr 服务强依赖于一下哪个服务?B.HDFSC.ZooKeeperD.Yarn62. Hadoop 的 MapReduce 组件擅长处理哪些场景的计算任务?A、迭代计算B、离线计算C、实时交互计算D、流式计算67. 以下哪些数据不属于半结构化数据?A.HtmlB.XmlC.二维表D.Json68. 关于FusionInsight HD Streaming 客户端的Supervisor描述正确的是?A、Supervisor负责资源分配和资源调度B、Supervisor负责接管 Nimbus 分配的任务,启动和停止属于自己管理的worker进程C、Supervisor 是运行具体处理逻辑的进程D、Supervisor是一个Topology中接收数据然后执行处理的组件70.关于FusionInsight Manager,说法错误的是?A、NTP sever/client负责集群内各节点的时钟同步B、通过FusionInsight Manager,可以对HDFS进行启停控制、配置参数C、FusionInsight Manager所有维护操作只能够通过WebUI来完成,没有提供Shell维护命令D、通过FusionInsight Manager,可以向导式安装集群,缩短集群部署时间74. FusionInsight HD 系统中如果修改了服务的配置项,不进行服务重启,该服务的配置状态是什么状态?A、SYNCHRONIZEDB、EXPIREDC、CONFIGURINGD、UNKNOWN80. Spark应用在运行时, Stage划分的依据是哪个?A、taskB、taskSetC、actionD、shuffle84. 采用 Flume 传输数据过程中,为了防止因 Flume 进程重启而丢失数据,推荐使用以下哪种 channel 类型?A、Memory ChannelB、File ChannelC、JDBC ChannelD、HDFS Channel89. FusionInsight HD 的 Hbase 中一张表包含以下几个Region[10,20),[20,30),[30,+∞),分别编号为①,②,③,那么,11,20,222 分别属于哪个 Region?A、①①③B、①②③C、①②②D、①①②90. 关于Hive建表基本操作描述正确的是?A.创建外部表时需要指定external关键字B.一旦表创建好,不可再修改表名C.一旦表创建好,不可再修改列名D.一旦表创建好,不可再增加新列92. FusionInsight HD 系统中,如果 Solr 索引默认存放在HDFS上,以下理解正确的有?A.不需要考虑各solrserver实例上创建了多少shardB.为保证数据可靠性,创建索引时必须创建多RelicaC.通过HDFS读取索引时占用磁盘IO,因此不建议Solr实例与DataNode部署在同一节点上D.当Solr服务参数INDEX_STORED_ON_HDFS值为HDFS时,创建Collection的索引就默认存储在HDFS上。
园区运营维护架构设计指南

Op enFl ow Port
CE1800V
Agile Cont roller-DCN ARP- Rep ly
Packet Handler
Platf orm
Op enFl ow Port
Op enFl ow Port
CE1800V
Op enFl ow Port
CE1800V
业务发放前校验流程
开启设计态
故障发现
硬件类 状态类 安全类
故障定位
资源类 配置类 非网络类
故障影响分析
表项类 应用类 整网类
智能分析系统
公共服务 组件
分析:大数据平台公共服务
Fabric State Database
Flow State Database
Spark
Druid
GSDB
HDFS
Kafka
AI引擎 机器学习算法库
机器学习框架
多LIN K高速 数据总 线
服务器接入VXLAN的两种方案
1
2
Leaf
Peer-link
NVE
NVE
Leaf NVE
M-LAG
主
备
上行链路故障时可靠性示意图
Uplink
M ast er Downlin
k
N et w ork
上行链路故障
DAD link Peer- l in k
Backup M ast er
系统配 置
数据一 致性
资源管 理
License 管理
事前CPV验证
事后DPV验 证
数据库服务:统一存量(告警、配置、慢速状态性能)
获取全量、 订阅增量配置
ARP\FIB表 项订阅
华为FusionModule2000-S智能微模块数据中心说明书

模块化数据中心FusionModule2000-S 智能微模块数据中心FusionModule2000-S 是华为新一代智能微模块,致力于为用户提供极简、绿色、智能、安全的数据中心解决方案。
FusionModule2000-S 采用模块化设计,将智能母线、温控、机柜、通道、布线、监控等集成在一个单排通道内,达到快速交付,按需部署的需求。
与此同时,华为智能微模块通过i 3构筑核心子系统智能化,全面提升供配电、温控系统可靠性、节能性,并引入AI 技术,实现供配电和制冷的智能联动控制,并对机房资产进行自动化管理,显著提升数据中心的可靠性、可用性及运维效率。
产品简介•高密HPC 超算:1600mm 深度密闭冷、热通道,单柜密度最大可支持30kW/R ,可应用于高校,科研院所,研究机构超算应用等,可适配900mm 超深服务器安装,为HPC 提供成套基础设施解决方案。
•极简单排MDC :1350mm 深度密闭热通道,极简设计免通道设计,建筑适应性强,可应用于空间小,层高低等恶劣条件下绝大多数机房的部署需求。
应用场景极简:•All-in-One 一体化设计,一站式快速部署,柔性灵活扩容•机房改造场景量身打造,无需架高底板,最低部署高度仅2.3m ,通道紧凑设计,1350mm 深实现机柜内密闭热通道,1600mm 深实现冷热全密闭绿色:•冷电控一体化设计,高密节地,相比传统“插花式”部署,节省占地50%+•环境适应性强:独立冷热通道,机房冷量无占用,周边设备无影响。
•低PUE ,相比传统方式PUE 降低30%智能:•列间温控垂直智能分区,精确匹配主设备散热特性。
风量冷量智能跟随,稳定运行无热点安全:•温控系统N+1 备份,智能母线支持2N 备份,提供电信级可靠性•冷热通道密闭机柜自动弹门,实现应急散热,消防联动产品性能机柜内自带热通道一体化U P S电池柜IT IT空调IT IT IT空调IT IT IT1350mm配电柜IT IT空调IT IT IT空调IT IT IT密闭冷通道(热通道机柜自带)1600mm高密HPC 场景典型布局示意图极简单排MDC 场景典型布局示意*为可选配置技术参数版权所有©华为数字能源技术有限公司2021。
HDS_USPV日常维护手册

HDS USPV日常维护手册目录1.背景情况 ...................................................... 错误!未定义书签。
1.1. 实施需求 ...................................................................... 错误!未定义书签。
1.2. HDS USPV和Brocade交换机的详细配置 ................. 错误!未定义书签。
2.实施前准备工作........................................... 错误!未定义书签。
3.安装实施 ...................................................... 错误!未定义书签。
3.1. 物理安装 ...................................................................... 错误!未定义书签。
3.2. SAN设计示意图 .......................................................... 错误!未定义书签。
3.3. USPV电源 .................................................................... 错误!未定义书签。
3.4. Brocade 48000的Extended Fabric Keys ..................... 错误!未定义书签。
3.5. USPV的端口设置 ........................................................ 错误!未定义书签。
3.6. LDEV对主机的分配(Mapping) .............................. 错误!未定义书签。
iMaster NCE-FabricInsight智能运维系统解决方案

降噪 ⚫ 特殊适配: 在节假日等额外
处理数据
输出: ⚫ 数据特征(取值稳定或周期稳定) ⚫ 指标采集周期
功能: ⚫ 周期稳定指标算法:时间序列 分解
⚫ 取值稳定指标算法:Gaussian 回归
⚫ 通过算法构建基线边界 ⚫ 调整基线敏感度
默认周期 1 min 1 min 1 min 1 min 100 ms 30 min 10 s 动态订阅
设备版本 V200R005C00 V200R005C10 V200R005C10 V200R005C00 V200R005C00 V200R005C00 V200R005C00 V200R019C10
Telemetry监控
网络健康度
五层健康度评估模型,直观感知网络质量
运维服务APP
VIP 业务保障
业务
基于网络流分析业务建连情况
Overlay
BD、VNI、VRF资源及运行状态
协议
M-LAG 组状态
OSPF/BGP Peer 连接
网络
网络互连端口状态 端口流量、错包
队列深度 光链路状态
设备
硬件状态:单板/风扇/电源等 容量:ARP/FIB/MAC… CPU/内存负载
网络配置数据 (Running Config)
网络拓扑数据
(物理拓扑/协议链路/Overlay 隧道)
Telemetry机制 – 更实时,更高效
网络Metrics数据
(CPU/MEM/Bandwidth/Buffer)
网络转发表信息 (FIB/ARP)
SYSLOG 数据
(Level 0 – 4)
Telemetry监控
智慧电厂解决方案

通过对机组运行监控DCS历史 数据深度学习,结合专家机理 模型,优化锅炉燃烧控制模型 为DCS系统锅炉控制提供优化 建议,提高燃煤效率,降低排 放
使用AI技术,通过历史数据训 练供热控制仿真模型 根据环境因素精准控制供热阀 门的热水流速,提高系统能效、 降低成本、提高用户体验
通过历史运行数据和 故障维修数据构建预 测性维护模型 预判故障发生概率, 提前例行保养,减少 突发故障带来的成本
可视化运营智能决策 生产效率优化
智能摄像头 智能仪表 智能控制终端
智能协同联动 物联网平台 设备智能管理
智能传感器 定位终端
边缘计算
AI 芯片
物联网
大数据
云计算
智慧检修
AI
大渡河公司 一中枢、多中心、四单元智慧企 业设计架构 智慧企业云中心 智能安全帽、机器人巡检、智能 钥匙创新大同二电、桐乡电厂:巡检机器人京能高安屯电厂:基于三维的设备全生命 周期管理
PLMN 3G/4G/5G/NB-IoT/eMTC
连 接 和 边 缘
自建固网(园区网络、 PON)
自建非授权无线(WiFi、eLTE-U/IoT、小微波)
自建授权无线(eLTE-L、微波)
智慧电厂建 设目标
物理电站
云端电厂
枕头坝电站
瀑布沟电站
深溪沟电站
龚嘴电站
基站AirNode
MIFIModuleRFID、蓝牙等 通信模组
无线通信终端DAUWIFI无线终端AP
从业务需求,安全性、终端普适性、部署环境等综合考虑, 采用基于LTE-U和WIFI融合组网方案,LTE-U提供高速、安全、可靠回传网络,WIFI提供局域网覆盖; 设备终端用WIFI接入,提供移动式DAU MIFI可临时实现 WIF接入;AP可集成蓝牙、RFID模实现小无线方式智能设备接入 巡检机器人、摄像头等体积较大移动设备,也可利用LTE-U配 套无线通信终端直接与基站互联, 其他终端可通过WIFI接入再利用LTE-U配套的无线通信终 端DAU接入LTE-U基站,基站与园区原有核心网络互连,部分新增终端也可集成LTE-U通信终端模组与基站直接互通。 基建期临时网络无线方式最适合,可根据需要随时调整部署和 覆盖范围,且设备可沿用至生产运行期不浪费
华为交换机MGW维护作业计划操作指导书

华为交换机MGW维护作业计划操作指导书目录第1项告警管理系统的各种告警信息检查 (3)第2项:各种单板运行状态检查 (3)第3项:IP承载路由状态检查 (5)第4项:时钟状态检查 (5)第5项:MGW状态检查 (7)第6项:H248、M2UA、M3UA链路状态检查 (9)第7项:CPU占用率检查 (11)第8项:基本呼叫功能测试(包括特服号码) (12)第9项:配置文件备份 (12)第10项:机房环境检查、设备状况检查及清洁 (14)第11项:口令及操作权限清理 (14)第12项:系统主备倒换 (15)第13项:电源及地线检查、地阻测试 (15)第1项告警管理系统的各种告警信息检查要求:实时进行,每天对告警信息进行浏览,对异常告警进行必要的分析和处理。
操作部门:网管监控部、分公司操作步骤:1.对实时告警窗口中的告警进行浏览,是否有严重故障告警、重要故障告警、紧急重要事件告警、其他事件告警;2.分公司应注意每日对历史告警进行分析总结,点击“故障管理”菜单下“告警日志查询”,输入告警时间,有必要还可输入相关告警编号、告警级别等,确定;3.在查询出的历史告警中,进行逐项检查,对某些异常告警进行重点查看,双击该告警信息,在弹出的详细解释中查询具体告警参数,以及帮助信息、修复参考建议等。
第2项各种单板运行状态检查要求:每日进行,每天对单板运行状态进行检查,确保交换机各单板正常。
操作部门:网管监控部、分公司操作步骤:1.使用DSP BRD指令查看单板状态⏹命令:DSP BRD:;⏹原始报告:+++ HUAWEI UMG8900 2006-10-22 09:58:13O&M #15%%DSP BRD:;%%RETCODE = 0 执行成功槽位记录表----------框号槽号位置板类型硬件类型板组号备份状态主备状态管理状态安装状态操作状态1 7 前插 OMU FOMU 0 1+1备份主用 <NULL> 安装正常1 8 前插 OMU FOMU 0 1+1备份未知 <NULL> 安装正常(结果个数 = 2)--- END输出报告中,如果单板状态均显示为主用正常、备用正常、正常,无故障态即OK,2.使用DSP BRDSTART指令查看单板是否设置从FLASH加载⏹命令:LST BRDSTART:;⏹原始报告:+++ HUAWEI UMG8900 2006-10-22 09:58:13O&M #15%% LST BRDSTART:;%%RETCODE = 0 执行成功单板加载方式表----------========================================================机框号槽位号板位置单板类型加载方式========================================================0 0 前插FLU FLASH0 1 前插FLU FLASH0 2 前插FLASH0 3 前插FLASH0 4 前插FLASH0 5 前插FLASH0 6 前插FLASH0 7 前插MPU FLASH0 8 前插MPU FLASH0 9 前插FLASH0 10 前插FLASH0 11 前插FLASH0 12 前插FLASH0 13 前插FLASH--- END输出结果中,如果单板的加载方式为FLASH即为正常。
华为FusionModule500一体式温控方案说明书

FusionModule500 产品简介(一体式温控方案)华为FusionModule500是新一代边缘数据中心解决方案,通过高集成的设计方式,单柜内集成UPS 、供配电、制冷、监控、备电和灭火模块(可选),为用户打造“一柜一DC ”的极简数据中心。
FusionModule500采用工厂预测试、预安装的方式,核心部件工厂预装,现场即插即用,快速部署。
同时,搭配华为移动智能管理APP ,轻松实现机房远程运维。
产品简介•金融、教育、医疗、园区、中小企业、商业零售、运营商营业网点等室内边缘数据中心场景应用场景极简•全工厂预制,无外机设计,免空调连管,2小时快速部署•支持柜内灭火模块*,即插即用更便捷绿色•高集成度设计,相比传统方案,节省占地50%•密闭冷热通道设计,防尘降噪,高效制冷智能•支持面部识别,免密码登录,免钥匙开门•支持移动智能管理* ,远程专业运维安全•支持自动弹开门,高温时自动弹开,辅助散热产品特点FusionModule500分解图*:选配功能配电模块一体式温控监控单元双层玻璃门可用空间UPS 电子锁弹门装置温湿度传感器显示屏电池单元技术参数注:1.可用空间=27U 未配置电池和灭火模块计算,实际可用空间取决于具体配置;2.方案支持最长4h 备电,实际备电时间取决于电池模块数量;3.制冷量是在室内干球/湿球温度为37℃/24℃,室外干球温度为35℃的标准环境下测出,实际制冷量会随室内外环境温度和相对湿度的变化而增大或减小。
4.搭配华为智能网管时,可实现多网点统一管理;5.漏水检测为选配功能,可选择点式/绳式检测传感器;6.移动智能管理支持短信/邮件/call home/电话语音多种告警方式版权所有©华为数字能源技术有限公司2022。
保留一切权利。
非经本公司书面同意,任何单位和个人不得擅自摘抄、复制本手册内容的部分或全部,并不得以任何形式传播。
项目描述详细参数系统参数电源制式220/230/240VAC ,1Ph+N+PE ,50/60Hz 通道封闭密闭冷热通道安装方式水泥地面/架空地板走线方式机柜上走线环境温湿度0℃~40℃,5~95%海拔高度0~1000m (1000以上降额使用)系统容量3kW柜体尺寸600mm ×2000mm ×1100mm (高×宽×深mm )IT 可用空间≤27U*防护等级IP20重量360kg供配电系统系统输入220/230/240VAC,1Ph+N+PE,50/60Hz,63A 输出电压220VAC UPS 容量6kVA UPS 配置单UPS电压输入范围80~280VAC, 40-70Hz, 1Ph+N+PE 功率因数 1.0UPS 效率高达96%电池类型铅酸电池备电时间0.5h~4h*防雷等级CLASSII/C 级, In 20kA, Imax 40kA, 8/20us 维修旁路标配rPDU IEC 型,输出端口:C13*8温控系统制冷量 3.5kW*风量600m³/h 制冷模式风冷直膨式送风方式前送风,后回风安装方式机架式安装外形尺寸438mm (宽)×445mm (高)×900mm (深)(不含挂耳)灭火模块安装方式机架式安装气体类型及容量全氟己酮,1.25kG外形尺寸43.6×442×690(高×宽×深mm )监控系统监控功能远程WEB 界面访问,多网点统一管理*本地界面支持10英寸PAD 大屏展示,支持面部识别登录/无钥匙开门环境监测温湿度、烟雾、漏水检测*,机柜门状态监测移动运维短信/邮件/call home/电话语音告警,移动智能管理APP*。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
接入层
RestFulAPI
Snmp
Syslog
2. SNMP 3. Syslog 弹性扩展
HTTP
业务逻辑层
Controller
PMS/FMS/CEP/IAM
Kerberos/Ldap
1. 消息主动上报 2. 支持512+集群管理 开放性 1. 管理接口标准化
HBase
RPC
HDFS
Hive
Web Service
OMS OMA
华为自研 华为自研
Controller
Controller是Manager的控制中心,负责汇聚来自集群中所有节点的 华为自研 信息,统一向管理员展示,以及负责接收来自管理员的操作指令, 并且依据操作指令所影响的范围,向集群的所有相关节点同步信息。 Node Agent存在于每一个集群节点,是Manager在单个节点的使能 器。Node Agent每隔3秒向Controller发送心跳信息,不支持配置时 间间隔。
第7页
Manager概念体系
模块名称 职责描述 是一个部署在Tomcat下的Web服务,提供Manager的https接口,用 于通过浏览器访问Manager。同时还提供基于Syslog和SNMP协议 的北向接入能力。 操作维护系统的管理节点,OMS节点一般有两个,互为主备。 操作维护系统中的被管理节点,一般有多个。 实施方式 (开源增强 /华为自研) 华为自研
高可用性管理模块,Manager上的OMS一般有两个,互为主备关系, 华为自研 主备OMS通过HA进行主备管理。
第10页
版权所有© 2015 华为技术有限公司
Manager逻辑结构
总体架构
客户浏览器 网管系统 网管系统
外部系统
HTTPS SNMP SysLog
主要特点:
丰富的接口: 1. Restful
1. 快捷地通过WEB进行各个模块日志 1. 磁盘更换操作简单. 2. 无需重启服务. 下载 3. 无需额外手工操作 2. 错误日志便于故障定位
易故障定位 易磁盘更换
易配置
版权所有© 2015 华为技术有限公司
第6页
Manager功能简介
平台中的位置
应用层
Open API/SDK REST/SNMP/Syslog
版权所有© 2015 华为技术有限公司
第18页
Manager关键特性
HDFS联邦配置
HDFS的元数据信息,包括文件信息,块信息等,都存储在NameNode 中,一般当存储的文件数大于1亿时,NameNode就成为瓶颈。通过 NameNode联邦可突破文件存储数量的限制,最终可达到10亿以上的文件。
Oozie
HBASE
Yarn/ Zookeeper
HDFS
Spark Yarn
MPP DB 元数据 管理
FusionInsight HD 提供大数据处理环境,基于社区开源软件增强,按照场景选择业界最佳实践 ; FusionInsight Manager是一个分布式系统管理框架,管理员可以从单一接入点操控分布式集群,包括系统管理 (OM/NTP/灾备)、数据安全管理,是整个FusionInsight平台的基石。 版权所有© 2015 华为技术有限公司
Node Agent
华为自研
版权所有© 2015 华为技术有限公司
第8页
Manager概念体系
模块名称 职责描述 OMA上面性能监控和告警的Agent,负责收集该Agent Node上的性 能监控数据和告警数据 统一认证中心,登录Web Service时需要在CAS进行登录认证,浏 览器通过URL自动跳转访问CAS 权限管理模块,管理用户和用户组的权限 用户和用户组管理模块,管理用户及用户归属的用户组 在OMS与集群中各部署一个。OMS Kerberos提供单点登录及 Controller与Node Agent间认证的功能;集群中Kerberos提供组件 用户安全认证功能 在OMS与集群中各部署一个。OMS Ldap在集群安装前为用户认证 提供数据存储,在集群安装后作为集群中Ldap的备份;集群中Ldap 为用户认证提供数据存储,其服务名称为LdapServer,角色实例为 SlapdServer 实施方式 (开源增强 /华为自研) 华为自研 华为自研 华为自研 华为自研
Web Server
CAS
NTP Server
Manager Node
Kerberos
HA Monitor
Agent Node
OMA
Agent
NTP Client
版权所有© 2015 华为技术有限公司
第12页
Manager逻辑结构
管理模型
Cluster
Cluster 1 :N HBase
主要特点: 1.基于对象的分层管理模型
版权所有© 2015 华为技术有限公司
第14页
Manager关键特性
统一监控告警
Manager提供可视化、便捷的监控告警功能。通过Dashboard,用户可以快速 获取集群关键性能指标,并评测集群健康状态,同时提供性能指标的定制化
显示功能及指标转换告警方法。
版权所有© 2015 华为技术有限公司
版权所有© 2015 华为技术有限公司
第5页
Manager功能简介
关键竞争力
50H / 100 Node
120M 安装过程
HBase
MapReduc e
UI
日志 收集
Common (6 Steps)
6Setps/2hour per disk
需额外手工操作
安装准备
HBase_HDFS_Port=%{HDFS_Port}
版权所有© 2015 华为技术有限公司
第16页
Manager关键特性
统一用户权限管理
提供RBAC(Role Based Access Control)方式的权限管理模型,并提供界 面化管理方式,简化系统的权限管理方式,提高易用性,降低客户使用门槛。 提供通用的权限管理机制,统一各组件的权限管理实现,从架构上补全安 全系统的基础能力,提高安全系统的可维护性和扩展性。
FusionInsight HD 产品维护
版权所有© 2015 华为技术有限公司
前言
FusionInsight Manager是运维管理系统,为部署在集群内的服务 提供统一的集群管理能力,支持大规模集群的安装部署、性能监控 、告警、用户管理、权限管理、审计、服务管理、健康检查、日志 采集、升级和补丁等功能。
OMM Agent CAS AOS ACS
Kerberos
华为自研
Ldap
限公司
第9页
Manager概念体系
模块名称 NTP Server/Client IAM PMS CEP FMS Database HA 职责描述 实施方式 (开源增强 /华为自研) 开源增强 华为自研 华为自研 华为自研 华为自研 开源增强 负责同步集群内各节点的系统时钟。 负责记录审计日志。在Manager的UI上每一个非查询类操作,都有 对应的审计日志 性能监控模块,搜集每一个OMA上的性能监控数据并提供查询 汇聚功能模块。比如将所有OMA上的磁盘已用空间汇总成一个性能 指标。 告警模块,搜集每一个OMA上的告警并提供查询 Manager的数据库,负责存储日志、告警等信息。
FusionInsight Manager支持大规模集群的安装部署、监控、告警、用户管 理、权限管理、审计、服务管理、健康检查、统一多租户、问题定位、升 级和补丁等。
版权所有© 2015 华为技术有限公司
第4页
Manager功能简介
核心价值
低服务低成本 易部署 易维护 易故障处理 易业务开发 高可靠性 高安全性 自调整 职责描述 提供基于Web的向导式、模板式的安装部署能 基于Web页面、提供可定制的监控界面、不可抵赖的审计日志 提供有效解决故障的操作指南、自恢复的告警、日志收集工具 一键式安装的客户端、可执行的demo案例 管理节点提供双机HA机制,主故障之后,备自动切换 非root运行、消息通信通过HTTPS加密、所有密码全部经过加密 客户可自行完成集群的扩容、减容操作
第15页
Manager关键特性
单点登录
单点登录是指访问一个系统中的多个应用程序时,只需要登录一次, 不用在访问每个应用程序时都需要再次登录。本系统中实现了 FusionInsight Hadoop系统中FIM WebUI、组件WebUI之间的单点登录, 使得用户在这些WebUI之间跳转时只需要登录一次,提升了用户体验。
第11页
Manager逻辑结构
逻辑结构
GUI Shell
告警 管理 配置 管理 系统 备份 北向 接口 系统 恢复 日志 采集 时间 管理 HA 管理 升级 服务 集群 管理 用户 管理 升级 管理 性能 监控
安装 服务
Client
Manager逻辑结构
IAM CEP PMS FMS Controller AOS ACS DataBase LDAP
从用户角度来说本特性最主要的作用是建立起了客户的原始需求和权限获
取的直接关系,省略了从原始需求中提取权限需求和从各个组件中获取权限的 操作步骤,这对用户体验是极大提升。
版权所有© 2015 华为技术有限公司
第17页
Manager关键特性
自动健康检查与巡检
Manager为用户提供界面化的系统运行环境自动检查服务,帮助用户实现 一键式系统运行健康度巡检和审计,保障系统的正常运行,降低系统运维成本 。用户查看检查结果后,还可导出检查报告用于存档及问题分析。
本章主要介绍华为FusionInsight Manager的产品功能、关键特性