服务器管理监控系统

服务器管理、监控系统

摘要：现今互联网行业发展迅速，底层支撑互联网服务的服务器等各种硬件设备规模越来庞大。如何管理有效地管理这些设备、实时发现其潜在的隐患、获取其运行的状态，而显得至关重要。根据这些信息才能合理地决定设备上所运行系统、应用等服务的关闭与保留与挂起。本文介绍了利用开源监控解决方案，以及对该方案的二次开发而实现对服务器机房的专家系统。

关键字：机房运维服务器监控

目录

1. 引言

随着现今互联网行业的迅速发展，某些物联网服务的用户已经达到了亿级，如淘宝网注册用户已达到3.7亿，仅在2015年“双十一”当天活跃用户过亿[1]。支撑如此庞大用户使用的硬件基础是规模庞大的服务器群。如何获取每一台服务器的运行状态，及时获悉潜在隐患，出现问题及时锁定排除显得至关重要。机房运维人员以及高层决策人员只有在实时掌握这些信息后才可有效地对进行决策，如在访问流量过大或其他恶意攻击后是及时关闭服务还是启动备用服务，服务区瘫痪后是需要工作人员至机房处理硬件问题还是只需远程重启服务器等类似或简单或复杂的决策，都需要底层专家系统信息的支持。

现今比较成熟的开源服务器底层数据的采集解决方案主要有和。

是一个监视系统运行状态和网络信息的监视系统，能监视所指定的本地或远程主机以及服务，同时提供异常通知功能等[2]。可运行在平台之上，同时提供一个可选的基于浏览器的界面以方便系统管理人员查看网络状态，各种系统问题，以及日志等等。

可以监控的功能有：

1、监控网络服务（、3、、、等）；

2、监控主机资源（处理器负荷、磁盘利用率等）；

3、简单地插件设计使得用户可以方便地扩展自己服务的检测方法；

4、并行服务检查机制；

5、具备定义网络分层结构的能力，用""主机定义来表达网络主机间的关系，这种关系可被用来发现和明晰主机宕机或不可达状态；

6、当服务或主机问题产生与解决时将告警发送给联系人（通过、短信、用户定义方式）；

7、可以定义一些处理程序，使之能够在服务或者主机发生故障时起到预防作用；

8、自动的日志滚动功能；

9、可以支持并实现对主机的冗余监控；

10、可选的界面用于查看当前的网络状态、通知和故障历史、日志文件等[2]；

11、可以通过手机查看系统监控信息；

12、可指定自定义的事件处理控制器[3]。

其他一些大型企业也有自己独立开发的服务器监控服务，如小米运维部的人性化互联网企业级监控系统、淘宝运维部使用等，它们也有各自的优点。

本文第一章概述了服务器机房的专家，以及可提供这些服务的一些解决方案等；第二章介绍所提供的监控原理即使用；第三章介绍的实际监控应用以及二次开发；第四章进行专家的分析；第五章对服务器机房专家系统进行总结。

2. 监控原理与应用

是一个模式的企业级的监控服务解决方案，用户可以此获取服务器等硬件、操作系统、中间件等的运行状态，为应用层的决策提供决策信息。

2.1 监控原理

由和组成，其中负责采集服务器等监控对象的数据，负责处理这些数据，判断异常等，并通过提供服务在端实现对数据的可视化展示。

其中的类型主要监控对象包括：

（1），根据监控方式实现对操作系统层级的信息采集，实现对系统的监控。有和两部分组成，分别通过命令来采集数据[4]。监控对象有运行状态、磁盘、内存使用、进程线程数等；同时可利用其他应用提供的端口实现对应用服务的监控，如数据库等。

（2）、，根据（）接口实现对服务器等硬件设备的监控，监控对象包括运行温度、风扇转速、环境温度等硬件信息的监控；

（3），根据（）协议实现对交换机、路由器等网络设备的监控。监控对象包括各端口运行状态、流入流出流量等。

（4），根具（）提供的接口实现对类应用的监控。监控对象包括虚拟机、服务，、等分布式服务的监控等。

当得到数据并发送给后，端将数组存放在位于服务端的数据库，然后前端服务调用数据库数据并将其可视化显示。显示给用户的只有页面，用户在前端进行服务器管理并据此进行相应决策。图（1）表示了的监控原理。

图监控原理图

的将数据发送给并储存在数据库中，前端页面调用数据库中的数据与用户交互。2.2用户配置

处理数据时为了便于用户操作按图（2）的方式处理、集成监控数据。

图数据处理、集成图

其中为用户监控的主机、设备或操作系统等；为实际的监控个体，可能是某一个的使用率，磁盘读写速度等，一个上可能存在若干；每一个都可设定对应的，根据阈值判断还的使用情况是否达到报警值。发现报警后将会在主界面显示，也可都过短信、邮件、微信等向用户发送报警信息，并连接后续修复操作。

因此用户在实际使用时主要需配置，和，分别如图（3）、图（4）、图（5）所示。

图配置图

用户配置监控方式即监控对象，包括监控配置图对象的名称、所在群组、监控方式、地址等。

图配置图

用户根据不同的监控类型配置监控的具体个体，可设置监控元素、监控周期、数据保存时限等。

图配置图

配置报警信息，其中为表达式判断的使用情况。如图所示为空闲内存与全部内存的比值，但可用内存的使用率小于20%时，将产生报警，警报级别为高。

除了上述3种配置外，用户还可通过配置、、等，分别配置数据展示图，关系图、监控大屏等。

3. 监控建立与二次开发

本监控与专家系统根据东海分局预报中心需要，利用监控体系并结合技术二次开发建立，为整个预报中心提高机房管理、监控专家服务。

3.1 搭建环境

本系统选择作为所在服务器，上文四种监控部署与客户端采集数据；数据库选择；网页服务选择开源服务；同时利用框架进行开发，整合的，并直接处理数据库，在交互更良好的页面实现管理与决策。

3.2 建立

根据的监控原理，的搭建主要包括数据库的建立，服务的建立，的建立等，另外只能搭建在系统中。本系统中的安装都选择系统下的编译安装，具体建立流程不在赘述，详情参见用户手册[5]。

3.3 二次开发

原始界面为英文界面，中文翻译的界面十分生硬，不便于中国用户使用。本系统对进行了二次开发，在上用封装了一层用户管理系统。本系统使用技术，结合操作数据，同时根据用户需要添加了针对性的服务。系统界面如图6：

图平台界面

如图所示，用户可添加硬件、中间件、操作系统等类型的。

图（7）为用户添加的界面：

图后台添加页面

用户可在次添加设备信息，同时根据的可将添加的数据发送值，实现对该设备的监控。添加代码如下，的添加选择了使用实现：

/**

* 2016/2/26.

*/

= ();

{

登录

();

}

: 1 - ; 2 - ; 3 - 4 - .

: 1 - 10050; 2 - 161; 3 - 12345; 4 - 632 = ();

;

创建防火墙

( ) {

(,"161","10081",2);

;

}

创建主机收集服务器性能信息、等( ) {

(,"10050","10081",1);

;

}

创建服务

( ) {

(,"10050","10081",1);

;

}

创建

( ) {

(,"12345","10081",4);

;

创建数据库

( ) {

(,"161","10081",2);

;

}

创建监控

( ) {

(,"10050","10081",1);

;

}

创建路由

( ) {

(,"161","10081",2);

;

}

收集服务器硬件信息：温度，转速等( ) {

(,"10081",1);

;

}

创建

( ) {

(,"623","10081",4);

;

}

( ) {

(,"10050","10081",1);

}

创建存储

( ) {

(,"10050","10081",1);

;

}

创建交换机

( ) {

(, , "9","161","10208",2);

;

}

创建服务

( ) {

(,"12345","10081",4);

;

}

创建虚拟机

( ) {

(,"10050","10081",1);

;

}

( ) {

数据准备

= ();

();

}

(){

= ();

[] = {""};

()();

();

();

}

( ){

= ();

[] = {""};

[] = { };

()();

()();

();

}

{

<> (){

= ();

= ();

= ("");

<> = <>();

( 0<()) {

= (i)("");

(());

}

;

}

<> (){

= ();

= ();

= ("");

<> = <>();

( 0<()) {

= (i);

= ("");

(());

}

;

}

}

}

4. 系统展示

4.1 用户监控对象添加

用户添加完毕后效果如图（8）：

图监控页面图（9）为测试阶段的状态：

图监控状态

如图所示主机共144个，可用监控3053个，可用1319个。

4.2 可视化监控与专家

图（10）监控对象的状态：

图监控对象的状态

如图可显示发出的报警，以及统计数据。同时可以直观的发现该界面设计并不美观，与中国用户的交互也是十分友好，不便于用户进行相应的决策。

为了便于用户查看并获得有用的决策信息，二次开发过程的结果简化了监控对象的添加，对于中复杂的、与添加，本系统事先根据服务器型号设定好模版，用户选择服务器是将自动加载模版实现监控，同时对于用户关心的监控报警阈值与报警提醒，系统对此也进行了简化。

图（11）为用户添加报警信息的页面：

图平台配置页面

相比于中添加时复杂表达式的填写，在专家系统中用户可直接选择监控对象，并根据提示信息完成对阈值的填写，实现了告警规则简单明了的配置。

后台配置代码如下：

{

;

( = "")

( ){

得到字段，，

;

((" ")){

= " \n" +

" \n" +

" = \n" +

" = '""'\n" +

" = \n" +

" = \n" +

" >10084;";

}{

= " \n" +

" \n" +

" = \n" +

" = '""'\n" +

" = \n" +

" = \n" +

" >10084;";

}

<<>> = ();

= (1)("")(); 因为是一个模版出来的，所有操作符都一样

a = ("}");

= (12); 得到运算符

<> = <>();

(<> : ){

= ("")();

= (2());

= ( + );

("");

= ("")();

= " = '"+ + "' =" + + ";\n";

();

();

}

[] = ( [()]);

();

}

}

4.3 决策分析

本系统对的决策功能进行了大面积二次开发与包装，系统中的信息可视化页面相对简陋，如图（12）：

图图标页面

中不便于同时查看多个图表，二次开发中对图表也进行了优化，图（13）为二次开发的数据监控页面：

图数据展示图

从二次开发的图中用户可以更加方便地获取所需的信息，并且同时监控到多个监控要素。

如果某项监控要素出现问题，专家系统将第一时间用短信通知用户，短信截图如图（14）：

图14报警短信发送

用户根据短信信息可准确定位问题所在，便与应对决策。短信功能的实现代码如下：;

;

;

;

;

;

;

;

;

;

/**

* 2016/4/14.

*/

{

;

( = "")

( ){ 中为2

= ();

= ();

= (""); 结果信息

= ;

(()("[]")){

= (0)("");

= (0)("");

= " = '"+ "';";

= " = '"+ "';";

= " = '"+ "';";

<<>> = <<>>();

= ();

= (0)("")();

<<>> = <<>>();

= ();

= (0)("")();

<<>> = <<>>();

= ();

= (0)("")();

= "机房主机出现报警，请尽快处理。详细信息为："+ +"编号：" + + ",报警内容: "+ + ",警报等级"+ "。";

}

;

}

( ){

= " = '""';";

<<>> = <<>>();

(){

();

}

= ();

= (0)("")();

;

}

}