服务器监控的构建之路
服务器监控的构建之路大致分三个阶段：
一.200台以内
需求如下：
1.简单, 易用
2.稳定运行
3.能够报警， 邮件， 短信
基于以上需求，可以使用比较流行开源的监控软件Nagios, Cacti, Zabbix, Ganglia, ect 。热门开源产品有较多文档，可快速上手，并且有大量前人使用经验，可避免许多问题，遇到问题也容易找到解决办法。
二.200~1000台
需求如下：在原需求下变的复杂（通知， 告警）
1.统一监控内容
2.覆盖式监控
3.及时通知
基于以上需求，1.统一监控内容：将基础监控进行统一，默认每个机器都包含CPU, 内存, 磁盘空间等基础信息监控。
2.覆盖式监控：将所有机器均纳入监控， 除去基础监控以外， 最重要的当属业务监控，尽可能的覆盖业务流程，通过自定义监控减少和去除重复的问题，保障业务稳定运行。
3.及时通知：确保无遗漏。将所有监控分类， 更具重要程度，紧急程度等。分别用邮件， 微信， 短信， 电话等不同级别的方式通知，确保每个监控都有人处理，并且对于重要的业务采用call死你的方式， 不处理就一直通知。
在这个时期对Nagios进行深入研究， 编写自定义脚本， 大量增加各种监控， 将Nagios大部分的插件如：nrpe, nsca 的功能充分使用。
随着机器越来越多，需要监控的服务也越来越多， 告警信息出现爆发式增长。
三.1000+（1000+和2000+没啥区别）
两条路：
1.根据需求，继续深度开发Nagios
2.自建监控（至少需要了解Nagios的整体架构和运作模式）
到这个阶段开始开发自己的监控系统， 解决痛点， 完成需求， 主要有如下事情：
1.具备目前在用的Nagios所有功能： 比照Nagios去做， 覆盖原来功能， 并针对Nagios的问题进行优化改进， 然后替代了Nagios之后再升级。
（这一步最重要，如果连之前的Nagios的功能都不能替代，自建之路只能在这里就停下了）。
2.将告警进行整理： 化简为繁， 减少重复警告。当出现轰炸式告警信息之后， 如果不进行及时整理势必将会正真需要处理的事情耽误，并且由于某些原因，比如线路问题， 会发生重复警告， 所以必须要将告警信息进行处理在发出。
（如： 预警信息由之前的3000+下降到300）。
3.分离告警和显示： 前面监控系统， 基本上告警功能和显示功能均在一起， 不同的机房也需要汇总在中心节点后统一显示和告警。重要的告警处理是分秒必争的， 也跟界面显示无关， 所有作者在设计的时候将显示和告警功能进行了一次分离， 在本地机房进行报警， 然后在集中展示。
4.分布式部署： 避免单点。 每个机房设置一个分节点， 就是上面说的报警节点， 设置一个中心节点，先在各个机房告警， 然后汇总在中心展示。分节点与中心节点互备， 通过智能DNS进行切换。
（如： 中心节点宕机， DNS自动切换到一个分中心节点， 分节点升级为中心节点。）
四.总结
自建系统好处：
可以充分利用数据， 组合数据， 分析数据， 解释数据， 将晦涩难懂的数据解读成人人能懂的数据， 让产品人员， 销售人员， 老板统统明白当前的业务状态是怎么样的。
五.实际操作
本人经过在服务器上实践无误后，在虚拟机上重新配置的干净系统环境（centos7，windows）一步步截图来的，如果按照步骤来是不会报错的，如果出错，请检查自己的网络配置以及防火墙，杀毒软件等（检查网络配置常用命令：ping；telnet）
安装zabbix 监控主机
配置环境：虚拟机上安装的centos7
zabbix官网下载地址
https://www.zabbix.com/cn/download
本次安装的版本是4.0版本，以下是安装步骤：
一.关闭selinux和防火墙
检测selinux是否关闭
[hunter@localhost ~]$ getenforce
Disabled
临时关闭
[root@localhost hunter]# setenforce 0
永久关闭
[root@localhost hunter]# vi /etc/selinux/config
将SELINUX=enforcing改为SELINUX=disabled
设置后需要重启才能生效
查看默认防火墙状态
[root@localhost hunter]# firewall-cmd --state
running #关闭后显示not running，开启后显示running
停止firewall
[root@localhost hunter]# systemctl stop firewalld.service
禁止firewall开机启动
[root@localhost hunter]# systemctl disable firewalld.service
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
二.Zabbix4.0程序安装
配置zabbix的yum源
yum -y install zabbix-server-mysql zabbix-web-mysql zabbix-agent
安装zabbix程序包，安装mysql、zabbxi-agent
rpm -Uvh https://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm
（此处可能会有下载失败，多次尝试即可）
安装成功
启动mariadb并设置开机启动，创建数据库实例，授权
[root@localhost hunter]# systemctl start mariadb #启动mariadb
[root@localhost hunter]# systemctl enable mariadb #设置开机启动
[root@localhost hunter]# mysql #登入数据库
MariaDB [(none)]> create database zabbix character set utf8 collate utf8_bin; #创建数据库实例
Query OK, 1 row affected (0.00 sec)
MariaDB [(none)]> grant all privileges on zabbix.* to zabbix@'%' identified by 'zabbix'; #授权所有主机访问数据库实例zabbix，用户名/密码：zabbix/zabbix
Query OK, 0 rows affected (0.00 sec)
MariaDB [(none)]> grant all privileges on zabbix.* to zabbix@localhost identified by 'zabbix'; #授权localhost主机名访问数据库实例zabbix，用户名/密码：zabbix/zabbix
Query OK, 0 rows affected (0.00 sec)
MariaDB [(none)]> grant all privileges on zabbix.* to zabbix@localhost.localdomain identified by 'zabbix'; #授权localhost.localdomain主机访问数据库实例zabbix，用户名/密码：zabbix/zabbix
Query OK, 0 rows affected (0.00 sec)
导入初始模式和数据
[root@localhost hunter]# cd /usr/share/doc/zabbix-server-mysql-4.0.10/ #进入create.sql.gz所在目录
[root@localhost zabbix-server-mysql-4.0.10]# zcat create.sql.gz |mysql -uroot zabbix #导入出事模式
三.启动zabbix-server服务
配置zabbix-server的配置文件zabbix_server.conf
[root@localhost zabbix-server-mysql-4.0.10]# vi /etc/zabbix/zabbix_server.conf
DBHost=localhost # 数据主机名
DBName=zabbix # 数据库实例
DBUser=zabbix # 用户名
DBPassword=zabbix # 密码
启动zabbix-server服务
[root@localhost zabbix-server-mysql-4.0.10]# systemctl start zabbix-server #启动zabbix-server服务
[root@localhost zabbix-server-mysql-4.0.10]# systemctl enable zabbix-server #设置zabbix-server服务开机自启动
编辑Apache的配置文件，消注释设置正确的时区
[root@localhost zabbix-server-mysql-4.0.10]# vi /etc/httpd/conf.d/zabbix.conf
启动httpd服务 ，设置开机启动httpd服务
[root@localhost ~]# systemctl start httpd #启动httpd服务
[root@localhost ~]# systemctl enable httpd #设置开机启动httpd服务
[root@localhost ~]# systemctl start zabbix-agent # 启动zabbix-agent服务
[root@localhost ~]# systemctl enable zabbix-agent # 设置zabbix-agent服务开机自启动
四.Zabbix Web网页安装
在浏览器输入地址http://服务器ip/zabbix/setup.php，出现欢迎界面，点击下一步；
点击Next step，出现必要条件检测界面，正常都是OK，点击Next step
配置DB连接，与zabbix_server.conf文件中主机、数据库名称、用户名、密码保持一致，点击Next step（之前我们设置的密码是zabbix）
zabbix服务器详细信息，点击Next step（Name是可选项）
安装前汇总，检查信息无误，点击Next step
安装成功
进入登录页面，用户由于没有设置，默认是Admin，根据之前配置，密码是zabbix
登录成功
设置里切换语言
至此，zabbix 的主机就安装成功了。
2.在windows7 上安装zabbix agent配置
（windows记得关闭防火墙，控制面板 -->系统和安全 -->Windows defender 防火墙 -->启用或关闭防火墙）
下载zabbix agent
https://www.zabbix.com/download_agents
主机是4.0版本的，客户端我选的是3.4版本的，因为软件一般都是上下兼容，所以3.4是可以用的
在c盘（其他盘也可以）新建zabbix文件夹，把下载好的文件放进去，解压
进入conf文件夹，修改配置文件zabbix_agentd.win.conf（用记事本或者写字板打开）
LogFile=c:\zabbix\zabbix_agentd.log
Server=192.168.220.130 (填写监控主机ip地址)
ServerActive=192.168.220.130 (填写监控主机ip地址)
Hostname=LAPTOP-E12K29O8（右击我的电脑-属性，看看hostname）
保存。
打开命令提示符界面：（键盘快捷键win+R，输入cmd）
cd \zabbix\bin\win64
zabbix_agentd.exe -i -c C:\zabbix\conf\zabbix_agentd.win.conf（安装zabbix客户端）
zabbix_agentd.exe -s -c C:\zabbix\conf\zabbix_agentd.win.conf（开启zabbix服务）
都返回successfully 则成功
如果失败，可能需要卸载agent，命令：
cd \zabbix\bin\win64
zabbix_agentd.exe -d -c C:\zabbix\conf\zabbix_agentd.win.conf（删除zabbix客户端）
在被监控机上安装好zabbix agent后，下一步则是在主机上配置连接
配置------主机---------创建主机
主机名称与在agent里配置的hostname名称要一致
agent代理程序的接口 ip地址填被控机的ip地址
添加 再选择该主机-----模板
添加模板 Template OS Windows
------更新
等待两分钟左右，刷新页面，主机的ZBX变绿，就ok了
这是监控的cpu ulimitization图像
至此，在windows7 上安装zabbix agent配置已完毕。
3.在centos7 上安装zabbix agent配置
先关闭防火墙和selinux
一.关闭selinux和防火墙
检测selinux是否关闭
[hunter@localhost ~]$ getenforce
Disabled
临时关闭
[root@localhost hunter]# setenforce 0
永久关闭
[root@localhost hunter]# vi /etc/selinux/config
将SELINUX=enforcing改为SELINUX=disabled
设置后需要重启才能生效
查看默认防火墙状态
[root@localhost hunter]# firewall-cmd --state
running #关闭后显示not running，开启后显示running
停止firewall
[root@localhost hunter]# systemctl stop firewalld.service
禁止firewall开机启动
[root@localhost hunter]# systemctl disable firewalld.service
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
安装zabbix 软件源
rpm -ivh http://repo.zabbix.com/zabbix/3.2/rhel/7/x86_64/zabbix-release-3.2-1.el7.noarch.rpm
安装zabbix-agent
yum install zabbix-sender zabbix-agent zabbix-get
中途有提示选择y/n 选y
vi /etc/zabbix/zabbix_agentd.conf #修改conf配置
Server=192.168.220.130 #监控主机的ip
ServerActive=192.168.220.130 #监控主机的ip
Hostname=localhost.localdomain #本机的名字
设置启动和开机项
systemctl start zabbix-agent.service
systemctl enable zabbix-agent.service
在监控主机web页面上添加主机
主机名是被监控的centos7的主机名（查看主机名命令 hostname）
ip地址是被监控的centos7的ip地址
模板选择Template OS Linux
等待几分钟，刷新页面，zbx变成绿色，就ok了
点击图形进入
随便选择一个进入，可以发现已经有图像了
至此 在centos7 上安装zabbix agent配置已完毕。
注意：如需转载，请注明出处。
