主要的监控工具

1.CACTI：网络监控，Cacti是一套基于PHP，MySQL，SNMP 及 RRDTool 开发的网络流量监测图形分析工具

2.NAGIOS：系统监控，很久之前使用的，需要人为定义，没有图形，没有办法查询历史

3.ZABBIX：分布式监控

4.Open-falcon：小米监控产品，开源的

5.Prometheus：普罗米修斯，监控 docker，K8S

6.lepus：天兔，数据库监控

主要的监控内容

1.公有云：云监控
2.硬件监控：CPU 温度，主板温度，磁盘，网卡，风扇转速
3.系统监控：CPU，内存，网络，磁盘剩余
4.服务监控：
    1）MySQL：主从复制是否有延迟（zabbix 监控模板）
    2）Redis：主从复制是否有延迟
    监控思路: Zabbix 没有固定模板，可以在主库中 set 一个 key 为时间戳，然后从库会同步这个时间戳（动态），写脚本时时获取这两个时间戳，做对比。
    3）NFS：磁盘挂载状况
    4）Tomcat：JVM 监控，老年代、新生代、永久带、full-gc、垃圾回收
    5）Rsync 的同步情况，MD5 校验文件是否被篡改
5.Web 页面监控：请求时间，响应时间，加载时间，nginx 状态码监控，pv，uv，ip
6.网络监控：网卡流量（出入流量），贷款，监控宝
7.业务监控：
    1）URL 监控
    2）API 监控：针对业务的接口  basic.action
    3）Nginx 状态码
    4）Tomcat日志监控
8.日志监控：ELK，第三方日志易
9.安全监控：Firewalld，WAF，牛盾云，安全狗
10.容器监控：Prometheus，普罗米修斯

监控CPU

w top htop uptime glances ps

# 不管用什么命令监控，查看CPU，我们都必须了解，系统的用户态和内核态
us: 用户态     跟用户的操作有关35%
sy: 内核态     跟内核的处理有关65%
id: CPU空闲

# 当我们执行一个命令的时候，很快能出来结果，占用用户态和内核态的时间
[root@web02 ~]# time ls
real    0m0.002s       真实执行时间
user    0m0.001s       用户执行时间
sys     0m0.001s       系统执行时间

监控内存

free glances top htop

监控磁盘

df glances iotop iostat dstat

#以兆为单位，每秒执行一次，执行10次
[root@web02 ~]# iostat -dm 1 10

网络监控

glances ifconfig iftop ip route

nethogs 该命令可以查看某个进程所使用的流量

TCP 端口状态监控

# TCP 端口状态一共 11 种
netstat -ant
ss -ant

监控内存脚本实例

[root@zabbix ~]# vim /scripts/free.sh
#!/bin/bash
Hostname_Ip=$(hostname)_$(hostname -I|awk '{print $2}')
Date=$(date +%F)
while true
do
    Mem_Free=$(free -m|awk '/^Mem/{print $NF}')
    Swap_used=$(free -m | awk '/^Swap/ {print $3}')
    if [ $Mem_Free -lt 100 -a $Swap_used -gt 100 ];then
        echo "$Date: $Hostname_Ip 内存可用量不足100M并且Swap空间占用超过100M，内存当前剩余: $Mem_Free，Swap空间使用达到: $Swap_used"
    fi
    sleep 5
done

脚本监控，单台服务器或少量服务器可以使用，但是遇到大型架构服务器数量很多，使用该方法并不适用，所以我们要使用第三方工具进行监控 zabbix

Zabbix 架构

1.Zabbix agents 部署在被监控目标上，用于主动监控本地资源和应用程序，并将收集的数据发送给 Zabbix server；

2.Zabbix server 是 Zabbix 软件的核心组件，Agent 向其报告可用性、系统完整性信息和统计信息。server 也是存储所有配置信息、统计信息和操作信息的核心存储库；

3.数据库：所有配置信息以及 Zabbix 采集到的数据都被存储在数据库中；

4.Zabbix web 为了从任何地方和任何平台轻松访问 Zabbix ，我们提供了基于 Web 的界面，该界面是 Zabbix server 的一部分，通常（但不一定）和 Zabbix server 运行在同一台物理机器上；

5.Zabbix proxy 可以代替 Zabbix server 采集性能和可用性数据。Zabbix Proxy 在 Zabbix 的部署是可选部分；但是 Proxy 的部署可以很好的分担单个 Zabbix server 的负载。

配置官方源安装

配置官方源

[root@zabbix ~]# rpm -ivh http://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm

[root@zabbix ~]# ll /etc/yum.repos.d/
total 12
-rw-r--r--. 1 root root 2523 Jul  6 22:19 CentOS-Base.repo
-rw-r--r--. 1 root root  664 Jul  6 22:19 epel.repo
-rw-r--r--  1 root root  633 Oct  7  2019 zabbix.repo

开启仓库

#Zabbix 前端需要额外的基础安装包。 您需要在运行 Zabbix 前端的系统中启用可选 rpms 的软件仓库

#安装命令
[root@zabbix ~]# yum install -y yum-utils
[root@zabbix ~]# yum-config-manager --enable rhel-7-server-optional-rpms
Loaded plugins: fastestmirror

安装 Zabbix

[root@zabbix ~]# yum -y install zabbix-server-mysql zabbix-web-mysql zabbix-agent

第三方源安装

配置第三方源

[root@zabbix ~]# rpm -ivh https://mirrors.aliyun.com/zabbix/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm

安装 zabbix

[root@zabbix ~]# yum -y install zabbix-server-mysql zabbix-web-mysql zabbix-agent

安装数据库

[root@zabbix ~]# yum install -y mariadb-server

配置数据库

[root@zabbix ~]# systemctl start mariadb
[root@zabbix ~]# systemctl enable mariadb

[root@zabbix ~]# mysql
MariaDB [(none)]> create database zabbix charset utf8 collate utf8_bin;
Query OK, 1 row affected (0.00 sec)
MariaDB [(none)]> grant all on *.* to zabbix@'localhost' identified by 'zabbix';
Query OK, 0 rows affected (0.00 sec)

配置 zabbix 连接数据库

[root@zabbix ~]# grep "^DB" /etc/zabbix/zabbix_server.conf
DBHost=localhost
DBName=zabbix
DBUser=zabbix
DBPassword=zabbix

导入初始数据库

[root@zabbix ~]# zcat /usr/share/doc/zabbix-server-mysql-4.0.24/create.sql.gz | mysql -u root -p zabbix

[root@zabbix ~]# mysql
MariaDB [(none)]> use zabbix
Database changed

MariaDB [zabbix]> show tables;
... ...
144 rows in set (0.00 sec)

启动 zabbix 服务

[root@zabbix ~]# systemctl start zabbix-server.service
[root@zabbix ~]# systemctl enable zabbix-server.service

启动 httpd

# 修改时区
[root@web02 ~]# vim /etc/httpd/conf.d/zabbix.conf
php_value date.timezone Asia/Shanghai

[root@zabbix ~]# systemctl start httpd
[root@zabbix ~]# systemctl enable httpd

web页面访问 zabbix

http://10.0.0.71/zabbix/index.php
# 按照流程配置

# 默认登录用户名密码：
Admin
zabbix

启动 agent

[root@zabbix ~]# systemctl start zabbix-agent.service

安装zabbix客户端

[root@web01 ~]# rpm -ivh https://mirrors.aliyun.com/zabbix/zabbix/4.0/rhel/7/x86_64/zabbix-agent-4.0.1-1.el7.x86_64.rpm

配置客户端

[root@web01 ~]# grep ^Server /etc/zabbix/zabbix_agentd.conf
Server=172.16.1.71
ServerActive=172.16.1.71
Hostname=web01

启动客户端

[root@web01 ~]# systemctl start zabbix-agent.service
[root@web01 ~]# systemctl enable zabbix-agent.service

#验证启动
[root@web01 ~]# netstat -lntp
tcp        0      0 0.0.0.0:10050           0.0.0.0:*               LISTEN      39529/zabbix_agentd

Web 端配置监控

添加主机组 => 创建主机 => 选择主机模板 => 添加主机

搭建新的数据库

[root@db01 ~]# yum install -y mariadb-server

授权数据库

[root@db01 ~]# systemctl start mariadb
[root@db01 ~]# systemctl enable mariadb
[root@db01 ~]# mysql
MariaDB [(none)]> grant all on *.* to zabbix@'172.16.1.%' identified by '123';
Query OK, 0 rows affected (0.00 sec)

导出源数据库数据

[root@zabbix ~]# mysqldump -B zabbix > /tmp/zabbix.sql

将数据导入新库

[root@zabbix ~]# mysql -uzabbix -p -h172.16.1.51 < /tmp/zabbix.sql
Enter password:

修改 Zabbix-server 数据库配置

[root@zabbix ~]# grep "^DB" /etc/zabbix/zabbix_server.conf
DBHost=172.16.1.51
DBName=zabbix
DBUser=zabbix
DBPassword=123

修改 Zabbix-web 数据库配置

[root@zabbix ~]# vim /etc/zabbix/web/zabbix.conf.php
<?php
// Zabbix GUI configuration file.
global $DB;

$DB['TYPE']     = 'MYSQL';
#修改数据库地址
$DB['SERVER']   = '172.16.1.51';
$DB['PORT']     = '0';
$DB['DATABASE'] = 'zabbix';
$DB['USER']     = 'zabbix';
#修改远程连接密码
$DB['PASSWORD'] = '123';

// Schema name. Used for IBM DB2 and PostgreSQL.
$DB['SCHEMA'] = '';

$ZBX_SERVER      = 'localhost';
$ZBX_SERVER_PORT = '10051';
$ZBX_SERVER_NAME = 'Linux脱产9期';

$IMAGE_FORMAT_DEFAULT = IMAGE_FORMAT_PNG;

重启访问

[root@zabbix ~]# systemctl restart zabbix-server.service

停止旧库

[root@zabbix ~]# systemctl stop mariadb

中文字会乱码，安装下面字体，并拷贝到 Zabbix 的字体目录

[root@zabbix yum.repos.d]# yum -y install wqy-microhei-fonts.noarch
[root@zabbix yum.repos.d]# cp /usr/share/fonts/wqy-microhei/wqy-microhei.ttc  /usr/share/zabbix/assets/fonts/graphfont.ttf