MySQL&MongoDB监控利器PMM

一、PMM介绍

Percona Monitoring and Management (PMM)是一款开源的用于管理和监控MySQL和MongoDB性能的开源平台,通过PMM客户端收集到的DB监控数据用第三方软件Grafana画图展示出来。

PMM提供了对MyISAM、InnoDB、TokuDB和PXC/Glarera的监控,另外也提供了Query Analytics的功能,可以检视执行了哪些SQL指令,并对执行效能较差的语法进行优化。另外在新版本还支持了MySQL复制拓扑图结构构造。Demo官网:http://pmmdemo.percona.com

PMM针对操作系统的部份也提供了硬盘、网络、CPU和RAM的监控,特别的是它提供了Context switches、Processes和interrupts的监控,Context Switches可以看到CPU上下切换文的状况,Processes可以方便了解系统有多少程序在等待I/O。

二、PMM架构解析

PMM架构如下图所示

PMM Server是作为Docker镜像distributed,而PMM Client就是一般的RPM,它需要安装Server端和Client端软件。

Server组件

Query Analytics(QAN)是用来搜集指令并作性能分析的,其组件分别说明如下:

QAN API:作为percona-qan-agent后端储存和读取Query资料用。

QAN APP:提供图形化分析介面。

Metrics Monitor(MM)组件提供了MySQL和MongoDB历史监控信息,其组件分别说明如下:

Prometheus:一个开源的服务监控系统和时间序列数据库,它连接到PMM Client上的exporter聚集DB的监控数据。

– Consul:提供API让PMM Client可以远端替Prometheus新增、移除hosts,同时它也储存了监控的metadata。

Grafana:这是一个第三方Dashboard和图形构建器,用于可视化Prometheus中聚合的数据,以Web呈现。

– Percona Dashboards:是由Percona开发的一组用于Grafana的仪表板。

上述的2个Web页面都能从PMM Landing Page(就是PMM首页)直接连结。

Client组件

ppm-admin:命令行的PMM Client管理工具,用来新增、移除监控的资料Instance。

percona-qan-agent:是一种管理QAN代理的服务,收集查询性能数据并将其发送到PMM服务器上的QAN API。

node_exporter:Prometheus exporter用于搜集一般系统信息(https://github.com/prometheus/node_exporter)。

mysqld_exporter:Prometheus exporter用于搜集MySQL Server的信息(https://github.com/percona/mysqld_exporter)。

mongodb_exporter:Prometheus exporter用于搜集MongoDB server的信息(https://github.com/percona/mongodb_exporter)。

三、安装运行PMM Server

3.1、安装docker

yum -y install docker

3.2、运行docker

systemctl start docker

systemctl enable docker

3.3、下载容器镜像

docker pull percona/pmm-server:latest

3.4、建立数据卷容器

docker create -v /opt/prometheus/data -v /opt/consul-data -v /var/lib/mysql -v /var/lib/grafana --name pmm-data percona/pmm-server:latest /bin/true

3.5、运行PMM Server

docker run -d -p80:80 --volumes-from pmm-data --name pmm-server {-e METRICS_RETENTION=48h 可选,数据只留48小时} --restart always percona/pmm-server:latest

注意:如果执行上面这条命令出现如下错误:

/usr/bin/docker-current: Error response from daemon: driver failed programming external connectivity on endpoint pmm-server (1263128b75956bbdc024ab564e717e33bfa929c7cff60e2524d45c921879e46f): exec: "docker-proxy": executable file not found in $PATH.

则要建立软连接:

cd /usr/libexec/docker

ln -s docker-init-current docker-init

ln -s docker-proxy-current docker-proxy

ln -s docker-runc-current docker-runc

3.6、查看Docker运行状态

docker ps -a

通过使用运行容器的主机的IP地址连接到PMM Web界面来验证PMM服务器是否正在运行,然后在要监视的所有数据库主机上安装PMM Client。

3.7、验证PMM服务器

运行PMM Server之后,你应该可以使用运行容器的主机的IP地址访问PMM Web界面。例如,如果在默认端口80上运行10.1.83.175,则应该可以访问以下内容:

四、安装运行PMM Client

PMM Client是安装在你要监视的MySQL或MongoDB主机上的一组代理组件。组件收集关于一般系统和数据库性能的各种数据,并将该数据发送到相应的PMM服务器组件。

在数据库主机上安装PMM Client软件包之前,请确保你的PMM Server主机可访问。

你将需要在数据库主机上使用root用户访问安装PMM Client(以具有root权限的用户身份登录或能够运行命令的sudo权限)。

查询分析(QAN)的最低要求是:

MySQL 5.1或更高版本(如果使用慢查询日志)

MySQL 5.6.9或更高版本(如果使用性能模式)

PMM Client可以运行在任何Linux发行版上,但是Percona提供的PMM Client软件包只能从Ubuntu或CentOS发行版的软件仓库进行自动安装:

下面我们以在Red Hat或CentOS上安装PMM Client。

4.1 安装PMM Client

yum -y install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

yum -y install pmm-client

安装PMM Client之后,它不会自动连接到PMM Server。要将客户端连接到PMM服务器,请使用该命令指定IP地址。

pmm-admin config --server 10.1.83.175

注意,如果在运行PMM Server时更改了默认端口80 ,请在服务器的IP地址之后指定。

五、添加MySQL监控

5.1、添加MySQL监控和主机监控

pmm-admin add mysql --query-source perfschema --user root --password 91160

5.2、查看配置后的结果

pmm-admin list

5.3、系统相关指标:

5.4、MySQL指标监控

5.5、慢查询分析,以下图片显示了Query Analytics:

六、添加MongoDB监控

6.1 安装PMM Client

yum -y install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

yum -y install pmm-client

安装PMM Client之后,它不会自动连接到PMM Server。要将客户端连接到PMM服务器,请使用该命令指定IP地址。

pmm-admin config --server 10.1.83.175

注意,如果在运行PMM Server时更改了默认端口80 ,请在服务器的IP地址之后指定。

6.2、添加MongoDB监控

pmm-admin add mongodb --cluster rep --uri mongodb://username:password@localhost:27017

6.3、查看配置后的结果

pmm-admin list

6.4、指标监控

MongoDB指标监控:

七、设置grafana登录用户

7.1、进入容器

7.2、修改grafana.ini,禁止匿名登录

[root@c74f5be8ed88 opt]# vi /etc/grafana/grafana.ini 

#################################### Anonymous Auth ##########################

[auth.anonymous]

# enable anonymous access

#enabled = True

把enabled = Ture注释掉,这样既禁止匿名用户登陆了

现在如果重启容器(systemctl restart docker),再打开页面,你会发现自己进不去了

7.3、修改登录账号admin的密码

登录数据库:

sqlite3 /var/lib/grafana/grafana.db

修改user表,把admin密码改成admin:

update user set password='59acf18b94d7eb0694c61e60ce44c110c7a683ac6a8f09580d626f90f4a242000746579358d77dd9e570e83fa24faa88a8a6', salt ='F3FAxVm33R' where login ='admin';

安全起见,也可以把admin密码改成TdPXP4sg:

update user set password='11cf3a1ee21b046b939b5f0cdc9d92ab70ba66e4e53f301fb2456ee7b6a665d8abf0d5b387ae0ec53f5f5fc8e477bfbe073e',salt='AHxOW2Fn34',name='admin',is_admin=1 where login='admin';

7.4、开启用户注册

我们可以通过开启用户注册,自己创建用户,然后再查看user表的数据来自己定义密码(不要忘记salt列也要更新) 

####################################Users####################################

[users]

# disable user signup / registration

allow_sign_up =true

取消allow_sign_up =true注释

-------------------------------------------------------------
pmm-admin 常用命令介绍
# 添加监控服务                            
pmm-admin add                             
# 检查PMM客户端和PMM服务器之间的网络连接。
pmm-admin check-network                   
# 配置PMM Client如何与PMM服务器通信。     
pmm-admin config                          
# 打印任何命令和退出的帮助                
pmm-admin help                            
# 打印有关PMM客户端的信息                 
pmm-admin info                            
# 出为此PMM客户端添加的所有监控服务       
pmm-admin list                            
# 检查PMM服务器是否存活                   
pmm-admin ping                            
# 检查PMM服务器是否存活。                 
pmm-admin purge                           
# 清除PMM服务器上的度量数据               
pmm-admin remove, pmm-admin rm            
# 删除监控服务                            
pmm-admin repair                          
# 重启pmm                                 
pmm-admin restart                         
# 打印PMM Client使用的密码                
pmm-admin show-passwords                  
# 开启监控服务                            
pmm-admin start                           
# 停止监控服务                            
pmm-admin stop                            
# 在卸载之前清理PMM Client                
pmm-admin uninstall       


作者:张伟科
链接:https://www.jianshu.com/p/ed2bf649a43f
來源:简书
简书著作权归作者所有,任何形式的转载都请联系作者获得授权并注明出处。
posted @ 2018-10-10 14:37  wuchangsoft  阅读(1577)  评论(0编辑  收藏  举报