一、PMM架构

Percona Monitoring and Management是percona一款开源的用于管理和监控MySQL 和MongoDB性能的开源平台,通过PMM客户端收集到的DB监控数据用第三方软件Grafana画图展示出来,包括两个部分:

PMM client:部署在每个监控数据库主机。搜集主机,数据库和查询分析数据等。

PMM Server:汇集数据并展示。提供表,dashboards和graph的web界面。

其架构如下图所示:

PMM Client由以下部分组成:

pmm-admin:提供命令行交互界面管理pmm client,包括新增、删除数据库实例等。

pmm-mysql-query-0: 管理 mysql QAN代理的服务,从数据库实例搜集查询性能数据并发送到pmm server上的QAN API。

pmm-mongdb-query-0:管理mongdb QAN代理的服务。

node_exporter:搜集系统性能数据,基于prometheus exporter。更多信息查询:https://github.com/percona/node_exporter.

mysqld_exporter:mysql性能搜集。

mongodb_exporter:mongodb性能搜集。

proxysql_exporter:ProxySQL性能数据搜集。

PMM Server运行在中央监控数据上,目前可以基于容器,虚拟机或者AMI(amazon machine image)部署。

pmm server包含以下工具:

QAN(Query Analytics):分析mysql数据库的查询性能,相对于qan agent,它包含:

—qan api:后端存储和获取由agent采集的查询性能数据。

—qan web:提供数据展示。

metrics monitor:提供mysql和mongodb的历史性能数据查询。

—prometheus:第三方的时序数据库,连接到pmm client的exporter并汇集数据。consul给pmm client提供api用于远程list,添加,删除prometheus上的配置主机,并存储监控的元数据。

—grafana:第三方的图形展示界面。

Orchestrator:提供mysql复制的拓扑工具和图形界面。

参考:

端口:以下端口必须在pmm server和client之间开放;

pmm server需要开放80或443端口用于pmm client访问pmm web。

pmm client端必须开放以下默认端口采集数据,可以通过pmm-admin addc命令进行修改。

42000 For PMM to collect genenal system metrics.

42001 This port is used by a service which collects query performance data and makes it available to QAN.

42002 For PMM to collect MySQL server metrics.

42003 For PMM to collect MongoDB server metrics.

42004 For PMM to collect ProxySQL server metrics.

二、PMM部署

1、安装PMM Server

PMM安装有三种方式:docker、虚拟机和AWS marketplace。

本文主要通过容器方式部署,pmm server容器镜像发布在https://hub.docker.com/r/percona/pmm-server/tags/,docker版本必须高于1.12.6。pmm server部署范围三步:获取镜像,创建持久化的pmm data镜像以及创建启动pmm server镜像。

从dock hub拉取最新的镜像版本

docker pull percona/pmm-server:latest

创建持久化的pmm-data镜像

docker create -v /opt/prometheus/data -v /opt/consul-data -v /var/lib/mysql -v /var/lib/grafana --name pmm-data percona/pmm-server:latest /bin/true

参数说明:

docker create:该命令指示Docker守护程序从映像创建容器。

-v:该选项初始化数据卷的容器。

--name:该选项为你可以用于引用Docker网络中的容器的容器分配一个自定义名称。

percona/pmm-server:latest :是导出容器的镜像名称和版本标签。

/bin/true :是容器运行的命令。

注:该镜像不启动,只为了保证pmm server的数据持久化以用于版本升级等场景。注意不要移动或者重新创建该镜像,除非确保数据不再需要。

注:确保镜像-v的数据卷存在,并最好是单独绑定挂载。

创建并启动pmm-server容器

docker run -d -p 80:80 --volumes-from pmm-data --name pmm-server --restart always percona/pmm-server:latest

参数说明:

docker run:该命令指示守护程序从镜像运行容器。

-d:该选项在分离模式(即后台)中启动容器。

-p:该选项映射用于访问PMM服务器 Web UI的端口。例如-p 8080:80,如果端口80不可用,则可以使用登陆页面映射到端口8080 。

--volumes-from:该选项从pmm-date容器中装入卷。

--name:该选项为你可以用于引用Docker网络中的容器分配一个自定义名称。

--restart:该选项定义容器的重新启动策略,设置它以always确保Docker守护程序在启动时启动容器,并在容器退出时重新启动它。

其他参数说明:

通过docker run的-e参数可以增加pmm-server启动的额外功能

启用Orchestrator复制拓扑:

docker run ... -e ORCHESTRATOR_ENABLED=true ... percona/pmm-server:latest

关闭telemetry(pmm server数据每24小时会上报percona.com,包括pmm server ID、pmm version、操作系统、数据库版本、perl版本等):

docker run ... -e DISABLE_TELEMETRY=true ... percona/pmm-server:latest

关闭更新,可以通过web界面关闭,也可以通过命令行关闭:

docker run ... -e DISABLE_UPDATES=true ... percona/pmm-server:latest

PMM Server访问方式:

组件URL

PMM home page http://192.168.1.24

QAN http://192.168.1.24/qan/

Metrics Monitor (MM)http://192.168.1.24/graph/

User name: admin

Password: admin

Orchestrator http://192.168.1.24/orchestrator

2、安装PMM Client

PMM client可以通过rpm包安装,添加percona repository,直接执行yum或者apt-get安装:

下载链接:

https://www.percona.com/downloads/pmm/

下载deb包

https://www.percona.com/downloads/pmm/1.17.1/binary/debian/xenial/x86_64/pmm-client_1.17.1-1.xenial_amd64.deb

安装deb包

dpkg -i pmm-client_1.17.1-1.xenial_amd64.deb

同样提供了tar包和源码方式安装:

Generic tarball 解压缩后执行install脚本安装

源码压缩包解压后安装

3、PMM Client连接到PMM Server

先安装mysql-server

apt-get install -y mysql-server

修改监听地址

vim /etc/mysql/mysql.conf.d/mysqld.cnf

将bind改为:

bind-address            = 0.0.0.0

开启慢查询

slow_query_log=1
long_query_time=1
slow_query_log_file=/var/lib/mysql/mysql-slow.log

重启Mysql

/etc/init.d/mysql restart

对root用户做授权,允许远程访问

root@ubuntu:~# mysql -u root -proot
mysql> grant all PRIVILEGES on *.* to root@'%' identified by 'root';
mysql> flush privileges;

使用pmm-admin  config --server命令添加客户端,假如服务器端地址为192.168.100.1,客户端地址为192.168.200.1,添加命令如下(需要root或者sudo权限):

root@ubuntu:/etc/mysql/mysql.conf.d# pmm-admin config --server 192.168.1.24
OK, PMM server is alive.PMM Server      | 192.168.1.24
Client Name     | ubuntu
Client Address  | 192.168.1.24 

如果修改了默认的80端口,则需要在ip后面加上自定义端口,如:

pmm-admin config --server 192.168.100.1:8080

4、搜集性能数据

使用pmm-admin add命令添加所需要监控的服务名。

如监控主机、mysql以及mysql的慢查询,命令如下(需要root或者sudo权限):

root@ubuntu:~# pmm-admin add mysql  --user root --password root --host 192.168.1.24 --port 3306
[linux:metrics] OK, already monitoring this system.
[mysql:metrics] OK, now monitoring MySQL metrics using DSN root:***@tcp(192.168.1.24:3306)
[mysql:queries] OK, now monitoring MySQL queries from slowlog using DSN root:***@tcp(192.168.1.24:3306)

监控mongodb主机、数据库和慢查询:

sudo pmm-admin add mongodb

监控ProxySQL性能:

sudo pmm-admin add proxysql:metrics

查看被监控项:

sudo pmm-admin list

访问页面:

http://192.168.1.24/graph/d/Fxvd1timk/home-dashboard?orgId=1

效果如下:


访问qan
http://192.168.1.24/qan/

这个页面之所有,没有数据,是因为慢查询日志还没有产生。

创建一张表,插入3000万条数据,参考链接:

http://www.py3study.com/Article/details/id/313.html

执行一条慢sql语句

SELECT * from userinfo
WHERE `name` like '%a%'

点击Query Analytics


下方就是慢sql

再次访问页面

http://192.168.1.24/qan

效果如下:

本文参考链接:

https://www.jianshu.com/p/bf32e5d63ffb

转载于:https://www.cnblogs.com/xiao987334176/p/11202029.html

PMM--简介与部署相关推荐

  1. GFS分布式文件系统简介及部署——让存储变得更高级

    GFS分布式文件系统简介及部署 一.GFS概述 1.文件系统 ①.文件系统组成 ②.文件系统的作用 ③.专业术语 二.GFS特点 三.GFS工作原理 四.GFS卷 1.GFS卷类型 2.三大基本卷的特 ...

  2. Asible简介及部署

    Asible简介及部署 1.Ansible基本概述 Ansible 能做什么 Ansible 软件特点 Ansible基础架构 2.Ansible服务安装 1)安装ansible(不用手动启动服务) ...

  3. 简账(开源记账软件)-前端环境简介及部署

    文章目录 简账(开源记账软件)-前端环境简介及部署 前言 一.前端主要技术栈简介 具体涉及的技术如下所示: Q&A 二.环境部署 1. 安装nodejs 2. 从Github上下载代码 3. ...

  4. Maxwell简介、部署、原理和使用介绍

    Maxwell简介.部署.原理和使用介绍 1.Maxwell概述简介 1-1.Maxwell简介 ​ Maxwell是由美国Zendesk公司开源,使用Java编写的MySQL变更数据抓取软件.他会实 ...

  5. Elasticsearch7从入门到精通(简介、部署、原理、开发、ELK)

    Elasticsearch7从入门到精通(简介.部署.原理.开发.ELK) 第1章.Elasticsearch简介 1-1.Elasticsearch介绍 Elasticsearch官方网站:http ...

  6. Prometheus简介与部署

    Prometheus简介与部署 1. Prometheus简介 2. Prometheus原理 3. Prometheus的特点 4. 什么是样本 5. Prometheus优缺点: 6. Prome ...

  7. Redis数据库(一)——Redis简介、部署及常用命令

    文章目录 一.关系数据库与非关系型数据库概述 1.关系型数据库 2.非关系型数据库 3.关系数据库与非关系型数据库区别 ①.数据存储方式不同 ②.扩展方式不同 ③.对事务性的支持不同 4.非关系型数据 ...

  8. dubbo + zookeeper 简介和部署

    Dubbo简介: Dubbo 是阿里巴巴公司开源(以前不开源)的一个高性能优秀的服务框架, 使得应用可通过高性能的 RPC 实现服务的输入和输出功能, 可以和spring框架无缝集成. 那么这里, 啥 ...

  9. zabbix简介及部署

    一.zabbix简介 zabbix是一款企业级的监控解决方案,它可以通过SNMP.zabbix专用agent.简单的系统管理及网络工具来监控对象,收集信息,并将收集到的信息存储在数据库中,通过即时绘制 ...

  10. saltstack高效运维简介和部署,SaltStack 与 Ansible 如何选择?

    1.SaltStack简介 1.1 自动化运维工具 自动化运维就是周期性.重复性.规律性的工作都交给工具去做,把过去的手工执行转为自动化操作.自动化是IT运维工作的升华,IT运维自动化不单纯是一个维护 ...

最新文章

  1. pandas使用rename函数自定义重命名dataframe指定索引标签(位置)的名称(customize rename index value or label)
  2. Python-从视频到gif(imageio,moviepy,ffmpeg)
  3. 实现一个spring webservice服务端二:创建一个可以访问的webservice
  4. 【2016北京集训测试赛】river
  5. putty 远程linux桌面,Linux远程桌面工具Xming+Putty的搭建
  6. c# 低功耗蓝牙_c# - 如何使用C#手动绑定到WinForm中的蓝牙低能耗设备? - 堆栈内存溢出...
  7. 类似色/同色系电商海报模板,PSD分层模板
  8. server使用abp中调用存储过程 sql_ABP中连接已有数据库执行Sql或存储过程
  9. 教你Java 代码性能优化小妙招,速速来看
  10. 用安卓设备通过otg完成电脑启动盘装机盘的制作,通过手机在U盘写入iso镜像
  11. sakai mysql_开源网络教学平台SAKAI开发环境的搭建 | 学步园
  12. CrackMe001
  13. plsql打开sql窗口快捷键_PL/SQL 快捷键设置
  14. 百度搜索开户竞价推广如何写出优质创意?
  15. 在菲律宾人民币换php怎么换,菲律宾汇率换算人民币(人民币兑换比索计算器)
  16. 解决Error creating bean with name ‘redisConnectionFactory‘ defined in class path resource...问题
  17. Linux 块设备层中的Multi-queue分析
  18. 每日10行代码57: appium测试坚果手机出现socket hang up报错的解决
  19. 用论文写作平台Overleaf写中文论文
  20. 痞子衡职场经验与感悟分享 - 索引

热门文章

  1. Numpy:开源的科学计算库
  2. 论return 0的高级写法 bushi​​​​​​​)
  3. PySide6的安装
  4. 帝国CMS 7.2 蓝色响应式网站模板自适应宽屏智能整站源码 A1
  5. 新页微QI发射5w原理
  6. BLAM源码解析(一)—— 模块初始化
  7. 2021-06-29凯云软件测试项目管理系统系统描述
  8. math.h中常用的函数(C语言)
  9. MMA-Mathematica初步了解和使用-MMA
  10. win10系统下如何配置免安装版python(U盘版)及第三方库