使用Anemometer基于pt-query-digest将MySQL慢查询可视化

If you‘re just completely itching to start using this tool, here‘s what you need:

1、a MySQL database to store query analysis data in.

2、pt-query-digest.You may as well just get the whole Percona Toolkit while you‘re at it :)

3、a slow query log from a MySQL server (see The Slow Query Log for info on getting one)

4、a webserver with PHP

The first first

[[email protected] anemometer]# wget percona.com/get/percona-toolkit.rpm
[[email protected] ~]# yum install -y percona-toolkit.rpm

Then,Pt-query-digest reference configuration is given

[code collapse="false"]
pt-query-digest --user=数据库用户名 --password=数据库密码 --review h=数据库IP和域名,D=slow_query_log,t=global_query_review --history h=数据库IP和域名,D=slow_query_log,t=global_query_review_history --no-report --limit=0% --filter=" \$event->{Bytes} = length(\$event->{arg}) and \$event->{hostname}=\"$HOSTNAME\"" 数据库日志文件地址
[/code]

next,Grammar and important options

pt-query-digest [OPTIONS] [FILES] [DSN]
--create-review-table 当使用--review参数把分析结果输出到表中时,如果没有表就自动创建。
--create-history-table 当使用--history参数把分析结果输出到表中时,如果没有表就自动创建。
--filter 对输入的慢查询按指定的字符串进行匹配过滤后再进行分析
--limit限制输出结果百分比或数量,默认值是20,即将最慢的20条语句输出,如果是50%则按总响应时间占比从大到小排序,输出到总和达到50%位置截止。
--host MySQL服务器地址
--user mysql用户名
--password mysql用户密码
--history 将分析结果保存到表中,分析结果比较详细,下次再使用--history时,如果存在相同的语句,且查询所在的时间区间和历史表中的不同,则会记录到数据表中,可以通过查询同一CHECKSUM来比较某类型查询的历史变化。
--review 将分析结果保存到表中,这个分析只是对查询条件进行参数化,一个类型的查询一条记录,比较简单。当下次使用--review时,如果存在相同的语句分析,就不会记录到数据表中。
--output 分析结果输出类型,值可以是report(标准分析报告)、slowlog(Mysql slow log)、json、json-anon,一般使用report,以便于阅读。
--since 从什么时间开始分析,值为字符串,可以是指定的某个”yyyy-mm-dd [hh:mm:ss]”格式的时间点,也可以是简单的一个时间值:s(秒)、h(小时)、m(分钟)、d(天),如12h就表示从12小时前开始统计。
--until 截止时间,配合—since可以分析一段时间内的慢查询。

Install  anemometer

First up, grab the anemometer code from github. Navigate to the document root of your web server and snag a copy of the Box Anemometer code.

[[email protected] ~]# git clone git://github.com/box/Anemometer.git anemometer

or ,if you have 9418 port closed:

[[email protected] ~]# git clone

then change your current working directory to the anemometer directory:

[[email protected] ~]# cd anemometer

Next, you should connect to the MySQL database you‘re looking to store the analysis data in and issue the following command:

[[email protected] anemometer]# mysql -uroot -p123456 < install.sql 
[[email protected] anemometer]# mysql -uroot -p123456 -e "grant ALL ON slow_query_log.* to 
 BY ‘123456‘;"

Next, grab that slow query log file you have (mine‘s called "slow.log"!), and run pt-query-digest on it: NOTE: I‘m using a BASH 3.0 shell here on my MySQL database server! This is so the "$HOSTNAME" variable properly replaces with "db.example.com")

[[email protected] ~]# rpm -qa|grep percona-toolkit 

percona-toolkit-2.2.16-1.noarch

For pt-query-digest version < 2.2

pt-query-digest --user=anemometer --password=superSecurePass 
                  --review h=db.example.com,D=slow_query_log,t=global_query_review 
                  --review-history h=db.example.com,D=slow_query_log,t=global_query_review_history 
                  --no-report --limit=0% \ 

                  --filter=" \$event->{Bytes} = length(\$event->{arg}) and \$event->{hostname}=\"$HOSTNAME\"" \ 

                  /var/lib/mysql/db.example.com-slow.log

For pt-query-digest version >= 2.2

[[email protected] ~]# pt-query-digest --user=anemometer --password=123456 --review D=slow_query_log,t=global_query_review --history D=slow_query_log,t=global_query_review_history --no-report --limit=0% --filter=" \$event->{Bytes} = length(\$event->{arg}) and \$event->{hostname}=\"$HOSTNAME\"" /usr/local/mysql/var/slow.log

You may see an error like above, that‘s okay! TODO: explain what the options above are doing.

Pipeline process 11 (aggregate fingerprint) caused an error: Argument "57A" isn‘t numeric in numeric gt (>) at (eval 40) line 6, <> line 27.

Pipeline process 11 (aggregate fingerprint) caused an error: Argument "57B" isn‘t numeric in numeric gt (>) at (eval 40) line 6, <> line 28.

Pipeline process 11 (aggregate fingerprint) caused an error: Argument "57C" isn‘t numeric in numeric gt (>) at (eval 40) line 6, <> line 29.

View the data!

Now, navigate to the document root of your web server and copy the sample config so you can edit it:

[[email protected] conf]# cd /home/wwwroot/anemometer/conf
[[email protected] conf]# cp sample.config.inc.php config.inc.php

The sample config explains every setting you may want to change in it. At the very least, make sure you set the Datasource to the MySQL database you‘re storing the analyzed digest information in:

$conf[‘datasources‘][‘localhost‘] = array(

    ‘host‘  => ‘db.example.com‘,

    ‘port‘  => 3306,

    ‘db‘    => ‘slow_query_log‘,

    ‘user‘  => ‘anemometer‘,

    ‘password‘ => ‘superSecurePass‘,

    ‘tables‘ => array(

        ‘global_query_review‘ => ‘fact‘,

        ‘global_query_review_history‘ => ‘dimension‘

    )

);

In addition, the "explain" plugin is enabled by default in the current release and you‘ll need to setup the username and password it uses to an account that has privileges to explain queries on a given schema on a host. For example, if you‘re digesting slow logs that primarily contain queries from the "world" database on db.example.com, you‘ll need to ensure that the user account you put into the following section of the config has the necessary privileges on the "world" database on db.example.com. To do this, scroll down in the sample config to the section containing the plugins configuration and change the ‘user‘ and ‘password‘ parameters to an appropriate account:

$conf[‘plugins‘] = array(
        ...
    ‘explain‘       =>      function ($sample) {
        $conn[‘user‘] = ‘anemometer‘;
        $conn[‘password‘] = ‘superSecurePass‘;
        return $conn;
    },
);

Finally,you can look through

http://10.0.0.5/anemometer/

时间: 2024-10-19 04:08:06

使用Anemometer基于pt-query-digest将MySQL慢查询可视化的相关文章

【转载】 使用Anemometer基于pt-query-digest将MySQL慢查询可视化

原文地址:使用Anemometer基于pt-query-digest将MySQL慢查询可视化 作者:84223932 本文主要介绍使用Anemometer基于pt-query-digest将MySQL慢查询可视化,因为网上资料相对较少,且都是英文的,遇到报错也没有相关的参考资料,因此写此文. 欢迎转载,请注明作者.出处. 作者:张正 blog:http://space.itpub.net/26355921 QQ:176036317 如有疑问,欢迎联系. 准备条件:1.MySQL开启慢查询 2.安

Anemometer基于pt-query-digest将MySQL慢查询可视化

参考文章: http://ourmysql.com/archives/1359?utm_source=tuicool&utm_medium=referral 官方:https://github.com/box/Anemometer 单节点Anemometer监控 1 安装anemometer # cd /data/www/web3 # git clone https://github.com/box/Anemometer.gitanemometer && cd anemometer

十分钟部署Anemometer作为Mysql慢查询可视化系统

前言 采用Anemometer将Mysql慢查询日志可视化,可以更便捷的查询慢查询日志,并根据时间戳进行历史查询.如下是单机版Anemometer部署的演示,实际应用中,为安全起见,建议把anemometer 分开到另外的机器上. 工作原理 Anemometer: 实现日志可视化 pt-query-digest :抽取慢查询日志 环境信息 Ip 功能 软件信息 安装路径 操作系统 192.168.9.11 http服务 httpd-2.2.15-54 yum缺省路径 centos6.9 慢查询日

Anemometer和pt-query-digest结合将MySQL慢查询可视化

pt-query-digest虽然功能强大, 但毕竟没有web界面显示的直观,我们可以借助Anemometer作为pt-query-digest执行结果的显示端,Anemometer是专门为mysql的慢查询开发的一款开源软件,地址在http://www.oschina.net/p/anemometer 一.安装LAMP环境 1,安装 yum install httpd php *bcmath* *mysqli* -y 2,查看 [[email protected] ~]# rpm -qa|gr

Anemometer+Percona Toolki实现MySQL慢查询日志可视化功能

最近发现了一个挺好用的MySQL慢查询日志可视化的工具,网上也能找到很多资料,在这里结合自己的实际情况重新整理一下. 1. 实验环境 1.1 系统环境: 操作系统:CentOS 6.5 64位 主机地址:10.0.0.26 主机名:mysql01 mysql版本:mysql-5.6.36 1.2 可视化软件环境: http环境:LAMP 可视化软件:Anemometer-master.zip, percona-toolkit-3.0.11-1.el6.x86_64.rpm, perl-TermR

Advanced Installer 11.9基于IIS打包札记(For MySQL)

原文:Advanced Installer 11.9基于IIS打包札记(For MySQL) Mysql免安装前期部署 下载绿色命令行版本的mysql,将其放入到发布的程序发布包内,执行Update批处理,输入自定义端口号,选一个不冲突的数字,比如3310: 运行scripts启动mysql服务 准备好数据库sql脚本,并且用navcat连接后新建一个空的数据库 打开命令行窗口,进入到mysql的bin目录 首先连接mysql,运行命令语句mysql -P3310 -uroot -p --def

Linux下基于源码方式安装MySQL 5.6

MySQL为开源数据库,因此可以基于源码实现安装.基于源码安装有更多的灵活性.也就是说我们可以针对自己的硬件平台选用合适的编译器来优化编译后的二进制代码,根据不同的软件平台环境调整相关的编译参数,选择自身需要选择不同的安装组件,设定需要的字符集等等一些可以根据特定应用场景所作的各种调整.本文描述了如何在源码方式下安装MySQL. 1.安装环境及介质#安装环境SZDB:~ # cat /etc/issueWelcome to SUSE Linux Enterprise Server 10 SP3

基于Corosync + Pacemaker+DRBD实现MySQL高可用集群

前言 在众多的高可用集群解决方案中,除了Heartbeat之外,Corosync也能提供类似于Heartbeat一样的功能,而且目前RedHat官方提供的高可用集群解决方案的程序包都以Corosync为主,所以在未来的日子Corosync会逐渐取代Heartbeat.本文带来的是基于Corosync + Pacemaker+DRBD的MySQL高可用集群解决方案. 相关介绍 Corosync Corosync是从OpenAIS中分支出来的一个项目,它在传递信息的时候可以通过一个简单的配置文件来定

基于binlog二进制日志的MySQL恢复笔记

基于binlog二进制日志的MySQL恢复笔记 刚好复习到这里,顺手做个小实验,记录下. 总的操作流程: step0.关掉数据库的对外访问[防止用户操作继续写入这个库] step1.mysqlbinlog 导出相关时间段数据库的二进制日志 step2.编辑today.sql找到误操作的那几条数据,删除并保存. step3.执行全备份恢复 mysql -e 'source /root/backup.sql;' step4.用二进制日志恢复今天的修改  mysql -e 'source /root/