MySQL性能剖析工具(pt-query-digest)
这个工具同样来自percona-toolkit该工具集合的其他工具MySQL Slave异常关机的处理 (pt-slave-restart)http://blog.itpub.net/29254281/viewspace-1183545/验证MySQL主从一致性(pt-table-checksum&pt-table-sync)http://blog.itpub.net/29254281/viewspace-1208415/它可以剖析各种日志,从而分析性能问题包括1.慢日...
脚本监控MySQL服务器
http://blog.itpub.net/29254281/viewspace-1203311/使用Redis监控的方式,监控MySQL服务器#! /bin/bash#告警条件:#磁盘使用率超过70%#内存使用率超过50%#CPU使用率超过700%(服务器是24核心的)#空闲线程小于50#出现错误或者警告日志...
验证MySQL主从一致性(pt-table-checksum&pt-table-sync)
percona-toolkit-2.2.8-1.noarch.rpm有两个工具可以验证MySQL主从数据的一致性安装tookkit需要一些依赖包yum install perl perl-DBI perl-DBD-MySQL perl-IO-Socket-SSL perl-Time-HiRes -y实验环境在Master上初始化实验数据create database mvbox;use mvbox;create ...
TPCC-MySQL基准测试
TPCC-MySQL是Percona公司研发的基准测试工具。下载TPCC-MySQLyum install bzr -y bzr branch lp:~percona-dev/perconatools/tpcc-mysql 下载之后可以看到tpcc-mysql目录进入这个目录下的src目录,执行make在上层目录中,可以看到已经有了tpcc_load tpcc_start命令如果有如下错误,则...
MySQL导入导出平面文件
MySQL可以非常方便的导入导出平面文件。测试如下.导出为平面文件select * from t1 into outfile 'F:/backup.sql' FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' LINES TERMINATED BY '\n'; 平面文件如下: 1,"u1" &nbs...
MySQL Slave异常关机的处理 (pt-slave-restart)
http://blog.itpub.net/29254281/viewspace-1181865/MySQL Slave异常关机的处理除了上面的三个方法。还可以使用percona-toolkit的pt-slave-restart命令。percona-toolkit-2.2.8-1.noarch.rpm 需要安装一些依赖包。yum install perl perl-DBI perl-DBD-MySQL perl-IO-Socket-SSL perl-Time-HiRes 模拟...
MySQL Slave异常关机的处理
生产环境有一个MySQL的Master-Slave的复制。前一阵子机房网络升级,但是考虑到一般网络故障恢复之后,只需要start slave即可所以没有做任何的处理。但是第二天上班的时候,在Slave数据库上输入命令,start slave 不能重新启动复制。模拟环境如下在Slave上启动复制,报错如下复制过程出现主键重复了最后,使用statu...
MySQL binary 区分大小写
坑爹,绝对的坑爹MySQL居然不区分大小写??我开始差点以为眼花了再做个查询..这是神马结果啊可以使用binary将字符串先转换为二进制字符串,在进行比较加上binary,终于正常了。
MySQL lastIndexOf
MySQL貌似没有lastIndexOf函数,可以使用如下的方法SELECT REVERSE(LEFT(REVERSE(filename),INSTR(REVERSE(filename),'.')))转载自:http://www.ethanpad.com/2010/11/lastindexof-truncate-in-mysql/
MySQL Join Buffer
MySQL采用嵌套循环连接的算法假设驱动表10条记录,被驱动表100条记录,而被驱动表的连接字段没有创建索引,这样被驱动表会被扫描10次。Join Buffer 我理解就是 不直接扫描被驱动表,而是缓存下来,假设缓存了驱动表的10条记录,最终只需要全表扫描一次被驱动表,就可以得到结果了。参考:http://hidba.org/?p=300htt...
MySQL Handler变量解析
To see the effect of a query do the following steps:FLUSH STATUS;Execute the querySHOW SESSION STATUS LIKE 'handler_read%';Do an EXPLAIN of the query实验数据初始化:CREATE TABLE test ( id INT UNSIGNED NOT NULL AUTO_INCREMENT PRIMARY KEY&nb...
Waiting for table阻塞查询的问题
今天看了一个案例,自己在备库上做了一下。确实会引起很多问题。1.一些慢SQL在运行2.一个终端发出了flush tables命令3.很多查询都被阻塞了假设有两个慢SQL正在运行,这时发出的flush tables命令被阻塞,但是后续的查询重新打开表,前提条件是所有的线程关闭表,但是慢SQL还在运行。步骤1阻塞了步骤二,步骤二导致步骤...
清除MySQL Binlog日志
MySQL的binlog日志相当于Oracle的归档日志,在通过Xtrabackup进行备份之后,就可以删除了。可以设置expire-logs-days参数。备份一般都是通过Linux调度脚本。所以,可以在脚本中增加清除日志的命令。在备份完成之后,即刻删除binlog.系统运行时,积累了很多binlog日志备份之后,可以删除前一天的日志参考:http:/...
MySQL优化表和分析表
MySQL的优化表相当于数据文件收缩和索引分析系统经过一段时间的运行,数据文件会产生很多碎片,索引的统计信息也可能存在较大误差。MySQL InnoDB的优化表操作,相当于表重建,并分析索引。实验创建一个100W记录的表,删除其中的三分之一其中创建实验表,参考http://blog.itpub.net/29254281/viewspace-1147227/创建之...
[MySql技术]MySQL中information_schema是什么
大家在安装或使用MYSQL时,会发现除了自己安装的数据库以外,还有一个information_schema数据库。 information_schema数据库是做什么用的呢,使用WordPress博客的朋友可能会想,是不是安装模板添加的数据库呀?看完本片文章 后,你就会对information_schema数据库有所了解。information_schema数据库是MySQL自带的,它提供了访问数据库元数据的方式。什么是元数据呢?元数据是关于数据的数据,如数据库名或表名,列的数据类型,或访问权限等。有些时候用于表述该信息的其他术语包括“数据词典”和“系统目录”。在MySQL中,把
MySQL Profile查看SQL的资源使用
MySQL的Profile可以查看SQL的资源使用首先开启Profiling,然后执行SQL语句查看QueryId根据QueryId查看资源消耗还可以查看具体的资源,包括cpu,memory,swaps,context switches,source等
MySQL PreparedStatement
世界上的PreparedStatement有两种一种是PreparedStatement另一种是MySQL的PreparedStatementMySQL版本5.6.14JDBC版本mysql-connector-java-5.1.6-bin.jarMySQL JDBC的PreparedStatement仅仅在JAVA端进行了参数的替换。和Oracle的软解析,软软解析什么的真是一点关系也没有。测试程序如下:public class ...
MySQL使用Batch批量处理
使用MySQL的Batch批量处理,JDBC驱动版本需要5.1.13或以上测试使用的JDBC驱动版本:mysql-connector-java-5.1.30-bin测试表结构如下:CREATE TABLE test ( id int(11) DEFAULT NULL, name varchar(20) DEFAULT NULL) ENGINE=InnoDB 首先使用普通的方式插入100万条数据,使用时间81948毫秒程序如下...
Explain Extended查看MySQL的优化
MySQL版本5.6.14MySQL对于SQL有可能进行查询重写可以使用Explain Extended查看MySQL到底执行的是什么SQLshow warnings显示的结果:SELECT 'share' AS `popularityType`, COUNT(0) AS `popularity`FROM `songod`.`space_av` JOIN `songod`.`space_share`WHERE `songod`.`space_av`.`AVID...
mysql 5.6引入index condition pushdown
5.6引入index condition pushdown,允许在存储引擎层通过索引列提前过滤掉数据,从而减少服务器层访问的数据量,同时也减少存储引擎访问基表的次数;使用ICP可有效降低handler_read_next,explain输出的extra列显示using index condition;可用于innodb和MyISAM,适用于range, ref, eq_ref和ref_or_null,只可用于二级...