MySQLDump关于single-transaction和master-data的一个细节.
前文的一个细节http://blog.itpub.net/29254281/viewspace-1392757/
缓解MySQL写入压力和主从延迟的尝试
<span style="font-family:Courier New;"><span style="font-size:16px;"><span style="color:#003399;">最近单位需要用MySQL存放大量的日志数据.<br />写入压力很大,并且有很大的主从延迟.<br /><br />具体环境如下<br />MySQL 5.6.14<br />服务器(单CPU,6核心,12线程 32G内存)<br />服务器硬盘(共33T,Raid5)<br />...
Xtrabackup备份到远程服务器
1.配置SSH密钥认证ssh-keygenssh-copy-id -i root@127.0.0.12.备份并传输innobackupex --user root --password "root" --port 30000 --defaults-file=/home/mysql/mysql-5.6.14/my...
MySQL两种不完全恢复的方法
MySQL 5.6.14生产环境凌晨3点的备份,不完全恢复到中午12点.(xtrabackup_binlog_pos_innodb的内容是mysql-bin.0069463784607)第一种方式:mysqlbinlog1.找到需要恢复的binlog进入binlog目录,执行ll | awk '{print $9}' > /tmp/binlog.index然后修改/tmp/binlog.index文件,删除不需要恢复的文件名.2.解析binlog...
MySQL分区表
MySQL分区表1.Range分区最常用的一种分区方式比如按照日期进行分区CREATE TABLE award_gift_record ( `ID` int(11) NOT NULL AUTO_INCREMENT COMMENT 'ID', `NickName` varchar(100) NOT NULL DEFAULT '', `AwardGiftID` int(11) NOT NULL DEFAULT '-1' COMMENT '礼物ID', `ActionTime` t...
关于不完全恢复的一些思考
还是有感于ITPUB上次丢失一天数据的问题.记得当时是一片冷嘲热讽我也很奇怪,一个关于数据库的论坛,为什么没有进行不完全恢复.直到今天我在集中备份服务器上测试了一下恢复.我发现当时itpub的dba可能也有相当的苦衷.如果这种事情发生在我们公司,如何恢复还确实是需要权衡的一件事情.我先恢复了一个凌晨3点生产数据库...
MySQL表空间传输
MySQL(5.6.6及以上)也支持表空间传输了当然,innodb_file_per_table是一定要开启的表空间传输可以很方便的将一个表或者多个表,从一个数据库实例导入到另一个数据库实例.在数据恢复和数据迁移的时候,非常有用,尤其是数据量很大的表.相对于mysqldump,表空间传输的方式更快,更灵活.使用表空间传输有两种方式1.MySQL原生...
MySQL用随机数据填充表
先创建数字辅助表create table nums(id int not null primary key);delimiter $$create procedure pCreateNums(cnt int)begin declare s int default 1; truncat...
MySQL压缩表的一种应用
1.设置服务器参数innodb_file_per_table=ONinnodb_file_format=Barracuda2.创建表或者修改表参数alter table sod_song_log_2014_10_12 row_format=compressed key_block_size=8;业务系统都有很多日志数据,超过半年一年可以做离线处理,但是不能删除(老板说以后要做数据挖掘)这时候可以单独启动一个实例,作为集中日...
MySQL innodb_table_stats表不存在的解决方法
MySQL 版本 5.6.14公司有几台MySQL服务器的错误日志显示,有几个系统表不存在.innodb_table_statsinnodb_index_statsslave_master_infoslave_relay_log_infoslave_worker_info这是因为数据库初始化的时候,dba可能删除过ibdata1文件虽然重启之后,数据库会自动创建一个ibdata1文件,但是上述系统表也是innodb引擎,所...
固态硬盘基准测试
今天在单位做了一个关于SSD的基准测试.环境MySQL 5.6.14 全部使用默认参数(innodb_buffer_pool_size 128M)机械硬盘一万五千转,Raid10SSD硬盘,Raid10测试一,sysbench 随机IO测试使用100个文件,共80G空间.50并发线程.1000000 IO请求命令如下./sysbench --test=fileio --file-num=100 --file-total-size=80G prepar...
MySQL查询阻塞语句
select r.trx_id waiting_trx_id, r.trx_mysql_thread_Id waiting_thread, r.trx_query waiting_query, b.trx_id blocking_trx_id, b.trx_mysql_thread_id blocking_thread, b.trx_query blocking_query from information_schema.innodb_lock_waits...
MySQL自定义变量执行顺序
高性能MySQL 248页关于书中 MySQL自定义变量 确定取值顺序的一些实验和猜测.并不能保证正确.实验数据,test表 a是主键,b字段没有任何索引.CREATE TABLE test ( a int(11) NOT NULL, b int(11) DEFAULT NULL, PRIMARY KEY (a)) ENGINE=InnoDB;INSERT INTO test VALUES (1,100),(2,20),(3,5),(4...
MySQL自定义变量的三个小技巧
高性能MySQL 244页1.指定表的访问顺序实验数据:user是活跃用户表,user_archived是长时间不活跃的用户表.两个表的结构相同,冷热数据分开.create table user( id int primary key, name varchar(20));create table user_archived( id i...
复制的过滤
二进制日志的过滤高可用MySQL 54页如果binlog_format为Statement,则过程比较复杂.如下图所示.如果binlog_format为row,则没有这么多歧义.中继日志的过滤过滤数据库过滤表
MySQL选用可重复读之前一定要想到的事情(ICP验证和勘误)
前文关于ICP优化的实验貌似有误http://blog.itpub.net/29254281/viewspace-1398273/实验环境select @@optimizer_switch\G@@optimizer_switch: index_merge=on,index_merge_union=on,index_merge_sort_union=on,index_merge_intersection=on,engine_condition_pushdown=on,index_condition_pushdown=on,mrr=on,mrr_co...
在标准MySQL 5.6上查询没有使用过的索引的SQL
select distinct mysql.innodb_index_stats.table_name, mysql.innodb_index_stats.index_namefrom mysql.innodb_index_statswhere concat(mysql.innodb_index_stats.index_name, &nb...
MySQL选用可重复读之前一定要想到的事情(执行计划影响)
大约一年前发现MySQL在可重复读隔离级别下,可能出现全表的排他锁.当时并没有找到一个合理的解释.http://blog.itpub.net/29254281/viewspace-1081634/实验数据和环境CREATE TABLE t ( a int(11) NOT NULL, b int(11) DEFAULT NULL, PRIMARY KEY (a), KEY b (b)) ENGINE=InnoDB;INSERT ...
MySQL选用可重复读之前一定要想到的事情(无索引加锁验证)
之前的实验,提到过一个场景当前读(锁定读)加锁情况. 读提交 可重复读 主键索引 锁定主键索引锁定主键索引唯一索引 锁定唯一索引的值和主键索引的值锁定唯一索引的值和主键索引的值...
MySQL选用可重复读之前一定要想到的事情
MySQL选用可重复读隔离级别之前一定要想到的事情.锁MySQL在使用之前有三个务必要知道..(随着了解的深入这个极有可能再增加..)1.DDL会引起metadata lock,导致请求连环阻塞,甚至是查询请求.http://blog.itpub.net/29254281/viewspace-1383193/2.MySQLDump和XtraBackup的flush table命令会引起waiting for table连环阻...