不要在存储过程中控制事务
MySQL技术内幕 InnoDB存储引擎 344页.原来看过这段,总而言之,就是MySQL不要在存储过程中控制事务.当时没有仔细看细节,只是记住了一个结论.毕竟都21世纪了.还有用存储过程的?但是..#(×&%¥×&@……&……#@&以如下过程为例.drop table nums; drop procedure pCreateNum...
MySQL订单分库分表多维度查询
MySQL分库分表,一般只能按照一个维度进行查询.以订单表为例, 按照用户ID mod 64 分成 64个数据库.按照用户的维度查询很快,因为最终的查询落在一台服务器上.但是如果按照商户的维度查询,则代价非常高.需要查询全部64台服务器.在分页的情况下,更加恶化.比如某个商户查询第10页的数据(按照订单的创建时间).需要在每...
MySQL追加注释或者大量修改注释
MySQL 5.6.14之前一个项目比较仓促,开发给的建表语句没有注释.现在要补全注释信息.但是MySQL后期追加注释比较麻烦需要使用modify语法。只要不小心写错一点,就可能导致表结构的变更,而不是注释的变更.实验表如下:create table t( c1 int prim...
InnoDB全文索引:N-gram Parser
http://dev.mysql.com/doc/refman/5.7/en/innodb-fulltext-index.htmlInnoDB默认的全文索引parser非常合适于Latin,因为Latin是通过空格来分词的。但对于像中文,日文和韩文来说,没有这样的分隔符。一个词可以由多个字来组成,所以我们需要用不同的方式来处理。在MySQL 5.7.6中我们能使用一个新的全文索引插件来处理它...
MySQL Fabric is awesome
I’m fascinated about MySQL Fabric. After hours of study and test, I would say it is the best framework, hands down. Over the years, there are loads of MySQL HA products, like MHA andMMM. There is a host of sharding solutions as well, such as Twitter’s Gizzard and Google’s&nb...
MySQL的SSL加密连接与性能开销
Contents [hide]1 前言2 何为SSL3 MySQL 5.7的SSL配置与使用4 SSL性能测试5 总结前言在生产环境下,安全总是无法忽视的问题,数据库安全则是重中之重,因为所有的数据都存放在数据库中。MySQL在5.7版本之前对于安全问...
MySQL5.6 GTID新特性实践
转载自:http://cenalulu.github.io/mysql/mysql-5-6-gtid-basic/GTID简介什么是GTIDGTID(Global Transaction ID)是对于一个已提交事务的编号,并且是一个全局唯一的编号。GTID实际上是由UUID+TID组成的。其中UUID是一个MySQL实例的唯一标识。TID代表了该实例上已经提交的事务数量,并且随着事务提交单调递增...
58同城数据库架构学习
上周六去听upyun的技术分享.其中非常受用的是沈剑老师分享的58同城数据库架构.58同城都是服务化架构.他们主要的架构如下.他们每个构建,或者说服务,都是由两个双向同步的数据库和一个redis缓存组成.一般来说,保障数据库读能力的高可用比较简单,多搭建几个Slave即可.但是M-S架构有同步延迟的问题.但是保障数据库写能...
开始学习调试MySQL
上周参加Oracle技术嘉年华 2015收获非常大.其中吕海波老师分享的内容是 《调试Oracle二三例:调试技术在日常运维中的应用》其中有关于调试MySQL源码的内容.实验如下:下载MySQL 5.7的源码http://cdn.mysql.com//Downloads/MySQL-5.7/mysql-5.7.9.tar.gz编译,注意增加 DEBUG 选项。(cmake的版本要求在2.8.2以上)...
即时聊天(IM)存储方案
单位即时聊天改版了.正好趁着这次机会踢了MongoDB.大家都拍手叫好..可见MongoDB这玩意多么的不得人心...都觉得不好用..场景描述:我们的IM软件有PC端和手机端.同时在线的用户,通过长连接转发,并且存储消息.接收方不在线,存储消息.用户打开电脑端软件或者手机端网络掉线重新连接,都需要获取未读消息数量.当用户点击未...
MySQL大量数据入库的性能比较(分区)
测试程序还用之前的http://blog.itpub.net/29254281/viewspace-1841299/这次测试,使用的是家里的电脑,性能比单位工作的电脑配置要好一些.MySQL配置innodb_buffer_pool_size=512minnodb_flush_log_at_trx_commit =0sync_binlog=0innodb_support_xa=0log_bin=master版本 5.6.14每次测试,Insert 200w记录.1.使...
MySQL大量数据入库的性能比较
单位IM改版了用户聊天内容要存放在数据库.一般JAVA Insert MySQL有如下几种方式1.自动提交Insert2.事务提交Insert3.批量提交4.使用Load File接口模拟表结构如下create table chat_message( id bigint primary key auto_increment, ...
用命令过滤MySQL慢查询日志
有一台web服务器异常.CPU耗尽导致所有请求阻塞,偶发,一般持续时间5-10分钟.在该时间段,数据库整体负载正常.使用命令查询慢日志.指定某个IP,找到查询时间大于100s,并且显示当时执行的SQLcat slow-log | sed '/\#/{N;N;s/\n//g}' | grep "Query_time: [1-9][0-9]\{2\}\." -n20-bash-4.1$ cat slow-log ...
MySQL回收某一授权
创建测试表create table t1(id int);create table t2(id int);create table t3(id int);create table t4(msg varchar(100));如果授权的时候图省事儿,使用通配符授权.grant select,insert,update,delete on mvbox.* to 'xx'@'localhost' identified by 'xx';如果以后需要回收某一张表权限的时候,就会比较麻烦.m...
数据库在线迁移的设想
在分布式数据库的环境下,应该经常有数据库迁移的事情.一个基于库的数据库在线迁移.先做一个mysqldump到目标机,因为这个过程很长,完成之后,不断追这段时间的binlog然后,停止应用服务器,应用最后一段binlog最后手工检查数据一致性.这个只是相关的想法,脚本未经过测试.不能用于生产环境.#/bin/bash...
MySQL分库分表
MySQL处理大规模业务数据的方案一般都是分库分表.最开始一般都选择垂直拆分.比如电商网站,可能按照家电,图书,母婴等商品分类进行拆分.这样做的好处是拆分简单,并且没有破坏数据库事务.但是随着业务的增长,比如图书分类的订单数据表已经到达了10个T的规模.就需要考虑做水平拆分了.把逻辑上一个表的数据,分别存放到不...
【MySQL】online ddl 工具之pt-online-schema-change
MySQL ddl 的问题现状在运维mysql数据库时,我们总会对数据表进行ddl 变更,修改添加字段或者索引,对于mysql 而已,ddl 显然是一个令所有MySQL dba 诟病的一个功能,因为在MySQL中在对表进行ddl时,会锁表,当表比...
实现秒杀的几个想法(续)
<span style="color:#003399;font-family:'Courier New';"><span style="font-size:16px;">还是秒杀.</span></span><br /><span style="color:#003399;font-family:'Courier New';"><span style="font-size:16px;">秒杀一般有几个场景</span></span><br /><span style="color:#003399;font-family:'Courier New';"><span ...
两种丢失更新
<span style="font-family:Courier New;"><span style="font-size:16px;"><span style="color:#003399;">假设t表是库存表,quantity表示剩余数量<br /><div id="codeText" class="codeText"><ol style="margin:0 1px 0 0;padding:5px 0pt;" start="1" class="dp-css none_number"><li><span style="color:#000000;...
微博feed系统的推(push)模式和拉(pull)模式和时间分区拉模式架构探讨
<span style="font-family:Courier New;"><span style="font-size:16px;"><span style="color:#003399;">转载自:<br />http://www.cnblogs.com/sunli/archive/2010/08/24/twitter_feeds_push_pull.html<br /><br /><br /></span></span></span>...