MySQL位图索引解决用户画像问题(简化创建流程)
基于前文,创建索引的时候有一个问题每个bigint类型包括60个记录的位信息.但是第0位表示第六十个记录的位第1位至第59位表示第一至五十九的记录的位信息.这样记录的位信息保存并不连续,使用的时候还得把最右边的一位挪到最左边,不好理解还非常麻烦,性能也有损耗.经过王工的改良,使用如下sql替换,则保存的位信息就连续了 SELECT &n
MySQL自定义变量实现row_number分析函数的天坑
MySQL查询数据库中没有主键的表
select table_schema,table_name from information_schema.tables where (table_schema,table_name) not in( select distinct table_schema,table_name from information_schema.columns where COLUMN_KEY='PRI' )and t...
分析索引是否有效
索引的选择性低,效果就多少有些折扣索引是否有效,是否应该创建,需要具体情况具体分析.大表的低CARDINALITY值索引,需要引起注意.下面是 低选择性索引的查询select t2.*,t1.table_rows,round(t2.CARDINALITY/t1.table_rows,2) seletivity inner select table_schema,table_name,i...
MySQL REPLACE死锁问题深入剖析
https://mp.weixin.qq.com/s?__biz=MjM5MjIxNDA4NA==&mid=2649738284&idx=1&sn=ef02227375e485340bbcd7d2df45c680&chksm=beb2d10789c55811115dc9ba44f39dbeebf7dc837df346a2e62a7acc1a33de0f0fcf912695c8&mpshare=1&scene=23&srcid=07287BusnAcnbD33aGP2d5sP#rd
MySQL存储过程使用if子查询判断需要注意
MySQL存储过程环境 5.6.14drop procedure if exists p;DELIMITER $$CREATE PROCEDURE `p` ()BEGIN start transaction; if(select 10 from dual where 1=1 < 5 ) then &nb...
MySQL过程真要慎用if not exists写法
接前文http://blog.itpub.net/29254281/viewspace-2133936/除了前文提到的问题,今天还发现了MySQL 过程 if not exists 的另外一个问题.https://bugs.mysql.com/bug.php?id=85431版本 5.6.14环境CREATE TABLE `t1` ( `id` int(11) NOT NULL, `batchid` int(11) DEFAULT NULL, `state` int(11...
可重复读引起的问题一则
这是群友公司的一个问题模拟环境如下
MySQL多个timestamp字段自动添加默认值的问题
http://www.cnblogs.com/yjf512/archive/2012/11/02/2751058.htmltimestamp设置随着表变化而自动更新是ON UPDATE CURRENT_TIMESTAMP但是由于一个表中至多只能有一个字段设置CURRENT_TIMESTAMP 1234...
MySQL过程报 Parameter number N is not an OUT parameter错误
坑,绝对的大坑今天上线新模块,昨天测试通过的代码,居然在线上报错.报错信息模拟如下:纳尼?第一反应是程序哪里写错了大家查了一上午,问题依旧,毫无头绪.后来居然被本猫发现了问题(颇自豪啊)这个其实是权限不足导致的.模拟问题如下:已经存在一个用户,对mvbox库下的表,有Insert,update,select权限.grant select...
MySQL过程慎用if not exists写法
接前文http://blog.itpub.net/29254281/viewspace-2133705/环境MySQL 5.6.14事务隔离级别 读提交事务的开启和结束由JAVA程序控制.上次报死锁的过程,抽象如下delimitr $$CREATE PROCEDURE `test_proc`( pid int)begin &n...
并发插入引起的死锁问题排查
2017大年初一晚上,线上报死锁了..大家挂着VPN排查问题,也是有点意思.不过当时并没有排查出原因上班之后,发现是客户端的一个bug.本来应该发送一个请求,但是却发送了大量的请求,应用层面又没有做幂等设计,所以所有的请求都落到了数据库层面。数据库是一个过程环境MySQL 5.6.14事务隔离级别 读提交引起问题的逻辑大...
主键自增,Insert为0的记录导致数据混乱
牙疼不是病,疼起来真要命.环境.MySQL 5.6.14SQL_Mode:STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION生产环境 配置表,设置主键为自增.一天某同学让我帮忙从测试导一批数据到生产.虽然我对这种方式深恶痛绝,但是没有办法..也只能照做.导入之后的第二天,业务发现很多生产数据错乱了。这个礼物的配置表,主键原本设计成...
MySQL内存使用
转载自:http://dev.mysql.com/doc/refman/5.6/en/memory-use.html#!/bin/shmysql -e "show variables; show status" | awk '{VAR[$1]=$2}END {MAX_CONN = VAR["max_connections"]MAX_USED_CONN = VAR["Max_used_connections"]...
MySQL大量使用swap文件
现象: 一台高配的MySQL数据库服务器,双CPU48线程. CentOS 7 本机磁盘是一万五千转的Raid 0.系统文件,Swap都分配在了本机磁盘. 服务器挂载了一个SSD的磁盘阵列.数据库文件都存放在磁盘阵列中. 系统运行之后,发现系统Swap大...
MySQL游标和异常处理
MySQL存储过程的declare声明变量必须放在最前面复杂异常处理drop user; TABLE `bigint(20) NULL '0', `balance` DEFAULT varchar(32) NULL, KEY (`userid`) ) ENGINE=I...
MySQL存储过程
最终一致性落地实践
http://blog.itpub.net/29254281/viewspace-1819422/单位最近赶工,要做一款直播APP本来关于后端,我建议了很多设计包括1.应用Redis键空间/事件通知功能,做两级缓存(Redis,JVM)2.Redis读写分离.(这个很好做,但是单位大部分项目,还是没有这么用.主要是访问量还是低)3.单线程处理并发控制4.最终一致性分库设计.5.系统...
敏感帐号防DBA篡改设计
帐号余额表,里面一般都有明文的帐号余额.如果应用程序没有针对性设计,则DBA可以随意篡改.模拟帐号表.create table user( userid bigint, balance int, checksum varchar(32));模拟JAVA程序,这个加密的过程,是JAVA程序中处理的.创建帐号,...
MySQL异常处理
针对存储过程 、触发器或函数内部语句可能发生的错误或警告信息,需要进行相关异常或称 例外的捕捉,然后作出相应的处理,异常处理的方式如下:DECLARE {CONTINUE | EXIT} HANDLER FOR {SQLSTATE sqlstate_code| MySQL error code| condition_name} handler_actions说明:· Handler type (CON...