ITPub博客

首页 > 数据库 > 数据库开发技术 > MySQL 8 新特性之自增主键的持久化

MySQL 8 新特性之自增主键的持久化

原创 数据库开发技术 作者:MySQL实战 时间:2018-05-24 21:08:37 0 删除 编辑

代码可左右滑动,PC端显示会不太友好,建议在手机上阅读。

自增主键没有持久化是个比较早的bug,这点从其在官方bug网站的id号也可看出(https://bugs.mysql.com/bug.php?id=199)。由Peter Zaitsev(现Percona CEO)于2003年提出。历史悠久且臭名昭著。

首先,直观的重现下

  1. mysql> create table t1(id int auto_increment primary key);

  2. Query OK, 0 rows affected (0.01 sec)

  3. mysql> insert into t1 values(null),(null),(null);

  4. Query OK, 3 rows affected (0.01 sec)

  5. Records: 3  Duplicates: 0  Warnings: 0

  6. mysql> select * from t1;

  7. +----+

  8. | id |

  9. +----+

  10. |  1 |

  11. |  2 |

  12. |  3 |

  13. +----+

  14. 3 rows in set (0.00 sec)

  15. mysql> delete from t1 where id=3;

  16. Query OK, 1 row affected (0.36 sec)

  17. mysql> insert into t1 values(null);

  18. Query OK, 1 row affected (0.35 sec)

  19. mysql> select * from t1;

  20. +----+

  21. | id |

  22. +----+

  23. |  1 |

  24. |  2 |

  25. |  4 |

  26. +----+

  27. 3 rows in set (0.01 sec)

虽然id为3的记录删除了,但再次插入null值时,并没有重用被删除的3,而是分配了4。

删除id为4的记录,重启数据库,重新插入一个null值。

  1. mysql> delete from t1 where id=4;

  2. # service mysqld restart

  3. mysql> insert into t1 values(null);

  4. Query OK, 1 row affected (0.00 sec)

  5. mysql> select * from t1;

  6. +----+

  7. | id |

  8. +----+

  9. |  1 |

  10. |  2 |

  11. |  3 |

  12. +----+

  13. 3 rows in set (0.00 sec)

可以看到,新插入的null值分配的是3,按照重启前的操作逻辑,此处应该分配5啊。

这就是自增主键没有持久化的bug。究其原因,在于自增主键的分配,是由InnoDB数据字典内部一个计数器来决定的,而该计数器只在内存中维护,并不会持久化到磁盘中。当数据库重启时,该计数器会通过下面这种方式初始化。

  1. SELECT MAX(ai_col) FROM table_name FOR UPDATE;

MySQL 8.0的解决思路

将自增主键的计数器持久化到redo log中。每次计数器发生改变,都会将其写入到redo log中。如果数据库发生重启,InnoDB会根据redo log中的计数器信息来初始化其内存值。为了尽量减小对系统性能的影响,计数器写入到redo log中,并不会马上刷新。具体可参考:https://dev.mysql.com/worklog/task/?id=6204

因自增主键没有持久化而出现问题的常见场景:

  1.  业务将自增主键作为业务主键,同时,业务上又要求主键不能重复。

  2.  数据会被归档。在归档的过程中有可能会产生主键冲突。

所以,强烈建议不要使用自增主键作为业务主键。刨除这两个场景,其实,自增主键没有持久化的问题并不是很大,远没有想象中的”臭名昭著“。

解决方案

创建一个存储过程,根据table2(归档表)自增主键的最大值来初始化table1(在线表)。这个存储过程可放到init_file参数指定的文件中,该文件中的SQL会在数据库启动时执行。

  1. DELIMITER ;;

  2. CREATE PROCEDURE `auto_increment_fromtable2`(IN table1 VARCHAR(255), IN table2 VARCHAR(255))

  3. BEGIN

  4. set @qry = concat('SELECT @max1 := (`id` + 1) FROM `',table1,'` ORDER BY `id` DESC LIMIT 1;');

  5.    prepare stmt from @qry;

  6. execute stmt;

  7. deallocate prepare stmt;

  8.    set @qry = concat('SELECT @max2 := (`id` + 1) FROM `',table2,'` ORDER BY `id` DESC LIMIT 1;');

  9.    prepare stmt from @qry;

  10. execute stmt;

  11. deallocate prepare stmt;

  12. IF @max1 < @max2 THEN

  13.    set @qry = concat('alter table `',table1,'` auto_increment=',@max2);prepare stmt from @qry;execute stmt;deallocate prepare stmt;

  14. SELECT 'updated' as `status`;

  15. else

  16. SELECT 'no update needed' as `status`;

  17. END IF;

  18. END ;;

  19. DELIMITER ;

欢迎阅读"MySQL 8 新特性"的其它文章

  MySQL 8 新特性之Invisible Indexes

  MySQL 8 新特性之持久化全局变量的修改

  MySQL 8 新特性之降序索引


原文作者:MySQL实战;如有侵权,请联系管理员删除。

请登录后发表评论 登录
全部评论
陈臣,《MySQL实战》作者

注册时间:2024-01-02

  • 博文量
    51
  • 访问量
    30416