微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

Mysql必读深入探寻mysql自增列导致主键重复问题的原因

MysqL必读深入探寻MysqL自增列导致主键重复问题的原因》要点:
本文介绍了MysqL必读深入探寻MysqL自增列导致主键重复问题的原因,希望对您有用。如果有疑问,可以联系我们。

废话少说,进入正题.MysqL教程

     拿到问题后,首先查看现场,发现问题表的中记录的最大值比自增列的值要大,那么很明显,当有记录进行插入时,自增列产生的值就有可能与已有的记录主键冲突,导致出错.首先想办法解决问题,通过人工调大自增列的值,保证大于表内已有的主键即可,调整后,导数据正常.问题是解决了,接下来要搞清楚问题原因,什么操作导致了这种现象的发生呢?MysqL教程

      这里有一种可能,即业务逻辑包含更新自增主键的代码,由于MysqL的update动作不会同时更新自增列值,若更新主键值比自增列大,也会导致上述现象:记录最大值比自增主键值大.但开发反馈说这张表仅仅存在load data infile操作,不会进行更新主键操作,所以这个解释行不通.继续分析,表中含有唯一约束,会不会和唯一约束有关,线下实验模拟没有重现.后来想想会不会和主备切换有关系,因为前两天做过一次主备切换.于是乎,配合主备环境作了测试,果然和主备切换有关系,一切问题的来源都清晰了.MysqL教程

问题发生的前置条件:MysqL教程

       1.MysqL复制基于row模式MysqL教程

       2.innodb表MysqL教程

       3.表含有自增主键,并且含有唯一约束MysqL教程

       4.load data infile 采用replace into语法插入数据【遇到重复唯一约束,直接覆盖】MysqL教程

问题发生的原理:MysqL教程

        1.主库遇到重复unique约束时,进行replace操作;MysqL教程

        2.replace在主库上面实际变化为delete+insert,但binlog记录的是update;MysqL教程

        3.备库重做update动作,更新主键,但由于update动作不会更新自增列值,导致更新后记录值大于自增列值MysqL教程

问题重现实验:MysqL教程

准备工作MysqL教程

Create table test_autoinc(id int auto_increment,c1 int,c2 varchar(100),primary key(id),unique key(c1));MysqL教程

insert into test_autoinc(c1,c2) values(1,'abc');MysqL教程

insert into test_autoinc(c1,c2) values(2,c2) values(3,'abcdd');MysqL教程

insert into test_autoinc(c1,c2) values(4,c2) values(5,'abcdd');MysqL教程

1MysqL教程

操作MysqL教程

备注MysqL教程

MasterMysqL教程

slaveMysqL教程

2MysqL教程

查看自增列值MysqL教程

Show create tableMysqL教程

test_autoinc\GMysqL教程

插入5条记录后,自增列值变为6MysqL教程

CREATE TABLE `test_autoinc` (MysqL教程

  `id` int(11) NOT NULL AUTO_INCREMENT,MysqL教程

  `c1` int(11) DEFAULT NULL,MysqL教程

  `c2` varchar(100) DEFAULT NULL,MysqL教程

  PRIMARY KEY (`id`),MysqL教程

  UNIQUE KEY `c1` (`c1`)MysqL教程

) ENGINE=InnoDBAUTO_INCREMENT=6DEFAULT CHARSET=utf8

MysqL教程

CREATE TABLE `test_autoinc` (MysqL教程

  `id` int(11) NOT NULL AUTO_INCREMENT,0); padding-top: 0px">AUTO_INCREMENT=6DEFAULT CHARSET=utf8MysqL教程

 MysqL教程

3MysqL教程

查看表数据MysqL教程

 MysqL教程

id | c1   | c2  MysqL教程

---+------+------MysqL教程

 1 |    1 | abc MysqL教程

 2 |    2 | abc MysqL教程

 3 |    3 | abcddMysqL教程

 4 |    4 | abcddMysqL教程

 5 |    5 | abcddMysqL教程

id | c1   | c2  MysqL教程

---+------+------MysqL教程

 1 |    1 | abc MysqL教程

 2 |    2 | abc MysqL教程

 3 |    3 | abcddMysqL教程

 4 |    4 | abcddMysqL教程

 5 |    5 | abcddMysqL教程

4MysqL教程

查看binlog位置MysqL教程

show master status\GMysqL教程

记录当前binlog位点,MysqL教程

后续可以查看replace动作产生的binlog事件MysqL教程

MysqL-bin.000038MysqL教程

59242888MysqL教程

 MysqL教程

5MysqL教程

replace操作MysqL教程

replace into test_autoinc(c1,'eeee');MysqL教程

影响两条记录,主库replace=MysqL教程

delete+insertMysqL教程

 MysqL教程

Query OK, 2 rows affectedMysqL教程

(0.00 sec)MysqL教程

 MysqL教程

 MysqL教程

 MysqL教程

6MysqL教程

查看表数据MysqL教程

 MysqL教程

id | c1   | c2   MysqL教程

---+------+-------MysqL教程

 1 |    1 | abc  MysqL教程

 3 |    3 | abcddMysqL教程

 4 |    4 | abcddMysqL教程

 5 |    5 | abcddMysqL教程

 6 |    2 | eeee MysqL教程

id | c1   | c2   MysqL教程

---+------+-------MysqL教程

 1 |    1 | abc  MysqL教程

 3 |    3 | abcddMysqL教程

 4 |    4 | abcddMysqL教程

 5 |    5 | abcddMysqL教程

 6 |    2 | eeee MysqL教程

7MysqL教程

查看binlog事件MysqL教程

show binlog events in 'MysqL-bin.000038' from 59242888;MysqL教程

也可以通过MysqLbinlog工具分析日志,查询从库执行的update语句MysqL教程

Pos      | Event_type   MysqL教程

---------+---------------MysqL教程

59242888 | Query        MysqL教程

59242957 | Table_map    MysqL教程

59243013 |Update_rows_v1MysqL教程

59243072 | Xid          MysqL教程

 MysqL教程

8MysqL教程

查看自增列值MysqL教程

Show create tableMysqL教程

此时master的自增列为7,而slave的自增列为6,与表内最大值相同MysqL教程

CREATE TABLE `test_autoinc` (MysqL教程

  `id` int(11) NOT NULL AUTO_INCREMENT,0); padding-top: 0px">AUTO_INCREMENT=7MysqL教程

CREATE TABLE `test_autoinc` (MysqL教程

  `id` int(11) NOT NULL AUTO_INCREMENT,0); padding-top: 0px">AUTO_INCREMENT=6MysqL教程

经过第8步操作后,若发生主备切换,slave提供服务,此时通过自增列插入主键6的记录,就会发生主键冲突.MysqL教程

     如何解决这个bug?对于replace操作,生成binlog时也生成delete和insert两个事件而非一个update事件;或者在执行update更新主键的同时也更新自增列值.当然了,这个只是纯原理分析,具体采用什么方法解这个问题,要根据MysqL内部的实现,避免引入新的问题.这个bug我同事已经提交到社区,http://bugs.MysqL.com/73563,大家可以看看.MysqL教程

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐