ITPub博客

首页 > 应用开发 > IT综合 > redis数据丢失你怎么处理?

redis数据丢失你怎么处理?

原创 IT综合 作者:千锋Python唐小强 时间:2020-07-06 17:17:37 0 删除 编辑

1. 两种数据丢失的情况

主备切换的过程,可能导致数据丢失;

1.1. 异步复制导致的数据丢

redis数据丢失你怎么处理?

因为master -> slave的复制是异步的,所以可能有部分数据还没复制到slave,master就宕机了,此时这些部分数据就丢失了

1.2  脑裂 导致的数据丢失

redis数据丢失你怎么处理?

脑裂就是说,某个maser 所在机器突然脱离了正常的网络,跟其他slave机器不能连接,但是实际上master还运行着,此时哨兵可能就会认为master 宕机了,然后开启选举,将其他slave切换成了master,这个时候,集群里面就会有2个master,也就是所谓的脑裂,此时虽然某个slave被切换成了master,但是可能client还没来得及切换到新的master,还继续写向旧master的数据可能也丢失了,因此master再次恢复的时候,会被作为一个slave挂到新的master 上去,自己的数据将会清空,重新从新的master 复制数据

2. 解决异步复制和脑裂数据导致的数据丢失

   # redis.conf 配置

  Min-slaves-to- write 1
  Min-slaves- max-lag 10

上面这两个配置可以减少异步复制和脑裂导致的数据丢失

###2.1 减少异步复制的数据丢失

有了min-slaves-max-lag这个配置,可以确保说,一旦slave复制数据和ack延迟太长,就认为可能master 宕机后损失的数据太多了,那么就拒绝写请求,这样可以吧master宕机时由于部分数据丢失。

2.2 减少脑裂的数据丢失

如果一个master出现了脑裂,跟其他slave丢了连接,那么上面这两个配置可以去确保说,如果不能继续给指定数量的slave发送数据,而且slave超过10秒没有给自己ack消息,那么就直接拒绝客户端的写请求,这样脑裂活的旧master就不会接受client的新数据,也就避免了数据丢失,上面配置确保了,如果跟任何一个slave丢了连接,在10秒后发现没有slave给自己ack,那么就拒绝新的写请求,因此脑裂场景下,最多丢失10秒的数据。


来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/69923331/viewspace-2702801/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2019-05-14

  • 博文量
    995
  • 访问量
    622629