使用cypher和gremlin进行图随机游走
随机游走简介随机游走,又称随机漫步,英文为‘randomwalk’。在wiki上的解释是这样的:Arandomwalkisamathematicalobject,knownasastochasticorrandomprocess,thatdescribesapaththatconsistsofasu
图数据库neo4j存储设计和免索引邻接
简介本文主要介绍neo4j是如何将图数据保存在磁盘上的,采用的是什么存储方式。分析这种存储方式对进行图查询/遍历的影响。图数据库简介生产环境中使用的图数据库主要有2种,分别是带标签的属性图(LabeledPropertyGraph)和资源描述框架RDF(ResourceDescriptionFram
图数据库neo4j数据导入、备份和恢复
在之前的文章中,介绍了如何搭建neo4j集群,集群的故障切换和节点恢复,还介绍了如何配置驱动实现自动failover。本文聚焦在neo4j的数据上。聊聊如何从外部数据源将数据导入neo4j,如何对neo4j数据库进行备份和恢复。数据导入可以有多种方式将数据导入neo4j。大致分为cypher语句导入
MySQL审计插件实现与优化
摘要审计是数据库安全中很重要的一个环节,它能够实时记录数据库的操作记录,帮助数据库管理员对数据库异常行为进行分析审核。目前除了MySQL商业版的审计插件外,还有三种开源的审计插件可以考虑:Percona的审计插件auditlog;MariaDB的审计插件serveraudit;Mcafee的审计插件
DML的flashback相关参数说明 目前支持的参数如下:
上篇介绍了DDL闪回温正湖:InnoSQL/MySQLDDLFlashback功能简介zhuanlan.zhihu.com本篇继续介绍DML闪回,相信大家已经比较熟悉。为了使用起来更加方便,我们结合RDS使用需求进一步更加了一些参数。DMLfashback原理目前DMLflashback功能集成于官
MySQL审计插件实现与优化
摘要审计是数据库安全中很重要的一个环节,它能够实时记录数据库的操作记录,帮助数据库管理员对数据库异常行为进行分析审核。目前除了MySQL商业版的审计插件外,还有三种开源的审计插件可以考虑:Percona的审计插件auditlog;MariaDB的审计插件serveraudit;Mcafee的审计插件
MyRocks在XA事务场景的使用和优化-3
所属系列:上:https://zhuanlan.zhihu.com/p/70594302中:https://zhuanlan.zhihu.com/p/70594699下:https://zhuanlan.zhihu.com/p/70595011无法shutdown问题前面提到MyRocks在使用my
图数据库neo4j因果集群技术分析
本文主要介绍如何搭建一个neo4j高可用集群,往集群中动态添加neo4节点,节点的故障恢复。介绍如何进行事务操作和驱动配置来在节点故障,尤其是neo4j主节点(raftleader,写服务)故障时,尽可能减小对业务的影响。neo4jraft集群这里所说的neo4jraft集群是指neo4j企业版的因
当前MySQL只读实例方案及存在的问题
笔者在工作中申请了几篇技术专利,主要是在MySQL学习和使用过程中的一些方案优化。计划将交底书中的“当前方案和问题”章节的内容作为一个系列在专栏中记录。本文是这个系列的第一篇,交底书原名“一种基于数据延迟智能控制的MySQL读写分离实现方案”,但申请过技术专利的同学都知道,被专利代理人更改过的专利名
当前MySQL只读实例方案及存在的问题
笔者在工作中申请了几篇技术专利,主要是在MySQL学习和使用过程中的一些方案优化。计划将交底书中的“当前方案和问题”章节的内容作为一个系列在专栏中记录。本文是这个系列的第一篇,交底书原名“一种基于数据延迟智能控制的MySQL读写分离实现方案”,但申…
MySQL XA之从天而降的匿名事务
前言在网易互联网业务中,网易杭研自研的MySQL中间件DDB大量使用,DDB的分布式事务基于MySQLXA,由于MySQL5.7修改了XA事务记录Binlog的逻辑,导致出现大量cornercase,DDB下的MySQL实例也深受其害,典型的问题就是XA事务引发的复制错误,包括加锁超时,复制夯住等。
MySQL Group Replication流控实现分析
MySQLGroupReplication流控实现分析前言MGR是有别于传统Master-Slave主从复制模式的一种新型的复制方式,其通过分布式一致性协议Paxos在Group中原子广播事务产生的Binlog并在远端节点进行回放的方式来达到数据复制的目的。但MGR的复制模式还是异步的,一个节点产生
MySQL MGR成员管理与故障恢复实现
MySQLGroupReplication(MGR)框架让MySQL具备了自动主从切换和故障恢复能力,举singleprimary(单主)模式为例,primary作为主节点对外提供读写服务,是唯一的可写节点,其他节点均为secondary节点,可提供读服务。在传统的master-slave主从复制模
MySQL MGR成员管理与故障恢复实现
MySQLGroupReplication(MGR)框架让MySQL具备了自动主从切换和故障恢复能力,举singleprimary(单主)模式为例,primary作为主节点对外提供读写服务,是唯一的可写节点,其他节点均为secondary节点,可提供读服务。在传统的master-slave主从复制模
从MGR start命令看MGR代码框架
上一篇MySQLMGR成员管理与故障恢复实现我们从方案层面讲解了MGR的成员管理和故障恢复。本篇从源码层面捋一捋,本篇内容可以分为2个部分,第一部分对应的是startgroup_replication命令执行过程,第二部分对应命令返回后节点状态从RECOVERING(恢复中)到ONLINE(在线)的
MySQL Group Replication数据安全性保障
在之前的文章中,介绍了MGR对数据可靠性、可用性和一致性的实现方案。简单来说,MGR通过基于paxos协议的多副本来实现数据的可靠性,通过多副本上的majority机制来实现可用性。对于一致性,主要说的是多主模式下通过基于事务版本的认证机制来确保多节点并发更新的正确性。本文再介绍下MGR对于数据安全
MySQL Group Replication冲突检测机制再剖析
在本专栏之前的文章中,对MySQLGroupReplication(MGR)的事务认证/冲突检测机制实现进行了介绍,并分析了其潜在的问题。MySQLMGR事务认证机制优化。可以在目录中查找这一篇文章哈本文将从certification_info对象,即冲突检测数据库实现作为切入点,来重点分析cert
MySQL MGR事务认证机制优化
在MySQL事务在MGR中的漫游记-事务认证(目录中可以找到)中介绍了MGR的事务认证机制,本文进一步展开分析并尝试对其进行优化,优化会分为单主模式(singleprimary)和多主模式(multimaster)两种场景。事务认证机制简介MGR事务认证模块用于决定进入MGR的事务是继续提交还是需要
MySQL Group Replication Paxos层不足和优化
本文是MySQLGroupReplication(MGR)不足和优化系列文章的延续。在之前的文章中讲了事务认证机制/冲突检测数据库不足和优化。其中的优化点在我们的InnoSQL5.7.20-v3b版本上实现,其优化效果也得到了初步验证。本篇文章主要分析作为MGR最底层的节点间网络通信层(Paxos)
MySQL Group Replication内存使用分析和优化-1
本文主要分析MySQLGroupReplication(MGR)相比传统MySQL复制模式,mysqld新增的几个内存缓存模块。举例说明由此可能引发的问题,并介绍潜在的优化方案。与传统的MySQL主从复制不同,MySQLGroupReplication模式下,mysqld会占据更多的内存空间。如果大