-
编辑 删除
分布式文件系统实战，使用MinIO构建分布式文件系统！
随着文件数据的越来越多，传统的文件存储方式通过tomcat或nginx虚拟化的静态资源文件在单一的服务器节点内已经无法满足系统需求，也不利于文件的管理和维护，这就需要一个系统来管理多台计算机节点上的文件数据，这就是分布式文件系统。一、什么是分布式文件系统？1.1什么是分布式文件系统分布式文件系统（D
-
编辑 删除
浅谈几种常见的分布式ID
在分布式环境下，如何对某对象做标识是个很常规的问题。本文讨论几种常见做法，供大家参考。1.UUIDUUID是可以生成时间、空间上都独一无二的值，其本质是随机+规则组合而成的。即使在两个独立的服务器上生成UUID，其预期值也是不同的。以MySQL为例，说明下UUID。❖格式在MySQL中，UUID
-
编辑 删除
分布式必备理论基础：CAP和BASE
大家好，我是老三，今天是没有刷题的一天，心情愉悦，给大家分享两个简单的知识点：分布式理论中的CAP和BASE。CAP理论什么是CAPCAP原则又称CAP定理，指的是在一个分布式系统中，Consistency（一致性）、Availability（可用性）、Partitiontolerance（分区容错
-
编辑 删除
分布式系统的“脑裂”到底是个什么玩意？
目前大多数项目都在往分布式上发展，一旦系统采用分布式系统，便会引入更多复杂场景和解决方案。比如，当你在系统中使用了Elasticsearch、ZooKeeper集群时，你是否了解过集群的“脑裂”现象？又是否知道它们是如何解决脑裂问题的？如果这些都还未了解，那么你对分布式的了解过于表象了，推荐你读一读
-
编辑 删除
基于任务调度的企业级分布式批处理方案
背景CloudNative先来谈下什么是分布式批处理，从字面来理解就是有大批量的业务数据需要应用程序去批量计算处理，而通过单机模式去执行会耗费很长的处理时间，也不能充分发挥业务集群中每个应用节点处理能力。通过一些常见的分布式批处理方案，可以有效地让业务集群中所有业务应用节点协同完成一个大批量数据处理
-
编辑 删除
分布式数据库其实不好做
现在国产数据库据说已经突破300种了，厂家也有近200家，这些数据库产品中，大多数都是分布式数据库。不仅仅是中国，其实这些年国外的新数据库产品中，分布式数据库也占了很大的比例。这是为什么呢？分布式数据库更容易开发吗？还是用户更需要分布式数据库呢？实际上我并不是用户，用户才是对这个问题最有发言权的。他
-
编辑 删除
20张图！常见分布式理论与解决方案
对于分布式系统，简单的理解就是一堆机器对外提供服务，相比单体服务，它可以承受更高的负载，但是分布式系统也带了一系列问题，比如如何解决某个节点故障的问题？如何解决数据一致性的问题？如何解决数据倾斜的问题？今天通过这篇文章，带大家搞懂和分布式相关的常见理论和解决方案。CAP理论先从定义开始：C（Con
-
编辑 删除
美团外卖搜索基于Elasticsearch的优化实践
总第544篇2022年第061篇美团外卖搜索工程团队在Elasticsearch的优化实践中，基于Location-BasedService（LBS）业务场景对Elasticsearch的查询性能进行优化。该优化基于Run-LengthEncoding（RLE）设计了一款高效的倒排索引结构，使检索耗
-
编辑 删除
1.4 w字，25 张图让你彻底掌握分布式事务原理
本文提纲如下0.前言1.单数据源事务&多数据源事务2.常见分布式事务解决方案2.1.分布式事务模型2.2.二将军问题和幂等性2.3.两阶段提交（2PC）&三阶段提交（3PC）方案2.4.TCC方案2.5.事务状态表方案2.6.基于消息中间件的终一致性事务方案3.SeatainATm
-
编辑 删除
分布式存储在B站的应用实践
分享嘉宾：林堂辉哔哩哔哩开发工程师编辑整理：张振飞神州新桥出品平台：DataFunTalk导读：业务高速发展，B站的存储系统如何演进以支撑指数增长的流量洪峰？随着流量进一步暴增，如何设计一套稳定可靠易拓展的系统，来满足未来进一步增长的业务诉求？同时，面对更高的可用性诉求，KV是如何通过异地多活为
-
编辑 删除
ClickHouse 冷热分离存储在得物的实践
1.业务背景得物上一代日志平台的存储主要依赖于ES。随着公司业务的高速发展，日志场景逐步产生了一些新需求，主要表现在：应用数量逐步增多，研发需要打印更多的日志定位业务问题，安全合规需要保留更长时间的日志。随着Clickhouse的应用广泛，我们了解到行业部分知名公司已经将日志平台逐步由ES迁移至Cl
-
编辑 删除
聊一聊分布式锁的设计模型
一、什么是分布式锁？什么是分布式锁？对于这个问题，相信很多同学是既熟悉又陌生。随着分布式系统的快速发展与广泛应用，针对共享资源的互斥访问也成为了很多业务必须要面对的需求，这个场景下人们通常会引入分布式锁来解决问题。我们通常会使用怎么样的分布锁服务呢？有开源的MySQL，Redis，ZooKeeper
-
编辑 删除
1.4 w字，25 张图让你彻底掌握分布式事务原理
本文提纲如下0.前言1.单数据源事务&多数据源事务2.常见分布式事务解决方案2.1.分布式事务模型2.2.二将军问题和幂等性2.3.两阶段提交（2PC）&三阶段提交（3PC）方案2.4.TCC方案2.5.事务状态表方案2.6.基于消息中间件的终一致性事务方案3.SeatainATm
-
编辑 删除
分布式存储在B站的应用实践
分享嘉宾：林堂辉哔哩哔哩开发工程师编辑整理：张振飞神州新桥出品平台：DataFunTalk导读：业务高速发展，B站的存储系统如何演进以支撑指数增长的流量洪峰？随着流量进一步暴增，如何设计一套稳定可靠易拓展的系统，来满足未来进一步增长的业务诉求？同时，面对更高的可用性诉求，KV是如何通过异地多活为
-
编辑 删除
深入理解美团 Leaf 发号器开源方案
大家好，我是树哥。之前我们有聊过「如何设计一个分布式ID发号器」，其中有讲过4种解决方案，分别是：UUID类雪花算法数据库自增主键Redis原子自增美团以第2、3种解决方案为基础，开发出了分布式ID生成方案Leaf，并将其开源。我们可以在GitHub上获取到该项目的源码，以及相关的文档说明，项目地址
-
编辑 删除
百度工程师教你玩转设计模式（工厂模式）
作者|北极星小组想要写好代码，设计模式（DesignPattern）是必不可少的基本功，设计模式是对面向对象设计（ObjectOrientedDesign）中反复出现的问题的解决方案，本篇介绍工厂模式（FactoryPattern）。工厂模式属于创建型模式（BuilderPattern），提供了创建
-
编辑 删除
嵌入式代码如何进行重构？
具体的重构手段可参考《代码大全2》或《重构：改善既有代码的设计》，本文不再班门弄斧，而侧重重构时一些粗浅的“方法论”，旨在提高重构效率。作者未采用重量级的重构
-
编辑 删除
你还不明白如何解决分布式Session？看这篇就够了！
平常做的项目都是在一台应用系统，并且所有的操作都在一台Tomcat服务器上，并不会引发Session共享的问题，所以并不会对我们的系统产生影响，但是当我们部署多个微服务的时候，再搭配Nginx进行负载均衡时，如果不处理分布式Session问题，我们在系统中访问不同功能时就会频繁出现用户登录的操作。图
-
编辑 删除
浅谈几种常见的分布式ID
在分布式环境下，如何对某对象做唯一标识是个很常规的问题。本文讨论几种常见做法，供大家参考。1.UUIDUUID是可以生成时间、空间上都独一无二的值，其本质是随机+规则组合而成的。即使在两个独立的服务器上生成UUID，其预期值也是不同的。以MySQL为例，说明下UUID。❖格式在MySQL中，UUID
-
编辑 删除
Kafka is Database
对Kafka为什么适合数据库开发，做了一个简单的分析
