-
编辑 删除
Kafka 负载均衡在 vivo 的落地实践
vivo互联网服务器团队-YouShuo副本迁移是Kafka最高频的操作，对于一个拥有几十万个副本的集群，通过人工去完成副本迁移是一件很困难的事情。CruiseControl作为Kafka的运维工具，它包含了Kafka服务上下线、集群内负载均衡、副本扩缩容、副本缺失修复以及节点降级等功能。显然，Cr
-
编辑 删除
超强图解Kafka
目录前言基础生产消费者Topics主题Partitions分区架构前言Kafka是主流的消息流系统，其中的概念还是比较多的，下面通过图示的方式来梳理一下Kafka的核心概念，以便在我们的头脑中有一个清晰的认识。基础Kafka是一套流处理系统，可以让后端服务轻松的相互沟通，是微服务架构中常用的组件。生
-
编辑 删除
Kafka 负载均衡在 vivo 的落地实践
vivo互联网服务器团队-YouShuo副本迁移是Kafka最高频的操作，对于一个拥有几十万个副本的集群，通过人工去完成副本迁移是一件很困难的事情。CruiseControl作为Kafka的运维工具，它包含了Kafka服务上下线、集群内负载均衡、副本扩缩容、副本缺失修复以及节点降级等功能。显然，Cr
-
编辑 删除
Kafka基础入门篇
1kafka简介Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用与大数据实时处理领域。其主要设计目标如下：以时间复杂度为O(1)的方式提供消息持久化能力，即使对TB级以上数据也能保证常数时间的访问性能高吞吐率。即使在非常廉价的机器上也能做到单机支持每秒100
-
编辑 删除
Kafka 3.0新特性全面曝光，真香！
导语|kafka3.0的版本已经试推行去zk的kafka架构了，如果去掉了zk，那么在kafka新的版本当中使用什么技术来代替了zk的位置呢，接下来我们一起来一探究竟，了解kafka的内置共识机制和raft算法。一、Kafka简介Kafka是一款开源的消息引擎系统。一个典型的Kafka体系架构包括若
-
编辑 删除
kafka三高架构设计剖析
1kafka三高架构概述由于最近事情比较多,工作也比较忙,这篇差点难产,经过几个周末的构思和梳理,终于跟大家见面了,在上一篇我们讲述了kafka的基础入门,工作流程,存储机制,副本等知识,本篇会为大家揭秘kafka高可用,高性能,高并发架构设计奥秘。Kafka向来以高吞吐量，低延迟，高并发,高可扩展
-
编辑 删除
Kafka 怎么顺序消费？面试必备！
前言本文针对解决Kafka不同Topic之间存在一定的数据关联时的顺序消费问题。如存在Topic-insert和Topic-update分别是对数据的插入和更新，当insert和update操作为同一数据时，应保证先insert再update。1、问题引入kafk
-
编辑 删除
性能突出的Redis是咋使用epoll的？
我是个redis服务，我马上就要启动了因为我的主人正在控制台输入：./redis-server宏观上看下我的流程突然，主人按下了回车键，不得了了。shell程序把我的程序加载到了内存，开始执行我的main方法，一切就从这里开始了。intmain(intargc,char**argv){...init
-
编辑 删除
从一次 Kafka 节点宕机探究 Kafka 的高可用实现
一、Kafka宕机引发的高可用问题问题要从一次Kafka的宕机开始说起。笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的RabbitMQ，而是采用了设计之初就为日志处理而生的Kafka，所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后，系统内部使用的Kafk
-
编辑 删除
9张图告诉你，Kafka为何要放弃Zookeeper
最近，confluent社区发表了一篇文章，主要讲述了Kafka未来的2.8版本将要放弃Zookeeper，这对于Kafka用户来说，是一个重要的改进。之前部署Kafka就必须得部署Zookeeper，而之后就只要单独部署Kafka就行了。[1]1.Kafka简介ApacheKafka最早是由Lin
