-
编辑 删除
困扰许久的Kafka Rebalance问题
此文已由作者丁伟伟授权网易云社区发布。欢迎访问网易云社区，了解更多网易技术产品运营经验。前提本文的分析基于kafka0.9版本的client,0.10.1.0中已经修改心跳线程为后台线程，并支持设置max.poll.records，参见ChangeLog。使用场景Kafka是一个高吞吐量的分布式消息
-
编辑 删除
Kafka与Zookeeper这些题你还不会吗？
JAVA高级交流群：851531810kafka可以脱离zookeeper单独使用吗？为什么？kafka不能脱离zookeeper单独使用，因为kafka使用zookeeper管理和协调kafka的节点服务器。kafka有几种数据保留的策略？kafka有两种数据保存策略：按照过期时间保留和按照存储的
-
编辑 删除
RabbitMQ vs Kafka
原文地址RabbitMQvsKafkaPart1-TwoDifferentTakesonMessaging在本文中，我们将介绍RabbitMQ和Kafka是什么，如何实现消息队列。两者在技术决策方面大相径庭，各有千秋。本文不会给出任何结论，二是作为一个引子，以便在接下去的连载中深入探讨。Rabbit
-
编辑 删除
深入分析Kafka高可用性
本文主要内容：①kafka复制机制②分区leader副本宕掉怎么选新的leader③高水位与leaderepoch的详细分析④一些相关配置Kafka复制机制Kafka的主题被分为多个分区，分区是基本的数据块。分区存储在单个磁盘上，Kafka可以保证分区里的事件是有序的，分区可以在线（可用），也可以离
-
编辑 删除
干货：Kafka设计解析- Kafka高性能架构，Kafka如何实现高性能？
前言：本文从宏观架构层面和微观实现层面分析了Kafka如何实现高性能。包含Kafka如何利用Partition实现并行处理和提供水平扩展能力，如何通过ISR实现可用性和数据一致性的动态平衡，如何使用NIO和Linux的sendfile实现零拷贝以及如何通过顺序读写和数据压缩实现磁盘的高效利用。目录：
-
编辑 删除
Kafka架构原理——阿里大牛实战归纳总结
对于kafka的架构原理我们先提出几个问题?·1.Kafka的topic和分区内部是如何存储的，有什么特点？·2.与传统的消息系统相比,Kafka的消费模型有什么优点?·3.Kafka如何实现分布式的数据存储与数据读取?Kafka架构图1.kafka名词解释在一套kafka架构中有多个Produce
-
编辑 删除
轻松上手 Spring Boot & Kafka 实战！
Kafka集群安装、配置和启动Kafka需要依赖zookeeper，并且自身集成了zookeeper，zookeeper至少需要3个节点保证集群高可用，下面是在单机linux下创建kafka3个节点伪集群模式。1、下载包下载地址：http://kafka.apache.org/downloads2、
-
编辑 删除
大数据那些事(28):卡夫卡们的故事
人生亦有涯，而知也无涯。把庄子的话改吧改吧放上来作为开头，就是想和大家说，现在的这个大数据的世界里，数据太大，而我自己懂的东西很有限。除了analytics以外的其他领域就是典型的半瓶醋了。连八卦都不说。然而作为一个系列，连Kafka都不提一下，显然是说不过去。所以我也就硬着头皮的来提一下卡夫卡以及
-
编辑 删除
为什么你要使用这么强大的分布式消息中间件——kafka
为什么是kafka？在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题：我们想分析下用户行为（pageviews），以便我们设计出更好的广告位我想对用户的搜索关键词进行统计，分析出当前的流行趋势有些数据，存储数据库浪费，直接存储硬盘效率又低这些场景都有一个共同点：数据是由上游
-
编辑 删除
Kafka入门详解
1.1什么是kafka？Kafka最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、s
-
编辑 删除
简易教程 | Kafka从搭建到使用
我建了一个QQ学习交流群，旨在“分享、讨论、学习、资源分享、就业机会、互联网内推、共同进步！”，感兴趣的可以加一下，也可以添加我的QQ~QQ群：1077239487；QQ号：498073774；Kafka简介Kafka是一款流行分布式消息分布订阅系统，除Kafka之外还有MQ、Redis等。我们可
-
编辑 删除
技术 05 - Architecture of Kafka
Kafka作为架构关键的消息组件，十分有必要了解一下Kafka的架构与设计。花了大致一个月时间读了下原版的《Kafka:TheDefinitiveGuide》与官方文档designchaper。这两份资料都很不错，推荐阅读，尤其官方文档。其中Kafka架构中有几点值得一提使用文件系统，大量依赖操作系
-
编辑 删除
Java开发进阶必读书籍清单第二弹：Kafka、MyBatis、Docker等。
写在最前前几天给大家推荐并分享了一波Java开发必读书籍清单Java开发必读书籍清单JVM+Redis+Nginx+并发编程+Spring全家桶等受到了很多老铁的认可与喜爱。很多老铁也都找我领取到了这些书籍的电子版，在此感谢各位老铁的认可。今天再推荐几本Java开发进阶必读书籍清单并分享电子版，领取
-
编辑 删除
SpringBoot Kafka 整合使用
前提假设你了解过SpringBoot和Kafka。1、SpringBoot如果对SpringBoot不了解的话，建议去看看DD大佬和纯洁的微笑的系列博客。2、KafkaKafka的话可以看看我前两天写的博客：Kafka安装及快速入门学习的话自己开台虚拟机自己手动搭建环境吧，有条件的买服务器。注意：一
-
编辑 删除
Kafka 安装及快速入门
介绍官网：http://kafka.apache.org/ApacheKafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区的和可复制的提交日志服务。ApacheKafka与传统消息系统相比
-
编辑 删除
阿里云正式推出消息队列Kafka：全面融合开源生态
7月25日，阿里云宣布正式推出消息队列Kafka，全面融合开源生态。在兼容Apache生态的基础上，阿里云消息队列Kafka彻底解决了开源产品稳定性不足的痛点，可用性达99.9%，数据可靠性99.999999%，并且支持消息无缝迁移到云上。据介绍，阿里云消息队列Kafka在海量消息堆积的情况下，始终
-
编辑 删除
源码解说zookeeper在kafka中的作用
浪尖的kafka源码系列以kafka0.8.2.2源码为例给大家进行讲解的。纯属个人爱好，希望大家对不足之处批评指正。一，zookeeper在分布式集群的作用1，数据发布与订阅（配置中心）发布与订阅模型，即所谓的配置中心，顾名思义就是讲发布者将数据发布到zk节点上，共订阅者动态获取数据，实现配置的集
-
编辑 删除
插曲：Kafka的生产者原理及重要参数说明
推荐阅读：一只Tom猫：手撕分布式技术：限流、通讯、缓存，全部一锅端走送给你！zhuanlan.zhihu.com一只Tom猫：消息队列面试，你能顶得住面试官这波10大连环炮的攻势吗？zhuanlan.zhihu.com一、Kafka的Producer原理首先我们得先有个集群吧，然后集群中有若干
-
编辑 删除
深入浅出Kafka的基本操作
前言今天这篇内容是根据之前一部分朋友的要求来进行叙述，讲的比较简单，也算是一个kafka的小插曲，也能让大家学的轻松，更能有一个清晰的了解。这里大家可以关注一下我的个人专栏《Java进阶集中营》，每天会给大家即时分享一个最新的java技术资讯，有优秀的java技术内容，也欢迎分享在我的专栏。JAVA
-
编辑 删除
Apache Kafka内核深度剖析
目前来说市面上可以选择的消息队列非常多，像activemq，rabbitmq，zeromq已经被大多数人耳熟能详，特别像activemq早期应用在企业中的总线通信，基本作为企业级IT设施解决方案中不可或缺的一部分。目前来说Kafka已经非常稳定，并且逐步应用更加广泛，已经算不得新生事物，但是不可否认
