-
编辑 删除
Kafka生产者的客户端（PHP）开发
一、准备工作虽然Kafka是用Java/Scala语言编写的，但这不妨碍它对多语言的支持。可以在Kafka官网的CLIENTS查看Kafka支持的语言，其中包括C/C++、PHP、Python、Go等语言。PHP操作Kafka需要安装librdkafka库和kafka的PHP扩展。1.安装librd
-
编辑 删除
使用生成器把Kafka写入效率提高1000倍
通过本文你会知道Python里面什么时候用yield最合适。本文不会给你讲生成器是什么，所以你需要先了解Python的yield，再来看本文。疑惑多年以前，当我刚刚开始学习Python协程的时候，我看到绝大多数的文章都举了一个生产者-消费者的例子，用来表示在生产者内部可以随时调用消费者，达到和多线程
-
编辑 删除
Flink 1.9 实战：使用 SQL 读取 Kafka 并写入 MySQL
上周六在深圳分享了《FlinkSQL1.9.0技术内幕和最佳实践》，会后许多小伙伴对最后演示环节的Demo代码非常感兴趣，迫不及待地想尝试下，所以写了这篇文章分享下这份代码。希望对于FlinkSQL的初学者能有所帮助。完整分享可以观看Meetup视频回顾：https://developer.aliy
-
编辑 删除
kafka面试，看这一篇就够了
本文转自微信公众号：WeCoding,原文链接：https://mp.weixin.qq.com/s/zxPz_aFEMrshApZQ727h4gMQ（消息队列）是跨进程通信的方式之一，可理解为异步rpc，上游系统对调用结果的态度往往是重要不紧急。使用消息队列有以下好处：业务解耦、流量削峰、灵活扩展
-
编辑 删除
2019年这50个Kafka面试题，你知道答案么？
2019年这50个Kafka面试题，你知道答案么？小贴士：本文很长，如有收获，帮我点个关注，谢谢↓ApacheKafka对于新手的面试问题：41,42,43,44,45,47,49ApacheKafka对于有经验的人的面试问题：46,48ApacheKafka的受欢迎程度很高，Kafka拥有充足的就
-
编辑 删除
MQ(5) —— Nsq vs Kafka
NsqvsKafka正如之前说的，Nsq是一款极简的消息中间件，前面几讲，我们分别学习了：Nsq的几个组件：MQ（1）——从队列到消息中间件一条消息如何从生产到被消费：MQ(2)——一条消息是如何从生产到被消费的Nsq的一些细节实现：MQ(3)——刨根问底我们还尝试总结了如何设计一个靠谱的MQ：MQ
-
编辑 删除
MQ(5) —— Nsq vs Kafka
NsqvsKafka正如之前说的，Nsq是一款极简的消息中间件，前面几讲，我们分别学习了：Nsq的几个组件：MQ（1）——从队列到消息中间件一条消息如何从生产到被消费：MQ(2)——一条消息是如何从生产到被消费的Nsq的一些细节实现：MQ(3)——刨根问底我们还尝试总结了如何设计一个靠谱的MQ：MQ
-
编辑 删除
什么是消息队列？
前言只有光头才能变强。文本已收录至我的GitHub仓库，欢迎Star：https://github.com/ZhongFuCheng3y/3y公司用到的很多技术，自己之前都没学过(尬)，于是只能慢慢补了。这次给大家写写我学习消息队列的笔记，希望对大家有帮助。一、什么是消息队列？消息队列不知道大家看到
-
编辑 删除
胡夕：Apache Kafka监控与调优
胡夕，《ApacheKafka实战》作者，北航计算机硕士毕业，现任某互金公司计算平台总监，曾就职于IBM、搜狗、微博等公司。国内活跃的Kafka代码贡献者。前言虽然目前ApacheKafka已经全面进化成一个流处理平台，但大多数的用户依然使用的是其核心功能：消息队列。对于如何有效地监控和调优Kafk
-
编辑 删除
Kafka+Flink 实现准实时异常检测系统
1.背景介绍异常检测可以定义为“基于行动者（人或机器）的行为是否正常作出决策”，这项技术可以应用于非常多的行业中，比如金融场景中做交易检测、贷款检测；工业场景中做生产线预警；安防场景做入侵检测等等。根据业务要求的不同，流计算在其中扮演着不同的角色：既可以做在线的欺诈检测，也可以做决策后近实时的结果分
-
编辑 删除
Kafka架构图
作者：Zarten知乎专栏：Python爬虫深入详解知乎ID：Zarten简介：互联网一线工作者，尊重原创并欢迎评论留言指出不足之处，也希望多些关注和点赞是给作者最好的鼓励！1.架构图如上图，一个kafka架构包括若干个Producer（服务器日志、业务数据、web前端产生的pageview等），若
-
编辑 删除
Kafka Connect内部原理
今天主要讲在大规模数据情况下，Kafka如何解决实时的数据集成问题。主要有以下四个方面：1.TraditionalETL2.DataIntegration3.KafkaConnect4.GroupManagement1.TraditionalETL回顾历史，三四十年前，大部分的应用是比较简单的架构（
-
编辑 删除
闫燕飞：Kafka的高性能揭秘及优化
欢迎大家前往腾讯云+社区，获取更多腾讯海量技术实践干货哦~本文首发在云+社区，未经许可，不得转载。大家下午好，我是来自腾讯云基础架构部ckafka团队的高级工程师闫燕飞。今天在这里首先为大家先分享一下开源Kafka在高性能上面的一些关键点，然后我会分享一下我们腾讯云ckafka对社区Kafka所做的
-
编辑 删除
阿里大牛说“有时间学习一下Kafka它不香吗？”「附送Kafka文档」
Kafka简介Kafka是LinkedIn开发并开源的一套分布式的高性能消息引擎服务，后来被越来越多的公司应用在自己的系统中，可以说，Kafka是大数据时代数据管道技术的的首选。在设计的时候，它就实现了高可靠、高吞吐、高可用和可伸缩，得益于这些特性，加上活跃的社区，Kafka成为了一个完备的分布式消
-
编辑 删除
手把手带你用netty徒手撸一个简单的kafkaClient
吐槽一下kafka的api设计大家都知道,kafka的客户端是重构过一版的.之前0.8的producer和consumer是使用scala开发的,后来因为各种原因,实在是改不动了.到了0.9版本的时候,使用java重构了kafka的客户端.虽然现在java版的客户端还在广泛使用,而且没有什么太大的性
-
编辑 删除
读书 | Designing Data-Intensive Applications
豆瓣：DesigningData-IntensiveApplications我刚毕业到公司做项目时，遇到问题经常想找到最合理的处理方式，但以当时的知识储备，对有些问题完全没有头绪。比如我们有一个应用需要解析设备日志从而生成设备配置拓扑，日志中涉及配置的信息很多（部分日志10M以上），因此一般根据需求
-
编辑 删除
为什么每一个爬虫工程师都应该学习 Kafka
这篇文章不会涉及到Kafka的具体操作，而是告诉你Kafka是什么，以及它能在爬虫开发中扮演什么重要角色。为什么每一个爬虫工程师都应该学习Kafkamp.weixin.qq.com一个简单的需求假设我们需要写一个微博爬虫，老板给的需求如下：开发爬虫对你来说非常简单，于是三下五除二你就把爬虫开发好了
-
编辑 删除
为什么每一个爬虫工程师都应该学习 Kafka
这篇文章不会涉及到Kafka的具体操作，而是告诉你Kafka是什么，以及它能在爬虫开发中扮演什么重要角色。为什么每一个爬虫工程师都应该学习Kafkamp.weixin.qq.com一个简单的需求假设我们需要写一个微博爬虫，老板给的需求如下：开发爬虫对你来说非常简单，于是三下五除二你就把爬虫开发好了
-
编辑 删除
使用生成器把Kafka写入效率提高1000倍
通过本文你会知道Python里面什么时候用yield最合适。本文不会给你讲生成器是什么，所以你需要先了解Python的yield，再来看本文。疑惑多年以前，当我刚刚开始学习Python协程的时候，我看到绝大多数的文章都举了一个生产者-消费者的例子，用来表示在生产者内部可以随时调用消费者，达到和多线程
-
编辑 删除
Flink 1.9 实战：使用 SQL 读取 Kafka 并写入 MySQL
上周六在深圳分享了《FlinkSQL1.9.0技术内幕和最佳实践》，会后许多小伙伴对最后演示环节的Demo代码非常感兴趣，迫不及待地想尝试下，所以写了这篇文章分享下这份代码。希望对于FlinkSQL的初学者能有所帮助。完整分享可以观看Meetup视频回顾：https://developer.aliy
