分布式消息流平台：不要只想着Kafka，还有Pulsar
摘要：Pulsar作为一个云原生的分布式消息流平台，越来越频繁地出现在人们的视野中，大有替代Kafka江湖地位的趋势。
本文分享自华为云社区《MRS Pulsar：下一代分布式消息流平台全新发布！》，作者： Lothar。
Pulsar的前世今生
Apache Pulsar是一个发布-订阅消息系统，使用计算与存储分离的云原生架构。Pulsar 2018年9月成为ASF顶级项目，近两年，随着社区不断发展和诸多企业的应用和贡献，Pulsar作为一个云原生的分布式消息流平台，越来越频繁地出现在人们的视野中，大有替代Kafka江湖地位的趋势。
Pulsar和Kafka的对比
Pulsar和Kafka架构上最大的不同是，Kafka由Broker进行消息的收发和持久化，数据存储在本地文件系统，由Broker统一管理。这也意味着数据和消息处理是耦合的。
Kafka官网描述道：Kafka重度依赖文件系统，用于存储或缓存消息。当Broker接收到消息时，会将消息追加写到本地磁盘上。这一架构决定了Partition和Broker的对应关系是相对固定的，只有在partition reassign时才会发生数据迁移。Partition的Leader在数据副本分布节点上产生，用于处理生产消费请求。
而Pulsar采用了计算存储分离架构，这也是Pulsar被称作云原生平台的主要原因。Pulsar依赖Apache BookKeeper管理持久化数据，Apache BookKeeper是可扩展、可容错、低延迟的日志存储服务，能够保证在强持久性下的低延迟读写。
*引自Pulsar官网介绍：benchmarking pulsar kafka a more accurate perspective on pulsar performance.pdf
MRS上的Pulsar
MRS已发布Pulsar的POC版本，客户可以一键式部署Pulsar服务，包括Broker和Bookie角色。支持在Web UI上修改Pulsar配置、启停、监控。
此外MRS还默认集成了KoP。KoP是Pulsar社区开源的一个插件，运行在Pulsar上，用以兼容Kafka协议。使用时，Kafka客户端可以修改连接地址后直接切换到Pulsar集群上，而不需要修改业务对Kafka客户端的依赖。
在MRS Pulsar的商用版本正在规划中，我们将探索Pulsar在云上使用的更多可能，进一步发挥Pulsar存算分离的优势，降低成本，提升资源利用率，为客户创造更多价值，敬请期待。
来自 “ ITPUB博客 ” ，链接：https://blog.itpub.net/2323/viewspace-2795865/ ，如需转载，请注明出处，否则将追究法律责任。
