万亿级消息背后:小米在消息队列的实践演讲简介:Talos 是小米基于 HDFS 自研的分布式消息队列,一方面作为消息队列支持大数据、有品、推送、信息流等在线业务,另一方面也作为小米内部数据集成平台的总线,支撑数据检索,OLAP 分析,模型训练等离线业务。随着业务的发展,数据量也爆发,突破 2 万亿条/天,Talos 也迎来更多的挑战。本次演讲主要介绍 Talos 在小米的实践,包括架构演进、问题挑战以及在性能、稳定性、资源等方面的优化工作。
勇幸 小米 高级研发工程师嘉宾介绍:13年毕业加入小米云平台;曾负责小米集群管理系统 Minos 的研发(已开源),后核心参与并见证了小米数据流平台从 0 到 1 的建设,及后续的持续优化;目前主要负责分布式消息队列,数据检索系统的研发与支持工作,旨在为公司提供高效、可靠、易用的数据分发、检索服务。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/31537575/viewspace-3140673/
,如需转载,请注明出处,否则将追究法律责任。