如何让大数据流动起来—京东物-流-数-据蜂巢平台的架构演进之路

演讲简介：

数据蜂巢平台是京东物流自主研发的分布式、高性能、高可用、支持异构，离线和实时的大数据同步与管理平台。关键技术：HA;离线与实时同步整合；binlog采集,存储与订阅；客户端并发消费；一致性校验与修复；任务隔离。 目前已经在京东物流系统中大规模应用，比如单源和多源复制，从全国各地仓储园区集群（上百个）实时复制到IDC，从mysql到ES，从mysql到cassandra等等。仓储园区硬件、网络环境复杂，数据蜂巢平台需要考虑硬件设施和网络故障的容错性。议题主要分享平台诞生的背景，使用的关键技术，架构的演进过程，演进过程中所踩过的坑，大规模应用之后带来的价值。

贺思远 京东物流 系统架构师

嘉宾介绍：

9年互联网/大数据领域研发、架构经验，2015年加入京东物流，主要负责大数据相关架构与开发工作。

大数据在58速运中的应用与实践

演讲简介：

一、总起：58速运短途货运业务与系统架构简介；二、短途货运业务，大数据在补贴中的应用；三、短途货运业务，大数据在定价中的应用；四、短途货运业务，大数据在推送中的应用；五、短途货运业务，大数据在中单中的应用；六、总结：一切脱离业务的大数据应用都是耍流氓。

胡显波 58速运 IT总部高级技术经理

嘉宾介绍：

2014年加入58到家，负责58速运后端整体业务和架构工作。专注智慧物流以及智能派单领域的探索和创新，有丰富的业务架构和团队管理经验。

苏宁智慧物流在实时大数据上的探索与实践

演讲简介：

物流是电商与用户直接沟通的桥梁，物流的好坏直接关系到用户体验，对于大多数电商而言，每天的系统处理的订单数、包裹数达到几千万甚至上亿。如何快速准确的处理这些订单、包裹直接影响到物流运作的及时性。为了让物流工作人员更加快速及时的定位到订单包裹的准确状态，物流监控系统的处理速度面临巨大挑战。订单状态的监控是一个流程长计算复杂且耗时的任务，从各个作业系统中接收过来订单的源数据，将这些数据进行清洗、加工处理，最后进行复杂逻辑计算；为了解决这些问题我们采用HBase+Spark+PGSQL+Elaticsearch的架构。本次将深度揭秘苏宁物流在数据处理的架构演进，并将重点介绍目前采用的架构特点与调优方法。并将分享下我们在实践过程中遇到的疑难杂症，以及如何对症下药。

邢建垒 苏宁易购 IT总部高级技术经理

嘉宾介绍：

苏宁易购IT总部高级技术经理，南京师范大学本科毕业。拥有多年的大数据分析及平台研发经验。目前主要负责苏宁物流实时分拨业务大数据应用开发落地，擅长实时计算应用构建和性能调优，热衷于大数据分析和处理。

菜鸟物流大数据计算技术实践

演讲简介：

菜鸟网络作为社会化物-流-数-据平台，每日处理数据量超过9万亿条。本次分享以菜鸟核心数据处理场景为例，介绍菜鸟数据仓库的架构演进，分享我们从离线大数据平台升级到实时平台过程中的经验，以及利用实时流计算技术抗住双十一订单洪峰的心得。

赵尉淋 菜鸟网络 高级数据技术专家

嘉宾介绍：

花名达川，2015年加入菜鸟，现任菜鸟数据部高级数据技术专家，负责离线和实时数据的研发工作。拥有10余年数据处理和架构经验，曾经担任惠普、eBay资深数据工程师和架构师。