
与创新者 同行,Apache Doris in 2023

回顾过去几年, Apache Doris 一直在加速进化,尤其在 2023 年,
Apache Doris 发布了具有里程碑意义的 2.0 版本,正式踏入 2.0 时代
。在这个版本里取得了一系列显著成绩:
引入自适应的并行执行模型和全新查询优化器,盲测性能提升 10 倍,多表关联提升 13 倍,单表场景提升 10 倍、高并发点查询提升 20 倍;
从报表和 Ad-hoc 等典型 OLAP 场景拓展到湖仓一体、高并发数据服务以及日志检索与分析,支撑更统一多样的分析场景;
支持实时数据高吞吐写入、秒级时延,对各类数据更新都有完备的支持,构建更高效易用且稳定的实时数据处理和分析链路;

在性能飞跃和场景拓宽的背后,离不开所有社区开发者们的辛勤付出。截止目前, 社区的贡献者达到近 600 名、平均每月活跃贡献者超过 120 名,已经成为全球大数据和数据库领域最活跃的开源项目之一。而贡献者来源方面也更加多元化,广泛分布于国内外数十行业的 100 余家标杆企业,同时吸引了国内多家顶尖云厂商的投入共建,包括阿里云、腾讯云、百度智能云、华为云、天翼云、火山引擎等,同时相关产品几乎覆盖了国内外所有主流云平台。

这些重要进展,不仅展示了 Apache Doris 持续创新能力和技术实力,也证明了我们用户需求的深度理解和精准把握。衣国垒表示,未来 Apache Doris 还将继续致力于推动实时数据分析技术的创新,包括:
实时分析:在大规模实时数据上实现机制的查询性能;
融合统一:在一套系统中提供对多种分析负载的支持、简化复杂结构带来的运维使用成本;
云原生化:面向云计算基础设施进行革新,利用云的弹性降低存储和计算成本;



随着云时代的到来,企业对于灵活、高效的云计算需求日益增长。无论是公有云、私有云还是 K8S 容器平台,越来越多的企业都希望 Apache Doris 针对云计算这种新型基础设施提供更加深度的适配,以便提供更加灵活强大的弹性能力。
飞轮科技 CEO 、Apache Doris PMC 成员马如悦介绍了基于 Apache Doris 构建的现代化实时数据仓库 SelectDB。目前 SelectDB 具备两种产品形态, 立足于多云之上的 云原生数仓服务 SelectDB Cloud 以及 满足私有化部署要求的企业版 SelectDB Enterprise,可以满足不同用户的使用需求。
其中 SelectDB Cloud 实现了完全的存算分离,提供了多计算集群负载隔离和计算弹性扩缩容等功能,这一版本后续也将会贡献至 Apache Doris 社区,帮助企业用户实现更加高效数据分析和处理、更灵活的弹性能力以及更低的使用成本。

今年 3 月,阿里云与飞轮科技正式达成战略合作协议,双方决定共同研发名为“阿里云数据库 SelectDB 版”的新一代实时数据仓库,为用户提供在阿里云上的全托管服务。这一创新性的合作旨在将现代化的实时数据仓库技术与阿里云强大的基础设施能力相结合,为用户带来更加卓越的数据分析和处理体验。
在峰会现场,阿里云与飞轮科技联合发布了阿里云数据库 SelectDB 版, 该产品基于阿里云 IaaS 深度优化,可与阿里云其他产品无缝融合,给予用户更优的用云体验,真正阐释了「云上 Doris,不止于此」的理念。
阿里云数据库技术专家彭祥表示,阿里云与飞轮科技强强联合,展示了双方推动数据库技术发展、提升用户体验方面的决心和创新能力。

Apache Doris PMC 成员、腾讯云 TCHouse-D 研发负责人李德分享到,企业级需求与开源项目之间存在显著差异。企业用户更追求稳定可用、上下游生态的兼容适配、及时的技术支持响应以及充实完善的产品资料。相对于开源用户来说,企业用户的需求更加全面和严格。
为了满足企业用户的诉求, 腾讯云基于 Apache Doris 内核构建了 TCHouse-D 数据库,可为企业用户提供方便易用、灵活稳定的实时数据仓库服务。李德详细介绍了 TCHouse-D 的特点和优势,仅需几分钟即可完成搭建,并可轻松应对海量数据的实时查询分析。
同时腾讯云也将上线企业级产品后的问题与经验进行沉淀,持续回馈至社区中,后续并 将持续投入社区共建。
更多行业创新者的实践应用
除了主会场之外,智慧金融与政企、先进智造与电信、企业服务与新经济、互联网与文娱 4 个平行论坛的数十位技术专家也在各会场为参会者带来了精彩的演讲,分享了各自领域的趋势和实践经验。
在智慧金融与政企论坛上 ,来自平安人寿、众安保险、无锡锡商银行、金融壹账通、华为、智达信科的多位技术专家以及来自数势科技、Tapdata、飞轮科技等创新先锋企业的代表,与所有参会者分享了如何应对实时分析的挑战,深度剖析 Apache Doris 在行业场景中的实践经验。 与此同时,Apache Doris PMC 成员陈明雨还在本论坛揭秘了 Apache Doris 在湖仓联邦分析场景的技术实现。Apache Doris PMC 成员李昊鹏、飞轮科技熊仲健分享了Apache Doris 在 2.0.0 版本实现盲测性能 10 倍提升背后的思考与优化实践。
在先进智造与电信论坛中 ,来自中国电信、联通西部创新研究院、浩瀚深度、天翼云、爱玛电动车、地平线、中铝视拓、小米集团及飞轮科技等行业先锋企业的技术专家,与参会者分享了 Apache Doris 在电信与制造场景下的真实生产实践案例,共同探讨海量数据实时分析的更优解决方案。 飞轮科技架构师、Apache StreamPark PPMC 成员王华杰分享了多种数据源整库同步至 Apache Doris 的实践。
在互联网与文娱论坛中 ,来自网易游戏、趣丸科技、腾讯、虎牙、货拉拉、360及阿里云等行业先锋企业的大数据专家,与参会者分享 Apache Doris 在不同业务场景助力企业实现精确营销及业务增长。同时,来自飞轮科技解决方案架构师王天宜还将与大家分享基于 Apache Doris 构建用户行为分析与画像平台的实践方案。
在企业服务与新经济论坛中 ,来自观测 云、奇安信、雨润、万物云城、腾讯云、玖章算术、飞轮科技以及社区 的多位技术专家分享了如何基于 Apache Doris 为不同行业客户提供服务,满足大规模、个性化的数据处理及分析需求,同时为大家分享了数据集成、日志分析等场景解决方案。
至此 Doris Summit Asia 2023 圆满落幕,感谢所有参与本次大会的演讲嘉宾、合作伙伴、线上线下所有的参会者、所有支持和认可 Apache Doris 的技术从业者以及开源技术的爱好者们。
在此我们也致敬每一位追风赶月的创新者们,也期待与更多创新者与一同前行,探索数据世界的更多可能性!
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70017904/viewspace-2990971/ ,如需转载,请注明出处,否则将追究法律责任。