湖仓分析|浙江霖梓基于 Doris + Paimon 打造实时/离线一体化湖仓架构
导读:浙江霖梓早期使用 CDH 产品套件搭建了大数据系统,面临业务逻辑冗余、查询效率低下等问题,基于 Apache Doris 进行整体架构与表结构的重构,并基于湖仓一体和查询加速展开深度探索与实践,打造了 Doris + Paimon 的实时/离线一体化湖仓架构,实现查询提速 30 倍、资源成本节省 67% 等显著成效。浙江霖梓是一家专注于深度学习和人工智能应用的金融创新企业,自 2018 年成
Apache Doris 2.1.8 版本正式发布
亲爱的社区小伙伴们,Apache Doris 2.1.8 版本已于 2025 年 01 月 24 日正式发布。 该版本持续在湖仓一体、异步物化视图、查询优化器与执行引擎、存储管理等方面进行改进提升与问题修复,进一步加强系统的性能和稳定性,欢迎大家下载体验。立即下载:https://doris.apache.org/downloadGitHub 下载:https://github.com/apach
一文教您如何构建 Lakehouse
Lakehouse 是由“Datalake ”(数据湖)和“Data Warehouse”(数据仓库)两个词组合而成的一个概念,它将数据湖与数据仓库的优势相结合,为用户提供一个统一的数据处理环境。Lakehouse本质上是一个带有附加事务层和高性能计算引擎的数据湖,旨在结合数据湖的灵活性和广泛数据格式支持,以及数据仓库在数据管理和分析方面的优势。数据湖、数据仓库 和 Lakehouse 之间有什么
Apache Doris 实现即席查询提速 20 倍案例分享
ApacheDoris是一个基于MPP(大规模并行处理)架构的高性能、实时的分析型数据库。它以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。以下是关于ApacheDoris的应用场景:
PB 级大规模日志平台:中信银行信用卡中心从 ES 到 Apache Doris 的先进实践
导读:中信银行信用卡中心每日新增日志数据 140 亿条(80TB),全量归档日志量超 40PB,早期基于 Elasticsearch 构建的日志云平台,面临存储成本高、实时写入性能差、文本检索慢以及日志分析能力不足等问题。因此使用 Apache Doris 替换 Elasticsearch,实现资源投入降低 50%、查询速度提升 2~4 倍,同时显著提高了运维效率。本文转录自陈地长(中信信用卡中心
正式开源,Doris Operator 支持高效 Kubernetes 容器化部署方案
容器化凭借其灵活性、跨平台性、自动化管理和极 致弹性,吸引了众多企业的关注。一些企业希望将 Apache Doris 容器化部署,以实现高效的资源利用与部署迭代。Kubernetes 提供的编排和管理功能,能完成大规模容器部署,但 Kubernetes 自身的复杂性也导致众多企业面临部署复杂、运维困难、使用难度高等挑战。为满足用户在 Kubernetes 平台上对 Doris 的高效部署和运维要求
云原生数据仓库 SelectDB Cloud 产品全面介绍
云原生数据仓库是什么云原生是基于分布部署和统一运管的分布式云,以容器、微服务、DevOps 等技术为基础建立的一套云技术产品体系。云原生应用也就是面向“云”而设计的应用,在使用云原生技术后,开发者无需考虑底层的技术实现,可以充分发挥云平台的弹性和分布式优势,实现快速部署、按需伸缩、不停机交付等。云原生数据库是一种云原生数据基础设施,是一种完全利用公有云优势的数据库服务,具备极 致的弹性伸缩能力、无
新零售:Apache Doris 助力数据计算分析时效提升
新零售,英文是New Retailing,即企业以互联网为依托,通过运用大数据、人工智能等先进技术手段,对商品的生产、流通与销售过程进行升级改造,进而重塑业态结构与生态圈,并对线上服务、线下体验以及现代物流进行深度融合的零售新模式。近年来,新零售行业蓬勃发展,各大电商平台、传统零售商纷纷布局新零售,通过线上线下融合,打造无缝连接的购物体验。例如,阿里巴巴的盒马鲜生、京东的7FRESH等,通过大数据
奖项再 +1 !飞轮科技荣获 Datafun 2024 年第二届星空奖——数智技术领航企业奖
近日,Datafun 发布 2024 年第二届星空奖名单,该奖项旨在寻找并表彰在数智技术领域享有较高声誉,技术领先、生态系统完整、拥有成熟产品与解决方案的创新企业。经过层层评审与筛选,飞轮科技凭借其卓越的技术实力及创新方案,获得了第二届星空奖——数智技术领航企业奖。核心产品飞轮科技基于 Apache Doris 打造了现代化实时数据仓库 SelectDB,提供云原生存算分离的 SelectDB C
计算效率提升 10 倍,灵犀科技基于 Apache Doris 建设统一数据服务平台
导读:灵犀科技早期基于 Hadoop 构建大数据平台,在战略调整和需求的持续扩增下,数据处理效率、查询性能、资源成本问题随之出现。为此,引入 Apache Doris 替换了复杂技术栈,升级为集存储、加工、服务为一体的统一架构,实现存储成本下降 60%,计算效率提升超 10 倍的显著成效。灵犀科技有限公司(简称灵犀科技)是奇点控股旗下的高科技企业,专注于为企业提供 SaaS 服务、定制