探索云原生技术应用,开启架构转型新征途
随着近几年云原生生态的不断壮大,云原生技术在公有云、私有云和混合云等新型动态环境中得到示范运用,为企业构建和运行可弹性扩展应用提供了实现方式。
Apache Hudi 背后商业公司Onehouse宣布2500万美元A轮融资
就在一年前,我们发布了 Onehouse——一种开放的、完全托管的、云原生的lakehouse服务——以从根本上缩短最先进的数据湖的价值实现时间。
构建安全无服务器功能的3个原则
无服务器功能占当今云计算公司工作负载的一半左右,已成为部署应用程序的一种流行方式,这主要是因为无服务器功能最大限度地减少了团队需要考虑的复杂性。通过无需配置主机服务器,无服务器功能简化了IT运维。
计算中间件 Apache Linkis 成为 Apache 重要项目
Apache 软件基金会(ASF)孵化器于2022年12月03日,通过了 Apache Linkis 计算中间件项目的孵化毕业投票。2023年01月18日,Apache 软件基金会官方宣布 Apache Linkis 顺利毕业,成为 Apache 重要项目(TLP)。
谷歌开源部门裁员“大地震”:多名开源功臣粗暴被裁
谷歌母公司 Alphabet 宣布将裁员约 1.2 万人,占该公司员工总数的 6%。有报道称,本次部分裁员名单是通过算法来完成的。
从 ClickHouse 到 ByteHouse:实时数据分析场景下的优化实践
作为国内规模最大的 ClickHouse 用户,目前字节跳动内部的 ClickHouse 节点总数超过 1.8W 个。综合来说,字节跳动广泛的业务增长分析很多都建立在 ClickHouse 为基础的查询引擎上。
回望2022:云原生成为云厂商角逐重点
当云原生在金融、制造和政务等领域深化应用,当大型云计算巨头正凭借新型服务打造出生态共生模式,我们惊奇地发现:云价值挖掘时代已经到来,云原生才是云计算本该有的样子!
2023年云原生发展预测
随着 Wasm 用例的发现、运行时的成熟,以及技术的全面发展,将会有一些成长的烦恼。用炒作周期的说法,Wasm 将介于幻灭的低谷和启蒙的斜坡之间。
银行基于云原生架构的 DevOps 建设实践经验
云原生技术已逐渐成为金融科技行业的技术标配,DevOps技术也已发展有十几年,两者的强强联手、有效结合必将是金融业数字化转型的利器和必经之路。
微服务之间的调用方式哪种最佳?
在微服务架构中,需要调用很多服务才能完成一项功能。服务之间如何互相调用就变成微服务架构中的一个关键问题。
千万不要过早引入Kubernetes
绝大多数的初创以及扩张阶段的企业在构建软件时都应该避免使用 Kubernetes 以及其他的一些过早优化。如果你所在的企业使用了 Kubernetes,那么你们很有可能会把精力花在一些偏离主线的事情上。
Mirantis收购了云原生创业公司Shipa
容器管理平台Mirantis曾从纯OpenStack公司转向开源多云供应商,又在2019年收购了Docker Enterprise。如今,他们再次宣布已成功收购Shipa——一家专为开发者提供云原生应用程序开发、部署及管理工具的初创公司。
美团广告平台拥抱数据实时化趋势
在广告实时数仓开发技术规范和方案时提到,一些当前实时数仓建设方案的问题,目前各公司在实时数仓建设方式主要采用的是Lambda架构,其显著问题是实时数据和离线数据是分开建设的
如何构建智能监控预警管理平台?
面对不同的数据需求,分析的粒度也各不相同,那么怎样更加高效地完成分析,而不是做重复的工作。那就需要数据平台的细粒度、强实时性、高效能。
如何为用户画像,高效获取有效信息?
随着信息的指数级增长,如何高效获取有效信息成为大众关注点。搜索和推荐是两种重要且互为补充的主动/被动信息获取方式。
BI系统质量挑战与建设
BI(Business Intelligence)即商务智能,它是一套完整的解决方案,用来帮助企业更好地利用数据提高决策质量的技术集合,是从大量的数据中钻取信息与价值的过程。BI系统质量至关重要,可以说没有质量保障的BI数据还不如没有BI数据。
数据大屏可视化挑战
伴随着大数据时代的到来,数据大屏可视化展示技术成为一个热门的话题,引起了人们极大的关注。但是,关于数据大屏可视化展示,你知道多少?大屏可视化系统的发展未来如何?我们本文梳理了大数据可视化技术现状以及发展方向,以及实时数仓发挥的关键能力。
开源OLAP引擎选型
在做数据分析之前,少不了要和各种开源引擎打交道,那么,不同引擎之间是什么关系,实时数仓是如何一步步跨越技术障碍,推动企业业务走向现代化数据架构的。在引擎选型之前,我们先看下OLAP与OLTP的区别。OLAP与OLTP的区别OLTP(OnlineTransactionProcessing联机事务处理),是传统关系型数据库的应用技术,提供日常的、基本的事务处理,比如在线交易之类。OLAP(Online
实时计算框架特点及对比:Flink、Spark Streaming、Storm
随着互联网和大数据技术的发展,实时计算框架也在推陈出新,向着高吞吐、高可用、低延迟准实时的方向发展。具体而言,主流的计算引擎不外乎三个:Flink、Spark Streaming、Storm。
实时数仓、湖仓一体、流批一体,它们都在说什么
对于一些时效性比较强的行业, 传统的数据仓库可以解决财务分析的难题, 但是不能对全流程进行实时监控,比如外卖平台, 需要准确知道目前的订单进行到了哪一步?目前整个路程中的瓶颈在什么地方?