Snowflake后记 - Building An Elastic Query Engine on
在2016年发表了《TheSnowflakeElasticDataWareHouse》这篇paper后,snowflake引领了云数仓发展的潮流,也引爆了资本界对于数据库行业的狂热,无论国内国外,投资圈都在期待下一个"snowflake"的出现。时至今日,snowflake在美股IPO的一年半后,市
Snowflake弹性数仓论文翻译(下)
在上半部分中,论文中主要介绍了Snowflake的整体、存储与计算结构,详情点击Snowflake弹性数仓论文翻译(上)。以下将继续Snowflake论文的后半部分。四、亮点功能Snowflake提供了关系型数仓所期望的许多特性:全面的SQL支持、ACID事务、标准接口、稳定性和安全性、用户支持,当
Snowflake弹性数仓论文翻译(上)
在公有云时代,公有云平台几乎能够按需提供无限的计算和存储资源。同时,SaaS模型将企业级系统带给了无法负担成本和相关系统复杂性的用户。传统的数仓系统正在努力的适应新的环境,但是传统数仓毫无疑问还存在一些设计上的局限性,传统数仓往往都是为固定资源而设计,因而没办法利用云的弹性能力。另外,传统的数仓依赖
Snowflake 是如何返回结果集(ResultSet)的?
导言从出生的第一天起,Snowflake就是一个完全基于云的数据仓库。创始人并没有把已有的数据仓库简单移植到云服务商提供的服务器上,而是充分利用云服务理论上无限水平扩展的特性,实现了存算分离的架构,给用户提供了更好的workloadisolation以及更灵活的计价方式。这篇文章就想着重讨论了Sno
Snowflake 与现代数据栈
2021年已经没有人谈大数据这个概念,不是它失败了,恰恰是因为它成功了。成功技术的吊诡之处在于,它最终会被认为是理所当然,消失在背景音中。「现代数据栈」是否成立并不取决于技术本身,而是背后更大的前置条件——市场是否接受公有云。比如对于国内的云厂商来说,是满足客户眼下更迫切的需求,帮助他们上私有云,甚
透过 849亿市值的数仓 Snowflake,看数据库的未来
近些年,很多数据库公司上岸,MongoDB市值216亿美金,Cloudera市值45亿美金。而其中最耀眼的,非Snowflake莫属,849亿美金。以上数据截止于2021.1.10解释下,Snowflake公司主要做数据仓库产品。早年我在华润做MES/ERP开发时,就隐约感到数据仓库将会是未来的热门
Snowflake & Delta Lake两大新型数仓对比分析
概述数据分析从上世纪80年代兴起以来,大体经历了企业数仓(EDW)、数据湖(DataLake)、以及现在的云原生数仓、湖仓一体等过程。企业数仓是数据仓库最原始的版本,从当前的视角来看,存在着只能处理结构化数据、集中式的存储和计算、以及成本昂贵等缺点。数据湖是伴随着数据爆炸式增长而出现的技术,它能够存
Snowflake VS BigQuery — 两个云数据仓库的对比
现在,各种新型数据仓库解决方案层出不穷,想跟上的难度越来越大。选择最佳数据仓库,满足运营需求及目标,是业务战略的重要组成部分。不幸的是,许多公司仍然受困于做出决策。除此之外,将数据仓库投入实施可能也会很困难。但是,一旦完成了数据仓库的开发,丰厚的投资回报可能会随之而来,同时,你也会更加了解数据。
【2022/3/10】ITPUB新闻早报
今日热点:1.最高法发布人脸识别司法解释:对随意「刷脸」说「不」;2.蚂蚁集团隐私计算一体机通过首个金融级测评;3.全球十大电信基础设施品牌榜发布:华为第一,思科第二,诺基亚第三,高通第四中兴第五。
Snowflake核心技术解读系列——架构设计
简介:Snowflake取得了巨大的商业成功,技术是如何支撑起它的千亿美元市值呢?它技术强在哪?本文为大家倾情解读Snowflake的核心技术原理。背景:2020年9月16日,Snowflake成功IPO,交易首日市场估值达到704亿美元,募集资金34亿美元。Snowflake成为迄今为止规模最大的
新一代数据仓库:Snowflake 弹性数仓介绍
摘要我们生活在分布式计算的黄金时代。公有云平台几乎能够按需提供无限的计算和存储资源。同时,SaaS模型将企业级系统带给了无法负担成本和相关系统复杂性的用户。传统的数仓系统正在努力的适应新的环境,但是首先,它是为固定资源而设计,从而没办法利用云的弹性能力。另外,传统的数仓依赖复杂的ETL流水线和物理调
Snowflake(SNOW.N):从云数据仓库到数据云平台
文丨陈俊云许英博作为全球领先的云数据仓库厂商,Snowflake料将持续受益于数据量爆发以及全球数据管理软件云化、数据管理功能融合等趋势,营收来源亦有望从当前数据仓库逐步扩展至数据分析、数据交易、数据集成等领域。同时伴随公司营收规模的持续增长,理想的NRR水平将推动公司盈利能力、现金流的快速改善。考
SnowFlake 雪花算法生成分布式唯一ID
SnowFlake雪花算法基本概念SnowFlake雪花算法是Twitter开源的分布式唯一ID生成算法,其具有简洁、高性能、低延迟、ID按时间趋势有序等特点。如采用12位序列号,则理论支持每毫秒生成4096个不同数字,能够满足绝大多数高并发场景下的互联网应用。SnowFlake雪花算法能保证在da
snowflake:认识云上数仓
一,为什么公司值得关注?移动互联网爆发以来各企业积累了大量的用户数据,数据正在成为越来越有价值的资产。根据IDC的数据,到2025年,全球将产生175ZB的数据,而2018年为33ZB,复合年增长率为27%。进入数据时代,如何挖掘海量数据中存在的商业价值是核心。从使用者来看,主要的制约是用户的想象力
Snowflake:大数据是新的淘金热
本文作者:SandisWeilSnowflake(SNOW)创建了一个供公司用来执行业务分析、运营智能和信息管理的平台,以引领公司走向未来。Snowflake将他们的业务称为“数据仓库即服务模型”。由红杉资本投资,Snowflake于2012年早期融资成立,开启了大型跨国公司大数据转型之路。这项技术
产品收入创历史新高,Snowflake是不是Saas领域罕见的宝石?
作者|AlbertLin01令人羡慕的22财年业绩Snowflake(SNOW)在2022财年结束时,产品收入创下历史新高,超过11亿美元(同比增长106%),剩余履约义务(RPO)为26亿美元(同比增长99%),净收入保留率(NRR)为178%,使该公司成为SaaS行业中罕见的宝石。在第四季度,这
浅谈SnowFlake架构
1前言SnowFlake作为近年来十分火爆的数据仓库应用获得了许多用户和投资人的青睐,本人日常工作中也经常使用SnowFlake做分析,所以对其背后的运行机制做了一些研究,今天和大家聊聊SnowFlake的主要架构和工作原理。SnowFlake股价2SnowFlake主要特性安全性和数据保护:Sno
使用nodejs应用查询SAP HANA Express Edition里的数据
其实我们使用的是SAP针对SAPHANAExpressEditor发布的nodejsSDK.npminit创建一个新的nodejs应用:执行下列命令行,从SAP的nodejsregistry下载hanaclient:npmconfigset@sap:registrynpm.sap.comnpmins
SAP HANA Delivery Unit概念简述
介绍在SAPHANA应用开发领域里,我们通常用package来存储modelerviews和XS工程等模型。这些包应该被部署到最终的生产服务器上。DeliveryUnit是SAPHANA原生开发对象的部署方式,可以被看成一系列包的集合,用于Transportationmanagement的统一管理。
在 Power BI 中连接到 SAP HANA 数据库
使用PowerBIDesktop,你现在可以访问SAPHANA数据库。若要使用SAPHANA,必须在本地客户端计算机上安装SAPHANAODBC驱动程序,PowerBIDesktop的SAPHANA数据连接才能正常运行。可以从SAP开发工具下载SAPHANA客户端工具,其中包含所需的ODBC驱动程序