基于商业版Hadoop搭建的数据仓库解决方案
本方案以某金融企业大数据平台建设方案为例,面对企业内部的数据现状提出合理化建议,基于商业版Hadoop数据平台搭建数据仓库系统,实现数据资产的充分利用,结合当时现状推荐国产自主研发商业版Hadoop平台TDH做为基础平台,以下为方案概述。
上云节省 35%计算资源,420 个运维人天:运满满实时计算实践和思考
满帮集团全心全意帮助司机和货主,助力物流降本增效,利用移动互联网、大数据、人工智能等新技术,打造智慧物流生态平台,提升“车找货、货找车”的智能化和标准化,改变传统物流行业“小、乱、散、弱”的状况。旗下运满满货运平台一站式解决货运全链路问题,百万司机一秒响应。
数字政府隐私计算落地案例介绍
各地的法律法规,各种数据应用条例,数据开发条例也纷纷来支持数据开发利用,提供数据服务和数据产品的加工。
字节国际支付十连问
之前有位读者去字节面试,面的是国际支付部门,他凭记忆,回忆被问到的一些面试真题。于是,我整理了比较全的答案,希望对大家找工作有帮助呀,加油~
vivo 服务端监控体系建设实践
监控服务平台是自研的、覆盖全场景的可用性保障系统。经过多年深耕,vivo监控团队已经成体系构筑起一整套稳定性保障系统,随着云原生可观测技术变革不断深化,监控团队如何掌舵前行?下面就平台的建设历程、思考、探索,做一下简单介绍。
ClickHouse与Hive的区别,终于有人讲明白了
Hive是Hadoop生态系统中事实上的数据仓库标准。Hive是建立在Hadoop生态中的数据仓库中间件,其本身并不提供存储与计算能力。Hive的存储引擎使用HDFS,计算引擎使用MapReduce或Spark。
SQL Server内置的HTAP技术
2005年,Gartner正式提出了HTAP这一概念,并且迅速引起了一些企业的关注,被视为是未来数据发展的重要趋势之一。
数据治理 VS 公司治理、IT治理、数仓治理
治理结构,也没有绝对“好或糟糕”。处在不同数据管理成熟度阶段,不同的行业、不同的业务特点、不同的发展需求,应选择不同的治理结构。
史上AI最高分!谷歌大模型创美国医师执照试题新纪录,科学常识水平媲美人类医生
史上AI最高分,谷歌新模型刚刚通过美国医师执照试题验证! 而且在科学常识、理解、检索和推理能力等任务中,直接与人类医生水平相匹敌。在一些临床问答表现中,最高超原SOTA模型17%以上。
Redis网络模型有多强?
本文将从BIO开始介绍,经过NIO、多路复用,最终说回Redis的Reactor模型,力求详尽。
分布式系统关键路径延迟分析实践
随着对用户体验的不断追求,延迟分析成为大型分布式系统中不可或缺的一环。本文介绍了目前在线服务中常用的延迟分析方法,重点讲解了关键路径分析的原理和技术实现方案,实践表明此方案效果显著,在耗时优化方面发挥了重要作用,希望这些内容能够对有兴趣的读者产生启发,并有所帮助。
我不认为PG的DOUBLE BUFFERING是更优秀的解决方案
关于PG在Shared buffers上的DOUBLE BUFFERING设计,一直是争议极多的。
Oracle数据库迁移到国产数据库核心难点解析 | 联盟发布
帮助企业少走弯路,高效克服难题。本文是课题组近期举办的一次线上交流活动的精华内容汇总。
DevOps最佳实践之应用开发和部署
我们希望这些最佳实践能对项目的稳定运营提供帮助,也希望刚接触DevOps/SRE的新人能通过学习这些最佳实践来提升自己在这方面的水平。
线程数,512是否合理?
低代码破解了软件开发“不可能三角”?我做了个测评...
低代码平台的出现,却打破了这条“千古不破”的铁律。
PG数据库运维中的操作系统关注点
现在PG数据库在用户侧的应用场景日益丰富,很多国产数据库也与PG开源项目有着很深的渊源,在使用过程中的一些基本运维规则也与PG开源数据库十分近似。今天我们从操作系统的角度来看一看PG数据库日常运维中需要关注的一些问题。
BI取数,地狱还是天堂?
取数是数据人成长的一个起点,任何数据团队培养新人,最好从取数开始,但取数又不能做太久,因为天花板不高,连续干2-3年足矣,再干下去就会单调重复,影响职业发展,但要从取数这个”局"中突围似乎并不容易。
【长图】一文百图纵览 DTCC 2022
作为一名资深从业者,也持续关注大会13年。今年受到疫情影响,将形式改为线上,我也与近日拿到分享材料,抽空学习下。本文从上百位老师分享中摘出印象较深的,特分享给各位。
微服务:服务化框架落地的挑战和核心需求
微服务出现的意义在哪里呢?它的优势有哪些呢?如何保障业务演进但是系统架构还是依然往好的方向发展呢 ?