企业如何通过熔断降级增强服务稳定性和系统可用性?
当随着流量的不断增长,达到或超过服务本身的可承载范围,系统服务的自我保护机制的建立十分重要。「袋鼠云数据服务平台 DataAPI」将 API 调用和微服务流量控制概念相结合,推出了熔断降级功能,最大/程度保证 API 调用的稳定性和系统可用性。本文希望可以用最通俗的解释和贴切的实例带大家了解什么是熔断降级。
数据资产入表在即,企业如何把握机遇,进行数据资产管理?
数据资产入表在即,对于企业而言,如何在充满机遇的环境下调整策略、适应变化,成为了焦点问题。数据资产入表,离不开前期扎实的数据治理准备,那么究竟应然如何实现数据资产的规范化管理?本文告诉你答案。
Flink - CEP(复杂事件处理)
介绍Flink CEP(复杂事件处理)是一个基于Flink实现的复杂事件处理库12。它的核心功能是识别输入数据流中符合特定模式,即Pattern的事件序列,并允许用户针对这些序列进行针对性处理。特点实时响应:Flink CEP可以从多个数据流中发现复杂事件,识别有意义的事件(例如机会或者威胁),并尽快的做出响应。模式匹配:CEP支持在流上进行模式匹配,根据模式的条件不同,分为连续的条件或不连续的条
直播预约丨《实时湖仓实践五讲》第四讲:实时湖仓架构与技术选型
如今,大规模、高时效、智能化数据处理已是“刚需”,企业需要更强大的数据平台,来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战,湖仓一体方案应运而生。《实时湖仓实践五讲》是袋鼠云打造的系列直播活动,将围绕实时湖仓的建设趋势和通用问题,邀请奋战于企业数字化一线的核心产品&技术专家,结合实践案例分析,和听众共同探讨实时湖仓领域的前沿技术。《实时湖仓实践五讲》第四讲——《实时
大数据技术 - Druid
介绍Apache Druid 是一个开源的分布式数据存储引擎,它融合了时间序列数据库、数据仓库和全文检索系统的特性,以创造一个适用广泛用例的统一系统。特点亚秒响应的交互式查询:支持较高并发。实时导入:导入的数据即可被查询,支持高并发导入。分布式架构:采用分布式 shared-nothing 的架构,可以扩展到PB级。支持聚合函数:包括 count 和 sum,以及使用 javascript 实现自
袋鼠云产品功能更新报告08期|近百项全新功能和优化,你要的都在这里!
欢迎来到袋鼠云08期产品功能更新报告!在瞬息万变的市场环境中,我们深知客户的需求与期待,因此,我们及时推出袋鼠云最新产品更新及优化,包括数据治理中心、Hive SQL 性能优化、新插件等,助力企业在数字世界中勇往直前。以下为袋鼠云产品功能更新报告08期内容,更多探索,请继续阅读。离线开发平台新增功能更新1.支持对接 Inceptor 表权限的申请和审批背景:客户使用的是平台的 web 层权限管控方
Flink flatMap 使用lambda表达式异常问题
代码示例:.flatMap((FlatMapFunction<String, JSONObject>) (message, out) -> { String mes = message.replaceAl
Flink onTimer定时器
代码实例public class OnTimerProcesFunction extends KeyedProcessFunction<String, JSONObject, JSONObject> { private ValueState<JSO
Flink 链路延迟测量
开启如下参数:metrics.latency.interval: 30000 #默认 0,表示禁用,单位毫秒 metrics.latency.granularity: operator #默认 operator
Flink - 合理利用 cpu 资源
在 capacity-scheduler.xml 中修改属性: <property> <name>yarn.scheduler.capacity.resource-calculator</name> <!-- <value>org.apache.hadoop.yarn.util.resource.DefaultResourceCa
Yarn任务优先级配置
修改yarn-site.xml文件,增加以下参数<property> <name>yarn.cluster.max-application-priority</name> <value>5</value> </property>
Yarn 生产环境多队列配置
在capacity-scheduler.xml中配置如下: yarn.scheduler.capacity.root.queues &l
Yarn生产环境核心参数
核心参数如下:
利用 Kubernetes 降本增效?EasyMR 基于 Kubernetes 部署的探索实践
Kubernetes 是市面上最/受/欢/迎的集群管理解决方案之一,本文将介绍 EasyMR 作为一款提供一站式可视化组件安装部署与可观测运维管理能力的大数据计算引擎产品,是如何基于 Kubernetes 部署进行实践探索的。
如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路
在本篇文章中,将通过实时入湖和物化视图两个方面,介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。
灵活、可用、高扩展,EasyMR 带来全新 Yarn 的队列管理功能及可视化配置
本文为大家介绍各类资源划分和队列管理方式,以及 EasyMR YARN 的队列管理功能,如何通过可视化界面管理,给广大用户带来更高效和便捷的队列管理体验。
直播预约丨《实时湖仓实践五讲》第三讲:实时湖仓在袋鼠云的落地实践之路
如今,大规模、高时效、智能化数据处理已是“刚需”,企业需要更强大的数据平台,来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战,湖仓一体方案应运而生。《实时湖仓实践五讲》是袋鼠云打造的系列直播活动,将围绕实时湖仓的建设趋势和通用问题,邀请奋战于企业数字化一线的核心产品&技术专家,结合实践案例分析,和听众共同探讨实时湖仓领域的前沿技术。《实时湖仓实践五讲》第三讲——《实时
从理论到实践,实时湖仓功能架构设计与落地实战
实时湖仓是「实时计算」和「数据湖」的一种结合应用场景,并不是具体指一个产品模块。本文主要介绍了平台通过相关功能的设计,让数据开发可以更简单更直观地了解 Flink Catalog、数据湖、流批一体等概念,并在实际业务场景中更方便地去落地实践。
Hadoop/Spark 太重,esProc SPL 很轻
Hadoop/Spark 是源自头部互联网企业的重型解决方案,适合需要有超大规模集群的巨大企业。很多场景的数据虽然也不少,但小集群甚至无集群就足够处理,远没多到这些巨大企业的规模,也没有那么多的硬件设备和维护人员。
巧用指标平台DataIndex,五步法轻松实现指标管理
在业务发展初期,企业需要做好规范的指标管理,以保证随着业务的不断发展,数据化决策能够成为业务强有力的支撑。本文将为大家详解如何通过袋鼠云指标管理平台DataIndex 进行规范化的指标开发管理,轻松开发指标,避免各类指标问题。