ITPub博客

原文链接：三分钟走进袋鼠云一站式全自动化全生命周期运维管家 ChengYing（承影）课件获取：关注公众号 “数栈研习社”，后台私信  “ChengYing”获得直播课件视频回放：点击这里ChengYing 开源项目地址：github 丨 gitee 喜欢我们的项目给我们点个STAR！STAR！！STAR！！！（重要的事情说三遍）技术交流钉钉 qun：305375112022 年 5 月

原文链接：基于开源流批一体数据同步引擎 ChunJun 数据还原 —DDL 解析模块的实战分享课件获取：关注公众号“数栈研习社”，后台私信 “ChunJun” 获得直播课件视频回放：点击这里ChunJun 开源项目地址：github 丨 gitee 喜欢我们的项目给我们点个 STAR！STAR！！STAR！！！（重要的事情说三遍）一、ChunJun-DDL 解析模块介绍上一期我们为大家介绍了《Ch

原文链接：数据资产为王，解析企业数字化转型与数据资产管理的关系视频回顾：点击这里课件获取：点击这里一、数据资产背景介绍随着企业数字化转型的深入，数据体量爆炸式增长，如何控制数据生产成本、发现有价值的数据，提高数据 ROI，成了企业数字化转型中后期的关键任务，这也是数据资产管理的终极目标。而在数字化转型过程中并不是一帆风顺，往往会遇到很多问题。如何控制生产成本、发现恶性成本因素、量化生产成本？如何发

一、直播介绍5 月 30 日，袋鼠云一站式全自动化运维管家 ChengYing（承影）正式开源，我们深知将开源不是结束，而恰恰是开始，如何让更多的小伙伴们更好的了解 ChengYing、使用 ChengYing、建设 ChengYing，是开源项目团队的同学一直在思考的问题。为了更好的帮助大家了解 ChengYing，项目团队同学计划每个月为大家进行一场技术直播，我们将从各方面介绍 Che

原文链接：走好数据中台最后一公里，数据服务 API 是数据中台的标配视频回顾：点击这里课件获取：点击这里一、数据服务 API 建设背景在数字化转型的时代背景下，新需求的大量增长、新技术的不断迭代，“互联网化、数字化” 进程的不断深入，越来越多的业务被迁移到互联网上，产生大量的业务交互和对外服务需求，对 API 接口的需求与日俱增，如何快速提升企业数据开放共享能力，是企业面临数字化转型的关键

一、直播介绍上期渡劫老师为大家分享了《ChunJun 支持异构数据源 DDL 转换与自动执行》，为大家介绍了数据还原的基本内容，本期渡劫老师将会对数据还原的内容做进一步的分享。本次直播将围绕 DDL 模块介绍 & 实战及 Calcite 在 - DDL 中的实践应用为大家一一分享。二、直播主题ChunJun 数据还原 - DDL 功能模块解析三、直播时间时间：2022 年 6 月 23 日

原文链接：基于开源大数据调度系统 Taier 的 Web 前端架构选型及技术实践课件获取：关注公众号 **“数栈研习社”，后台私信 “Taier”** 获得直播课件视频回放：点击这里Taier 开源项目地址：github 丨 gitee上两期，我们为大家分享了 Taier 入门及控制台的介绍，本期我们为大家分享 Taier 的 Web 前端架构介绍。本次分享我们将从 Taier 的前端技术栈选型，

原文链接：实时开发平台建设实践，深入释放实时数据价值视频回顾：点击这里课件获取：点击这里一、实时数仓建设背景随着整体行业的数字化转型不断深入以及技术能力的不断提高，传统的 T+1 式（隔日）的离线大数据模式越来越无法满足新兴业务的发展需求，开展实时化的大数据业务，是企业深入挖掘数据价值的一条必经之路。面对数字化转型下的数据快速产生、“小步快跑” 的精细化运营及实时化和自动化的决策需求，如何提高实时

原文链接：直播预告｜走好数据中台最后一公里，数据服务 API 是数据中台的标配一、课程介绍数据服务 API 作为数据统一服务平台建设的最上层，能够将数据仓库数据以服务化、接口化的方式提供给数据使用方，屏蔽底层数据存储、计算的诸多细节，简化和加强数据的使用。随着企业 “互联网化、数字化” 进程的不断深入，越来越多的业务被迁移到互联网上，产生大量的业务交互和对外服务需求，对 API 接口的需求与日

原文链接：DTMO 直播预告｜Taier 的 Web 前端架构解析一、直播介绍上两期，我们为大家分享了 Taier 入门及控制台的介绍，本期我们为大家分享 Taier 的 Web 前端架构介绍。本次直播我们将从 Taier 的前端技术栈选型，到技术实现以及未来规划为大家讲解，通过本次分享，希望大家能对 Taier 有更进一步的了解。二、直播主题Taier 的 Web 前端架构解析三、直播时间时间：

原文链接：离线数仓建设，企业大数据的业务驱动与技术实现丨 03 期直播回顾视频回顾：点击这里课件获取：点击这里一、离线数仓建设背景离线数据是相对实时数据而言的数据产出，不同于实时数据，离线数据一般是 T+1 天处理，也就是说昨天产生的数据至少要今天才能看到计算结果。离线数据一般应用于对数据时效要求不高，需要基于一段时间的历史数据计算才能得到结果的场景，我们大致可以分为离线数据分析及数据应用两类

原文链接：袋鼠云数栈基于 CBO 在 Spark SQL 优化上的探索一、Spark SQL CBO 选型背景Spark SQL 的优化器有两种优化方式：一种是基于规则的优化方式 (Rule-Based Optimizer，简称为 RBO)；另一种是基于代价的优化方式 (Cost-Based Optimizer，简称为 CBO)。1、RBO 是传统的 SQL 优化技术RBO 是发展比较早且比较成熟

2022 年 4 月 16 日，神十三在东风着陆场预定区域成功着陆。接下来从 5 月开始，我国还将进行 6 次飞行任务，在今年内完成中国空间站的在轨建造。而以目前情况推测，在国际空间站退役后，中国空间站将极可能在相当一段时间内，成为世界唯一一个空间站。网友纷纷表示：中国航天太牛了。 中国航天最初并不是 “别人家的孩子”，起步比美国晚了近半个世纪，很长一段时间内，都落在世界航天阵列后面

 原文地址：交流蛟分承影，雁落忘归——袋鼠云一站式全自动化运维管家ChengYing（承影）正式开源技术交流：30537511（钉钉群）我们兴奋的向大家宣布一个好消息DTstackCon新成员袋鼠云一站式全自动化全生命周期运维管家ChengYing（承影）正式开源项目地址Github开源地址：https://github.com/DTStack/chengyingGitee开源地址：ht

 原文地址：玩转集群配置中心，一文带你了解Taier控制台丨DTMO 03期直播回顾（内含视频+课件）课程视频回顾：Taier基础教程（二）：Taier1.1新功能详解&控制台介绍_哔哩哔哩_bilibili开源项目交流群：30537511（钉钉）开源项目地址：GitHub - DTStack/Taier: 大数据平台-分布式任务调度系统上期，偷天老师为我们介绍了Taier的入门

 DTMODTMO（DTstack Meetup Online）是袋鼠云数栈技术团队2022年的全新开源项目技术分享活动，我们秉承着开源共享的理念，旨在为大家分享大家分享袋鼠云大数据开源项目家族的最新成果与技术实践，我们将以每月1-2场的线上直播，为大家奉上一场场开源盛宴。课程介绍2018年4月，秉承着开源共享理念的数栈技术团队在github上开源了ChunJun（原FlinkX），历经

 一、前言ChunJun（原FlinkX）是一个基于Flink提供易用、稳定、高效的批流统一的数据集成工具，是袋鼠云一站式大数据开发平台-数栈DTinsight的核心计算引擎，其技术架构基于实时计算框架Flink，打造出“具有袋鼠特色”的实时计算引擎。 开源项目地址： https://github.com/DTStack/chunjunhttps://gitee.co

引言一项技术能得以广泛运用，其中的一个关键点在于工程化。前端从最开始的简单写写网页和样式，发展为需要处理复杂的逻辑，伴随而来的是问题是相关文件越来越多，简单在网页中引用已经解决不了问题，需要相关的工程化工具来处理和优化这个流程。前端社区也涌现了较多的解决方案，例如rollup，parcel，webpack，esbuild等，在不同情况下都能较好的处理问题。这其中webpack因其微内核架构，在核心

一、需求背景产品成立之初，产品的需求是需要对各种指标进行公式运算，组合成一个新的复合指标，供后续使用。当时产品提出的形式是有两种：一种是直接让用户输入，不作任何其他操作，但这种方式带来的问题一个是，需要前端对公式进行复杂的校验，太多不可控的问题，另一个是操作指导性很弱，用户在使用的时候没有任何限制，也并不太能明白如何操作；另一种方式就是让用户通过拖拽的方式，添加运算符，去组成自己需要的公式，比较直

一、浅析DevOps互联网的发展形同潮水，来势汹汹、快而迅猛，企业业务日益庞大的同时伴随着团队规模的扩大，业务的复杂度与关联性显著提升的同时对效能也有了更高的要求，高效协同之间，我们既要追求快速交付，亦要保证产品的质量与稳定，两者之间产生了矛盾。DevOps作为这个矛盾平衡点，其概念最早于2009年被提出，并在近几年受到企业广泛的关注与实践。促使DevOps近年高频出现的原因，我们总结出以下两点：