ITPub博客

POLARDB 是阿里云自主研发的下一代云原生分布式数据库，100%兼容MySQL、PostgreSQL等开源数据库，高度兼容Oracle语法，使用RDS服务的客户不需要修改应用代码，可以一键迁移到POLARDB，体验更大的容量，更高的性能，更低的成本，和更灵活的弹性。目前，POLARDB是阿里云增速最快的数据库产品，广泛应用于互联网金融、政府便民工程、新零售、教育、游戏、社交直播等行业。作为基于

摘要：在2019杭州云栖大会大数据企业级服务专场，由阿里云智能计算平台事业部资深技术专家李雪峰带来以“如何有效降低大数据平台安全风险”为题的演讲。本文首先概括了企业在大数据上云过程中会产生的安全顾虑。接着，在大数据平台中要处理的安全风险中，对数据中心物理安全与网络安全、大数据平台系统安全以及数据应用安全三部分做了详细的介绍。最后，描述了阿里云飞天大数据平台的安全体系。精彩视频回放 >>

摘要：2019杭州云栖大会大数据技术专场，由阿里云资深技术专家侯震宇、阿里云高级技术专家陈颖达以及阿里云资深技术专家戴谢宁共同以“SQL在 MaxCompute 分布式系统中的旅程 ”为题进行了演讲。本文首先介绍了 MaxCompute 计算平台及其特点、超大规模企业级SQL引擎和其功能。然后讲解了如何构建企业级分布式智能调度执行框架。最后介绍了新一代列式存储引擎AliOrc及

摘要：2019杭州云栖大会大数据技术专场，由阿里云通用计算平台负责人关涛带来以 “阿里巴巴大数据技术关键进展及展望” 为主题的演讲。本文首先讲解了从阿里巴巴的角度看待大数据领域的客户价值迁移，概览了核心技术的发展点，最后针对如何构建智能化大数据平台的相关工作进行了介绍，从引擎优化到 “自动驾驶”，并列举了几个典型案例。观看演讲回放 >>>以下为精彩视频内容整理：一、大数据领域的客

摘要：2019云栖大会大数据&AI专场，阿里云智能计算平台事业部研究员关涛、资深专家徐晟来为我们分享《AI加持的阿里云飞天大数据平台技术揭秘》。本文主要讲了三大部分，一是原创技术优化+系统融合，打破了数据增长和成本增长的线性关系，二是从云原生大数据平台到全域云数仓，阿里开始从原生系统走入到全域系统模式，三是大数据与AI双生系统，讲如何更好的支撑AI系统以及通过AI系统来优化大数据系统。直播

序言Dubbo在2011开源之后，一直是国内最受欢迎的RPC框架，之后spring boot和Spring Cloud的面世，助推了微服务的火热程度。计算机的世界变化很快，自从容器和K8s登上舞台之后，给原有的RPC领域带来了很大的挑战。这个文章主要讲述RPC领域遇到的问题，以及RPC怎么去拥抱K8s怀抱的一些思考。K8S介绍kubernetes是一个开源的，用于管理云平台中多个主机上的容器化的应

缘起最近看到一个很流行的标题，《开源XX年，star XXX，我是如何坚持的》。看到这样的标题，忽然发觉 Arthas 从 2018 年 9 月开源以来，刚好一年了，正好在这个秋高气爽的时节做下总结和回顾。Arthas 是 Alibaba 开源的 Java 诊断工具，深受开发者喜爱。Github：https://github.com/alibaba/arthas[1]文档：https://alib

Nacos 开源至今已有一年，在这一年里，得到了很多用户的支持和反馈。在与社区的交流中，我们发现有一些问题出现的频率比较高，为了能够让用户更快的解决问题，我们总结了这篇常见问题及解决方法，这篇文章后续也会合并到 Nacos 官网的 FAQ 里。如何依赖最新的 Nacos 客户端？很多用户都是通过 Spring Cloud Alibaba 或者 Dubbo 依赖的 Nacos 客户端，那么 Spri

在10月23日召开的GNTC 2019全球网络技术大会IPv6分论坛上，阿里云高级技术专家张先国宣布支持阿里DNS的IPv6版本正式发布，即阿里DNS在保持IPv4 稳定解析服务的基础上（Anycast地址为223.5.5.5,和223.6.6.6），还支持了一组IPv6 Anycast地址为 2400:3200::1和2400:3200:baba::1的资源节点，让处于双栈的用户能够通

JindoFS背景计算存储分离是云计算的一种发展趋势，传统的计算存储相互融合的的架构存在一定的问题， 比如在集群扩容的时候存在计算能力和存储能力相互不匹配的问题，用户在某些情况下只需要扩容计算能力或者存储能力，传统的融合架构不能单独的扩充计算或者存储能力， 而计算存储分离可以很好的解决这个问题，用户只需要关心整个集群的计算能力。基于OSS 计算存储分离EMR 现有的计算存储分离方案是基于OSS提供

什么是产品化大部分创业公司都是从一个伟大的想法创意开始的，并且需要有一堆技术专家来实现。我们清楚，伟大的技术并不等同于和伟大的产品，技术可以解决问题，但如果它没有办法法规模化，那这些技术或者能力对用户便没有直接价值，只有把它们拆解，打包，设计成产品，才能真正的解决用户问题，把某些技术或者能力变成产品的过程这个过程，就是产品化。OneModel方法论OneModel方法论是以维度建模为理论基础，构建

采集&传输层SqoopHadoop、关系型数据库之间传输数据的工具。传输时，会启动多个MR作业并发的传输数据DataX阿里巴巴开源的数据同步工具，用来在各种异构数据源之间同步数据。比如 RDBMS<->Hadoop/MaxCompute、RDBMS<->hbase/ftp等等。部署、运维非常简单，将DataX的jar包copy到linux系统中即可运行Flume分布

概述数据抽取是指从源数据抽取所需要的数据， 是构建数据中台的第一步。 数据源一般是关系型数据库，近几年，随着移动互联网的蓬勃发展，出现了其他类型的数据源，典型的如网站浏览日期、APP浏览日志、IoT设备日志从技术实现方式来讲，从关系型数据库获取数据，可以细分为全量抽取、增量抽取2种方式，两种方法分别适用于不用的业务场景增量抽取时间戳方式用时间戳方式抽取增量数据很常见，业务系统在源表上新增一个时间戳

概念：LADV是DataV内嵌的智能识别设计产品，能够迅速学习和识别手绘草图、信息图表、大屏截图等资料，并在DataV内自动生成可配置的可视化应用。有了LADV今后人人都能做可视化专家了！先来看看LADV的效果：以上例子中，生成的可视化图表，均可以在DataV的环境下做进一步的样式调优和数据接入，最终发布为一个实时数据驱动展示的页面。1.LADV解决了什么问题？简单来说，就是大幅降低数据可视化的设

背景2014 年，Spring Boot 1.0 发布。Spring Boot 的发布绝对是 Pivotal 历史上具有里程碑意义的事件，它让我们能够非常简便地开发 Spring 应用，屏蔽了各种配置文件和底层实现，提供 AutoConfiguration，Factory Loading Mechanism, Embedded Servlet Container，Conditional Annot

基于Alibaba Nacos和Sentinel，实现灰度路由和流量防护一体化的解决方案，发布在最新的 Nepxion Discovery 5.4.0 版，具体参考：源码主页，请访问 源码主页指南主页，请访问 指南主页文档主页，请访问 文档主页Nepxion Discovery框架在实现灰度发布和路由功能前提下，结合Nacos和Sentinel，对流量再实施一层防护措

前言2019.10.7~9号，随着70周年国庆活动的顺利闭幕，Flink Forward 也照例在他们的发源地柏林举办了第五届大会。虽然还没有拿到具体的数据，不过从培训门票已经在会前销售一空的这样的现象来看，Flink Forward 大会还是继续保持了一个良好的势头。本届大会不管是从参会人数上，提交的议题，以及参加的公司数量来看都继续创了一个新高。当然，这要去掉去年 Flink Forward

背景WHAT（做什么）Advanced Horizontal Pod Autoscaler（简称：AHPA）是kubernetes中HPA的功能增强. 在兼容原生HPA功能基础上，增加预测、执行模式配置、缩容控制等功能。用户可以使用AdvancedHorizontalPodAutoscaler对支持scale功能的对象（例如Deployment等）进行弹性伸缩。WHY（为什么做）HPA在使用方面存

导读：当前在 Knative 中已经提供了对 Kafka 事件源的支持，那么如何基于 Kafka 实现消息推送呢？本文作者将以阿里云 Kafka 产品为例，给大家解锁这一新的姿势。背景消息队列 for Apache Kafka 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。消息队列 for Apache Kafka 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，已

导读：前端开发者是最早享受到 “Serverless” 好处的群体，因为浏览器就是一个开箱即用、甚至无需为计算付费的环境！Serverless 把前端开发体验带入了后端，利用 FaaS 与 BaaS 打造一套开箱即用的后端开发环境。本文作者将从前端角度出发，为你讲述 Serverless 带来的收益及挑战。引言Serverless 是一种 “无服务器架构”，让用户无需关心程序运行环境、资源及数量，