-
azkaban的安装和使用
azkaban的安装和使用
-
学习hadoop需要什么基础?
“学习hadoop需要什么基础”这已经不是一个新鲜的话题了，随便上网搜索一下就能找出成百上千篇的文章在讲学习hadoop需要掌握的基础。再直接的一点的问题就是——学Hadoop难吗？用一句特别让人无语的话回答就是：难不会，会不难！
-
MapReduce如何作为Yarn应用程序运行？
本文作为《Hadoop从入门到精通》第二章的第二节，主要介绍Yarn出现之后，MapReduce体系架构发生的改变、其在Hadoop集群中的运行原理、如何配置以保证MapReduce可以作为Yarn之上的应用程序工作并保持向后兼容性等内容。
-
伍翀 ：大数据实时计算Flink SQL解密
SQL是数据处理中使用最广泛的语言。它允许用户简明扼要地声明他们的业务逻辑。大数据批计算使用SQL很常见，但是支持SQL的实时计算并不多。Apache Flink是一款同时支持批和流计算的引擎，Flink SQL的实现完全遵循ANSI SQL标准，这是它和其他流处理框架（例如Kafka和Spark）在DSL上的一个重要的不同。阿里巴巴是Flink SQL最大的贡献者，Flink开源社区的一半以上的SQL功能都是阿里工程师开发的。
-
年中大惠，阿里云多款安全产品7月发布价格调整，请悉知
近段时间以来，网络数据安全事件频繁爆发，不少企业发生了用户数据泄露问题，这让人们开始对网络安全越发的关注。阿里云多款安全产品自7月起实行价格调整，通过病毒云查杀、数据外泄检测等功能，帮助用户扩大安全可见性，减少网络安全事件的发生。究竟有哪些安全产品价格调整了，快和小编看一看吧。态势感知全量日志按资产维度计费产品介绍全SaaS化的日志检索平台，免安装免维护，即开即用；支持逻辑（布尔表达式）检索，支持
-
学习Hadoop生态第一步：Yarn基本原理和资源调度解析！
作为《Hadoop从入门到精通》专题的第二章，本章主要介绍如何从命令行开始使用Yarn以及如何解决使用过程中可能遇到的问题。一旦你开始了解Yarn，你就会发现MapReduce如何被重写为YARN应用程序（MapReduce 2或MRv2），并了解MapReduce的体系结构更改。
-
第一章：Hadoop生态系统及运行MapReduce任务介绍！
我们生活在大数据时代，日常工作需要处理的数据量超出了单个主机的存储和处理能力。大数据带来了两大基本挑战：存储和处理大量数据以及理解数据并将其转化为竞争优势。
-
hadoop的一些知识点 配置步骤
hadoop的一些知识点 配置步骤
-
hadoop 通过cachefile来避免数据倾斜
hadoop 通过cachefile来避免数据倾斜
-
hadoop mapreducez自定义分区
hadoop mapreducez自定义分区
-
hadoop 自定义GroupComparator实现求最大值
hadoop 自定义GroupComparator实现求最大值
-
Hadoop自定义输出排序方式
通过将需要比较的值封装为一个bean 并且实现WritableComparable类，重写compareTo，来实现对自定义排序
-
hadoop的mapreduce串联执行
有时候根据需求，一个mapreduce可能完不成我们的要求，需要两个甚至多个，但是第二个mapreduce要依赖第一个job的结果，这个时候可以根据以下实现
-
hadoop 自定义格式化输出
通过继承FileOutPutFormat来实现自定义文件输出 同时还需要自定义RecordWriter
-
罗江宇：Flink Streaming在滴滴的大规模生产实践
为了应对滴滴数据量爆炸性增长和对实时计算低延迟的高要求，滴滴引入Flink 实时计算框架，目前Flink Streaming已在滴滴的实时监控，实时BI，实时CEP ，和在线业务等领域有了广泛的应用。本次演讲主要介绍Flink Streaming在滴滴大规模生产的应用场景，以及分享生产中遇到的问题以及解决方法，从中获取的经验。
-
hadoop零基础入门教程--DKHadoop完整安装步骤
使用hadoop版本是DKH标准三节点发行版，DKHadoop版本的易用性比较好，环境部署要简单的多，参考此篇安装前请先下载DKHadoop版本，网盘链接：https://pan.baidu.com/s/1-427Sh6lTLrLAPh6KMOYVg 提取码：vg2w 第一部分：准备工作1、 大数据平台所需配置：(1) 系统：CentOS 6.
-
零基础学习hadoop开发需要的必备的技能
零基础学习hadoop开发是很多新手关心的问题，当然零基础并不是说没有IT方面的知识储备，而是指没有大数据hadoop方面的基础。将“零基础学习hadoop开发”这个问题换个说法也许就更容易让人明白了，比如“学习hadoop需要具备什么基础知识”。
-
余利华：网易大数据平台架构实践分享！
随着网易云音乐、新闻、考拉、严选等互联网业务的快速发展，网易开始加速大数据平台建设，以提高数据获取速度，提升数据分析效率，更快发挥数据价值。 本次演讲主要分享网易如何围绕和改造开源技术，以产品化思维打造网易自己的大数据平台， 也会分享一下网易在大数据平台构建和支撑互联网业务过程中面临的技术挑战......
-
DKHhadoop添加新节点功能介绍
针对hadoop每个组建都要配置的这种情况，DKH提供了自动化安装应用来部署Hadoop。这就大大缩短了Hadoop的安装时间，同时也简化了安装Hadoop的过程。如果你在安装之后想要拓展节点，其实也不用担心。因为DKH中提供了节点管理的功能。
-
大快搜索的大数据一体化开发框架下的大数据爬虫安装教程
爬虫安装前准备工作：大快大数据平台安装完成、zookeeper、redis、elasticsearch、mysql等组件安装启动成功。
