ITPub博客

首页 > 大数据 > Hadoop > Hadoop2.0/YARN/Spark/Storm/Tez技术分享

Hadoop2.0/YARN/Spark/Storm/Tez技术分享

原创 Hadoop 作者:baboon124 时间:2014-05-15 14:20:26 0 删除 编辑

HADOOP 2.0时代

Hadoop 2.0来了,之所以引发广泛关注,不仅是因为它将带动更多以其为核心、令人振奋的新型应用程序,还由于它允许创造出一些原本无法实现的数据处理方式——上一代Hadoop由于早期架构方面的限制而束缚了思维

Hadoop 2.0--大数据的新突破在即

Hadoop 2.0--大数据迎接下一个飞跃


内容简介

深入阐述了Hadoop2.0的架构原理,安装部署以及基于2.0的计算框架,详细讲解YARNMapReduce2.0、Spark、Storm、Tez
课程力求做到架构与实施并重,原理和实践结合,希望大家能在这个课程里学有所获。

视频地址:

http://cloud.video.taobao.com//play/u/110513591/p/1/e/1/t/1/11853545.swf


课程大纲

1、Hadoop 2.0

·      Hadoop 2.0产生背景

·      Hadoop 2.0基本构成

·      HDFS 2.0

·      MapReduce 2.0

·      Hadoop 2.0安装配置

·      集群测试

2、YARN资源管理系统

·      YARN产生背景

·      YARN基本设计思想

·      YARN基本架构

·      YARN工作流程

·      YARN通信协议

·      YARN容错

·      YARN资源调度机制

·      YARN为核心的生态系统

3、Storm流式计算框架

·      Storm基本概念

·      Storm流式计算框架

·      基于YARNStorm架构

·      YARN-Storm部署

·      Storm On YARN服务

4、Tez数据处理引擎

·      Apache Tez介绍

·      Tez特点

·      Tez数据处理引擎

·      DAGAppMaster实现

·      Tez优化机制

·      Tez应用场景

·      Tez部署

5、Spark生态系统

·      什么是Spark

·      Spark生态系统

·      Spark的核心--RDDLineage

·      RDD的存储、容错机制、内部设计及数据模型

·      Spark调度框架

·      Spark的分布式部署方式

·      基于MesosSpark模式

·      基于YARNSpark模式

·      Spark的独立模式部署

·      SparkYARN模式部署

http://item.taobao.com/item.htm?spm=686.1000925.1000774.40.1N29Ts&id=38935998184

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/14075938/viewspace-1161910/,如需转载,请注明出处,否则将追究法律责任。

上一篇: MDM 模型
请登录后发表评论 登录
全部评论

注册时间:2008-10-15

  • 博文量
    53
  • 访问量
    98420