ITPub博客

首页 > 大数据 > Hadoop > Hadoop的集群环境部署说明

Hadoop的集群环境部署说明

原创 Hadoop 作者:adnb34g 时间:2018-10-12 14:52:24 0 删除 编辑


Hadoop 集群环境搭建是很多学习 hadoop 学习者或者是使用者都必然要面对的一个问题,网上关于 hadoop 集群环境搭建的博文教程也蛮多的。对于玩 hadoop 的高手来说肯定没有什么问题,甚至可以说事 手到擒来 的事情,但对于 hadoop 的初学者来说, hadoop 集群环境的搭建着实压力不小。

网上关于 hadoop 集群环境搭建的文章有很多,可以说是 图文并茂 ,对于新手而言即使步骤再详细,但看着这么多步骤,那么多的指令肯定是会觉得很繁琐的。毕竟都是从菜鸟一步一步过来的,记得当初做 hadoop 集群环境搭建真的是很烦琐。

目前国内的 hadoop 商业发行版虽然比较多,但是在集群环境的搭建方面基本都很类似或者是相同,指令多、步骤繁琐。有的时候觉得不免觉得很奇怪,这些发行商为什么不对 hadoop 的集群环境部署做一下优化呢?幸运的是总算是让我找到了一个 hadoop 发行版集群环境搭建简单易用。

这里使用的是一款国产的 hadoop 发行版,大快搜索推出的 DKhadoop 。集群环境的部署总体给我的感觉是比较简单易用,不像以前的一些发行版那么繁琐。 下面就给大家以 DKhadoop 为例介绍一下这种简单易用的 hadoop 集群环境搭建。

1、 为集群自定义一个名称:在安装集群组建之前安装程序需要对主机进行一些环境检查 作, DKhadoop 需要 root 权限,并通过 ssh 链接到主机。

2、 选择安装模式,安装模式有三种可以选择,分别是基础安装、完整安装和自定义安装。基本安装中包含的服务内容有: hafs-2.6.0 的安装、 JDK1.7.0_79 安装、 Yarn-2.6.0 安装以及 zooleeper-3.4.6 安装

 

3、 如果选择完整安装模式,则需要安装的服务内容会更多,详细可以的参考下方图示内容以及说明部分介绍。

 

4、 自定义安装模式则可以自主的进行角色配置,通过对主机性能的检测 DKhadoop 会按照主机性能推荐相应的分配设置。

 

5、 从上述 3 种安装模式中选择一个合适的模式后,点击右下角的【继续】将自动进行组建的安装,所有组建安装成功后也就完成了集群环境的部署。

 

这套 DKhadoop 的集群环境部署是已经被优化过的了,个人觉得简单易用。感兴趣的朋友可以自己去看一下!

 

 


来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/31524777/viewspace-2216208/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论
八年IT互联从业经历,专注网络营销、大数据、人工智能等领域的知识分享

注册时间:2018-03-09

  • 博文量
    72
  • 访问量
    24607