ITPub博客

首页 > 大数据 > Hadoop > hadoop集群搭建

hadoop集群搭建

Hadoop 作者:qiufa_68 时间:2013-01-23 14:38:25 0 删除 编辑

    通常,集群里的一台机器被指定为 NameNode,另一台不同的机器被指定为JobTracker。这些机器是masters。余下的机器即作为DataNode也作为TaskTracker。这些机器是slaves

官方地址:(http://hadoop.apache.org/common/docs/r0.19.2/cn/cluster_setup.html)

1、确保集群上每个点安装了jdk,若未安装则安装之

2、确保集群上每个点都安装了ssh,便于远程登录

3、配置节点之间的ssh无密码登录

4、在namenode 上安装hadoop,并进行配置,完成后用scp命令将hadoop文件拷贝到其他所有节点

此时所有节点上的hadoop文件内容都是一样的。

5、测试使用hadoop: 先 格式化 HDFS、然后用 start-all.sh 命令启动 hadoop、再者使用 JPS 命令可以查看各种守护进程的运行情况、建立文件进行测试

这些步骤为基础,在每一步过程中,会出现一些不可预见的问题,具体的可详情参考其他博文、

<!-- 正文结束 -->

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/22407163/viewspace-1120133/ ,如需转载,请注明出处,否则将追究法律责任。

上一篇: 没有了~
下一篇: 没有了~
请登录后发表评论 登录
全部评论

注册时间:2009-08-24