首页 > 大数据 > Hadoop > 安装配置eclipse
安装配置eclipse
从ubuntu软件中心下载安装后打开后再关闭
将插件hadoop-eclipse-plugin-0.20.203.jar复制到 /usr/lib/eclipse/plugins中,然后重新开启(该插件可以在hadoop中找到,但该版本插件缺少包需要自己修改插件)
windows->Open perspective ->other->Map/reduce 选择视图类型

windows->preferences->hadoop map/reduce

新建map/reduce 文件系统

输入如下:

advanced parameters ->dfs.replication 设置为2
hadoop上常用命令:
bin/hadoop dfs -ls ->查看当前用户路径下的文件
bin/hadoop dfs -rmr xxx ->删除目录
kill -9 xxx
hadoop配置过程容易出错的地方:
1.忘记配置hostname,从而导致hosts中的机器名与hostname中的机器名不同。该错误会在map-reduce过程导致卡住。
2.hadoop/conf中的masters与slaves配置出错,会导致hadoopde 的datanode启动不起来
3.hadoop启动不起来,如果启动不起来,先尝试将所有datanode的data目录删除,再重新启动试试。如果再不行就将namenode的tmp目录和datanode的data目录都删除,(注:tmp目录删除意味着存在dfs上的数据会丢失,且需要重新格式化namenode)再重新启动hadoop。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/21345054/viewspace-1119697/ ,如需转载,请注明出处,否则将追究法律责任。