ITPub博客

首页 > 大数据 > Hadoop > 安装配置eclipse

安装配置eclipse

Hadoop 作者:SZ00016 时间:2014-01-08 10:58:59 0 删除 编辑

安装配置eclipse

 

从ubuntu软件中心下载安装后打开后再关闭

将插件hadoop-eclipse-plugin-0.20.203.jar复制到 /usr/lib/eclipse/plugins中,然后重新开启(该插件可以在hadoop中找到,但该版本插件缺少包需要自己修改插件)

windows->Open perspective ->other->Map/reduce 选择视图类型



windows->preferences->hadoop map/reduce  选择haooop文件路径


新建map/reduce 文件系统


输入如下:



advanced parameters ->dfs.replication 设置为2

 

hadoop上常用命令:

bin/hadoop dfs -ls ->查看当前用户路径下的文件

bin/hadoop dfs -rmr xxx ->删除目录

kill -9 xxx   --->强行杀死某个进程,在启动失败时会用到。

hadoop配置过程容易出错的地方:

1.忘记配置hostname,从而导致hosts中的机器名与hostname中的机器名不同。该错误会在map-reduce过程导致卡住。

2.hadoop/conf中的masters与slaves配置出错,会导致hadoopde 的datanode启动不起来

3.hadoop启动不起来,如果启动不起来,先尝试将所有datanode的data目录删除,再重新启动试试。如果再不行就将namenode的tmp目录和datanode的data目录都删除,(注:tmp目录删除意味着存在dfs上的数据会丢失,且需要重新格式化namenode)再重新启动hadoop。

<!-- 正文结束 -->

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/21345054/viewspace-1119697/,如需转载,请注明出处,否则将追究法律责任。

下一篇: 没有了~
请登录后发表评论 登录
全部评论

注册时间:2009-04-09

最新文章