ITPub博客

首页 > 大数据 > Hadoop > [初学hadoop]eclipse下运行wordcount程序

[初学hadoop]eclipse下运行wordcount程序

Hadoop 作者:dykanhui 时间:2014-02-24 16:36:08 0 删除 编辑

http://blog.csdn.net/napoleongjc/article/details/8741125[转]

 

在tmp下新建文本test.txt

复制到dfs下面

bin/hadoop dfs -copyFromLocal /tmp/test.txt input

 

ecplise新建MapReduce工程,将hadoop 安装目录下/src/example/org/apache/hadoop/example/WordCount.java 代码复制到 项目src下

右键  run  as-->run configurations->java applications 选择wordcount      -->arguments

在program arguments:填入 hdfs://localhost:9000/user/hadoop/input   hdfs://localhost:9000/user/hadoop/out

点击run

若出现 java heap space(JVA虚拟机内存不够)

-->arguments-->VM arguments:  填入-Xmx1024m   -->run      OK!

 

 

<!-- 正文结束 -->

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/22741518/viewspace-1114352/ ,如需转载,请注明出处,否则将追究法律责任。

上一篇: 没有了~
下一篇: 没有了~
请登录后发表评论 登录
全部评论

注册时间:2009-10-21