ITPub博客

首页 > 大数据 > Hadoop > [初学hadoop]搭建环境及运行第一个实例wordcount

[初学hadoop]搭建环境及运行第一个实例wordcount

Hadoop 作者:ChenySmith 时间:2014-02-21 15:32:41 0 删除 编辑

       hadoop单机版搭建图文详解(转自)   http://freewxy.iteye.com/blog/1027569

hadoop 1.0.3   第一个实例  wordcount(转)

1、运行指令 bin/hadoop fs -mkdir input 在hdfs上新建一文件夹,命名为input

2、运行指令 bin/hadoop fs -put f1.txt input 将f1.txt复制到input文件夹下,运行bin/hadoop fs -ls input查看是否复制成功

3、运行指令 bin/hadoop jar hadoop-0.20.2-examples.jar wordcount input output 并输出到output文件夹下

4、运行指令 bin/hadoop fs -cat output/* 查看输出结果,即词频统计结

 

 

ubuntu ant安装和配置[转]

一. 可以使用

    sudo apt-get install ant

安装,但是这种装法不好。首先安装的ant不是最新的版本,其次还要装一堆其他的附带的东西。所以我才用自己手动ant安装。

二. 手动安装

    1. 到Apache官网下载最新版本的ant:http://ant.apache.org/bindownload.cgi

    2. 解压下载下来的.tar.gz文件: tar -xf apache-ant-1.8.2-bin.tar.gz (可能会要求输入密码)

  3.将解压出来的文件移动到/opt/下:sudo mv apache-ant-1.8.2 /opt/ (sudo 不能省,否则没有权限)

  4.配置环境变量:sudo gedit /etc/profile,在原来基础上添加以下蓝体字:

     export ANT_HOME=/opt/apache-ant-1.8.2
     export JAVA_HOME=/usr/lib/jvm/java-6-openjdk
     export PATH=$JAVA_HOME/bin:$PATH
:$ANT_HOME/bin
     export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

    5.验证是否安装成功: ant -version

    Apache Ant(TM) version 1.8.2 compiled on December 20 2010
    如此字样,则表示安装成功!

具体的之用方法,使用 ant --help 即可一一学到。

<!-- 正文结束 -->

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/24082287/viewspace-1119788/,如需转载,请注明出处,否则将追究法律责任。

上一篇: 没有了~
下一篇: 没有了~
请登录后发表评论 登录
全部评论

注册时间:2010-06-12