ITPub博客

首页 > 大数据 > 数据挖掘 > ubuntu12.04下Hadoop单机版、集群搭建以及Hadoop常用指令

ubuntu12.04下Hadoop单机版、集群搭建以及Hadoop常用指令

数据挖掘 作者:潭晶 时间:2013-04-30 20:40:39 0 删除 编辑
登录slave节点:ssh qing@slave

不同linux之间的copy,scp是有Security的文件copy,基于ssh登录。操作起来比较方便,比如要把当前一个文件copy到远程另外一台主机上:scp WordCount.jar hadoop@master:/usr/local/hadoop

删除HDFS上文件:hadoop fs -rmr /user/hadoop/*

在HDFS上创建目录:hadoop fs -mkdir file

查看HDFS上的文件:hadoop fs -cat /user/hadoop/file

运行jar包,在集群上跑:hadoop jar WordCount.jar file output

在namenode上查看节点连接情况:bin/hadoop dfsadmin -report

删除文件
rm -rf * 删除目录下所有文件
rm rf 非空目录名
rm 文件名

解压缩
.zip
解压:unzip FileName.zip
压缩:zip FileName.zip DirName

.rar
解压:rar -x FileName.rar
压缩:rar -a FileName.rar DirName

.tar.gz或tgz
解压:tar -zxvf FileName.tar.gz
压缩:tar -zcvf FileName.tar.gz DirName

杀死进程,pid 为进程的进程标识符:kill -9 pid 

查看一个目录下的文件和子目录的详细信息:ls -l
修改文件夹权限:chmod -R 777 file

文件安装目录:
系统安装软件、文档一般在 /usr/share
可执行文件 /usr/bin
配置文件 /etc
lib文件 /usr/lib
<!-- 正文结束 -->

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/22225870/viewspace-1120650/ ,如需转载,请注明出处,否则将追究法律责任。

上一篇: 没有了~
下一篇: 没有了~
请登录后发表评论 登录
全部评论

注册时间:2009-07-29