ITPub博客

首页 > 大数据 > Hadoop > hadoop hdfs 常用命令

hadoop hdfs 常用命令

原创 Hadoop 作者:元亨利贞 时间:2023-09-28 10:16:21 0 删除 编辑

命令列表

  • 查看目录文件信息:hdfs dfs -ls <路径>

  • 创建文件夹:hdfs dfs -mkdir <路径>

  • 删除文件/空白文件夹:hdfs dfs -rm [-skiptrash] <路径>

  • 递归删除文件/空白文件夹:hdfs dfs -rmr [-skiptrash] <路径>

  • 查看指定路径的当前目录结构:hdfs dfs -ls <路径>

  • 递归查看指定路径的目录结构:hdfs dfs -ls -R <路径>

  • 统计目录下个文件大小:hdfs dfs -du <路径>

  • 汇总统计目录下文件 (夹)大小:hdfs dfs -du -s <路径>

  • 统计文件 (夹)数量:hdfs dfs -count [-q] <路径>

  • 移动文件:hdfs dfs -mv <源路径> <目的路径>

  • 将指定路径文件复制到目标路径:hdfs dfs -cp <源路径> <目的路径>

  • 删除文件/空白文件夹:hdfs dfs -rm [-skiptrash] <路径>

  • 递归删除文件/空白文件夹:hdfs dfs -rmr [-skiptrash] <路径>

  • 查看文件内容:hdfs dfs -cat <路径>

  • 查看文件的最后一部分:hdfs dfs -tail <路径>

  • 上传本地文件到HDFS:hdfs dfs -put <本地路径> <HDFS路径>

  • 从HDFS下载文件到本地:hdfs dfs -get <HDFS路径> <本地路径>

  • 改变文件的副本数:hdfs dfs -setrep -w <副本数> <路径>

  • 查看文件块信息:hdfs fsck <路径> -files -blocks

  • 查看帮助:hadoop fs -help


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024433/viewspace-2986475/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: hadoop hdfs api 操作
请登录后发表评论 登录
全部评论

注册时间:2022-11-21

  • 博文量
    383
  • 访问量
    247960