HDFS常用命令总结

HDFS常用命令总结 1、命令格式

与linux命令类似，要用 “hadoop fs -” 开头。

2、创建文件夹

hadoop fs -mkdir 文件夹名 路径
其中若路径为空则默认在 /user/用户名/ 路径下 *** 作

3、列出目录内容

hadoop fs -ls 路径

4、上传文件

hadoop fs -put 源路径文件(linux) 目的路径(hdfs)
注意
例如：hadoop fs -put t.txt /tmp/omcs/0228，若0228不为目录则会将t.txt文件保存为0228，其中t.txt为linux当前目录的文件（区分linux环境和hdfs环境）

5、下载文件

hadoop fs -get 源路径文件(hdfs) 目的路径(linux)

6、查看文件

hadoop fs -cat 文件名
hadoop fs -text 文件名
hadoop fs -tail 文件名 将文件尾部1K字节的内容输出到stdout

7、删除文件

hadoop fs -rm 文件名
-r 递归删除，用于删除文件夹

8、帮助文档

hadoop fs -help 命令
查看该命令的帮助文档，若命令为空会看所有命令的文档

9、查看HDFS状态

hadoop dfsadmin -report

10、改变文件权限

hadoop fs -chmod 777 文件名
-r 对目录递归

11、复制文件

hadoop fs -cp 源路径 目的路径

12、查看文件大小

hadoop fs -du 路径
-s 显示hdfs对应路径下所有文件和的大小
-h 显示hdfs对应路径下每个文件夹和文件的大小,文件的大小用方便阅读的形式表示，例如用64M代替67108864

13、移动文件

hadoop fs -mv 源路径 目的路径

14、设置副本数

hadoop fs -setrep 3 文件/目录
-r 对目录 递归

15、判断文件

hadoop fs -test -[ezd] URI
-e 检查文件是否存在。如果存在则返回0。
-z 检查文件是否是0字节。如果是则返回0。
-d 如果路径是个目录，则返回1，否则返回0。

16、创建空文件

hadoop fs -touchz URI