我们都知道HDFS 是存取数据的分布式文件系统,那么对HDFS 的 操作,就是文件系统的基本操作,比如文件的创建、修改、删除、修改权 限等,文件夹的创建、删除、重命名等。对HDFS 的操作命令类似于lLinux 的shell 对文件的操作,如ls、mkdir、rm 等。
我们在执行HDFS的shell操作的时候,一定要确定Hadoop 是正常运行的,我们可以使用使用jps 命令确保看到各个hadoop 进程。
1.touchz创建空白文件 1.1使用如下命令创建空白文件hadoop fs -touchz /文件名
1.2使用如下命令查看空白文件hadoop fs -ls /
由于是touchz命令所以必须使用专门的命令来查看
1.3使用du查看目录下的各个文件的大小hadoop fs -du /
1.4count统计文件(夹)数量该命令选项显示指定路径下的文件夹数量、文件数量、文件总大小信息,如下图所示
hadoop fs -count /
1.5 mkdir创建空白文件夹hadoop fs -mkdir /abc
使用命令查看
hadoop fs -ls /
1.6 mv剪切移动hadoop fs -mv /需要移动的文件 /移动到的文件夹/移动的文件名
使用lsr查看文件属性
hadoop fs -lsr /
注意:lsr命令的作用是迭代展示所有目录和文件,在shell操作中非常常用
1.7cp复制这个命令选项表示复制hdfs 指定的文件到指定的hdfs 目录中,首先创建一个a.txt文本,然后将他复制到abc文件夹当中去
hadoop fs -cp /需要复制的文件或文本 /目标文件夹/文件或文本名
1.8rm删除文件或者空白文件夹hadoop fs -rm /文件名或文本名
1.9rmr递归删除(删除非空文件夹)hadoop fs -rmr /文件夹
1.10put上传文件//首先创建一个文件 touch /路径/文件名 //使用put上传一个文件 hadoop fs -put /路径/文件名
1.11cat查看文件内容hadoop fs -cat /文件名
1.12tail查看文件尾部hadoop fs -cat /文件名
1.13chmod修改文件权限修改之前的权限如上
hadoop fs -chmod /文件名