Shell命令操作

HDFS的基本命令

命令格式:

hdfs dfs -操作命令 参数

1、 创建存放数据文件的目录
(1) 列出目录结构

hdfs dfs –ls 目录路径`

例:查看HDFS根目录下的文件

hdfs dfs –ls  /

(2) 创建文件夹

hdfs dfs –mkdir 文件夹名称
hdfs dfs –mkdir -p 多层文件夹名称

例:在根目录下创建HDFSShell文件夹,用来存放数据文件

hdfs dfs –mkdir /HDFSShell

2、 将数据上传到HDFS并进行管理
(1) 上传文件

hdfs dfs –put | copyFromLocal | moveFromLocal 本地路径 HDFS存放路径

例:Linux系统当中/home/hadoop/data/的mobile.txt,上传到HDFSShell文件夹下。

hdfs dfs –put /home/hadoop/data/mobile.txt /HDFSShell
hdfs dfs –copyFromLocal /home/hadoop/data/mobile.txt /HDFSShell
hdfs dfs –moveFromLocal /home/hadoop/data/mobile.txt /HDFSShell

(2) 查看文件

hdfs dfs –text|cat HDFS上的文件存放路径

例:查看刚刚上传在HDFSShell目录下的mobile.txt的文件的内容

hdfs dfs –text|cat  /HDFSShell/mobile.txt

注意:text或者cat都是用来查看文件内容的命令。

(3) 下载文件

hdfs dfs –get|copyToLocal |moveToLocal HDFS文件路径 本地存放路径

例:想要把在HDFSShell没有目录下的mobile.txt下载到Linux本地

hdfs dfs –get  /HDFSShell/mobile.txt /home/hadoop
hdfs dfs –copyToLocal /HDFSShell/mobile.txt /home/hadoop
hdfs dfs –moveToLocal /HDFSShell/mobile.txt /home/hadoop

(4) 统计目录下文件大小

hdfs dfs –du 目录路径

例:查看HDFSShell目录下各个文件的大小

hdfs dfs –du /HDFSShell

(5) 删除文件

hdfs dfs –rm|rmr 文件存放的路径

例:删除/HDFSShell/mobile.txt文本

hdfs dfs –rm  /HDFSShell/mobile.txt

注意:在生产环境下,也就说在公司,等机构里,慎用-rmr参数,慎用-rmr参数,慎用-rmr参数

3、HDFS的帮助命令
(1) 在HDFS shell使用过程中,可以使用help命令去寻找帮助

hdfs dfs –help 命令

例:查看rm 命令的帮助

hdfs dfs –help rm
Shell命令操作Shell命令操作 我是泛滥 发布了18 篇原创文章 · 获赞 9 · 访问量 376 私信 关注
上一篇:dup、dup2复制的意义,实现文件共享操作,实现重定位,重定位命令 >【linux】(l)


下一篇:UVA839 天平 Not so Mobile