当前位置: Oracle DBA培训网-优技培训 >> Hadoop大数据 > Hadoop培训教程 >

Hadoop入门教程:HDFS常用Shell命令

Hadoop入门教程:HDFS常用Shell命令

Hadoop入门教程:HDFS常用Shell命令,列出文件目录、创建文件夹、上传文件、下载文件、查看文件、删除文件、HELP帮助命令。

(1)列出文件目录:hadoop fs -ls 目录路径

查看HDFS根目录下的目录:hadoop fs -ls /

递归查看HDFS根目录下的目录:hadoop fs -lsr /

(2)在HDFS中创建文件夹:hadoop fs -mkdir 文件夹名称

在根目录下创建一个名称为di的文件夹:

(3)上传文件到HDFS中:hadoop fs -put 本地源路径 目标存放路径

将本地系统中的一个log文件上传到di文件夹中:hadoop fs -put test.log /di

*PS:我们通过Hadoop Shell上传的文件是存放在DataNode的Block(数据块)中的,通过Linux Shell是看不到文件的,只能看到Block。因此,可以用一句话来描述HDFS:把客户端的大文件存放在很多节点的数据块中。

(4)从HDFS中下载文件:hadoop fs -get HDFS文件路径 本地存放路径

将刚刚上传的test.log下载到本地的Desktop文件夹中:hadoop fs -get /di/test.log /home/hadoop/Desktop

(5)直接在HDFS中查看某个文件:hadoop fs -text(-cat) 文件存放路径

在HDFS查看刚刚上传的test.log文件:hadoop fs -text /di/test.log

(6)删除在HDFS中的某个文件(夹):hadoop fs -rm(r) 文件存放路径

删除刚刚上传的test.log文件:hadoop fs -rm /di/test.log

删除HDFS中的di文件夹:hadoop fs -rmr /di

(7)善用help命令求帮助:hadoop fs -help 命令

查看ls命令的帮助:hadoop fs -help ls

技术沙龙MORE+

Oracle技术沙龙:【数据保护顶尖技术-MAA】首次全国首播12c MAA技术 云数据库加上MAA技术组成最豪华的技...
Oracle技术沙龙第49期:【Oracle 数据库云技术分享】Oracle技术沙龙第49期:【Oracle 数据库云技术分享】本次技术沙...
Oracle技术沙龙第48期:【Oracle 12c RAC安装】小编:今天讲什么内容呢?以后有什么用呢? 大师:今天讲的是12c...
我要参加技术沙龙