HDFS常用shell命令

2021-09-25 07:10:29 字數 946 閱讀 7296

1、檢視所有命令:

hdfs dfs

2、檢視某目錄下檔案列表:

hdfs dfs -ls /tmp

hdfs dfs -cat /tmp/index.html

4、在hdfs 中建立job 目錄:

hdfs dfs –mkdir /tmp/info(遞迴建立目錄:hdfs dfs –mkdir -p /tmp/work/info)

5、刪除job目錄:

hdfs dfs -rm /tmp/info(遞迴刪除目錄:hdfs dfs –rm -r /tmp/work/info)

hdfs dfs -copytolocal(或者-get) /tmp/index.html .

7、從本地當前目錄下,上傳之前的index.html 檔案到hdfs 的/tmp/info 目錄中:

hdfs dfs -copyfromlocal(或者-put) index.html /tmp/info

hdfs dfs -text /tmp/info/index.html.gz | more

9、檢視hdfs 中目錄/tmp/info 中檔案占用磁碟大小:

hdfs dfs -du -h /tmp/info

10、在/tmp/info 目錄中建立空檔案helloworld.txt:

hdfs dfs -touchz /tmp/info/helloworld.txt

11、檢視hdfs dfs 中某個命令的用法,比如:cp:

hdfs dfs -usage cp

HDFS 常用shell命令

fs file system shell 命令格式 bin hadoop fs cmd 當使用hdfs distributed file system 等價使用如下命令格式 bin hdfs dfs cmd localsrc dst 可同時上傳多個檔案到hdfs裡面 2hdfs dfs caturi...

hdfs常用shell命令

1.sh hadoop fs put soft offlineprocess custom.xml user oozie 將 soft offlineprocess 下的custom.xml 檔案,拷貝到hdfs的 user oozie 目錄下。2.sh hadoop rmr user oozie ...

hdfs常用shell命令

基於ubuntu下hadoop偽分布式操作指令。將hdfs檔案系統下所有檔案以級聯的形式顯示出來。hdfs dfs ls r 一次性建立乙個 資料夾。hdfs dfs mkdir p folder1 folder2 folder3在folder1 folder2 folder3目錄下建立乙個temp...