HDFS Shell基本操作

2022-09-08 04:48:12 字數 1957 閱讀 5371

hdfs dfs [命令]  [命令]         等價於            hadoop fs

1  ./bin/hdfs dfs -mkdir -p /user/hadoop     基本操作在hadoop目錄bin中hdfs  後跟dfs

-mkdir 建立目錄    -p代表建立多級目錄

2  hadoop fs -ls .    "."表示當前使用者目錄

3  hadoop fs -mkdir /input    建立input目錄

4  hadoop fs -rm -r /input    刪除input目錄   -r 表示刪除目錄和目錄下的所有檔案

hadoop fs -put test.text /     將本地檔案上傳到hadoop根目錄

hadoop fs -cat /test.text      檢視檔案內容

./bin/hdfs dfs -cat /dbtaobao/dataset/user_log/small_user_log.csv| head -10   檢視前十行

hadoop fs -cp /test.text /hello          //複製乙份

其他命令  hadoop fs 回車看註解

[-checksum ...]

[-chgrp [-r] group path...]

[-chmod [-r] path...]

[-chown [-r] [owner][:[group]] path...]     

[-copyfromlocal [-f] [-p] [-l] ... ]//從本地複製

[-copytolocal [-p] [-ignorecrc] [-crc] ... ]//複製到本地

[-count [-q] [-h] [-v] ...]

[-cp [-f] [-p | -p[topax]] ... ]

[-createsnapshot ]

[-deletesnapshot ]

[-df [-h] [...]]

[-du [-s] [-h] ...]

[-expunge]

[-find ... ...]

[-get [-p] [-ignorecrc] [-crc] ... ]//拿到

[-getfacl [-r] ]

[-getfattr [-r] [-e en] ]

[-getmerge [-nl] ]

[-help [cmd ...]]

[-ls [-d] [-h] [-r] [...]]//檢視目錄  需要有目錄  hadoop fs -ls /

[-mkdir [-p] ...]

[-movefromlocal ... ]

[-movetolocal ]

[-mv ... ]

[-put [-f] [-p] [-l] ... ]

[-renamesnapshot ]

[-rm [-f] [-r|-r] [-skiptrash] ...]

[-rmdir [--ignore-fail-on-non-empty] ...]

[-setfacl [-r] [ ]|[--set ]]

[-setfattr ]

[-setrep [-r] [-w] ...]

[-stat [format] ...]

[-tail [-f] ]

[-test -[defsz] ]

[-text [-ignorecrc] ...]

[-touchz ...]

[-usage [cmd ...]]

hdfs shell的基本操作

目錄 hdfs基本操作 1 查詢命令 2 建立資料夾 3 建立新的空檔案 4 增加檔案 5 檢視檔案內容 6 複製檔案 7 刪除檔案或資料夾 8 重新命名檔案 9 將源目錄中的所有檔案排序合併到乙個本地檔案 hadoop dfs ls 查詢 目錄下的所有檔案和資料夾 hadoop dfs ls r ...

HDFS shell基礎操作

一 操作命令 hdfs的操作命令是以 hdfs dfs 開頭的命令,其中hdfs是hadoop系統在linux系統中的主命令,dfs是子命令,使用者通過命令可以完成hdfs檔案的複製 移動 查詢 刪除等操作,hdfs shell命令的一般格式如下 hdfs dfs 通用選項 其實就是 hdfs df...

HDFS Shell 常用命令

hadoop fs cmd opt arg1 arg2 關於path hdfs hdfs namenodehost absolutepath 簡寫 absolutepath 本地 file absolutepath 簡寫 absolutepath 或者相對路徑 relatepath hadoop f...