大資料學習之HDFS常用命令

2021-09-22 21:35:36 字數 1102 閱讀 4613

使用

putty

工具,以客戶端安裝使用者登入安裝客戶端的節點:

即開啟putty

工具,輸入

servicecenter

申請雲主機的

ip190.28.58.153

切換至fusioninsight_services_client

客戶端的安裝目錄,如果未安裝,先安裝客戶端:

安裝成功之後配置客戶端環境變數:

切換至客戶端安裝目錄:

cd /opt/huawei/client

配置環境變數:

source bigdata_env

進行使用者認證:

kinit mineruser01

輸入密碼:

hdfs檔案操作常用命令:

(1)列出hdfs下的檔案

hdfs  dfs  -ls  《目錄》

(2)上傳檔案

將linux系統本地檔案上傳到hdfs中

hdfs  dfs  -put  《本地檔案》  hdfs  dfs  -get  (4)檢視檔案

hdfs  dfs  -cat  (5)建立目錄

hdfs  dfs  -mkdir  《目錄》

(6)刪除檔案

hdfs  dfs  -rm -r  《檔案》

(7)複製檔案

hdfs  dfs  -copyfromlocal   《要複製的檔案路徑》  《要放置檔案的路徑》

還有很多命令,大部分是linux的shell命令前面加上  hadoop  dfs  -cmd  《引數 / 選項》

參考:

HDFS常用命令

選項名稱 使用格式 含義 ls ls 路徑 檢視指定路徑的當前目錄結構 lsr lsr 路徑 遞迴檢視指定路徑的目錄結構 du du 路徑 統計目錄下個檔案大小 dus dus 路徑 匯 計目錄下檔案 夾 大小 count count q 路徑 統計檔案 夾 數量 mv mv 源路徑 目的路徑 移動...

HDFS常用命令

size medium hdfs 常用的檔案操作命令 1.cat 使用方法 hadoop fs cat uri 說明 將路徑指定的檔案輸出到螢幕 示例 hadoop fs cat hdfs host1 port1 file hadoop fs cat file file3 2.copyfromloc...

hdfs常用命令

hdfs檔案的相關操作主要使用hadoop fs hadoop dfs hdfs dfs 命令,以下對最常用的相關命令進行簡要說明。hadoop fs ls 顯示當前目錄結構,ls r 遞迴顯示目錄結構 hadoop fs mkdir 建立目錄 hadoop fs rm 刪除檔案,rm r 遞迴刪除...