hadoop新增節點配置步驟

2021-07-04 23:30:24 字數 708 閱讀 4624

新加datanode的安裝步驟:

1、ssh無密碼配置和上面詳細步驟一樣,在新datanode上的/root 上建乙個/.ssh的目錄,把namenode的authorized_keys複製到新datanode的/.ssh目錄上。在namenode上ssh驗證一下是否需要密碼。

2、修改機器名,和上面詳細步驟一樣。記得重啟一下。

3、建/usr/program這個目錄,把jdk的安裝檔案放進去,安裝一下。這和上面詳細步驟一樣,但不需要修改環境變數。 

4、將namenode上/usr/program/hadoop-1.0.1這個檔案拷貝到新datanode的相同目錄下。再將namenode上面/etc/profile這個檔案拷貝到新datanode相同目錄上。檢視profile的可執**況,不可執行就用命令把profile變成可執行檔案,再用source命令讓profile生效。

5、在/usr/local/下面建乙個hadoop目錄,保證裡面是空的。hadoop安裝好了之後會在這裡產生乙個臨時檔案。

6、和上面詳細步驟的第七步一樣,修改幾個檔案的許可權。

7、關閉防火牆重啟一下,在namenode上輸入start-all.sh執行一下,jps看一下程序中是否有namenode,在新datanode上輸入jps看一下datanode是否啟動。最後和上面詳細步驟一樣,檢視一下網頁,看一下節點運作情況。如果live nodes數目與所有datanode數目一致,表示安裝好了,你可以休息了。

新增 刪除osd節點步驟

1 ceph osd tree 檢視目前cluster 狀態 df h mnt ceph vol1 確保node1掛載了rbd,在節點 node1上執行2 在節點node4上安裝ceph 並複製ceph.conf到其相應位置,同時在 etc hosts裡新增節點node4和相應ip,並推送到所有節點...

Hadoop安裝步驟

二 解壓 tar zxvf hadoop 3.0.3.tar.gz三 配置環境變數 1 設定環境變數 在 etc profile下,新增 export hadoop home opt hadoop export path path opt hadoop bin opt hadoop sbin 2 s...

JENKINS 從節點新增與配置

jenkins 主節點主要負責任務的排程,從節點則負責 主節點排程過來的任務執行,認證憑據配置 以下時主節點know hosts 檔案找到的key 從節點必須要配置j a 環境,以及任務執行需要的其他外掛程式,比如說使用m en打包,則從節點必須要安裝m en外掛程式並配置好相關的環境變數,相關環境...