配置hadoop集群服務之二 免密登陸

2022-08-04 19:00:16 字數 891 閱讀 5665

1、配置多台機器可以免密登陸:

步驟:(tip:正常情況下authorized_keys

應該同id_rsa.pub

)1)用ssh-keygen命令生成公匙

2)接著在master節點上做如下配置,把id_rsa.pub追加到授權的key裡面去。

cat /home/haoxin/.ssh/id_rsa.pub >>~/.ssh/authorized_keys

3)給自己加sudo許可權:

sudo vim /etc/sudoers

wq!4)複製公匙到別的伺服器上:

scp -r ~/.ssh/* [email protected]

:~/.ssh

scp ~/.ssh/* 遠端使用者名稱@遠端伺服器ip:~/

最好.ssh目錄是700

.ssh/目錄下是600

如果不修改成這樣,後期會出現:

bad permissions: ignore key: /root/.ssh/id_rsa

也就是配置的公匙失效了;

最後多台機器reboot重啟一下,就可以互相免密登陸;

總結tip:

1、scp -r ~/.ssh/

主機名@ip:~/.ssh/;

2、檢視系統log日誌的方法:

3、建立namenode程序的方法:

hadoop-daemon.sh start namenode

4、hdfs即hadoop分布式檔案系統(hadoop distributed filesystem),以流式資料訪問模式來儲存超大檔案;

5、hdfs-site.xml裡面的配置資訊是用來設定namenode是哪個主機的;

yarn-site.xml裡面的配置資訊也是一樣;

Hadoop集群搭建之二(測試hadoop集群)

搭建好hadoop集群後,需要測試下集群看各節點是否工作正常。1.單集群hadoop測試 2.hdfs檔案系統操作手冊 驗證前,先關閉集群中各個節點的防火牆,否則會出現datanode執行一段時間後,自動關閉。使用下面的命令關閉防火牆 service iptables stopmaster.hado...

hadoop集群配置免金鑰登陸

背景 搭建集群時,首先要配置各節點間的免金鑰登陸,以保證各節點之間的資料傳輸。介紹乙個比較快的配置方法。注意 搭建集群時要保證各機器在相同的使用者下,如都在 root 使用者或都在 test 使用者下。那麼免金鑰也要都在相同的使用者下,配置在不同的使用者下是不起作用的。接下來以10臺伺服器node1...

hadoop集群節點 ssh免密登入配置

vmware中有兩台centos客戶機 hadoop1和hadoop2,在客戶機hadoop1中通過如下命令登入hadoop2,將提示需要輸入hadoop2客戶機密碼。ssh hadoop2如果要做到hadoop1無需輸入密碼就能ssh登入到hadoop2,需要將hadoop1的公鑰註冊到hadoo...