1、配置多台機器可以免密登陸:
步驟:(tip:正常情況下authorized_keys
應該同id_rsa.pub
)1)用ssh-keygen命令生成公匙
2)接著在master節點上做如下配置,把id_rsa.pub追加到授權的key裡面去。
cat /home/haoxin/.ssh/id_rsa.pub >>~/.ssh/authorized_keys
3)給自己加sudo許可權:
sudo vim /etc/sudoers
wq!4)複製公匙到別的伺服器上:
scp -r ~/.ssh/* [email protected]
:~/.ssh
scp ~/.ssh/* 遠端使用者名稱@遠端伺服器ip:~/
最好.ssh目錄是700
.ssh/目錄下是600
如果不修改成這樣,後期會出現:
bad permissions: ignore key: /root/.ssh/id_rsa
也就是配置的公匙失效了;
最後多台機器reboot重啟一下,就可以互相免密登陸;
總結tip:
1、scp -r ~/.ssh/
主機名@ip:~/.ssh/;
2、檢視系統log日誌的方法:
3、建立namenode程序的方法:
hadoop-daemon.sh start namenode
4、hdfs即hadoop分布式檔案系統(hadoop distributed filesystem),以流式資料訪問模式來儲存超大檔案;
5、hdfs-site.xml裡面的配置資訊是用來設定namenode是哪個主機的;
yarn-site.xml裡面的配置資訊也是一樣;
Hadoop集群搭建之二(測試hadoop集群)
搭建好hadoop集群後,需要測試下集群看各節點是否工作正常。1.單集群hadoop測試 2.hdfs檔案系統操作手冊 驗證前,先關閉集群中各個節點的防火牆,否則會出現datanode執行一段時間後,自動關閉。使用下面的命令關閉防火牆 service iptables stopmaster.hado...
hadoop集群配置免金鑰登陸
背景 搭建集群時,首先要配置各節點間的免金鑰登陸,以保證各節點之間的資料傳輸。介紹乙個比較快的配置方法。注意 搭建集群時要保證各機器在相同的使用者下,如都在 root 使用者或都在 test 使用者下。那麼免金鑰也要都在相同的使用者下,配置在不同的使用者下是不起作用的。接下來以10臺伺服器node1...
hadoop集群節點 ssh免密登入配置
vmware中有兩台centos客戶機 hadoop1和hadoop2,在客戶機hadoop1中通過如下命令登入hadoop2,將提示需要輸入hadoop2客戶機密碼。ssh hadoop2如果要做到hadoop1無需輸入密碼就能ssh登入到hadoop2,需要將hadoop1的公鑰註冊到hadoo...