0010 centos集群環境搭建

2021-10-03 20:52:02 字數 2215 閱讀 2152

2.1 配置固定ip

# 編輯下面的yaml檔案

vi /etc/sysconfig/network-scripts/ifcfg-ens*

例子:type=ethernet

proxy_method=none

browser_only=no

bootproto=static

defroute=yes

ipv4_failure_fatal=no

ipv6init=yes

ipv6_autoconf=yes

ipv6_defroute=yes

ipv6_failure_fatal=no

ipv6_addr_gen_mode=stable-privacy

name=ens33

uuid=67b05d84-b2e3-400d-af15-70cda56e72d5

device=ens33

onboot=yes

ipaddr=192.168.78.131

gateway=192.168.78.2

dns1=192.168.78.2

#使配置ip生效

重啟網路服務:service network restart

重啟伺服器:reboot

2.2 hostname 修改

修改hostname

# 修改主機名稱

sudo

vi /etc/hostname

#重啟sudo

reboot

2.3 拒絕xsheel連線

可能是防火牆禁止ssh訪問,通過ufw開啟ssh訪問就可以了

ufw配置防火牆

2.4 配置hosts

vi /etc/hosts

192.168.78.131 centos0010

192.168.78.132 centos0020

192.168.78.133 centos0030

192.168.78.134 centos0040

2.5 遠端傳輸命令
sudo

scp /ccc/ddd/bbb host_name@host_ip:/home/aaa/

將本地bbb檔案拷貝到遠端的aaa資料夾下

例子:scp jdk-8u201-linux-x64.tar.gz ubuntu0020:/home/rongyao

將jdk檔案拷貝到ubuntu0020上

-r拷貝資料夾

2.6 配置ssh連線

hadoop需要在多台機上工作,確保多台機可以ssh互動

ssh參考

# 在ubuntu0010生成公鑰和私鑰,全部選用預設值即可

ssh-keygen

執行以後會生成.ss**件夾,詳情如下

1.id_rsa:儲存私鑰

2.id_rsa.pub:儲存公鑰

3.authorized_keys:儲存已授權的客戶端公鑰(644許可權)

4.known_hosts:儲存已認證的遠端主機id

# 其它主機上同樣執行ssh-keygen命令,然後將公鑰追加(追加命令:例子:a檔案追加到b檔案中cat a >> b)到你需要訪問的.ss**件夾下的authorized_keys檔案中

# 我把公鑰給你,我就可以免密訪問你

快捷配置:ssh-copy-id 主機ip(需要登入的主機)

2.7 埠開放
sudo iptables -i input -p tcp --dport 9000 -j accept

然後使用netstat -an | grep 9000 檢視有沒有開啟埠

2.8 關閉圖形介面
#檢視預設啟動環境 5

systemctl get-default

==> graphical.target 圖形介面

#設定預設的啟動環境(不帶圖形介面)

systemctl set-default multi-user.target

2.9 關閉防火牆
sudo systemctl stop firewalld 臨時關閉

sudo systemctl disable firewalld ,然後reboot 永久關閉

sudo systemctl status firewalld 檢視防火牆狀態。

Centos7 4環境下kafka集群的搭建

並上傳到linux機器中 解壓到指定目錄 tar zxvf kafka2.11 c opt soft 二 新增環境變數 vim etc profile 加入下圖環境變數 三 修改kafka配置檔案 進入kafka的根目錄的config cd opt soft kafka2.11 config 開啟s...

centos7 zookeeper集群的搭建

說明 該集群的搭建是為了服務於solr集群,請參考我的關於solr集群搭建的部落格。1 建立solr cloud目錄 mkdir usr local solr cloud2 將解壓的apache zookeeper 3.5.5 bin複製三份到solr cloud目錄中 cp r apache zo...

hadoop集群環境搭建之集群客戶端的搭建

1.這涉及兩個操作hdfs集群的方式集群內操作和集群外操作 2.其中集群內操作就是在集群內某個節點上操作 3.集群外操作就是用集群之外的client與namenode進行通訊,完成操作集群內操作,選擇一台datanode節點作為操作的物件,每次上傳檔案的時候根據備份機制,上傳的檔案會本身會上傳到自己...