目錄id
主機型別
主機名
ip
應用軟體
作業系統
硬體配置
1物理機
namenode01
192.168.1.200
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
2物理機
datanode01
192.168.1.201
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
3物理機
datanode02
192.168.1.202
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
4物理機
datanode03
192.168.1.203
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
我這裡規劃的角色不是太好,如果是四台機器,建議大家按照我們下面的分配
修改四台伺服器的主機名。
在namenode01節點上面進行操作。
ssh-keygen -t rsa
ssh-copy-id namenode01
ssh-copy-id datanode01
ssh-copy-id datanode02
ssh-copy-id datanode03
建立使用者(4臺機器相同操作)
useradd hadoop && echo '123456' |passwd --stdin hadoop
使用命令visudo
設定使用者許可權(4臺機器相同操作),新增如下內容:
hadoop all=(all) all
Hadoop 部署之環境準備 一
id主機型別主機名ip應用軟體作業系統硬體配置 1物理機 namenode01 192.168.1.200 jdk1.8.0 171 hadoop 2.7.3 hive 2.3.3 hbase 1.2.6 zookeeper 3.4.10 spark 2.3.1 centos7.4 6核cpu 8g...
Hadoop 部署之環境準備 一
id主機型別主機名ip應用軟體作業系統硬體配置 1物理機 namenode01 192.168.1.200 jdk1.8.0 171 hadoop 2.7.3 hive 2.3.3 hbase 1.2.6 zookeeper 3.4.10 spark 2.3.1 centos7.4 6核cpu 8g...
CDH部署 環境準備
hostnamectl set hostname cm server 更改個主機名 sed i s selinux enforcing selinux disable g etc selinux config setenforce 0 cat etc hosts 172.16.1.100 cm se...