id主機型別主機名ip應用軟體作業系統硬體配置
1物理機
namenode01
192.168.1.200
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
2物理機
datanode01
192.168.1.201
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
3物理機
datanode02
192.168.1.202
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
4物理機
datanode03
192.168.1.203
jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1
centos7.4
6核cpu、8g記憶體、250儲存
我這裡規劃的角色不是太好,如果是四台機器,建議大家按照我們下面的分配
修改四台伺服器的主機名。
在namenode01節點上面進行操作。
ssh-keygen -t rsa
ssh-copy-id namenode01
ssh-copy-id datanode01
ssh-copy-id datanode02
ssh-copy-id datanode03
建立使用者(4臺機器相同操作)
useradd hadoop && echo '123456' |passwd --stdin hadoop
使用命令visudo
設定使用者許可權(4臺機器相同操作),新增如下內容:
hadoop all=(all) all
Hadoop 部署之環境準備 一
id主機型別主機名ip應用軟體作業系統硬體配置 1物理機 namenode01 192.168.1.200 jdk1.8.0 171 hadoop 2.7.3 hive 2.3.3 hbase 1.2.6 zookeeper 3.4.10 spark 2.3.1 centos7.4 6核cpu 8g...
Hadoop 部署之環境準備 一
目錄id 主機型別 主機名 ip 應用軟體 作業系統 硬體配置 1物理機 namenode01 192.168.1.200 jdk1.8.0 171 hadoop 2.7.3 hive 2.3.3 hbase 1.2.6 zookeeper 3.4.10 spark 2.3.1 centos7.4 ...
CDH部署 環境準備
hostnamectl set hostname cm server 更改個主機名 sed i s selinux enforcing selinux disable g etc selinux config setenforce 0 cat etc hosts 172.16.1.100 cm se...