hadoop HA集群搭建步驟及配置檔案的修改

2021-10-25 03:41:58 字數 2554 閱讀 4299

scp -r hadoop-2.6.0-cdh5.14.0 node03:/$pwd

#注意:兩個namenode之間要配置ssh免密碼登陸  ssh遠端補刀時候需要

#在node02上生產一對鑰匙

ssh-keygen

#將公鑰拷貝到node01

ssh-coyp-id node01

bin/zkserver.sh start

#檢視狀態:乙個leader,兩個follower

bin/zkserver.sh status

hadoop-daemon.sh start journalnode

#執行jps命令檢驗,node01、node02、node03上多了journalnode程序

hdfs namenode -format

#格式化後會在根據core-site.xml中的hadoop.tmp.dir配置的目錄下生成個hdfs初始化檔案,

把hadoop.tmp.dir配置的目錄下所有檔案拷貝到另一台namenode節點所在的機器

scp -r hahadoopdatas node02:/$pwd

##也可以這樣,建議hdfs namenode -bootstrapstandby

hdfs zkfc -formatzk
start-dfs.sh

zookeeper集群搭建步驟

2 解壓tar zxvf zookeeper 3.4.9.tar.gz 3 在zk安裝目錄下,新建目錄zkdata和zkdatalog 4 在conf目錄下拷貝zoo sample.cfg為zoo.cfg,修改 datadir home user test zookeeper zkdata 快照日誌...

kafka集群搭建步驟

1 搭建軟體環境 1 linux一台或多台,大於等於2 2 已經搭建好的zookeeper集群 2 解壓tar zxvf kafka 2.10 0.10.1.1.tgz 3 在kafka安裝目錄下,新建目錄kafkalogs 4 在config目錄下修改配置檔案server.properties,b...

redis集群搭建詳細步驟

第一步 建立redis安裝目錄 home cattsoft software 解壓 tar zxvf redis 3.0.6.tar.gz ln s redis 3.0.6 redis 目錄如下 第二步 使用yum安裝 依賴軟體 1 依賴於ruby環境,首先安裝ruby。執行 yum install...