kafka2 3集群搭建

2021-09-27 05:33:01 字數 883 閱讀 7884

環境:

3臺centos7.4

3臺zookeeper3.4.14

wget

解壓:tar -zxvf kafka_2.11-2.3.0.tgz

進入kafka目錄,修改config/server.properties,找到zookeeper.connect,修改zk集群的連線位址為:

zookeeper.connect=10.99.32.3:2181,10.99.32.31:2181,10.99.32.9:2181

然後修改broker.id=0 //1,2,每個節點的id必須不一樣,否則啟動會報錯

啟動kafka:bin/kafka-server-start.sh -daemon config/server.properties

啟動報錯:org.apache.zookeeper.keeperexception$nodeexist***ception: keepererrorcode = nodeexists:寫入zk時目錄相同,原因可能是server.properties裡面的broker.id=1重複了

啟動成功後使用jps檢視執行的,或者使用ps -aux | grep kafka,有記錄即為執行成功

建立topic:

bin/kafka-topics.sh --create --zookeeper 10.99.32.3:2181 --replication-factor 3 --partitions 1 --topic mytopic

顯示topic資訊:

bin/kafka-topics.sh --describe --zookeeper 10.99.32.3:2181 --topic mytopic

新增資訊節點只需要配置增加即可

kafka 2 11 0 11 0 1集群搭建

本文搭建乙個三節點的kafka集群。該集群有三個zookeeper 三個kafka broker。解壓kafka安裝包,獲得如下目錄 unzip kafka 2.11 0.11.0.1.zip kafka 2.11 0.11.0.1 kafka目錄結構 cd kafka 2.11 0.11.0.1 ...

kafka2 10集群搭建 一

1.修改 server.properties 檔案broker.id 11 192.168.199.11 21一般使用ip後三位 listeners plaintext 192.168.199.11 9092 34 log.dirs home pengbo.zhao data kafka 63zoo...

kafka 2 11 0 10 2 0集群安裝

集群環境 spark1 ip 192.168.6.137 spark2 ip 192.168.6.138 spark3 ip 192.168.6.139 cd usr local wget kafka 0.10.2.0 kafka 2.11 0.10.2.0.tgz tar xzf kafka 2....