由於kafka的啟動依賴zookeeper,所以在此之前,首先需要安裝好zookeeper集群並可以成功啟動,
主要修改broker.id,log.dirs=/opt/module/kafka/data
我的配置為broker.id=3,log.dirs=/opt/module/kafka/data,注意broker.id,集群的每天機器節點的id是不一樣的。
使用此命令驗證kafka集群是否可以正常使用,初次啟動若返回空行不報錯,則說明kafka集群安裝成功
./kafka-topics.sh --bootstrap-server hadoop103:9092 --list
linux 下搭建kafka集群
sudo vim etc profile 在末尾附加 export path opt kafka zookeeper bin path 最後 source etc profile2.需先搭建zookeeper環境 cp zoo sample.cfg zoo.cfg 在 conf裡面 vim zoo....
Linux下 kafka集群安裝
環境 centos 7虛擬機器兩台,分別為 192.168.31.224和192.168.31.225 1 安裝之前先安裝jdk和zookeeper 3 解壓kafka 2.12 1.1.0.tgz,使用命令tar zxvf kafka 2.12 1.1.0.tgz,解壓之後會生成kafka 2.1...
Kafka集群配置
1 kafka概念 topic kafka 按照topic 分類來維護訊息,每個topic可以配置多個partition 分割槽 每個分割槽只能被乙個消費者消費,每個partition對應乙個commit log檔案 producer 我們將發布 publish 訊息到topic的程序稱之為生產者 ...