cdh完美整合kafka

2021-08-04 05:39:22 字數 423 閱讀 1497

具體實現的簡要步驟可參照cloudera官網提供的文件:

下面就是我根據這個文件的整合過程。

csd包:

關閉集群,關閉cm服務( 假如不關閉cm服務,會出現在新增kafka服務時找不到相關的服務描述 )

將csd包放到cm安裝節點下的 /opt/cloudera/csd目錄下,如圖 :

將parcel包放到cm安裝節點下的 /opt/cloudera/parcel-repo目錄下,如圖:

啟動cm服務,分配並啟用percel包

新增kafka服務:

啟動服務

CDH集群整合kafka

1.cdh環境已經搭建成功,在cdh上搭建kafka,要求用cdh上zookeeper管理kafka而不用kafka自帶的zookeeper 2.kafka 2.11 0.8.2.1.tgz已經上傳到kafka集群環境中 修改hosts 10.10.0.11 s1 1 10.10.0.12 s1 2...

CDH集群整合kafka

1.cdh環境已經搭建成功,在cdh上搭建kafka。要求用cdh上zookeeper管理kafka而不用kafka自帶的zookeeper 2.kafka 2.11 0.8.2.1.tgz已經上傳到kafka集群環境中 改動hosts 10.10.0.11 s1 1 10.10.0.12 s1 2...

CDH中Kafka配置問題

在chd5.16.2中安裝 kafka 2.1.1 1.2.1.1.p0.18,環境配置結束後測試kafka是否搭建成功 遇到以下問題 1.kafka建立生產者後用消費者消費時 bootstrap server 與 zookeeper的區別 在控制台上消費者命令不能 bootstrap server...