具體實現的簡要步驟可參照cloudera官網提供的文件:
下面就是我根據這個文件的整合過程。
csd包:
關閉集群,關閉cm服務( 假如不關閉cm服務,會出現在新增kafka服務時找不到相關的服務描述 )
將csd包放到cm安裝節點下的 /opt/cloudera/csd目錄下,如圖 :
將parcel包放到cm安裝節點下的 /opt/cloudera/parcel-repo目錄下,如圖:
啟動cm服務,分配並啟用percel包
新增kafka服務:
啟動服務
CDH集群整合kafka
1.cdh環境已經搭建成功,在cdh上搭建kafka,要求用cdh上zookeeper管理kafka而不用kafka自帶的zookeeper 2.kafka 2.11 0.8.2.1.tgz已經上傳到kafka集群環境中 修改hosts 10.10.0.11 s1 1 10.10.0.12 s1 2...
CDH集群整合kafka
1.cdh環境已經搭建成功,在cdh上搭建kafka。要求用cdh上zookeeper管理kafka而不用kafka自帶的zookeeper 2.kafka 2.11 0.8.2.1.tgz已經上傳到kafka集群環境中 改動hosts 10.10.0.11 s1 1 10.10.0.12 s1 2...
CDH中Kafka配置問題
在chd5.16.2中安裝 kafka 2.1.1 1.2.1.1.p0.18,環境配置結束後測試kafka是否搭建成功 遇到以下問題 1.kafka建立生產者後用消費者消費時 bootstrap server 與 zookeeper的區別 在控制台上消費者命令不能 bootstrap server...