首先啟動zookeeper
三颱機器啟動zookeeper服務
三颱機器啟動zookeeper服務
這個命令三颱機器都要執行
/export/install/zookeeper-3.4.9/bin/zkserver.sh start
檢視啟動狀態
/export/install/zookeeper-3.4.9/bin/zkserver.sh status
1、kafka啟動命令-前台啟動
hadoop01伺服器執行以下命令來啟動kafka集群
cd /export/servers/kafka_2.11-0.10.0.0
bin/kafka-server-start.sh config/server.properties
2、kafka啟動命令-後台啟動
hadoop01執行以下命令將kafka程序啟動在後台
cd /export/servers/kafka_2.11-0.10.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
3、kafka停止命令
hadoop01執行以下命令便可以停止kakfa程序
cd /export/servers/kafka_2.11-0.10.0.0
bin/kafka-server-stop.sh
5、檢視kafka啟動程序
通過jps命令來檢視程序是否存在
[root@node01 ~]# jps
2276 quorumpeermain
2687 jps#輸入jps
3056 kafka
檢視程序 ps -ef | grep kafka
source /etc/profile 更新環境變數
1、kafka-eagle概述
為了簡化開發者和服務工程師維護kafka集群的工作有乙個監控管理工具,叫做 kafka-eagle。這個管理工具可以很容易地發現分布在集群中的哪些topic分布不均勻,或者是分割槽在整個集群分布不均勻的的情況。它支援管理多個集群、選擇副本、副本重新分配以及建立topic。同時,這個管理工具也是乙個非常好的可以快速瀏覽這個集群的工具,
2、環境和安裝
1、環境要求
需要安裝jdk,啟動zk以及kafka的服務
2、安裝步驟
kafka-eagle官網:
2、解壓
這裡我們選擇將kafak-eagle安裝在第三台
直接將kafka-eagle安裝包上傳到hadoop03伺服器的/export/softwares路徑下,然後進行解壓
hadoop03伺服器執行一下命令進行解壓
cd /export/softwares/
tar -zxvf kafka-eagle-bin-1.3.2.tar.gz -c /export/servers/
cd /export/servers/kafka-eagle-bin-1.3.2
tar -zxvf kafka-eagle-web-1.3.2-bin.tar.gz
3、準備資料庫
kafka-eagle需要使用乙個資料庫來儲存一些元資料資訊,我們這裡直接使用msyql資料庫來儲存即可,在hadoop03伺服器執行以下命令建立乙個mysql資料庫即可
進入mysql客戶端
mysql -uroot -p
create database eagle;
4、修改kafak-eagle配置檔案
hadoop03執行以下命令修改kafak-eagle配置檔案
cd /export/servers/kafka-eagle-bin-1.3.2/kafka-eagle-web-1.3.2/conf
vim system-config.properties
kafka.eagle.zk.cluster.alias=cluster1,cluster2
cluster1.zk.list=hadoop01:2181,hadoop02:2181,hadoop03:2181
cluster2.zk.list=hadoop01:2181,hadoop02:2181,hadoop03:2181
kafka.eagle.driver=com.mysql.jdbc.driver
kafka.eagle.url=jdbc:mysql://hadoop03:3306/eagle
kafka.eagle.username=root
kafka.eagle.password=123456
5、配置環境變數
kafka-eagle必須配置環境變數,hadoop03伺服器執行以下命令來進行配置環境變數
vim /etc/profile
export ke_home=/export/servers/kafka-eagle-bin-1.3.2/kafka-eagle-web-1.3.2
export path=:keh
ome/
bin:
ke_home/bin:
kehom
e/bi
n:path
6、啟動kafka-eagle
cd /export/servers/kafka-eagle-bin-1.3.2/kafka-eagle-web-1.3.2/
bin/ke.sh start
訪問kafka-eagle
使用者名稱:admin
密碼:123456
出bug原因:
1.改了配置沒儲存,導致埠有問題
2.改了環境變數需要重新整理環境變數配置檔案:
source /etc/profile 更新環境變數
3.改了kafka配置檔案需要重啟kafka,才能導致配置檔案生效
kafka啟動命令
啟動 bin kafka server start.sh daemon config server.properties 建立主題 kafka topics.sh zookeeper s202 2181 topic calllog create replication factor 3 partit...
kafka啟動命令 Kafka入門
kafka是乙個高效能分布式訊息系統,今天就簡單介紹下基礎入門吧。tar xzf kafka 2.12 2.2.0.tgz cd kafka 2.12 2.2.0二 啟動伺服器kafka使用zookeeper,所以我們要先啟動zookeeper,可以使用安裝檔案裡面的啟動命令啟動乙個單節點的zook...
kafka 後台啟動 Kafka的安裝與啟動
安裝 在mac上可以使用brew install kafka進行kafka的安裝,在安裝kafka時,會自動檢測有無zookpeer,如果沒有的話也會安裝乙個。啟動kafka 啟動kafka,首先要確保啟動zookpeer.進入kafka安裝目錄的bin目錄下執行 zookeeper server ...