大資料學習 Storm集群搭建

安裝storm之前要安裝zookeeper

一.安裝storm步驟

2.解壓安裝包

3.修改配置檔案

修改環境變數/etc/profile

export path=$/bin:$path

#指定storm使用的zk集群

storm.zookeeper.servers:
- "mini1"
- "mini2"
- "mini3"
#指定storm集群中的nimbus節點所在的伺服器
nimbus.host: "mini1"
#指定nimbus啟動jvm最大可用記憶體大小
nimbus.childopts: "-xmx1024m"
#指定supervisor啟動jvm最大可用記憶體大小
supervisor.childopts: "-xmx1024m"
#指定supervisor節點上，每個worker啟動jvm最大可用記憶體大小
worker.childopts: "-xmx768m"
#指定ui啟動jvm最大可用記憶體大小，ui服務一般與nimbus同在乙個節點上。
ui.childopts: "-xmx768m"
#指定supervisor節點上，啟動worker時對應的埠號，每個埠對應槽，每個槽位對應乙個worker
supervisor.slots.ports:
- 6700
- 6701
- 6702
- 6703

scp -r $pwd mini2:$pwd

scp -r $pwd mini3:$pwd

storm的集群中的是三個角色

nimbus 主節點，管理節點

supervisor每個機器上的管理者

ui介面

./storm nimbus

./storm supervisor

./storm ui

./storm supervisor

./storm supervisor

6.檢視集群

storm集群搭建

在3臺虛擬機器上部署strom集群，主機名分別為 mini1 mini2 mini3 解壓 修改配置檔案 啟動集群 wgettar zxvf apache storm 0.9.5.tar.gz c export servers cd export servers ln s apache storm ...

Storm集群搭建

zookeeper集群搭建完畢 storm環境變數 export path path bin bin sbin bin bin bin bin 修改conf的目錄下的storm.yaml vi storm.yaml 儲存退出之後，scp到其他兩台server上 啟動storm集群 首先啟動nimbu...

Storm 集群搭建

1 集群規劃 hadoop senior01.itguigu.com hadoop senior02.itguigu.com hadoop senior03.itguigu.com zkzk zkstorm storm storm 3 虛擬機器準備 1 準備3臺虛擬機器 2 配置ip位址 3 配置主...