在Centos集群上搭建Storm完全分布式環境

2021-08-20 04:22:33 字數 1795 閱讀 3070

集群：三颱linux伺服器，系統不限寫部落格

三颱伺服器的zookeeper已安裝並處於執行階段

三颱伺服器的jdk1.8環境已安裝，如沒有，請參考我的部落格

集群環境如下：#os

hostname

ipsoftware

notes

1centos

master

192.168.0.1   

zookeeper

storm

主控節點

2centos

node1

192.168.0.2

zookeeper

storm

工作節點

3centos

node2

192.168.0.3

zookeeper

storm

工作節點

hadoop集群搭建的設定

# wget
解壓縮到特定位置，我這裡選擇目錄位置為

/usr/local/storm
進入storm資料夾，使用下面命令建立乙個storm臨時資料夾

cd /usr/local/storm


mkdir data
進入/usr/local/storm/conf下修改storm.yarm配置檔案

cd /usr/local/storm/conf


vim storm.yarm
修改對應部分如我的所示：

配置解釋：

storm.zookeeper.port: zookeeper集群的埠號

storm.local.dir: 用於配置storm儲存少量檔案的路徑

nimbus.seeds: 用於配置主控節點的位址，可以配置多個

複製配置好的storm到其他兩台主機：

scp -r usr/local/storm/ node1:usr/local/  


scp -r sr/local/storm/ node2:usr/local/


vim /etc/profile
在文件的最下面新增如下配置

# storm


export storm_home=/usr/local/storm


export path=$path:$storm_home/bin
最後再使用命令

source /etc/profile
使得配置生效

注：所有節點都需要設定

#主節點上執行


nohup $storm_home/bin/storm nimbus &


#從節點上執行


nohup $storm_home/bin/storm supervisor &
注意：有幾個從節點就要分別在從節點上執行上述**

#主控節點上執行

				
在linux上搭建hbase集群
1 安裝jdk 2 zookeeper安裝 注意 1 我們需要建立使用者hadoop，並配置 etc sudoers檔案，使其許可權為hadoop all all nopasswd 2 修改檔案使用者 sudo chown r hadoop data 修改檔案使用者組 sudo chown r ha...

				
在centOS上搭建wordpress部落格系統
購買vps後，很多人都會選擇自己搭建乙個 其中使用lamp wordpress可以說是最簡單的建站方案，下面我就將詳細介紹一下具體的建站過程。我使用的是阿里雲的伺服器，系統是centos6.5，使用xshell 5 進行遠端控制。一 主要內容 1 安裝lamp伺服器系統 linux apache m...

				
在centOS上搭建wordpress部落格系統
一 主要內容 1 安裝lamp伺服器系統 linux apache mysql php 2 安裝wordpress 二 具體步驟 一 lamp環境設定 1 安裝lamp系統，在centos上可以使用命令yum install進行安裝，y 表示安裝過程中全部選擇yes 1 shell命令 yum y ...