上篇hadoop偽分布式安裝配置ubuntu預設不支援root使用者直接登入可以採用下面教程登入參考博主
使用root使用者進入ubuntu
映象源:
本文使用zookeeper-3.4.14版本
解壓檔案
mkdir /usr/local/zookeeper
tar -zxvf zookeeper-
3.4.14
.tar.gz -c /usr/local/zookeeper #解壓檔案
1.修改環境變數
vim /etc/profile
最末端新增
export zookeeper_home=
/usr/local/zookeeper/zookeeper-
3.4.14
export path=$path:$zookeeper_home/bin
生效環境變數
source /etc/profile
2.修改配置檔案
cd /usr/local/zookeeper/zookeeper-
3.4.14
/conf
mkdir data
cp zoo_sample.cfg zoo.cfg
vim zoo.cfg
修改以下
ticktime=
2000
initlimit=
10synclimit=
5datadir=
/zkdata/zookeeper/data
clientport=
2181
cd /usr/local/zookeeper/zookeeper-
3.4.14
bin/zkserver.sh start
輸入./bin/zkcli.sh -server localhost:2181
檢驗是否連線成功
大資料測試環境搭建
hadoop集群搭建 整理的很好 具體到我用的版本 2.4.1 遇到的一些問題 1.jdk版本問題 2.環境變數配置問題 3.hadoop配置 core site.xml,hdfs site.xml等 4.資料夾許可權問題,非root使用者必須具有hadoop相關資料夾及其子資料夾的寫許可權 5.d...
環境搭建 k 大資料平台起源
因時代背景,產生新問題 關鍵技術 以什麼方式解決產生的問題 基於以上考慮,hadoop工具應運而生 hadoop 簡介 各版本的hadoop平台 人產生資料的速度越來越快,機器更快,所以需要另外的一種處理資料的方法。硬碟的容量增加了,但效能沒有跟上,解決辦法是把資料分到多塊硬碟,然後同時讀取。計算隨...
搭建大資料執行環境之一
一鍵搭建 zookeeper hadoop hive hbase sqoop kafka spark kylin 本地mac有3個虛擬機器 server1 192.168.84.128 server2 192.168.84.131 server3 192.168.84.132 yum install...