hadoop環境搭建之製作本地yum源

因為需要的三個安裝包都在國外伺服器，切最大的超過5g。

直接yum安裝即可

yum install httpd

啟動並新增開機啟動

檢視安裝啟動是否成功

適用於centos 7 版本的ambari repository:

解壓

cd /var/www/html/ambari

tar -zxvf ambari-2.2.0.0-centos7.tar.gz

tar -zxvf hdp-2.3.4.0-centos7-rpm.tar.gz
tar -zxvf hdp-utils-1.1.0.20-centos7.tar.gz

修改其中的url為本地的位址

ambari.repo

#version_number=2.2.0.0-1310

[updates-ambari-2.2.0.0]
name=ambari-2.2.0.0 - updates
baseurl=
gpgcheck=1
gpgkey=
enabled=1
priority=1

#version_number=2.3.4.0-3485

[hdp-2.3.4.0]
name=hdp version - hdp-2.3.4.0
baseurl=
gpgcheck=1
gpgkey=
enabled=1
priority=1
[hdp-utils-1.1.0.20]
name=hdp utils version - hdp-utils-1.1.0.20
baseurl=
gpgcheck=1
gpgkey=
enabled=1
priority=1

yum clean all

yum makecache

yum repolist

源改為預設 hadoop環境搭建之製作本地yum源

1 安裝ambari，網路yum源安裝慢，而且經常中的提示找不到mirrors，所以配置乙個本地的安裝源很有必要，來解決這個揪心的問題。2 登入linux主機，檢查是否安裝http 3 執行以下命令 yum install yum utils createrepoyum plugin priorit...

Hadoop環境搭建（二）

一 yarn的配置 啟動命令 sbin yarn daemon.sh start resourcemanager sbin yarn daemon.sh start nodemanager 二 配置mapreduce 三 執行mapreduce程式案例 要求 寫mr程式的一定要有輸入和輸出的路徑 準...

Hadoop環境的搭建

格式化 bin hdfs namenode format可能遇到的問題 在建立臨時檔案的時候沒有許可權 解決方案 sudo chmod r a w opt namendoe 和datanode的都有乙個集群id不同的問題datanode是根據集群id去找集群。如果我們在啟動集群的時候，datanod...