Hadoop筆記之十六 cm cdh安裝使用

2021-08-30 17:36:13 字數 933 閱讀 1467

不論學什麼,總會遇到障礙,自己走和別人同樣的路,也總會有不同的困難,僅以此記錄我的cm、cdh摸索道路。

基於上述第七條:

本地源搭建:

基於http的搭建方式

>> 啟動http服務(apache服務)

# service httpd start ## 啟動http

apache的配置路徑(放展示頁面的)

/var/www/html

# cd /var/www/html

# mkdir cm-5.3.6

# cd cm-5.3.6

# tar -zxvf /root/softs/cm5.3.6-centos6.tar.gz

# mv cm/5.3.6/rpms/x86_64/* .

# rm -rf cm

生產repodata資料

1、安裝軟體

# cd /root/softs/repo-libs/

# rpm -ivh ./*

2、生產資料

# cd /var/www/html/cm-5.3.6

# createrepo .

配置本地源

1、備份已有(預設)的yum源

# cd /etc/yum.repos.d

# mkdir back

# mv *repo back/

2、建立乙個本地源

# vim myrepo.repo

[myrepo]

name = myrepo

baseurl =

enabled = 1

gpgcheck = 0

3、將該檔案copy到其他機器上(其他機器原本的repo檔案也需要刪除或者備份)

scp myrepo.repo hadoop-senior02:/etc/yum.repos.d

Hadoop學習筆記之Hadoop簡介

apache hadoop 是乙個開源的 可靠的 靈活的 分布式的計算系統 來自官網 主要受google 三篇 的啟發 gfs mapreduce bigtable hadoop 海量資料的儲存 hdfs hadoop distributed file system 海量資料的分析 mapreduc...

hadoop學習筆記之zookeeper 安裝配置

zookeeper是乙個分布式的,開放原始碼的分布式應用程式協調服務,是google的chubby乙個開源的實現,是hadoop和hbase的重要元件。它是乙個為分布式應用提供一致性服務的軟體,提供的功能包括 配置維護 網域名稱服務 分布式同步 組服務等。由於工程師不能很好地使用鎖機制以及基於訊息協...

Hadoop學習筆記之YARN

yarn service框架提供了一流的支援和api,可以在yarn中本地化時間執行的服務。簡而言之 in a nutshell 它作為乙個容器編排平台,用於管理yarn上的貨櫃化服務。它支援yarn中的docker容器和傳統的基於程序的容器。該框架的職責包括執行配置解決方案和安裝,生命週期管理 如...