現在大資料一直在使用cdh來作為基礎平台。常會面臨公升級版本,操作中也經常出現各種各樣的問題。
這裡就整理乙個操作步驟指引。
切記,自建yum源的目錄結構一定要和官方**中的目錄結構一致。
service cloudera-scm
-agent stop
service cloudera-scm
-server stop
service cloudera-scm
-server
-db stop
(如果使用的是postgresql資料庫)
配置cm server 的 yum原始檔
/etc/yum.repos.d/cloudera-manager.repo
# [cloudera-manager]
name = cloudera manager, version 5.11.0
baseurl =
gpgkey = rpm-gpg-key-cloudera
gpgcheck = 1
在cm server伺服器上更新cloudera-manager-server 和 cloudera-manager-agnet
yum upgrade 'cloudera-*'
更新成功後,啟動cm server伺服器上的 server server-db agent 服務
service cloudera-scm
-server
-db start
service cloudera-scm
-server start
service cloudera-scm
-agent start
這個時候cm ui 介面中可以看到新版本的登陸頁面,登陸進去以後,就會提示各個節點agent的版本與server的版本不一致的頁面,然後根據提示引導,進行各個節點agent的公升級步驟。注意,需要自定義yum安裝源的url,需要填寫到本地自建的yum源url位址。
公升級cdh前,先做好namenode目錄的備份,以防公升級失敗,還有補救的機會,資料不至於丟失。
cdh 差異 CDH5和6的區別
cdh6相對於cdh5是一次各個元件的大版本公升級,要理解大版本更新,這裡先解釋一下hadoop相關元件的版本說明。比如版本號是x.y.z,z代表的一般是maintenance version或patch version,這種版本公升級主要修復bug,不改動api,也不涉及新的功能,y代表的是min...
CDH 5 1公升級到CDH5 2記錄
公升級clouderamanager 公升級cdh 由於沒有嚴格遵循文件要求先停用所有服務再公升級clouderamanager,公升級過程中碰到如下問題 公升級完clouderamanager後,servicemonitor不能啟動。刪除 var lib cloudera service moni...
ApiPost V5 公升級指南
同舊版本相比,apipost v5 以下簡稱v5 重新規劃了底層架構,大大降低了記憶體使用率 並加入了大量新功能,使用者體驗也有了全新的提公升。但是同舊版相比,很多使用方式有所不同,本文重點講解以下使用者公升級後可能遇到的幾個小問題。這是由於同舊版相比,v5採用了非同步與雲端同步的方式。非同步與雲端...