CDH 5 12 spark公升級從1 6到2 2

2021-09-19 06:29:40 字數 798 閱讀 5082

spark2_on_yarn-2.1.0.cloudera1.jar

- 上傳安裝包

上傳spark2_on_yarn-2.2.0.cloudera1.jar/opt/cloudera/csd/下面;

上傳檔案:

spark2-2.2.0.cloudera1-1.cdh5.12.0.p0.142354-el7.parcel

spark2-2.2.0.cloudera1-1.cdh5.12.0.p0.142354-el7.parcel.sha1

manifest.json

/opt/cloudera/parcel-repo/下面。如果manifest.json有同名檔案,記得重新命名備份起來

- 修改檔案屬性

chown -r cloudera-scm:cloudera-scm /opt/cloudera

- 重啟cloudera

重啟server端

cloudera-scm-server restart

所有節點上執行,重啟所有agent

CDH5 12安裝遇到的坑

環境 centos7 cdh5.12 問題描述 在搭建過的cdh機器上重新搭建cdh集群,沒有刪除資料。導致新搭建的cdh,這兩台datanode啟動不了.特殊情況 本人以前在這兩台機器上搭建過cdh,所以存在版本問題 1 找到你以前搭建的datanode資料目錄,dfs dn current,檢視...

cdh 簡介 CDH 1 CDH簡介

1 apache hadoop 不足之處 版本管理混亂 部署過程繁瑣 公升級過程複雜 相容性差 安全性低 2 hadoop 發行版 apache hadoop cloudera s distribution including apache hadoop cdh hortonworks data p...

cdh 簡介 CDH 1 CDH簡介

1 apache hadoop 不足之處 版本管理混亂 部署過程繁瑣 公升級過程複雜 相容性差 安全性低 2 hadoop 發行版 apache hadoop cloudera s distribution including apache hadoop cdh hortonworks data p...