部署Hadoop及虛擬機器總結

2021-10-03 17:07:35 字數 2423 閱讀 2104

在ssh工具上配置檔案時，配置***mapred-site.xml***檔案時在

這個是錯誤的，因為感嘆號之後多了乙個空格
應該將感嘆號之後的空格去掉，改為：

第二個問題檔案配置：以下是一部分檔案的配置內容。

一、hdfs-site.xml


3
二、mapre-site.xml


mapreduce.framework.name


yarn


mapreduce.jobhistory.address


master1


:10020


master1


:19888


三、yarn-site.xml


1
3、在虛擬機器時的名字我命名為maser,而我將放置maser虛擬機器的資料夾命名為了master,導致我在ssh上配置檔案時不知道是該寫成maser還是master,所以不僅要分清資料夾和虛擬機器名字還需要仔細謹慎點。

出現錯誤：

使用jps命令時沒有出現namenode

解決方法：檢視日誌

在master節點上，使用命令

# cd /usr/local/hadoop-2.6.4/tmp/dfs/


lscd  logs


# cd /usr/local/hadoop-2.6.4/etc/hadoop/


# cd ///data/hadoop/hdfs/name


cid-5313cd04-3444-4282-86b5-9a42e388fc6e


!(

Hadoop虛擬機器配置

使用centos7 hadoop集群內部防火牆內部時預設關閉的。服務關閉 systemctl stop firewalld.service 禁止開機firewall自啟動 systemctl disable firewalld.service 檢視狀態，確認關閉 not running firewa...

Linux虛擬機器部署

虛擬機器 雲主機 不關機 個人推薦 ucloud雲 群檔案 若澤大資料 大資料環境部署之青云云主機 b站 需要花錢買 vm虛擬機器 自己電腦上 需要關 開 4g 買記憶體條 若澤大資料 大資料環境部署之vm虛擬機器 b站 自己配置 但是需要自己買記憶體條 雲伺服器是用來幹嘛的 1.vmware10 ...

虛擬機器Nginx部署

設定虛擬機器網絡卡為橋接模式 修改網絡卡配置檔案前，先關閉服務 配置靜態ip esc wq回車 儲存退出 重啟網路服務 systemctl restart network ping www.baidu.com 進行測試 如出現 ping unknown host www.baidu.com vi e...