hadoop集群配置

2021-09-02 13:13:48 字數 492 閱讀 5029

建立目錄

修改/home/hadoop/hadoop-2.7.1/etc/hadoop下的配置檔案

把配置好的hadoop傳送到從節點(如果沒有目錄,請新建,沒有jdk,請提前裝,路徑和master保持一致)

scp -r /home/hadoop/hadoop-2.7.1 root@centos02:/home/hadoop/
初始化hadoop

bin/hdfs namenode -format
啟動hadoop

sbin/start-all.sh
訪問web頁面檢視結果

http://centos01:8088/
成功頁面

常見問題

Hadoop集群配置

hadoop的配置檔案分為兩類 1.唯讀型別的預設檔案 src core core default.xml src hdfs hfds default.xml src mapred mapred default.xml conf mapred queues.xml 2.定位設定 conf core ...

Hadoop 集群配置

重要目錄介紹 2 etc目錄 hadoop的配置檔案目錄,存放hadoop的配置檔案 3 lib目錄 存放hadoop的本地庫 對資料進行壓縮解壓縮功能 5 share目錄 存放hadoop的依賴jar包 文件 和官方案例 hadoop執行模式包括 本地模式 偽分布式模式以及完全分布式模式。本地模式...

hadoop集群配置機架感知

自己搭建的hadoop集群一般預設不具備機架感知能力,為了提高hadoop集群的網路效能,我們常常需要配置機架感知。下面是以下步驟 一 修改配置檔案core site.xml,新增配置屬性 topology.script.file.name home r203 hadoop 0.20.2 racka...