Mac搭建hadoop平台

2021-08-21 21:49:07 字數 1673 閱讀 3714

1.一直想在虛擬機器下的ubuntu搭建hadoop平台,前段時間全部搞定,最近掛掉了,然後平台搭建出現問題啦。卡了幾天,然後決定拋棄虛擬機器,直接在mac搭建。

跟虛擬機器一樣,需要安裝ssh。

此文不做介紹。

直接介紹hadoop平台的搭建:

(1).進入/users/yangting/hadoop-2.9.0/etc/hadoop目錄下:開啟:

修改一下兩處為:

(2) 配置hdfs位址和埠進入目錄開啟core-site.xml

(3)  配置mapreduce中jobtracker的位址和埠

在相同的目錄下,你可以看到乙個mapred-site.xml.template首先將檔案重新命名為mapred-site.xml,同樣將替換為

(4) 修改hdfs備份數

相同目錄下,開啟hdfs-site.xml加上

(5)格式化hdfs

這個操作相當於乙個檔案系統的初始化,執行命令hdfs namenode -format

在終端最終會顯示成功

(6) 配置hadoop環境變數

單個使用者設定

~/.bash_profile (任意乙個檔案中新增使用者級環境變數)

只需看與hadoop相關的配置

最後啟動: ./sbin/start-all.sh 

執行:j p s

Mac平台的Lua開發環境搭建

在mac的終端中輸入curl r o 解壓tar zxf lua 5.3.1.tar.gz 進入解壓目錄 cd lua 5.3.1 編譯一下 make macosx make test 將lua安裝到環境中,如果安裝時出現permission denied,需要提高許可權,su一下 輸入lua可以看...

在mac系統下搭建bWAPP平台

總是開啟虛擬機器讓我感到不是很方便,於是我決定在主機 os系統 下搭建 兩款軟體都可以使用,推薦使用xampp,親測比較方便,使用mamp不但要配置埠號,而且資料庫的連線也有一點不太穩定,而xampp直接使用即可。2.準備資料庫檔案 這裡只需要更改setting.php的password即可,資料庫...

Mac平台下Opencv開發環境搭建

opencv open source computer vision library 是乙個開源的跨平台的計算機視覺庫,它實現了影象處理和計算機視覺領域的很多通用演算法,可以在多種計算機平台上執行,支援c c python等語言,也提供了ruby matlab等語言的介面。opencv是基於bsd許...