Spark spark的安裝和配置過程

2021-09-25 18:38:56 字數 686 閱讀 3812

上傳檔案

上傳可以使用一些遠端工具,也可已使用linux自帶的上傳工具

sudo yum install -y lrzsz(yum安裝linux自帶的上傳工具)

rz(將檔案上傳到當前目錄下)

解壓檔案

tar -zxvf spark-2.2.0-bin-2.6.0-cdh5.7.6.tgz -c . /cdh5.7.6

(-x 解壓.tar檔案,-c 指定解壓目錄,-v顯示壓縮 / 解壓時的詳細過程)

檔案配置

將/spark-2.2.0-bin-2.6.0-cdh5.7.6/conf目錄下的spark-env.sh.template重新命名

執行幫助命令:

bin/spark-shell –help

啟動互動式命令

看到這個介面沒有報錯就成功了

啟動時可能會報錯

分享一篇解決spark的文章

Bitnami Redmine安裝和外掛程式配置

公司要進行敏捷開發管理,最後選擇redmine作為管理工具。而redmine本身的安裝非常麻煩,要安裝mysql,ruby,redmine,apach。顯然這不是乙個偷懶的人應該做的,最後找到bitnami redmine這個統一桶,傻瓜式一鍵安裝。bitnami redmine官網 外掛程式安裝配...

Linux下memcached的安裝和配置

memcached簡介 memcached 是乙個高效能的分布式記憶體物件快取系統,它通過在記憶體中快取資料和物件來減少讀取資料庫的次數,從而提高系統的響應速度。memcached快取的資料,本質上就是乙個hash鍵值對。安裝準備 需要事先準備好如下軟體包 libevent 1.4.13 4.el6...

supervisor和Nginx安裝與配置

gugoo雲之summary sudo apt get purge remove nginx sudo apt get autoremove dpkg get selections grep nginx 將羅列出與nginx相關的軟體,如nginx common一併刪除 sudo apt get p...