Spark編譯與打包

2022-02-10 10:49:27 字數 787 閱讀 1715

進入spark根目錄下,執行:

./make-distribution.sh --tgz

--tgz 引數是指編譯後生成tgz包

- phadoop 支援hadoop

-pyarn :支援yarn

-phive :支援hive

--with-tachyon:支援tachyon記憶體檔案系統

-name:與--tgz一起用時,name代替hadoop版本號

編譯中:

編譯完成並打包生成tgz:

編譯完成後把生成的檔案拷貝到當前spark的dist目錄中並且打包生成spark-1.5.3-snapshot-bin-2.2.0.tgz檔案;

VUE 編譯打包

一.執行npm run build 會生成乙個dist目錄 manifest.js 維護靜態資源的清單 vendor.js node modules生成的 二.可以自己寫乙個測試的node服務 prod.server.js 三.執行node prod.server.js啟動生產環境服務 在路由中使用...

Spark 0 Spark版本及編譯

學習用2.4.2 大版本 apis change 次版本 apis features 小版本 核心的東西沒有變,只是修復了一些bug 所以小版本要選大的 小版本如果是0,最好不要選,沒有被修復過,bug多 由於hadoop 2.6.0 cdh5.7.0和官網的hadoop2.6.0不一樣。並且,sp...

python打包編譯 python編譯及打包

0 背景 python是一種物件導向的解釋型計算機程式語言,具有豐富和強大的庫,使用其開發產品快速高效。python的解釋特性是將py編譯為獨有的二進位制編碼pyc檔案,然後對pyc中的指令進行解釋執行,但是pyc的反編譯卻非常簡單,可直接反編譯為原始碼,當需要將產品發布到外部環境的時候,原始碼的保...