azkaban簡單學習

mysql 建立資料庫

ankaban編譯並拷貝出tar.gz

solo server配置使用

# 編譯

./gradlew build -x test

# 拷貝出編譯後的 tar.gz

官網配置安裝描述

使用上述 編譯後的azkaban-solo-server-3.82.0-6-g1ecc79e1.tar.gz解壓後如下

配置檔案在conf目錄中。修改其中的azkaban.properties

#配置了絕對路徑|時區

web.resource.dir=/opt/azkaban-solo-server/web
default.timezone.id=asia/shanghai
# 配置mysql(我使用的是mariadb)
## mysql
database.type=mysql
mysql.user=azk
mysql.password=azk
mysql.database=azkaban
mysql.host=localhost
mysql.port=3306
mysql.numconnections=100
### 如果不使用mysql，預設是 h2
#database.type=h2
#h2.path=./h2
#h2.create.tables=true

#啟動

bin/start-solo.sh
# 停止
bin/shutdown-solo.sh

Azkaban使用簡單筆記

官方文件 azkaban主要的組成 1.關係型資料庫 mysql 2.azkabanwebserver 3.azkabanexcutorserver 使用mysql儲存狀態，azkabanwebserver和azkabanexcutorserver訪問資料庫。azkabanwebserver主要管理...

azkaban學習筆記總結

現成的開源排程系統，比如ooize azkaban。azkaban是由linkedin開源的乙個批量工作流任務排程器。用於在乙個工作流內以乙個特定的順序執行一組工作和流程。azkaban定義了一種kv檔案格式來建立任務之間的依賴關係，並提供乙個易於使用的web使用者介面維護和跟蹤你的工作流。它有如下...

Azkaban 問題總結

azkaban 的基本使用見 問題描述 執行df h命令看到系統磁碟使用率已達到92 然後用命令du sh排查那些目錄占用的空間比較多時，並沒有發現。執行lsof grep deleted命令後如圖 將 temp 目錄改到 資料磁碟目錄下 修改 executor 結點的配置，重啟 project.t...