通過oozie呼叫hive和shell指令碼都沒有問題。
shell指令碼需要先上傳到hdfs 的某個目錄下，只要賬戶對這個目錄有讀許可權就行。
stdoutput warning: /opt/cloudera/parcels/cdh-5.13.0-1.cdh5.13.0.p0.29/bin/../lib/sqoop/../accumulo does not exist! accumulo imports will fail.
stdoutput please set $accumulo_home to the root of your accumulo installation.
上面的錯誤可以忽略
18/01/18 16:24:55 warn hive.metastoreutil: aborting use of local metastore. allow local metastore by setting kite.hive.allow-local-metastore=true in hiveconf
18/01/18 16:24:55 error tool.importtool: import failed: missing hive metastore connection uri
上面表示沒有找到hive metastore
hue 上oozie的排程問題
不知道使用hue的小夥伴有沒有發現hue上的oozie workflow寫好了，卻發現排程不了。hue 坑真是多 經過我不斷的努力 終於排程成功了任務。下面把步驟分享給大家 1.首先將寫好的hive sqoop 各個指令碼檔案 組成workflow 2.將組成的workflow跑一遍直到成功。注 這...
HUE與Oozie的整合
找到 liboozie 標籤以及 oozie 標籤涉及修改如下 liboozie liboozie 執行oozie服務的url。oozie hdfs上的位置，提交時部署工作流。remote deployement dir oozie oozie 本地儲存oozie示例的位置。local data d...
oozie排程引擎
oozie 是用於hadoop平台的開源的工作流排程引擎 統一排程hadoop系統中常見的mr任務啟動 hdfs操作 shell操作 hive操作等 使得複雜的依賴關係 時間觸發 事件觸發使用xml語言進行表達，開發效率提高 一組任務使用乙個dag來表示，使用圖形表達流程邏輯更加清晰 支援很多種任務...