hue怎么直接操作spark sql
1 回答
江戶川亂折騰
TA貢獻1851條經驗 獲得超5個贊
Hue在提交并執行作業的時候使用的是Oozie和Livy服務器，將Hue做為一個client進行開發，將封裝好的數據通過RestApi發送給兩種服務器進行作業的提交，執行和管理。
但是相較于Oozie，Livy并不包含DAG圖，所以在執行Spark作業的時候多節點直接可能無法產生依賴，無法保證執行的次序。目前調研看來，Spark作業最好為單節點，或者無依賴的鏈表形式執行。
- 1 回答
- 0 關注
- 943 瀏覽
添加回答
舉報
0/150
提交
取消