spark 跑spark sql時cpu利用率特別高怎么辦
1 回答
慕絲7291255
TA貢獻1859條經驗 獲得超6個贊
優化過程中常用到方法
查看查詢的整個運行計劃
scala>query.queryExecution
查看查詢的Unresolved LogicalPlan
scala>query.queryExecution.logical
查看查詢的Analyzed LogicalPlan
scala>query.queryExecution.analyzed
查看優化后的LogicalPlan
scala>query.queryExecution.optimizedPlan
查看物理計劃
scala>query.queryExecution.sparkPlan
查看RDD的轉換過程
scala>query.toDebugString
- 1 回答
- 0 關注
- 927 瀏覽
添加回答
舉報
0/150
提交
取消