-
階段1查看全部
-
MapReduce的幾個階段查看全部
-
過程查看全部
-
本章概覽查看全部
-
Hdfs架構圖查看全部
-
mapper輸出到reduce輸出流程圖
查看全部 -
多數情況下,combine邏輯和reduce邏輯一樣
查看全部 -
本地combine優化
查看全部 -
mapper到reduce過程總結
查看全部 -
本地合并:mapper完成之后,reduce進行之前
查看全部 -
由于namenode存儲了每個文件的元數據信息(有多少分片,在那些分區等等),并且受限于內存,hdfs適合存貯大文件,如果有大量的小文件,要進行文件合并
查看全部 -
文件超過每一個數據塊的大小,就會進行分片
查看全部 -
一個mapreduce作業中,分區數量、reduce任務數量和最終輸出的文件數量是一致的
查看全部 -
小結----
查看全部 -
算法步驟--
查看全部
舉報
0/150
提交
取消