代碼其實在hadoop的安裝目錄下有example,一般的目錄是/hadoop/src/examples//org/apache/hadoop/examples/WordCount.jar
2016-06-15
job task jobTracker TaskTracker
JobTracker:作業調度,分配任務(map任務 reduce任務),監控tasktracker狀態;
tasktracker執行任務 報告狀態;
MapReduce容錯機制:重復執行,推測執行
JobTracker:作業調度,分配任務(map任務 reduce任務),監控tasktracker狀態;
tasktracker執行任務 報告狀態;
MapReduce容錯機制:重復執行,推測執行
2016-06-13
客戶端發送文件讀請求——>namenode返回元數據(從哪些datanode找到)——>客戶端讀取block,下載下來之后組裝;
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對block進行寫入——>流水線復制——>更新元數據 ;
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對block進行寫入——>流水線復制——>更新元數據 ;
2016-06-13
http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.1/hadoop-2.7.1.tar.gz
2016-06-03
hdfs-site.xml
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
2016-06-01