老師說錯了,塊的默認大小是64MB,而不是64字節Byte
但是ppt上寫的是對的。
這個可以在hdfs-site.xml中
<property>
<name>dfs.block.size</name>
<value>67108864</value>
<description>The default block size for new files.</description>
</property>進行手動配置 我的是128G。當然是真實的分布式環境了。
但是ppt上寫的是對的。
這個可以在hdfs-site.xml中
<property>
<name>dfs.block.size</name>
<value>67108864</value>
<description>The default block size for new files.</description>
</property>進行手動配置 我的是128G。當然是真實的分布式環境了。
2016-02-14
不知道是視頻沒講還是我聽漏了,看到排序看蒙了,沒找到在哪排序的,百度查了一下原來是mapreduce默認按key排序!
2016-02-03
hdfs-site.xml
<configuration>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
</configuration>
mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
<configuration>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
</configuration>
mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
2016-01-21