-
Reduce過程查看全部
-
Map過程查看全部
-
二級NameNode,定期同步元數據映像文件和修改日志,namenode發生故障,secondaryname同步查看全部
-
心跳檢測,datanode定期向namenode發送心跳消息。查看全部
-
每個數據塊有3個副本,分別在兩個機架內的三個節點,2個在同一個機架上,另外一個在另外的機架上。查看全部
-
HDFS使用:它提供了 shell 接口,可以進行命令行操作 hadoop namenode -format #格式化namenode hadoop fs -ls / #打印 / 目錄文件列表 hadoop fs -mkdir input #創建目錄 input hadoop fs -put hadoop-env.sh input/ #上傳文件 hadoop-env.sh 到 input 目錄下 hadoop fs -get input/abc.sh hadoop-envcomp.sh #從 input 目錄中下載文件 hadoop fs -cat input/hadoop-env.sh #查看文件 input/hadoop-env.sh hadoop dfsadmin -report #dfs報告查看全部
-
Hadoop = HDFS(分布式存儲) + MapReduce(分布式計算) 優勢: 1.高拓展;2.低成本;3.成熟的生態圈查看全部
-
hadoop安裝步驟: 1、安裝JDK:apt-get install openjdk-7-jdk; 2、設置環境變量:JAVA_HOME、JRE_HOME、CLASSPATH、PATH 3、下載hadoop安裝包并解壓到指定目錄下; 4、設置環境變量:HADOOP_HOME、PATH 5、修改相關配置文件$HADOOP_HOME/conf: 1)修改hadoop-env.sh,設置JAVA_HOME; 2)修改core-site.xml,設置hadoop.tmp.dir、dfs.name.dir、fs.default.name; 3)修改mapred-site.xml,設置mapred.job.tracker; 4)修改hdfs-site.xml,設置dfs.data.dir; 6、格式化:hadoop namenode -format; 7、啟動:start-all.sh 8、檢查:jps查看全部
-
mark、查看全部
-
hdfs 數據結構查看全部
-
學習查看全部
-
hbase 與hdfs的區別查看全部
-
預備知識:linux基本操作,java編程基礎查看全部
-
hadoop技術指南和技術詳解兩本書查看全部
-
什么是MapReduce查看全部
舉報
0/150
提交
取消