-
推測執行 運行在 那些需要所有 map都處理完后才能進行Reduce的機器上， 推測執行可以保證任務不會因為某1-2個機器錯誤或故障而導致整體效率下降查看全部
-
mapred-site.xml <configuration> <property> <name>mapred.job.tracker</name> <value>imooc:9001</value> </property> </configuration>查看全部
-
hdfs-site.xml <configuration> <property> <name>dfs.data.dir</name> <value>/hadoop/data</value> </property> </configuration>查看全部
-
<configuration> <property> <name>hadoop.tmp.dir</name> <value>/hadoop</value> </property> <property> <name>dfs.name.dir</name> <value>/hadoop/name</value> </property> <property> <name>fs.default.name</name> <value>hdfs://imooc:9000</value> </property> </configuration>查看全部
-
imN查看全部
-
文件寫入， 先將文件分成塊， 再通過namenode了解可用的datanode, 再由客戶端將塊寫入datanode中， datanode將塊復制2份后在到namenode中更新元數據查看全部
-
每個數據塊3個副本, 放在兩個機架上，2個副本放在一個機架上， 另一個副本放在其他機架上。查看全部
-
設置java環境查看全部
-
開源工具： 1. Hive, 通過一些簡單的 SQL 語句來完成 Hadoop 的一些任務，降低了使用 Hadoop 的門檻 2. HBase, 存儲結構化數據的分布式數據庫 3. zookeeper, 數據監管查看全部
-
Hadoop 的功能和優勢有哪些？開源，分布式存儲 + 分布式計算 (http://hadoop.apache.org) Hadoop 的組成： 1. HDFS: 分布式文件系統，存儲海量的數據 2. MapReduce: 并行處理框架，實現任務分解和調度查看全部
-
Google 大數據技術 (MapReduce, BigTable, GFS) 沒有開源，但一個模仿 Google 大數據技術的開源項目 hadoop 面試了查看全部
-
hadoop fs -cat input/hadoop-env.sh #查看文件查看全部
-
ver1.2穩定版本，對于初學者來說更容易上手查看全部
-
HIVE相當于一種牽引工具，可以利用它將SQL語句轉化成Hadoop任務 HBase是一種存儲結構化數據的分布式數據庫。與傳統數據庫區別：Hbase放棄事務特性，追求更多的擴展。 與傳統HDFS的區別：HBase提供數據的隨機讀寫和實時訪問，實現對表數據的讀寫功能 zookeeper工具監控Hadoop集群里面每個節點的狀態，管理整個集群的配置，維護節點之間的數據一致性。查看全部
-
Hadoop優勢：高擴展、低成本，成熟的生態圈。比如:hive Hbase查看全部
舉報
0/150
提交
取消