-
分布式存儲系統HDFS
文件系統 ——>多服務器
避免同一時刻大量訪問:? 主從節點
主節點返回節點信息,從節點存儲數據查看全部 -
NameNode:
整個文件系統的管理節點,它主要維護著整個文件系統的文件目錄樹,文件/目錄的元信息,每個文件對應的數據塊列表,并且還負責接收用戶的操作請求。
包含以下文件:fsimage 元數據鏡像文件(某一時刻快照),?eidts 用戶操作記錄,?
seed_txid 事務id存儲edits索引 (重啟時檢查是否一致),?
VERSION hdfs版本信息
位置: core-xml設定目錄dfs/name/current內
默認保存路徑hdfs-default.xml中 dfs.namenode.name.dir屬性控制
SNN (Secondary NameNode)
定期把edits文件中內容合并到fsimage, 即checkpoint
HA架構沒有SNN, 由Standby NameNode實現
DataNode
真實文件存儲服務
查看全部 -
格式: bin/hdfs dfs -xxx schema://authority/path
HDFS的schema是hdfs,主機的schema是file。
aithority是Namenode對應ip地址和端口
例如: bin/hdfs dfs -ls hdfs://localhost:9000/path
查看全部 -
不用擔心
查看全部 -
hadoop
查看全部 -
HDB,CH還是CDH呢?查看全部
-
-ls
-put
-cat
-get
-mkdir [-p]
-rm [-r]查看全部 -
-ls
-put
-cat
-get查看全部 -
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
查看全部 -
關閉防火墻
查看全部 -
安裝hadoop
基本設置
ip設置
主機名設置(臨時加永久)
hosts文件修改(ip和主機名的映射關系)
關閉防火墻(臨時加永久)
ssh免密碼登陸
jdk安裝(JDK 1.8)
查看全部 -
安裝hadoop
基本設置
ip設置
主機名設置(臨時加永久)
hosts文件修改(ip和主機名的映射關系)
關閉防火墻(臨時加永久)
ssh免密碼登陸
jdk安裝(JDK 1.8)
查看全部 -
安裝hadoop
基本設置
ip設置
主機名設置(臨時加永久)
hosts文件修改(ip和主機名的映射關系)
關閉防火墻(臨時加永久)
ssh免密碼登陸
jdk安裝(JDK 1.8)
查看全部 -
安裝hadoop
基本設置
ip設置
主機名設置(臨時加永久)
hosts文件修改(ip和主機名的映射關系)
關閉防火墻(臨時加永久)
ssh免密碼登陸
jdk安裝(JDK 1.8)
查看全部 -
ACDSee
抽不出VB?
小程序
查看全部
舉報