-
ssh-copy-id -i hadoop102設置免密碼
查看全部 -
linux命令：wget? 下載
tar 解壓
查看全部 -
hadoop配置：四個hadoop路徑/etc/hadoop/core-site.xml,etc/hadoop/mapred-site.xml,etc/hadoop/hdfs-site.xml,etc/hadoop/yarn-site.xml
D:/hadoop-3.0.3/etc/hadoop/hadoop-env.cmd配置
修改mapre-site配不要重復格式化，如果因為格式化出問題，刪掉hadoop_repo再格式化一次置--》yare相關配置 以上是所有的xml文件；下面修改hadoop-env.sh文件。后面進行啟動
查看全部 -
需要修改core文件夾
其次配置兩外一個文件夾hdfss-site。xml文件夾
查看全部 -
source 激活文件
查看全部 -
環境變量配置查看全部 -
安裝jdk查看全部 -
關閉防火墻
查看全部 -
ipconfig
修改主機名；(臨時的)hostname Hadoop
(永久的)vi /etc/system/hostname
查看全部 -
環境配置，使用偽虛擬機
查看全部 -
工作環境部署，小的使用官方版本就可以
查看全部 -
大數據生態圈
查看全部 -
yarn資源管理調用
mapreduce分布式集成框架
hdfsf分布式存儲系統
查看全部 -
?
? 1、數據很大，? 寫的jdp代碼拉數據就會很慢，mysql存在本地磁盤，
所以需要讀取磁盤io ，將磁盤數據讀到內存，然后用網絡將數據傳過來 網絡io,
將代碼移動計算移到數據上的機器上
2：hadlop:做本地局部運算--》將局部運算的結果進行匯總計算->獲取最終結果
? ?
查看全部 -
存儲-》分布式存儲（多臺機器的存儲）
服務器是真正存數據，為了存數據，所以需要找到文件系統
查看全部
舉報
0/150
提交
取消