-
HBase表結構是面向列簇的，創建的時候需要指定數量，而無需指定各個列簇有哪些屬性
查看全部 -
regionserver以“集群”方式存在，需要實時告知master自己的狀態信息
查看全部 -
HBase有著和HDFS相類似的節點部署（內部服務：master+regionserver）。HBase外部服務：ZooKeeper(分布式協調)+HDFS
查看全部 -
HBase采用列式存儲，支持獨立檢索。HBase每一列都存儲有多個版本。空的列并不占用存儲空間?；贖DFS，高擴展性，高可靠性（多個副本）。高性能（寫入&讀?。?br />
查看全部 -
HBase應用場景：交通/金融/電商/通訊
查看全部 -
應用場景及特點：海量數據存儲，上百萬行 x 上百億列，準實時查詢
查看全部 -
①創建data/zkData數據目錄
需要手動創建一個類似于slave的從節點文件myid【固定的名字】里面存放就是server number
在zookeeper-3.4.5-cdh5.10.0/下
mkdir zkData
cd zkData
touch myid
vi myid
1
上面第一臺機器的number設為1
②分不到其他機器
同時將配置分發到另外2臺集群環境上。
scp -r zookeeper-3.4.5-cdh5.10.0/ bigdata-pro02.kfk.com:/opt/modules/
*bigdata-pro02.kfk.com為第二臺機器的主機名
scp -r?zookeeper-3.4.5-cdh5.10.0/ bigdata-pro03.kfk.com:/opt/modules/
同時別忘了修改另外兩臺機器myid文件，分別改為2,3
③啟動服務bin/zkServer.sh start
三臺分別執行
cd?zookeeper-3.4.5-cdh5.10.0/
bin/zkServer.sh start
查看全部 -
老師的環境。1臺裝Hadoop、Hbase，另外3臺裝的zookeeper集群。
改變默認存放zookeeper的目錄，希望存放在zookeeper工程目錄下。
conf/zoo.cfg中在修改配置
dataDir-/opt/modules/zookeeper-3.4.5-cdh5.10.0/zkData
另外還需要把三臺集群的地址配置進來
server.1=主機名
查看全部 -
啟動 /opt/modules/hadoop-2.5.0/下啟動服務
①cd?/opt/modules/hadoop-2.5.0/
②啟動前需要format,命令如下：
bin/hdfs namenode -format
運行后能看到之前配置/data/tmp路徑下多了些文件，用于存放元素信息
③啟動nameode
sbin/hadoop-daemon.sh start namenode
④啟動datanode
sbin/hadoop-daemon.sh start datanode
⑤域名訪問
域名：50070
查看全部 -
slaves 用于配置節點機器的位置。填入相同的主機名即可。
查看全部 -
hdfs-site.xml?
在里面配置副本數。
設置為1代表是只有一個單節點。
permission設置為false代表不讓檢查權限。默認為true
查看全部 -
命令hostname ：查詢主機名字
配置core-site.xml 用于配置連接hdfs的路徑
還需要配置一個tmp dir的路徑。這個存在路徑是自行創建的，改變了默認的hadoop.tmp.dir的路徑。放在etc同級目錄下的 mkdir -p data/tmp
* mkdir -p 創建子文件夾
查看全部 -
需要配置的文件：
①core-site.xml
②hadoop-env.sh
③hdfs-site.xml
④slaves
查看全部 -
需要配置的文件的路徑 etc/hadoop路徑下
查看全部 -
HBase
分布式數據庫
應用場景和特點
①海量數據存儲，上百億行*上百萬列
*一般關系數據庫列不超過30列【百萬行以內的就可以直接使用關系型數據庫，沒必要使用Hbase】
②準實時查詢
百毫秒內查詢
查看全部
舉報