-
Hive元數據默認存儲Derby數據庫中，支持MySQL，Oracle Hive元數據包括表名，列、分區及其屬性，表的屬性(是否為外部表等)，表的數據所在目錄等查看全部
-
存儲：Hive保存在HDFS基礎架構上 ETL 查詢：HQL Hive：將SQL轉成M/R Job在Hadoops中執行 Hive的表就是HDFS的目錄/文件查看全部
-
OLTP,OLAP 星形模型 雪花模型查看全部
-
5.3. 時間類型 Date: hive-0.12.0開始支持, 格式是: YYYY-MM-DD Timestamp: hive-0.8.0開始支持, 格式是: YYYY-MM-DD HH:MM:SS.fffffffff查看全部
-
5.2. 復雜數據類型 數組類型: array<基本數據類型> 鍵值,集合類型: map<鍵名,值> 結構類型: struct 可能包括不同數據類型,通過"點方式"訪問查看全部
-
說明: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types 5.1. 基本數據類型 tinyint/smallint/int/bigint : 整數類型 float/double: 浮點數類型 boolean : 布爾模型查看全部
-
1.3. 遠程服務啟動方式(通過JDBC或ODBC必須啟動) 端口號: 10000 啟動方式: hive --service hiveserver查看全部
-
1.2. Web界面方式 啟動方式: hive --service hwi & 端口號: 9999 通過瀏覽器來訪問: http://<IP地址>:9999/hwi/ 1. 啟動需要安裝hive-hwi-*.war 可以從相應的源碼中獲取,進行 web源碼在: apache-hive-0.13.0-src\hwi\web 將web打包成war文件: jar cvfM0 hive-hwi-0.13.0.war -C web/ . (先要進入hwi目錄下) 需要配置hive/conf/hive-site.xml說明在: https://cwiki.apache.org/confluence/display/Hive/HiveWebInterface查看全部
-
Hive的管理 1. Hive的啟動方式 1.1. CLI(命令行)方式 (hive命令行交互模型) 清屏 Ctrl + L 或者 !clear; 查看數據倉庫中的表 show tables; 查看數據倉庫中內置的函數 show functions; 查看表結構 desc 表名; 查看HDFS上的文件 dfs -ls 目錄; 執行操作系統的命令 !命令; 執行HQL語句 select * from test1; 執行SQL腳本 source 腳本操作系統路徑; 如: source /root/my.sql; 開啟hive的靜默模型 hive -S 在啟動CLI時,加上-S參數,將進行hive命令行交互模型 不進行hive交互模型運行命令 hive -e '命令'; 可以配合-S靜默模型,如: hive -S -e '命令'查看全部
-
Hive遠程模型安裝(與Hive本地模類似) 1. 安裝MYSQL在一臺獨立機子上 2. 安裝Hive在另一臺獨立機子上 2.1. 配置hive/conf/hive-site.xml(根據模文件:hive-default.xml.template 創建) 參數文檔:https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin#AdminManualMetastoreAdmin-RemoteMetastoreServer 內容如下: <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://<host name>/<database name>?createDatabaseIfNotExist=true</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>password</value> </property> </configuration> 2.2. 運行Hive命令 成功后Hive就會在Mysql中創建相關的表,此時處于hive命令提示符中 2.3. 創建一張Hive表(在hive命令提示符中) create table test1(tid int, tname string); 此時就可以在hive庫中查看相關表中有元數據信息查看全部
-
HIVE安裝 1. apache-hive-0.13.0-bin傳到目標機子 2. 運行./hive 在不任何配置的情況下,就會創建嵌入模型 3. 將HIVE的BIN 加到環境下,即可以在任何目錄運行./hive 此命令會在運行此命令的目錄生成 元數據存儲目錄查看全部
-
HIVE的安裝 1. 嵌入模型: DERBY嵌入在HIVE中 (用于單機DEMO) 2. 本地模型: 元數據信息存儲在MYSQL數據庫中 與 HIVE運行在同一臺物理機器上 (開發與生產,但生產環境少) 3. 遠程模型: MYSQL 與 HIVE 各部署在獨立的機子 (一般用于生產環境)查看全部
-
HIVE的元數據 1. HIVE將元數據存儲在數據庫中(METASTORE),支持MYSQL/DERBY(默認)等數據庫 2. HIVE中的元數據包括表的名字,表的列和分區及其屬性,表的屬性(是否為外部表等),表的數據所在目錄等查看全部
-
HIVE是SQL解析引擎,它將SQL語句轉換成M/R JOB 然后在HADOOP上執行 HIVE的表其實就是HDFS的目錄/文件:表即目錄,數據即文件查看全部
-
HIVE數據為倉庫與傳統的數據存儲的區別 1. 傳統存儲在ORACLE,MYSQL數據庫中 2. 而HIVE存儲在HADOOP HDFS上查看全部
舉報
0/150
提交
取消