天天躁夜夜澡狠狠澡,北岛玲一区二区三区

首頁免費課走近大數據之Hive入門問答

走近大數據之Hive入門

                
                趙強老師
            數據庫工程師

                    查看講師更多課程 
                    趙強老師講師的其他課程
                
Oracle高級查詢
初級·62981
免費課程
                                
Oracle觸發器
初級·36934
免費課程
                                
Oracle存儲過程和自定義函數
初級·56374
免費課程
                                
Oracle數據庫開發必備利器之PL/SQL基礎
初級·75166
免費課程
                                
                難度初級
            
                時長 2小時21分
            
                學習人數
            
綜合評分9.83
                            98人評價
                        查看評價
                                10.0
                                內容實用
                            
                                9.8
                                簡潔易懂
                            
                                9.7
                                邏輯清晰

全部評論問答未解決精華

白小明

啟動Hive報錯，需要修改MySQL數據庫權限，使其能夠遠程登錄：
grant all privileges on hive.* to root@'%' identified by '123456';

若報以下錯誤：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask...，則需要修改MySQL字符集：
alter database hive character set latin1;

1 3-3 Hive安裝之遠程模式和本地模式

2018-06-16

白小明

Hive 有三種安裝模式：

1. 嵌入模式：元數據信息存儲在 Hive 自帶的 Apache Derby 數據庫中；只允許創建一個連接；多用于 demo。
2. 本地模式：與嵌入模式很類似，只是元數據信息存儲在另外的數據庫（通常是 MySQL）中；MySQL 數據庫與 Hive 數據倉庫運行在同一臺物理機器上；多用于開發和測試。
3. 遠程模式：與本地模式很類似，只是元數據信息存儲在另外一臺機器上的 MySQL 數據庫中；允許創建多個連接；==推薦在生產環境中使用==。

1 3-2 Hive安裝之嵌入模式

2018-06-16

白小明

Hive 中的元數據包括表名、列名、分區及其屬性、表的屬性（是否為外部表等）、表的數據所在的目錄等。

Hive 將元數據存儲在數據庫（metastore）中，支持 Apache Derby、MySQL、Oracle 等數據庫，元數據默認存儲在 Apache Derby 中。

2 2-1 Hive的體系結構之元數據

2018-06-16

白小明

## OLTP 與 OLAP

當今的數據處理大致可以分成兩大類：聯機事務處理OLTP（on-line transaction processing）、聯機分析處理OLAP（On-Line Analytical Processing）。

- OLTP 是傳統的關系型數據庫的主要應用，主要是一些事務處理，例如銀行交易，所以 OLTP 也被稱為面向交易的處理系統，其基本特征是顧客的原始數據可以立即傳送到計算中心進行處理，并在很短的時間內給出處理結果。
- OLAP 是數據倉庫系統的主要應用，專門設計用于支持復雜的分析操作，側重決策支持，并且提供直觀易懂的查詢結果。

4 1-2 數據倉庫簡介

2018-06-16

白小明

Hive 官網：https://hive.apache.org

Hive[ha?v]是構建在 Hadoop HDFS 之上的一個數據倉庫工具，通過它可以實現將結構化的數據文件映射為一張數據庫表，并提供簡單的 SQL 查詢功能，同時將 SQL語句轉換 MapReduce 任務進行執行。

利用 Hive，你可以不用編寫復雜的 Hadoop 應用程序，你只需要寫一個 SQL，Hive 就會把它轉換成一個 Hadoop MapReduce 任務去執行，極大地方便了 Hadoop 程序的開發。

5 1-1 課程概述

2018-06-15