sql語句就是不能在普通的字串而已，如何讓字串讓hive引擎識別呢
會把sql編譯成乙個語法術(sql parser 編譯解析)，queryoptimizer做很多的優化，找到乙個最優的執行計畫，physical plan 生成物理計畫，在這個過程中有序列化和反序列化，udf(就是使用者自己定義的函式),物理計畫會生成乙個執行計畫execution，在execution下面會生成mapreduce
客戶端過來以後，他會通過driver部分，把sql最終翻譯成mapreduce，把我們作業提交到hadoopstorage(hdfs,hbase)之上就可以了
管理過程當中會可能設計表，和庫，hive基於表操作的，這些表和資料庫都是作為源資料庫資訊放在metastore，metastore存放在mysql
Hive的安裝模式 體系架構及優點
hive有三種安裝模式，分別是 嵌入模式 本地模式和遠端模式。1.1 嵌入模式 1 元資料資訊被儲存在自帶的deybe資料中 2 只允許建立乙個連線 3 多用於demo 1.2 本地模式 1 元資料資訊被儲存在mysql資料庫 2 mysql資料庫與hive執行在同一臺物理機器上 3 多用於開發和測...
Hive概述 體系架構 分割槽 桶與傾斜 環境搭建
hive 是基於hadoop 的乙個資料倉儲工具，可以將結構化的資料檔案對映為一張資料庫表，並提供完整的sql查詢功能，可以將sql語句轉換為mapreduce任務進行執行。其優點是學習成本低，可以通過類sql語句快速實現簡單的mapreduce統計，不必開發專門的mapreduce應用，十分適合資...
hive體系結構
使用者介面 包括 cli，client，wui 元資料儲存 通常是儲存在關聯式資料庫如 mysql,derby 中。直譯器 編譯器 優化器 執行器。hadoop 用 hdfs 進行儲存，利用 mapreduce 進行計算。client 是 hive 的客戶端，使用者連線至 hive server。在...