在hive select查詢中，一般會掃瞄整個表內容，會消耗很多時間做沒必要的工作。
分割槽表指的是在建立表時，指定partition的分割槽空間。
分割槽語法
分割槽表操作增加分割槽
刪除分割槽
alter
table employees drop
ifexists partition(country='***'[,state='yyyy』)
hive是針對某一列進行分捅。
hive採用對列值雜湊，然後除以捅的個數求餘的方式決定該條記錄存放在哪個桶當中。
好處
獲得更高的查詢處理效率。
使取樣（sampling）更高效
分桶語法id
string ,
name
string
)clustered by (id) sorted by (name) into
4 buckets
row format delimited fields terminated by '\t'
stored as textfile;
設定
set hive.enforce.bucketing = true;hive分割槽與分桶比較
HIVE 表 分割槽表 分桶表
hive中表 1.managed table 託管表。刪除表時，資料也刪除了。2.external table 外部表。刪除表時，資料不刪。hive命令 建立表,external 外部表 hive create external table if not exists t2 id int,name ...
分割槽表與分桶表
在大資料中，最常用的一種思想就是分治，我們可以把大的檔案切割劃分成乙個個的小的檔案，這樣每次操作乙個小的檔案就會很容易了，同樣的道理，在hive當中也是支援這種思想的，就是我們可以把大的資料，按照每天，或者每小時進行切分成乙個個的小的檔案，這樣去操作小的檔案就會容易得多了 分割槽欄位是乙個虛擬的字段...
HIve中的分割槽表和分桶表
匯入資料的四種方式 1 將本地的資料匯入到hive中 load data local inpath root tes.txt into table test.usr 2 從hdfs集群匯入資料 load data inpath hdfs node01 9000 user tes.txt into t...