Hive insert into小檔案問題

2021-10-20 05:26:55 字數 1149 閱讀 9296

測試資料

create

table

`test_small`

(`dist_id`

intcomment

'區組id'

,`account` string comment

'賬號'

,`gold`

intcomment

'金幣'

)row format delimited fields

terminated

by','

;

插入兩條資料

insert

into

table test_small values

('1'

,'11'

,100006);

insert

into

table test_small values

('1'

,'12'

,110000

);

去檔案看,生成兩個小檔案

再插入兩條資料

insert

into

table test_small values

('1'

,'13'

,102000);

insert

into

table test_small values

('1'

,'14'

,100300

);

生成四個小檔案

在hive中,每使用一次insert都會產生乙個小檔案,在生產中是大忌。

現在已經有了四個小檔案,如何合併為乙個?

查詢資料覆蓋原**

insert overwrite table test_small select

*from test_small;

檢視hdfs,可以看到只有乙個檔案了

hive中使用insert語句產生的小檔案_zhikanjiani的部落格-csdn部落格_hive insert 小檔案

小bug小坑小總結

1.小程式canvas那些原生元件的層級預設是最高的,而且不能更改,平常的div彈框什麼的上面就會顯示出原生元件的內容,解決辦法 cover view,cover image,button share data item item 分享 用這個data item 後的名字可以隨意起,後面的值如果是字...

小笑話小啟示

一 女浴室 裡面人亂作一團,赤裸身體往外跑,只見大街上白花花一大群,一老者大喊 快捂住 眾裸女突然醒悟,但身上要緊部位有三處,手忙腳亂捂不過來,不知所措。這時老者又大喊 捂臉就行,下面都一樣!此事的重要啟示 在特殊情況下抓工作不可能面面俱到,要抓住重點。二 報案 我把錢放在胸衣內,在擁擠的地鐵內被一...

我的小情緒 小失落 小想念

再婚是一場華麗的轉身一些人,一些事,總是以為忘記了。可是當無意間碰觸某根敏感神經時,記憶紛沓而來,無力招架。很久了,都沒有再想起你。以至於,我以為我真的是忘記了,我以為我真的可以微笑的面對你了,我以為我可以百毒不侵的迎接新的感情了。可是,事實多殘忍,我依然記得你。依然記得那些時光裡最美也最傷的往事。...