hive資料通過hfile匯入hbase

2021-10-08 07:56:06 字數 3831 閱讀 7294

;

hdfs dfs -ls /tmp/student/baseinfo
建立對應的hbase表,其中baseinfo為family,應和上一步對應

create

'student_info'

,'baseinfo'

執行bulkhead,將資料匯入到hbase中

bin/hbase org.apache.hadoop.hbase.mapreduce.loadincrementalhfiles hdfs://master:9000/tmp/student  student_info
注意hdfs目錄的baseinfo為hbase的列族,bulkhead是不加

scan 'student_info'
注意hdfs目錄的baseinfo為hbase的列族,bulkhead是不加

## 7、hbase檢視資料

```shell

scan 'student_info'

HIVE資料匯入

1.text資料檔案匯出text資料表中 資料格式 建立相應的資料表 create table if not exists text table id int,count int comment table desc partitioned by date int row format delimi...

Hive資料匯入

1.操作準備資料來源 drop table if exists b create table b as select id,name,tel,age from b 2.複製檔案 如果資料檔案恰好是使用者需要的格式,那麼只需要複製檔案或資料夾就可以 hadoop fs cp source path t...

將資料通過shell指令碼從hdfs匯入到hive中

在建立專案的時候 需要將資料匯入 則此時的資料不能通過hql來再shell中展示 所以需要記錄指令碼 而這塊內容應該寫在乙個單獨的模組下面 需要注意的是對檔案的明明 xx yy zz.hql xx 檔名 yy 表示資料庫對應表明 zz分割槽性質如按照天則為yyyymmdd 這樣明明的好處就是一目了然...