簡單Hbase 分頁方案

2021-08-29 01:36:49 字數 893 閱讀 5511

簡單hbase分頁方案

網上大多數分頁方案分為從服務端分頁或者從客戶端分頁服務端分頁方式主要利用pagefilter過濾器,首先太複雜,其次針對集群的相容性不是很好,作者利用服務端分頁+客戶端分頁結合方式給出一種簡單易行的中間方案。

1.利用pagefilter過濾器從服務端分頁,過濾出所需要的最大條數,

注:作者認為大多數使用者不會進行太深的翻頁,假設pagesize=5,客戶飯100頁一共從伺服器獲取500條資料後返回,對hbase集群也不會造成壓力。並且輸出到客戶端對客戶端也不會有太大壓力

filter pagesize = new pagefilter(pagesize *pageno);
2.客戶端分頁技巧

listresultlist = new arraylist<>();

// 計算起始頁和結束頁

integer firstpage = (pageno) *pagesize;

integer endpage = firstpage + pagesize;

//客戶端分頁

int i = 0;

for (result rs : scanner)

if (resultlist.size() == log.getpagesize())

i++;

}

這樣就可以得到想要的分頁效果了

完整**:

public static void mai(string args)

if (resultlist.size() == log.getpagesize())

i++;

}}

hbase分頁功能的幾種實現方案

hbase分頁功能的幾種實現方案。分頁功能是線上系統的常用功能,對hbase,有以下幾個方案可以選擇 拋磚引玉 假設要查第n頁,1頁大小為m 1 client分頁,scan查到n m條,過濾掉n m m條,返回m條。對於m,n較小時比較適合。2 自定義filter,該filter可以傳遞offset...

hbase分頁查詢

hbase分頁t提高查詢效率。startkey怎麼取沒有問題了。但是怎麼儲存呢,有同學可能會想到存到session,但是如果你的服務是rest api型的,就沒有session的概念了。那還有兩種選擇 一 是存到客戶端,讓客戶端每次請求時把startkey再傳回來,這樣需要依賴客戶端,如果客戶端是遠...

hbase 分頁過濾

原文連線 所以,權威指南裡才有了加上空位元組陣列的處理。hbase2.0以後,新的api是withstartrow byte startrow,boolean inclusive 可以直接設定是否包含起始行,完美解決問題,但是又保留了對以前api函式的相容性。分頁過濾 private static ...