從海量key中查詢出某一固定字首的key

2021-10-09 06:02:59 字數 888 閱讀 6876

在此我想提乙個問題:從海量的key中查詢出以某一固定字首的key中的海量資料指的具體範圍是是多小,即具體的資料規模或者是資料的邊界是什麼。

通過keys pattern來查詢所有符合給定模式pattern的key,這個我們是可以得到想要的結果的,而且keys指令會一次性返回所有匹配的key,使用keys命令查詢大量的key會對正在執行的業務造成影響,因為一次性返回數量過大的時候會使得服務變得卡頓。

scan cursor [match pttern] [count count] //scan是無阻塞模式的提取指令列表,每次只會返回少量元素

命令中的cursor指的是游標,match pattern值得是指令,count引數指定返回的資料個數,但是count並無法嚴格控制數量。

scan 0 match k1* count 10 //該命令指的是大概率的返回數量為count的且以k1開頭的資料

scan是乙個基於游標的迭代器,每次都需要基於上一次的游標延續之前的迭代過程。此過程中,要求每次查詢都會使用上一次返回的游標。

此命令只有當以0作為游標的開始依次進行新的迭代,直至命令返回的游標為0為止,即當返回的游標為0的時候表示整個迭代過程都完成了。

注意:scan增量式迭代命令,並不能保證每次執行都返回某個給定數量的元素,可能為0個,當時命令返回的游標不是零,則應用程式就會繼續使用上乙個游標進行迭代,直至游標值為0,對於較大的資料集每次可能返回數十個資料,對於較小的資料集可能會直接返回所有資料集。

scan命令查出的所有命令可能對存在重複的值,所以我們可以利用hashset來實現資料去重。

怎麼從redis中查詢某一固定字首的key

想要測試資料,先用linux指令碼插入2百萬條資料,再來測試。等會附上bash指令碼。1.bin bash for i 0 i 2000000 i do echo set k i v i redistest.txt end2.vim redistest.txt set fileformat dos ...

從海量資料中查詢乙個數

題目 給出40億個不重複的unsigned int的整數,沒排過序,再給乙個指定的數,判斷這個數是否在那40億個數 中 存在?方案一 申請512mb的記憶體,利用位圖,乙個bit代表乙個unsigned int的值,讀入這40億個數,設定相應的位,存在的設定為1,不存在的設定為0,然後我們只需要o ...

從海量數值中找出最大的N個元素的演算法實現

首先,肯定不能將海量資料壓入treeset中進行排序,這樣會造成堆記憶體溢位。首先想到的是,採用treeset,維護乙個小頂堆,堆裡只有k個元素,從而保證堆記憶體不溢位。然後將後面的元素壓入堆中,基於treeset的排序功能排序後,poll掉最上面的乙個元素 最小元素 其實jdk1.5以後還提供了p...