因為mongodb的記憶體是系統的虛擬記憶體管理的,mongodb並不干涉記憶體管理工作,這樣雖然可以簡化mongo的工作,但同時mongo的記憶體使用是沒法控制的。
真的沒法控制?辦法是有的,可以通過ulimit 來控制使用者程序的虛擬位址空間的大小。
ulimit 是控制著所有程序的記憶體大小,怎麼針對mongodb進行控制呢? 其實可以變通的,我們在自己linux裡使用乙個使用者來執行mongodb,其它程式用其它使用者進行執行。因為ulimit是可以限制指定使用者資源的.
通過ulimit -a來檢視所有可以修改的資源
118 ~ >>ulimit -a @root
-t: cpu time (seconds) unlimited
-f: file size (blocks) unlimited
-d: data seg size (kbytes) unlimited
-s: stack size (kbytes) 8192
-c: core file size (blocks) 0
-m: resident set size (kbytes) unlimited
-u: processes 1024
-n: file descriptors 1024
-l: locked-in-memory size (kb) 64
-v: address space (kb) unlimited
-x: file locks unlimited
-i: pending signals 15661
-q: bytes in posix msg queues 819200
-e: max nice 0
-r: max rt priority 0
這裡我們修改的是ulimit -v: address space(kb) 選項 也就是使用者程序的最大虛擬位址空間。
我們新建個使用者cb,在啟動mongod之前
ulimit -v 1000000 修改最大虛擬位址空間為1g
然後執行mongod 埠為10000,並執行1000w的資料插入指令碼。
再使用root使用者,不對ulimit進行任何修改,開起另外乙個mongod 埠為20000 ,也同時進行1000w的資料插入. 我們來看下效果。
1000埠的為限制虛擬 位址空間的,2000埠是沒有限制的。 效果很明顯!
摘自 crazybaby's blog
讓Redis突破記憶體大小的限制
redis雖然可以實現持久化儲存,也是基於資料記憶體模型的基礎之上,單機記憶體大小限制著redis儲存的資料量,有沒有一種替代方案呢?本文介紹一款筆者使用的採用new bsd license 許可協議的軟體 ssdb。ssdb 是乙個 c c 語言開發的高效能 nosql 資料庫,支援 kv,lis...
Redis 記憶體大小限制 鍵值淘汰策略配置
windows 的 maxmemory policy 策略可能會少一些 指定 redis 最大記憶體限制,redis 在啟動時會把資料載入到記憶體中,達到最大記憶體後,redis 會先嘗試清除已到期或即將到期的 key,移除規則可以通過 maxmemory policy 來指定,當處理後,仍然到達最...
限制mongodb記憶體的使用
預設情況下,mongodb占用的記憶體大小為 starting in 3.4,the wiredtiger internal cache,by default,will use the larger of either 50 of ram minus 1 gb,or 256 mb.即 總記憶體 50...