author：skate
time：2012/02/16
mysql記憶體使用分析
從記憶體的使用方式來說，mysql資料庫的記憶體使用主要分為以下兩類
1.執行緒獨享記憶體
2.全域性共享記憶體
1.執行緒獨享記憶體
在mysql 中，執行緒獨享記憶體主要用於各客戶端連線線程儲存各種操作的獨享資料，
如執行緒棧資訊，分組排序操作，資料讀寫緩衝，結果集暫存等等，而且大多數可
以通過相關引數來控制記憶體的使用量。
執行緒棧資訊使用記憶體(thread_stack)：
主要用來存放每乙個執行緒自身的標識資訊，如執行緒id，執行緒執行時基本資訊等等，
我們可以通過thread_stack 引數來設定為每乙個執行緒棧分配多大的記憶體。
排序使用記憶體(sort_buffer_size)：
mysql 用此記憶體區域進行排序操作(filesort)，完成客戶端的排序請求。當我們
設定的排序區快取大小無法滿足排序實際所需記憶體的時候，mysql 會將資料寫入磁
盤檔案來完成排序。由於磁碟和記憶體的讀寫效能完全不在乙個數量級，所以
sort_buffer_size引數對排序操作的效能影響絕對不可小視。排序操作的實現原理
請參考：mysql order by 的實現分析。
join操作使用記憶體(join_buffer_size)：
應用程式經常會出現一些兩表（或多表）join的操作需求，mysql在完成某些join
需求的時候（all/index join），為了減少參與join的「被驅動表」的讀取次數以提
高效能，需要使用到join buffer來協助完成join操作（具體join實現演算法請參考：
mysql中的join 基本實現原理）。當join buffer太小，mysql 不會將該buffer存
入磁碟檔案，而是先將join buffer中的結果集與需要join的表進行join操作，然後
清空join buffer 中的資料，繼續將剩餘的結果集寫入此buffer中，如此往復。
這勢必會造成被驅動表需要被多次讀取，成倍增加io 訪問，降低效率。
順序讀取資料緩衝區使用記憶體(read_buffer_size)：
這部分記憶體主要用於當需要順序讀取資料的時候，如無法使用索引的情況下的全表
掃瞄，全索引掃瞄等。在這種時候，mysql按照資料的儲存順序依次讀取資料塊，
每次讀取的資料快首先會暫存在read_buffer_size中，當buffer空間被寫滿或者全部
資料讀取結束後，再將buffer中的資料返回給上層呼叫者，以提高效率。
隨機讀取資料緩衝區使用記憶體(read_rnd_buffer_size)：
和順序讀取相反，當mysql進行非順序讀取（隨機讀取）資料塊的時候，會利用這個緩衝
區暫存讀取的資料。如根據索引資訊讀取表資料，根據排序後的結果集與表進行join等等。
總的來說，就是當資料塊的讀取需要滿足一定的順序的情況下，mysql就需要產生隨機讀
取，進而使用到read_rnd_buffer_size 引數所設定的記憶體緩衝區。
連線資訊及返回客戶端前結果集暫存使用記憶體(net_buffer_size)：
這部分用來存放客戶端連線線程的連線資訊和返回客戶端的結果集。當mysql 開始產生
可以返回的結果集，會在通過網路返回給客戶端請求執行緒之前，會先暫存在通過
net_buffer_size 所設定的緩衝區中，等滿足一定大小的時候才開始向客戶端傳送，以提高網
絡傳輸效率。不過，net_buffer_size 引數所設定的僅僅只是該快取區的初始化大小，mysql
會根據實際需要自行申請更多的記憶體以滿足需求，但最大不會超過max_allowed_packet 引數大小。
批量插入暫存使用記憶體(bulk_insert_buffer_size)：
當我們使用如insert …values(…),(…),(…)… 的方式進行批量插入的時候，mysql 會先將
提交的資料放如乙個快取空間中，當該快取空間被寫滿或者提交完所有資料之後，mysql 才會
一次性將該快取空間中的資料寫入資料庫並清空快取。此外，當我們進行load data infile
操作來將文字檔案中的資料load 進資料庫的時候，同樣會使用到此緩衝區。
臨時表使用記憶體(tmp_table_size)：
當我們進行一些特殊操作如需要使用臨時表才能完成的order by，group by 等等，mysql
可能需要使用到臨時表。當我們的臨時表較小（小於tmp_table_size 引數所設定的大小）
的時候，mysql 會將臨時表建立成記憶體臨時表，只有當tmp_table_size 所設定的大小無法
裝下整個臨時表的時候，mysql 才會將該錶建立成myisam 儲存引擎的表存放在磁碟上。
不過，當另乙個系統引數max_heap_table_size 的大小還小於tmp_table_size 的時候，
mysql 將使用max_heap_table_size 引數所設定大小作為最大的記憶體臨時表大小，而忽略
tmp_table_size 所設定的值。而且tmp_table_size 引數從mysql 5.1.2 才開始有，之
前一直使用max_heap_table_size。
上面所列舉的mysql 執行緒獨享記憶體僅僅只是所有執行緒獨享記憶體中的部分，並不是全部，
只是這些可能對mysql 的效能產生較大的影響，且可以通過系統引數進行調節。
由於以上記憶體都是執行緒獨享，極端情況下的記憶體總體使用量將是所有連線線程的總倍數。
所以在設定過程中一定要謹慎，切不可為了提公升效能就盲目的增大各引數值，避免因為
記憶體不夠而產生out of memory 異常或者是嚴重的swap 交換反而降低整體效能。
-----end-----
mysql 記憶體使用 mysql記憶體使用分析 一
author skate time 2012 02 16 mysql記憶體使用分析 從記憶體的使用方式來說，mysql的記憶體使用主要分為以下兩類 1.執行緒獨享記憶體 2.全域性共享記憶體 1.執行緒獨享記憶體 在mysql 中，執行緒獨享記憶體主要用於各客戶端連線線程儲存各種操作的獨享資料，如執...
mysql記憶體使用分析 二
author skate time 2012 02 16 mysql記憶體使用分析 2.全域性共享記憶體 全域性共享內則主要是mysql instance mysqld程序 以及底層儲存引擎用來暫存各種全域性運算及可共享的暫存資訊，如儲存查詢快取的query cache，快取連線線程的thread ...
Mysql 記憶體使用
在這裡我們將介紹的是mysql記憶體使用上的執行緒獨享，執行緒獨享記憶體主要用於各客戶端連線線程儲存各種操作的獨享資料，如執行緒棧資訊，分組排序操作，資料讀寫緩衝，結果集暫存等等，而且大多數可以通過相關引數來控制記憶體的使用量。對於任何乙個資料庫管理系統來說，記憶體的分配使用絕對可以算的上是其核心之...