一、什麼是wal?
wal的全稱是write ahead logging,它是很多資料庫中用於實現原子事務的一種機制,sqlite在3.7.0版本引入了該特性。
二、wal如何工作?
在引入wal機制之前,sqlite使用rollback journal機制實現原子事務。
rollback journal機制的原理是:在修改資料庫檔案中的資料之前,先將修改所在分頁中的資料備份在另外乙個地方,然後才將修改寫入到資料庫檔案中;如果事務失敗,則將備份資料拷貝回來,撤銷修改;如果事務成功,則刪除備份資料,提交修改。
wal機制的原理是:修改並不直接寫入到資料庫檔案中,而是寫入到另外乙個稱為wal的檔案中;如果事務失敗,wal中的記錄會被忽略,撤銷修改;如果事務成功,它將在隨後的某個時間被寫回到資料庫文程式設計客棧件中,提交修改。
同步wal檔案和資料庫檔案的行為被稱為checkpoint(檢查點),它由sqlite自動執行,預設是在wal檔案積累到1000頁修改的時候;當然,在適當的時候,也可以手動執行checkpoint,sqlite提供了相關的介面。執行checkpoint之後,wal檔案會被清空。
在讀的時候,sqlite將在wal檔案中搜尋,找到最後乙個寫入點,記住它,並忽略在此之後的寫入點(這保證了讀寫和讀讀可以並行執行);隨後,它確定所要讀的資料所在頁是否在wal檔案中,如果在,則讀wal檔案中的資料,如果不在,則直接讀資料庫檔案中的資料。
在寫的時候,sqlite將之寫入到wal檔案中即可,但是必須保證獨佔寫入,因此寫寫之間不能並行執行。
wal在實現的過程中,使用了共享記憶體技術,因此,所有的讀寫程序必須在同乙個機器上,否則,無法保證資料一致性。
三、wal的優點與缺點
優點:1.讀和寫可以完全地併發執行,不會互相阻塞(但是寫之間仍然不能併發)。
2.wal在大多數情況下,擁有更好的效能(因為無需每次寫入時都要寫兩個檔案)。
3.磁碟i/o行為更容易被**。
缺點:1.訪問資料庫的所有程式必須在同一主機上,且支援共享記憶體技術。
2.每個資料庫現在對應3個檔案:.db,-wal,-shm。
3.當寫入資料達到gb級的時候,資料庫效能將下降。
4.3.7.0之前的sqlite無法識別啟用了wal機制的資料庫檔案。
四、wal引入的相容性問題
在啟用了wal之後,資料庫檔案格式的版本號由1公升級到了2,因此,3.之前的sqlite無法識別啟用了wal機制的資料庫檔案。
禁用wal會使資料庫檔案格式的版本號恢復到1,從而可以被sqlite 3.7.0之前的版本識別。
五、wal引入的效能問題
在一般情況下,wal會提高sqlite的事務效能;但是在某些極端情況下www.cppcns.com,卻會導致sqlite事務效能的下降。
1.在事務執行時間較長或者要修改的資料量達到gb級的時候,wal檔案會被占用,它會暫時阻止checkpoint的執行(checkpoint會清空wal檔案),這將導致wal檔案變得很大,增加定址時間,最終導致讀寫效能的下降。
2.當checkpo執行的時候,會降低當時的讀寫效能,因此,wal可能會導致程式設計客棧週期性的效能下降。
六、與wal相關的pragma和介面
複製** **如下:
pragma journal_mode
pragma wal_checkpoint
pragma wal_autocheckpoint
sqlite3_wal_checkpoint
sqlite3_wal_autocheckpoint
sqlite3_wal_hook
本文標題: sqlite中的wal機制詳細介紹
本文位址:
介紹資料庫中的wal技術 預寫日誌 WAL 介紹
預寫日誌 wal,write ahead log 是關係型資料庫中用於實現事務性和永續性的一系列技術。簡單來說就是,做乙個操作之前先講這件事情記錄下來。為什麼要使用wal呢?比如你的備忘錄裡面有如下記錄 2015.12.25 理髮 2015.12.28 整容 2015.12.31 修指甲 別亂想,博...
SQLite資料庫的鎖機制
sqlite資料庫的鎖機制包括四種鎖,共享鎖 shared lock 預留鎖 reserved lock 和未決鎖 pending lock 排他鎖 exclusive lock 其中讀操作,用的是shared lock,所以併發的多個讀資料庫。如果有乙個讀操作存在,那麼都不會允許寫。而寫就比較麻煩...
sqlite中的命令
1 sqlite3 常用命令 當前目錄下建立或開啟test.db 資料庫檔案,並進入 sqlite 命令終端,以 sqlite 字首標識 sqlite3 test.db 檢視資料庫檔案資訊命令 注意命令前帶字元 sqlite database 檢視所有表的建立語句 sqlite schema 檢視指...