大型資料庫設計技巧
1.分類拆分資料量大的表。對於經常使用的表(如某些參數列或**對照表),由於其使用頻率很高,要儘量減少表中的記錄數量。例如,銀行的戶主賬表原來設計成一張表,雖然可以方便程式的設計與維護,但經過分析發現,由於資料量太大,會影響資料的迅速定位。如果將戶主賬表分別設計為活期戶主賬、定期戶主賬及對公戶主賬等,則可以大大提高查詢效率。
2.索引設計。對於大的資料庫表,合理的索引能夠提高整個資料庫的操作效率。在索引設計中,索引欄位應挑選重複值較少的字段;在對建有復合索引的字段進行檢索時,應注意按照復合索引字段建立的順序進行。例如,如果對乙個5萬多條記錄的流水表以日期和流水號為序建立復合索引,由於在該表中日期的重複值接近整個表的記錄數,用流水號進行查詢所用的時間接近3秒;而如果以流水號為索引字段建立索引進行相同的查詢,所用時間不到1秒。因此在大型資料庫設計中,只有進行合理的索引字段選擇,才能有效提高整個資料庫的操作效率。
3.資料操作的優化。在大型資料庫中,如何提高資料操作效率值得關注。例如,每在資料庫流水表中增加一筆業務,就必須從流水控制表中取出流水號,並將其流水號的數值加一。正常情況下,單筆操作的反應速度尚屬正常,但當用它進行批量業務處理時,速度會明顯減慢。經過分析發現,每次對流水控制表中的流水號數值加一時都要鎖定該錶,而該錶卻是整個系統操作的核心,有可能在操作時被其他程序鎖定,因而使整個事務操作速度變慢。對這一問題的解決的辦法是,根據批量業務的總筆數批量申請流水號,並對流水控制表進行一次更新,即可提高批量業務處理的速度。另乙個例子是對插表的優化。對於大批量的業務處理,如果在插入資料庫表時用普通的insert語句,速度會很慢。其原因在於,每次插表都要進行一次i/o操作,花費較長的時間。改進後,可以用put語句等緩衝區形式等滿頁後再進行i/o操作,從而提高效率。對大的資料庫表進行刪除時,一般會直接用delete語句,這個語句雖然可以進行小表操作,但對大表卻會因帶來大事務而導致刪除速度很慢甚至失敗。解決的方法是去掉事務,但更有效的辦法是先進行drop操作再進行重建。
4.資料庫引數的調整。資料庫引數的調整是乙個經驗不斷積累的過程,應由有經驗的系統管理員完成。以informix資料庫為例,記錄鎖的數目太少會造成鎖表的失敗;邏輯日誌的檔案數目太少會造成插入大表失敗等,這些問題都應根據實際情況進行必要的調整。
5.必要的工具。在整個資料庫的開發與設計過程中,可以先開發一些小的應用工具,如自動生成庫表的標頭檔案、插入資料的初始化、資料插入的函式封裝、錯誤跟蹤或自動顯示等,以此提高資料庫的設計與開發效率。
6.避免長事務。對單個大表的刪除或插入操作會帶來大事務,解決的辦法是對引數進行調整,也可以在插入時對檔案進行分割。對於乙個由一系列小事務順序操作共同構成的長事務(如銀行交易系統的日終交易),可以由一系列操作完成整個事務,但其缺點是有可能因整個事務太大而使不能完成,或者,由於偶然的意外而使事務重做所需的時間太長。較好的解決方法是,把整個事務分解成幾個較小的事務,再由應用程式控制整個系統的流程。這樣,如果其中某個事務不成功,則只需重做該事務,因而既可節約時間,又可避免長事務。
7.適當超前。計算機技術發展日新月異,資料庫的設計必須具有一定前瞻性,不但要滿足當前的應用要求,還要考慮未來的業務發展,同時必須有利於擴充套件或增加應用系統的處理功能。
大型資料庫的設計原則與開發技巧
隨著計算機技術越來越廣泛地應用於國民經濟的各個領域,在計算機硬體不斷微型化的同時,應用系統向著複雜化 大型化的方向發展。資料庫是整個系統的 核心,它的設計直接關係系統執行的效率和系統的穩定性。因此在軟體系統開發中,資料庫設計應遵循必要的資料庫正規化理論,以減少冗餘 保證資料的完整性與正 確性。只有在...
大型資料庫的設計原則與開發技巧
著計算機技術越來越廣泛地應用於國民經濟的各個領域,在計算機硬體不斷微型化的同時,應用系統向著複雜化 大型化的方向發展。資料庫是整個系統的核心,它的設計直接關係系統執行的效率和系統的穩定性。因此在軟體系統開發中,資料庫設計應遵循必要的資料庫正規化理論,以減少冗餘 保證資料的完整性與正確性。只有在合適的...
大型資料庫的設計原則與開發技巧
隨著計算機技術越來越廣泛地應用於國民經濟的各個領域,在計算機硬體不斷微型化的同時,應用系統向著複雜化 大型化的方向發展。資料庫是整個系統的核心,它的設計直接關係系統執行的效率和系統的穩定性。因此在軟體系統開發中,資料庫設計應遵循必要的資料庫正規化理論,以減少冗餘 保證資料的完整性與正確性。只有在合適...