MySQL數(shù)據(jù)庫技術優(yōu)化概述

1、 MySQL數(shù)據(jù)庫技術優(yōu)化概述目 錄 TOC o 1-3 h z u HYPERLINK l _Toc17662244 前言 PAGEREF _Toc17662244 h 4 HYPERLINK l _Toc17662245 1. 優(yōu)化一覽圖 PAGEREF _Toc17662245 h 4 HYPERLINK l _Toc17662246 2. 優(yōu)化 PAGEREF _Toc17662246 h 4 HYPERLINK l _Toc17662247 2.1 軟優(yōu)化 PAGEREF _Toc17662247 h 4 HYPERLINK l _Toc17662248 2.1.1 查詢語句優(yōu)化 P

2、AGEREF _Toc17662248 h 5 HYPERLINK l _Toc17662249 2.1.2 優(yōu)化子查詢 PAGEREF _Toc17662249 h 5 HYPERLINK l _Toc17662250 2.1.3 使用索引 PAGEREF _Toc17662250 h 5 HYPERLINK l _Toc17662251 2.1.4 分解表 PAGEREF _Toc17662251 h 6 HYPERLINK l _Toc17662252 2.1.5 中間表 PAGEREF _Toc17662252 h 6 HYPERLINK l _Toc17662253 2.1.6 增加

3、冗余字段 PAGEREF _Toc17662253 h 6 HYPERLINK l _Toc17662254 2.1.7 分析表,檢查表,優(yōu)化表 PAGEREF _Toc17662254 h 6 HYPERLINK l _Toc17662255 2.2 硬優(yōu)化 PAGEREF _Toc17662255 h 7 HYPERLINK l _Toc17662256 2.2.1 硬件三件套 PAGEREF _Toc17662256 h 7 HYPERLINK l _Toc17662257 2.2.2 優(yōu)化數(shù)據(jù)庫參數(shù) PAGEREF _Toc17662257 h 7 HYPERLINK l _Toc17

4、662258 2.2.3 分庫分表 PAGEREF _Toc17662258 h 8 HYPERLINK l _Toc17662259 2.2.4 緩存集群 PAGEREF _Toc17662259 h 9 HYPERLINK l _Toc17662260 結語 PAGEREF _Toc17662260 h 11前言數(shù)據(jù)庫優(yōu)化一方面是找出系統(tǒng)的瓶頸,提高MySQL數(shù)據(jù)庫的整體性能,而另一方面需要合理的結構設計和參數(shù)調整,以提高用戶的相應速度,同時還要盡可能的節(jié)約系統(tǒng)資源,以便讓系統(tǒng)提供更大的負荷.1. 優(yōu)化一覽圖2. 優(yōu)化筆者將優(yōu)化分為了兩大類,軟優(yōu)化和硬優(yōu)化,軟優(yōu)化一般是操作數(shù)據(jù)庫即可,而硬

5、優(yōu)化則是操作服務器硬件及參數(shù)設置.2.1 軟優(yōu)化2.1.1 查詢語句優(yōu)化1.首先我們可以用EXPLAIN或DESCRIBE(簡寫:DESC)命令分析一條查詢語句的執(zhí)行信息.2.例:DESCSELECT*FROMuser顯示:其中會顯示索引和查詢數(shù)據(jù)讀取數(shù)據(jù)條數(shù)等信息.2.1.2 優(yōu)化子查詢在MySQL中,盡量使用JOIN來代替子查詢.因為子查詢需要嵌套查詢,嵌套查詢時會建立一張臨時表,臨時表的建立和刪除都會有較大的系統(tǒng)開銷,而連接查詢不會創(chuàng)建臨時表,因此效率比嵌套子查詢高.2.1.3 使用索引索引是提高數(shù)據(jù)庫查詢速度最重要的方法之一,關于索引可以參高筆者一文,介紹比較詳細,此處記錄使用索引的三

6、大注意事項:LIKE關鍵字匹配%開頭的字符串,不會使用索引.OR關鍵字的兩個字段必須都是用了索引,該查詢才會使用索引.使用多列索引必須滿足最左匹配.2.1.4 分解表對于字段較多的表,如果某些字段使用頻率較低,此時應當,將其分離出來從而形成新的表,2.1.5 中間表對于將大量連接查詢的表可以創(chuàng)建中間表,從而減少在查詢時造成的連接耗時.2.1.6 增加冗余字段類似于創(chuàng)建中間表,增加冗余也是為了減少連接查詢.2.1.7 分析表,檢查表,優(yōu)化表分析表主要是分析表中關鍵字的分布,檢查表主要是檢查表中是否存在錯誤,優(yōu)化表主要是消除刪除或更新造成的表空間浪費.1. 分析表: 使用 ANALYZE 關鍵字,

7、如ANALYZE TABLE user;clipboard.pngOp:表示執(zhí)行的操作.Msg_type:信息類型,有status,info,note,warning,error.Msg_text:顯示信息.2. 檢查表: 使用 CHECK關鍵字,如CHECK TABLE user optionoption 只對MyISAM有效,共五個參數(shù)值:QUICK:不掃描行,不檢查錯誤的連接.FAST:只檢查沒有正確關閉的表.CHANGED:只檢查上次檢查后被更改的表和沒被正確關閉的表.MEDIUM:掃描行,以驗證被刪除的連接是有效的,也可以計算各行關鍵字校驗和.EXTENDED:最全面的的檢查,對每行

8、關鍵字全面查找.3. 優(yōu)化表:使用OPTIMIZE關鍵字,如OPTIMIZE LOCAL|NO_WRITE_TO_BINLOG TABLE user;LOCAL|NO_WRITE_TO_BINLOG都是表示不寫入日志.,優(yōu)化表只對VARCHAR,BLOB和TEXT有效,通過OPTIMIZE TABLE語句可以消除文件碎片,在執(zhí)行過程中會加上只讀鎖.2.2 硬優(yōu)化2.2.1 硬件三件套1.配置多核心和頻率高的cpu,多核心可以執(zhí)行多個線程.2.配置大內存,提高內存,即可提高緩存區(qū)容量,因此能減少磁盤I/O時間,從而提高響應速度.3.配置高速磁盤或合理分布磁盤:高速磁盤提高I/O,分布磁盤能提高并

9、行操作的能力.2.2.2 優(yōu)化數(shù)據(jù)庫參數(shù)優(yōu)化數(shù)據(jù)庫參數(shù)可以提高資源利用率,從而提高MySQL服務器性能.MySQL服務的配置參數(shù)都在f或my.ini,下面列出性能影響較大的幾個參數(shù).key_buffer_size:索引緩沖區(qū)大小table_cache:能同時打開表的個數(shù)query_cache_size和query_cache_type:前者是查詢緩沖區(qū)大小,后者是前面參數(shù)的開關,0表示不使用緩沖區(qū),1表示使用緩沖區(qū),但可以在查詢中使用SQL_NO_CACHE表示不要使用緩沖區(qū),2表示在查詢中明確指出使用緩沖區(qū)才用緩沖區(qū),即SQL_CACHE.sort_buffer_size:排序緩沖區(qū)傳送門:

10、更多參數(shù)2.2.3 分庫分表因為數(shù)據(jù)庫壓力過大，首先一個問題就是高峰期系統(tǒng)性能可能會降低，因為數(shù)據(jù)庫負載過高對性能會有影響。另外一個，壓力過大把你的數(shù)據(jù)庫給搞掛了怎么辦？所以此時你必須得對系統(tǒng)做分庫分表 + 讀寫分離，也就是把一個庫拆分為多個庫，部署在多個數(shù)據(jù)庫服務上，這時作為主庫承載寫入請求。然后每個主庫都掛載至少一個從庫，由從庫來承載讀請求。clipboard.png2.2.4 緩存集群如果用戶量越來越大，此時你可以不停的加機器，比如說系統(tǒng)層面不停加機器，就可以承載更高的并發(fā)請求。然后數(shù)據(jù)庫層面如果寫入并發(fā)越來越高，就擴容加數(shù)據(jù)庫服務器，通過分庫分表是可以支持擴容機器的，如果數(shù)據(jù)庫層面的讀并發(fā)越來越高，就擴容加更多的從庫。但是這里有一個很大的問題：數(shù)據(jù)庫其實本身不是用來承載高并發(fā)請求的，所以通常來說，數(shù)據(jù)庫單機每秒承載的并發(fā)就在幾千的數(shù)量級，而且數(shù)據(jù)庫使用的機器都是比較高配置，比較昂貴的機器，成本很高。如果你就是簡單的不停的加機器，其實是不對的。所以在高并發(fā)架構里通常都有緩存這個環(huán)節(jié)，緩存系統(tǒng)的設計就是為了承載高并發(fā)而生。所以單機承載的并發(fā)量都在每秒幾萬，甚至每秒數(shù)十萬，對高并發(fā)的承載能力比數(shù)據(jù)庫系統(tǒng)要高出一到兩個數(shù)量級。所以你完全可以根據(jù)系統(tǒng)的業(yè)務特性，對那種寫少讀多的請求，