mysql 優化 實作命中率100%

雖然這個标題誇張得過了頭，但此文很完整，值得學習。轉自 http://www.yy520.net/read.php?278

myql優化，啟動mysql緩存機制，實作命中率100%

配置你的mysql配置檔案：主要是配置[mysqld]後面的内容。

1，優化遠端連接配接速度。

在[mysqld]下面添加skip-name-resolve

skip-name-resolve

選項就能禁用DNS解析，連接配接速度會快很多。不過，這樣的話就不能在MySQL的授權表中使用主機名了而隻能用ip格式。

2，設定連接配接數，mysql預設的連接配接數是100，太少了。

[mysqld]下面添加

max_connections=512

3，開啟緩存機制

skip-locking#取消檔案系統的外部鎖

key_buffer = 512M#索引緩存,根據記憶體大小而定,如果是獨立的db伺服器,可以設定高達80%的記憶體總量

#連接配接排隊清單總數

back_log = 200

max_allowed_packet = 2M

#打開表緩存總數,可以避免頻繁的打開資料表産生的開銷

table_cache = 512

#每個線程排序所需的緩沖

sort_buffer_size = 4M

#MyISAM表發生變化時重新排序所需的緩沖

myisam_sort_buffer_size = 64M

#緩存可重用的線程數

thread_cache = 128

#查詢結果緩存

query_cache_size = 128M

#設定逾時時間,能避免長連接配接

wait_timeout=60

#最大并發線程數,cpu數量*2

thread_concurrency = 4

#記錄慢查詢,然後對慢查詢一一優化

log_output=FILE # also can be FILE,TABLE or TABLE or NONE

slow-query-log=1

slow_query_log_file=log-slow-queries.log

long_query_time = 1

4，安裝mytop監控mysql

apt-get install mytop

執行指令mytop就可以看到mysql的運作狀态。

以下内容為轉載的網上的文章，對mysql的配置和調試做了很詳細的講解：

關于 MySQL 調優

有3種方法可以加快 MySQL 伺服器的運作速度，效率從低到高依次為：

替換有問題的硬體， 對 MySQL 程序的設定進行調優，對查詢進行優化。

替換有問題的硬體通常是我們的第一考慮，主要原因是資料庫會占用大量資源。不過這種解決方案也就僅限于此了。實際上，您通常可以讓中央處理器(CPU)或磁盤速度加倍，也可以讓記憶體增大4到8倍。

第二種方法是對 MySQL 伺服器(也稱為 mysqld)進行調優。對這個程序進行調優意味着适當地配置設定記憶體，并讓 mysqld 了解将會承受何種類型的負載。加快磁盤運作速度不如減少所需的磁盤通路次數。類似地，確定 MySQL 程序正确操作就意味着它花費在服務查詢上的時間要多于花費在處理背景任務(如處理臨時磁盤表或打開和關閉檔案)上的時間。對 mysqld 進行調優是本文的重點。

最好的方法是確定查詢已經進行了優化。這意味着對表應用了适當的索引，查詢是按照可以充分利用 MySQL 功能的方式來編寫的。盡管本文并沒有包含查詢調優方面的内容(很多著作中已經針對這個主題進行了探讨)，不過它會配置 mysqld 來報告可能需要進行調優的查詢。

雖然已經為這些任務指派了次序，但是仍然要注意硬體和 mysqld 的設定以利于适當地調優查詢。機器速度慢也就罷了，我曾經見過速度很快的機器在運作設計良好的查詢時由于負載過重而失敗，因為 mysqld 被大量繁忙的工作所占用而不能服務查詢。

記錄慢速查詢

在一個 SQL 伺服器中，資料表都是儲存在磁盤上的。索引為伺服器提供了一種在表中查找特定資料行的方法，而不用搜尋整個表。當必須要搜尋整個表時，就稱為表掃描。通常來說，您可能隻希望獲得表中資料的一個子集，是以全表掃描會浪費大量的磁盤 I/O，是以也就會浪費大量時間。當必須對資料進行連接配接時，這個問題就更加複雜了，因為必須要對連接配接兩端的多行資料進行比較。

當然，表掃描并不總是會帶來問題;有時讀取整個表反而會比從中挑選出一部分資料更加有效(伺服器程序中查詢規劃器用來作出這些決定)。如果索引的使用效率很低，或者根本就不能使用索引，則會減慢查詢速度，而且随着伺服器上的負載和表大小的增加，這個問題會變得更加顯著。執行時間超過給定時間範圍的查詢就稱為慢速查詢。

您可以配置 mysqld 将這些慢速查詢記錄到适當命名的慢速查詢日志中。管理者然後會檢視這個日志來幫助他們确定應用程式中有哪些部分需要進一步調查。清單 1 給出了要啟用慢速查詢日志需要在 my.cnf 中所做的配置。

清單 1. 啟用 MySQL 慢速查詢日志

[mysqld]; enable the slow query log, default 10 secondslog-slow-queries; log queries taking longer than 5 secondslong_query_time = 5; log queries that don't use indexes even if they take less than long_query_time; MySQL 4.1 and newer onlylog-queries-not-using-indexes

這三個設定一起使用，可以記錄執行時間超過 5 秒和沒有使用索引的查詢。請注意有關 log-queries-not-using-indexes 的警告：您必須使用 MySQL 4.1 或更高版本。慢速查詢日志都儲存在 MySQL 資料目錄中，名為 hostname-slow.log。如果希望使用一個不同的名字或路徑，可以在 my.cnf 中使用 log-slow-queries = /new/path/to/file 實作此目的。

閱讀慢速查詢日志最好是通過 mysqldumpslow 指令進行。指定日志檔案的路徑，就可以看到一個慢速查詢的排序後的清單，并且還顯示了它們在日志檔案中出現的次數。一個非常有用的特性是 mysqldumpslow 在比較結果之前，會删除任何使用者指定的資料，是以對同一個查詢的不同調用被計為一次;這可以幫助找出需要工作量最多的查詢。

對查詢進行緩存

很多 LAMP 應用程式都嚴重依賴于資料庫，但卻會反複執行相同的查詢。每次執行查詢時，資料庫都必須要執行相同的工作 —— 對查詢進行分析，确定如何執行查詢，從磁盤中加載資訊，然後将結果傳回給客戶機。MySQL 有一個特性稱為查詢緩存，它将(後面會用到的)查詢結果儲存在記憶體中。在很多情況下，這會極大地提高性能。不過，問題是查詢緩存在預設情況下是禁用的。

将 query_cache_size = 32M 添加到 /etc/my.conf 中可以啟用 32MB 的查詢緩存。

監視查詢緩存

在啟用查詢緩存之後，重要的是要了解它是否得到了有效的使用。MySQL 有幾個可以檢視的變量，可以用來了解緩存中的情況。清單 2 給出了緩存的狀态。

清單 2. 顯示查詢緩存的統計資訊

mysql> SHOW STATUS LIKE 'qcache%';+-------------------------+------------+| Variable_name | Value |+-------------------------+------------+| Qcache_free_blocks | 5216 || Qcache_free_memory | 14640664 || Qcache_hits | 2581646882 || Qcache_inserts | 360210964 || Qcache_lowmem_prunes | 281680433 || Qcache_not_cached | 79740667 || Qcache_queries_in_cache | 16927 || Qcache_total_blocks | 47042 |+-------------------------+------------+8 rows in set (0.00 sec)

這些項的解釋如表 1 所示。

表 1. MySQL 查詢緩存變量

變量名 說明

Qcache_free_blocks 緩存中相鄰記憶體塊的個數。數目大說明可能有碎片。FLUSH QUERY CACHE 會對緩存中的碎片進行整理，進而得到一個空閑塊。

Qcache_free_memory 緩存中的空閑記憶體。

Qcache_hits 每次查詢在緩存中命中時就增大。

Qcache_inserts 每次插入一個查詢時就增大。命中次數除以插入次數就是不中比率;用 1 減去這個值就是命中率。在上面這個例子中，大約有 87% 的查詢都在緩存中命中。

Qcache_lowmem_prunes 緩存出現記憶體不足并且必須要進行清理以便為更多查詢提供空間的次數。這個數字最好長時間來看;如果這個數字在不斷增長，就表示可能碎片非常嚴重，或者記憶體很少。(上面的 free_blocks 和 free_memory 可以告訴您屬于哪種情況)。

Qcache_not_cached 不适合進行緩存的查詢的數量，通常是由于這些查詢不是 SELECT 語句。

Qcache_queries_in_cache 目前緩存的查詢(和響應)的數量。

Qcache_total_blocks 緩存中塊的數量。

通常，間隔幾秒顯示這些變量就可以看出差別，這可以幫助确定緩存是否正在有效地使用。運作 FLUSH STATUS 可以重置一些計數器，如果伺服器已經運作了一段時間，這會非常有幫助。

使用非常大的查詢緩存，期望可以緩存所有東西，這種想法非常誘人。由于 mysqld 必須要對緩存進行維護，例如當記憶體變得很低時執行剪除，是以伺服器可能會在試圖管理緩存時而陷入困境。作為一條規則，如果 FLUSH QUERY CACHE 占用了很長時間，那就說明緩存太大了。

強制限制

您可以在 mysqld 中強制一些限制來確定系統負載不會導緻資源耗盡的情況出現。清單 3 給出了 my.cnf 中與資源有關的一些重要設定。

清單 3. MySQL 資源設定

set-variable=max_connections=500set-variable=wait_timeout=10max_connect_errors = 100

連接配接最大個數是在第一行中進行管理的。與 Apache 中的 MaxClients 類似，其想法是確定隻建立服務允許數目的連接配接。要确定伺服器上目前建立過的最大連接配接數，請執行 SHOW STATUS LIKE 'max_used_connections'。

第 2 行告訴 mysqld 終止所有空閑時間超過 10 秒的連接配接。在 LAMP 應用程式中，連接配接資料庫的時間通常就是 Web 伺服器處理請求所花費的時間。有時候，如果負載過重，連接配接會挂起，并且會占用連接配接表空間。如果有多個互動使用者或使用了到資料庫的持久連接配接，那麼将這個值設低一點并不可取!

最後一行是一個安全的方法。如果一個主機在連接配接到伺服器時有問題，并重試很多次後放棄，那麼這個主機就會被鎖定，直到 FLUSH HOSTS 之後才能運作。預設情況下，10 次失敗就足以導緻鎖定了。将這個值修改為 100 會給伺服器足夠的時間來從問題中恢複。如果重試 100 次都無法建立連接配接，那麼使用再高的值也不會有太多幫助，可能它根本就無法連接配接。

緩沖區和緩存

MySQL 支援超過 100 個的可調節設定;但是幸運的是，掌握少數幾個就可以滿足大部分需要。查找這些設定的正确值可以通過 SHOW STATUS 指令檢視狀态變量，從中可以确定 mysqld 的運作情況是否符合我們的預期。給緩沖區和緩存配置設定的記憶體不能超過系統中的現有記憶體，是以調優通常都需要進行一些妥協。

MySQL 可調節設定可以應用于整個 mysqld 程序，也可以應用于單個客戶機會話。

伺服器端的設定

每個表都可以表示為磁盤上的一個檔案，必須先打開，後讀取。為了加快從檔案中讀取資料的過程，mysqld 對這些打開檔案進行了緩存，其最大數目由 /etc/mysqld.conf 中的 table_cache 指定。清單 4 給出了顯示與打開表有關的活動的方式。

清單 4. 顯示打開表的活動

mysql> SHOW STATUS LIKE 'open%tables';+---------------+-------+| Variable_name | Value |+---------------+-------+| Open_tables | 5000 || Opened_tables | 195 |+---------------+-------+2 rows in set (0.00 sec)

清單 4 說明目前有 5,000 個表是打開的，有 195 個表需要打開，因為現在緩存中已經沒有可用檔案描述符了(由于統計資訊在前面已經清除了，是以可能會存在 5,000 個打開表中隻有 195 個打開記錄的情況)。如果 Opened_tables 随着重新運作 SHOW STATUS 指令快速增加，就說明緩存命中率不夠。如果 Open_tables 比 table_cache 設定小很多，就說明該值太大了(不過有空間可以增長總不是什麼壞事)。例如，使用 table_cache = 5000 可以調整表的緩存。

與表的緩存類似，對于線程來說也有一個緩存。 mysqld 在接收連接配接時會根據需要生成線程。在一個連接配接變化很快的繁忙伺服器上，對線程進行緩存便于以後使用可以加快最初的連接配接。

清單 5. 顯示線程使用統計資訊

mysql> SHOW STATUS LIKE 'threads%';+-------------------+--------+| Variable_name | Value |+-------------------+--------+| Threads_cached | 27 || Threads_connected | 15 || Threads_created | 838610 || Threads_running | 3 |+-------------------+--------+4 rows in set (0.00 sec)

此處重要的值是 Threads_created，每次 mysqld 需要建立一個新線程時，這個值都會增加。如果這個數字在連續執行 SHOW STATUS 指令時快速增加，就應該嘗試增大線程緩存。例如，可以在 my.cnf 中使用 thread_cache = 40 來實作此目的。

關鍵字緩沖區儲存了 MyISAM 表的索引塊。理想情況下，對于這些塊的請求應該來自于記憶體，而不是來自于磁盤。清單 6 顯示了如何确定有多少塊是從磁盤中讀取的，以及有多少塊是從記憶體中讀取的。

清單 6. 确定關鍵字效率

mysql> show status like '%key_read%';+-------------------+-----------+| Variable_name | Value |+-------------------+-----------+| Key_read_requests | 163554268 || Key_reads | 98247 |+-------------------+-----------+2 rows in set (0.00 sec)

Key_reads 代表命中磁盤的請求個數， Key_read_requests 是總數。命中磁盤的讀請求數除以讀請求總數就是不中比率 —— 在本例中每 1,000 個請求，大約有 0.6 個沒有命中記憶體。如果每 1,000 個請求中命中磁盤的數目超過 1 個，就應該考慮增大關鍵字緩沖區了。例如，key_buffer = 384M 會将緩沖區設定為 384MB。

臨時表可以在更進階的查詢中使用，其中資料在進一步進行處理(例如 GROUP BY 字句)之前，都必須先儲存到臨時表中;理想情況下，在記憶體中建立臨時表。但是如果臨時表變得太大，就需要寫入磁盤中。清單 7 給出了與臨時表建立有關的統計資訊。

清單 7. 确定臨時表的使用

mysql> SHOW STATUS LIKE 'created_tmp%';+-------------------------+-------+| Variable_name | Value |+-------------------------+-------+| Created_tmp_disk_tables | 30660 || Created_tmp_files | 2 || Created_tmp_tables | 32912 |+-------------------------+-------+3 rows in set (0.00 sec)

每次使用臨時表都會增大 Created_tmp_tables;基于磁盤的表也會增大 Created_tmp_disk_tables。對于這個比率，并沒有什麼嚴格的規則，因為這依賴于所涉及的查詢。長時間觀察 Created_tmp_disk_tables 會顯示所建立的磁盤表的比率，您可以确定設定的效率。 tmp_table_size 和 max_heap_table_size 都可以控制臨時表的最大大小，是以請確定在 my.cnf 中對這兩個值都進行了設定。

每個會話的設定

下面這些設定針對于每個會話。在設定這些數字時要十分謹慎，因為它們在乘以可能存在的連接配接數時候，這些選項表示大量的記憶體!您可以通過代碼修改會話中的這些數字，或者在 my.cnf 中為所有會話修改這些設定。

當 MySQL 必須要進行排序時，就會在從磁盤上讀取資料時配置設定一個排序緩沖區來存放這些資料行。如果要排序的資料太大，那麼資料就必須儲存到磁盤上的臨時檔案中，并再次進行排序。如果 sort_merge_passes 狀态變量很大，這就訓示了磁盤的活動情況。清單 8 給出了一些與排序相關的狀态計數器資訊。

清單 8. 顯示排序統計資訊

mysql> SHOW STATUS LIKE "sort%";+-------------------+---------+| Variable_name | Value |+-------------------+---------+| Sort_merge_passes | 1 || Sort_range | 79192 || Sort_rows | 2066532 || Sort_scan | 44006 |+-------------------+---------+4 rows in set (0.00 sec)

如果 sort_merge_passes 很大，就表示需要注意 sort_buffer_size。例如， sort_buffer_size = 4M 将排序緩沖區設定為 4MB。

MySQL 也會配置設定一些記憶體來讀取表。理想情況下，索引提供了足夠多的資訊，可以隻讀入所需要的行，但是有時候查詢(設計不佳或資料本性使然)需要讀取表中大量資料。要了解這種行為，需要知道運作了多少個 SELECT 語句，以及需要讀取表中的下一行資料的次數(而不是通過索引直接通路)。實作這種功能的指令如清單 9 所示。

清單 9. 确定表掃描比率

mysql> SHOW STATUS LIKE "com_select";+---------------+--------+| Variable_name | Value |+---------------+--------+| Com_select | 318243 |+---------------+--------+1 row in set (0.00 sec)mysql> SHOW STATUS LIKE "handler_read_rnd_next";+-----------------------+-----------+| Variable_name | Value |+-----------------------+-----------+| Handler_read_rnd_next | 165959471 |+-----------------------+-----------+1 row in set (0.00 sec)

Handler_read_rnd_next / Com_select 得出了表掃描比率 —— 在本例中是 521:1。如果該值超過 4000，就應該檢視 read_buffer_size，例如 read_buffer_size = 4M。如果這個數字超過了 8M，就應該與開發人員讨論一下對這些查詢進行調優了!

3 個必不可少的工具

盡管在了解具體設定時，SHOW STATUS 指令會非常有用，但是您還需要一些工具來解釋 mysqld 所提供的大量資料。我發現有 3 個工具是必不可少的;在 參考資料 一節中您可以找到相應的連結。

大部分系統管理者都非常熟悉 top 指令，它為任務所消耗的 CPU 和記憶體提供了一個不斷更新的視圖。 mytop 對 top 進行了仿真;它為所有連接配接上的客戶機以及它們正在運作的查詢提供了一個視圖。mytop 還提供了一個有關關鍵字緩沖區和查詢緩存效率的實時資料和曆史資料，以及有關正在運作的查詢的統計資訊。這是一個很有用的工具，可以檢視系統中(比如 10 秒鐘之内)的狀況，您可以獲得有關伺服器健康資訊的視圖，并顯示導緻問題的任何連接配接。

mysqlard 是一個連接配接到 MySQL 伺服器上的守護程式，負責每 5 分鐘搜集一次資料，并将它們存儲到背景的一個 Round Robin Database 中。有一個 Web 頁面會顯示這些資料，例如表緩存的使用情況、關鍵字效率、連接配接上的客戶機以及臨時表的使用情況。盡管 mytop 提供了伺服器健康資訊的快照，但是 mysqlard 則提供了長期的健康資訊。作為獎勵，mysqlard 使用自己搜集到的一些資訊針對如何對伺服器進行調優給出一些建議。

搜集 SHOW STATUS 資訊的另外一個工具是 mysqlreport。其報告要遠比 mysqlard 更加複雜，因為需要對伺服器的每個方面都進行分析。這是對伺服器進行調優的一個非常好的工具，因為它對狀态變量進行适當計算來幫助确定需要修正哪些問題。

結束語

本文介紹了對 MySQL 進行調優的一些基礎知識，并對這個針對 LAMP 元件進行調優的 3 部分系列文章進行了總結。調優很大程度上需要了解元件的工作原理，确定它們是否正常工作，進行一些調整，并重新評測。每個元件 —— Linux、Apache、PHP 或 MySQL —— 都有各種各樣的需求。分别了解各個元件可以幫助減少可能會導緻應用程式速度變慢的瓶頸。

mytop使用方法：

# mytop -u root -p 123456 -d mydb_name

顯示結果：

第一行顯示了主機名稱，還有至今 MySQL 的運作時間 (以 days+hour:minutes:seconds 為格式)。

第二行的 Queries 顯示了至今執行的 SQL 查詢語句總數，另外還有目前每秒處理的查詢數和速度。

第三行的 Key Efficiency 就是傳說中的緩存命中率了，如果太低了你可能要調整你的 MySQL 設定，或者調整一下表的結構，後面還有目前的進出速度。

最下方的區域就是目前連結到資料庫的各個線程，你可以按 k 殺死一個線程，或者按 f 了解特定線程的資訊。