萬盛學電腦網

 萬盛學電腦網 >> 數據庫 >> mysql教程 >> 101個MySQL調試和優化技巧

101個MySQL調試和優化技巧

   MySQL是一個功能強大的開源數據庫。隨著越來越多的數據庫驅動的應用程序,人們一直在推動MySQL發展到它的極限。這裡是101條調節和優化MySQL安裝的技巧。一些技巧是針對特定的安裝環境的,但這些思路是通用的。我已經把他們分成幾類,來幫助你掌握更多MySQL的調節和優化技巧。

  MySQL 服務器硬件和操作系統調節:

  1. 擁有足夠的物理內存來把整個InnoDB文件加載到內存中——在內存中訪問文件時的速度要比在硬盤中訪問時快的多。

  2. 不惜一切代價避免使用Swap交換分區 – 交換時是從硬盤讀取的,它的速度很慢。

  3. 使用電池供電的RAM(注:RAM即隨機存儲器)。

  4. 使用高級的RAID(注:Redundant Arrays of Inexpensive Disks,即磁盤陣列) – 最好是RAID10或更高。

  5. 避免RAID5(注:一種存儲性能、數據安全和存儲成本兼顧的存儲解決方案) – 確保數據庫完整性的校驗是要付出代價的。

  6. 將操作系統和數據分區分開,不僅僅是邏輯上,還包括物理上 – 操作系統的讀寫操作會影響數據庫的性能。

  7. 把MySQL臨時空間和復制日志與數據放到不同的分區 – 當數據庫後台從磁盤進行讀寫操作時會影響數據庫的性能。

  8. 更多的磁盤空間等於更快的速度。

  9. 更好更快的磁盤。

  10. 使用SAS(注: Serial Attached SCSI,即串行連接SCSI)代替SATA(注:SATA,即串口硬盤)。

  11. 較小的硬盤 比 較大的硬盤快,尤其是在RAID配置的情況下。

  12. 使用電池支持的高速緩存RAID控制器。

  13. 避免使用軟件磁盤陣列。

  14. 考慮為數據分區使用固態IO卡 (不是磁盤驅動器) – 這些卡能夠為幾乎任何數量的數據支持2GB/s的寫入速度。

  15. 在Linux中設置swappiness的值為0 – 在數據庫服務器中沒有理由緩存文件,這是一個服務器或台式機的優勢。

  16. 如果可以的話,使用 noatime 和 nodirtime 掛載文件系統 – 沒有理由更新訪問數據庫文件的修改時間。

  17. 使用 XFS 文件系統 – 一種比ext3更快、更小的文件系統,並且有許多日志選項, 而且ext3 已被證實與MySQL有雙緩沖問題。

  18. 調整 XFS 文件系統日志和緩沖變量 – 為了最高性能標准。

  19. 在 Linux 系統中, 使用 NOOP 或者 DEADLINE IO 定時調度程序 – 同 NOOP 和 DEADLINE定時調度程序相比,這個 CFQ 和 ANTICIPATORY 定時調度程序 顯得非常慢。

  20. 使用64位的操作系統 – 對於MySQL,會有更大的內存支持和使用。

  21. 刪除服務器上未使用的安裝包和守護進程 – 更少的資源占用。

  22. 把使用MySQL的host和你的MySQL host放到一個hosts文件中 – 沒有DNS查找。

  23. 切勿強制殺死一個MySQL進程 – 你會損壞數據庫和正在運行備份的程序。

  24. 把服務器貢獻給MySQL – 後台進程和其他服務能夠縮短數據庫占用CPU的時間。

  MySQL 配置:

  25. 當寫入時,使用 innodb_flush_method=O_DIRECT 來避免雙緩沖。

  26. 避免使用 O_DIRECT 和 EXT3 文件系統 – 你將序列化所有要寫入的。

  27. 分配足夠的 innodb_buffer_pool_size 來加載整個 InnoDB 文件到內存中– 少從磁盤中讀取。

  28. 不要將 innodb_log_file_size 參數設置太大, 這樣可以更快同時有更多的磁盤空間 – 丟掉多的日志通常是好的,在數據庫崩潰後可以降低恢復數據庫的時間。

  29. 不要混用 innodb_thread_concurrency 和 thread_concurrency 參數– 這2個值是不兼容的。

  30. 分配一個極小的數量給 max_connections 參數 – 太多的連接會用盡RAM並鎖定MySQL服務。

  31. 保持 thread_cache 在一個相對較高的數字,大約 16 – 防止打開連接時緩慢。

  32. 使用skip-name-resolve參數 – 去掉 DNS 查找。

  33.如果你的查詢都是重復的,並且數據不常常發生變化,那麼可以使用查詢緩存。但是如果你的數據經常發生變化,那麼使用查詢緩存會讓你感到失望。

  34.增大temp_table_size值,以防止寫入磁盤

  35.增大max_heap_table_size值,以防止寫入磁盤

  36.不要把sort_buffer_size值設置的太高,否則的話你的內存將會很快耗盡

  37.根據key_read_requests和key_reads值來決定key_buffer的大小,一般情況下key_read_requests應該比key_reads值高,否則你不能高效的使用key_buffer

  38.將innodb_flush_log_at_trx_commit設置為0將會提高性能,但是如果你要保持默認值(1)的話,那麼你就要確保數據的完整性,同時你也要確保復制不會滯後。

  39.你要有一個測試環境,來測試你的配置,並且在不影響正常生產的情況下,可以常常進行重啟。

  MySQL模式優化:

  40. 保持你的數據庫整理性。

  41. 舊數據歸檔 – 刪除多余的行返回或搜索查詢。

  42. 將您的數據加上索引.

  43. 不要過度使用索引,比較與查詢.

  44. 壓縮文字和BLOB數據類型 – 以節省空間和減少磁盤讀取次數.

  45. UTF 8和UTF16都低於latin1執行效率.

  46. 有節制地使用觸發器.

  47. 冗余數據保持到最低限度 – 不重復不必要的數據.

  48. 使用鏈接表,而不是擴展行.

  49. 注意數據類型,在您的真實數據中,盡可能使用最小的一個.

  50. 如果其他數據經常被用於查詢時,而BLOB / TEXT數據不是,就把BLOB / TEXT數據從其他數據分離出來.

  51.檢查和經常優化表.

  52. 經常重寫InnoDB表優化.

  53. 有時,當添加列時刪除索引,然後在添加回來索引,這樣就會更快.

  54. 針對不同的需求,使用不同的存儲引擎.

  55. 使用歸檔存儲引擎日志表或審計表-這是更有效地寫道.

  56. 會話數據存儲在緩存(memcache)的而不是MySQL中 – 緩存允許自動自動填值的,並阻止您創建難以讀取和寫入到MySQL的時空數據.

  57.存儲可變長度的字符串時使用VARCHAR而不是CHAR – 節省空間,因為固定長度的CHAR,而VARCHAR長度不固定(UTF8不受此影響).

  58. 逐步進行模式的變化 – 一個小的變化,可以有巨大的影響.

  59.在開發環境中測試所有模式,反映生產變化.

  60. 不要隨意更改你的配置文件中的值,它可以產生災難性的影響.

  61. 有時候,在MySQL的configs少即是多.

  62.有疑問時使用一個通用的MySQL配置文件.

MySQL metrics widget

  查詢優化:

  63. 使用慢查詢日志去發現慢查詢。

  64. 使用執行計劃去判斷查詢是否正常運行。

  65. 總是去測試你的查詢看看是否他們運行在最佳狀態下 –久而久之性能總會變化。

  66. 避免在整個表上使用count(*),它可能鎖住整張表。

  67. 使查詢保持一致以便後續相似的查詢可以使用查詢緩存。

  68. 在適當的情形下使用GROUP BY而不是DISTINCT。

  69. 在WHERE, GROUP BY和ORDER BY子句中使用有索引的列。

  70. 保持索引簡單,不在多個索引中包含同一個列。

  71. 有時候MySQL會使用錯誤的索引,對於這種情況使用USE INDEX。

  72. 檢查使用SQL_MODE=STRICT的問題。

  73. 對於記錄數小於5的索引字段,在UNION的時候使用LIMIT不是是用OR.

  74. 為了 避免在更新前SELECT,使用INSERT ON DUPLICATE KEY或者INSERT IGNORE ,不要用UPDATE去實現。

  75. 不要使用 MAX,使用索引字段和ORDER BY子句。

  76. 避免使用ORDER BY RAND().

  77. LIMIT M,N實際上可以減緩查詢在某些情況下,有節制地使用。

  78. 在WHERE子句中使用UNION代替子查詢。

  79. 對於UPDATES(更新),使用 SHARE MODE(共享模式),以防止獨占鎖。

  80. 在重新啟動的MySQL,記得來溫暖你的數據庫,以確保您的數據在內存和查詢速度快。

  81. 使用DROP TABLE,CREATE TABLE DELETE FROM從表中刪除所有數據。

  82. 最小化的數據在查詢你需要的數據,使用*消耗大量的時間。

  83. 考慮持久連接,而不是多個連接,以減少開銷。

  84. 基准查詢,包括使用服務器上的負載,有時一個簡單的查詢可以影響其他查詢。

  85. 當負載增加您的服務器上,使用SHOW PROCESSLIST查看慢的和有問題的查詢。

  86. 在開發環境中產生的鏡像數據中 測試的所有可疑的查詢。

  MySQL 備份過程:

  87. 從二級復制服務器上進行備份。

  88. 在進行備份期間停止復制,以避免在數據依賴和外鍵約束上出現不一致。

  89. 徹底停止MySQL,從數據庫文件進行備份。

  90. 如果使用 MySQL dump進行備份,請同時備份二進制日志文件 – 確保復制沒有中斷。

  91. 不要信任LVM 快照 – 這很可能產生數據不一致,將來會給你帶來麻煩。

  92. 為了更容易進行單表恢復,以表為單位導出數據 – 如果數據是與其他表隔離的。

  93. 當使用mysqldump時請使用 –

copyright © 萬盛學電腦網 all rights reserved