-
一、測試實驗
mysql分頁直接用limit start, count分頁語句:
select * from product limit start, count
當起始頁較小時,查詢沒有性能問題,我們分别看下從10, 100, 1000, 10000開始分頁的執行時間(每頁取20條),如下:
select * from product limit 10, 20 0.016秒
- select * from product limit 100, 20 0.016秒
- select * from product limit 1000, 20 0.047秒
-
select * from product limit 10000, 20 0.094秒
我們已經看出随着起始記錄的增加,時間也随着增大, 這說明分頁語句limit跟起始頁碼是有很大關系的,
那麼我們把起始記錄改為40w看下(也就是記錄的一半左右)
select * from product limit 400000, 20 3.229秒
再看我們取最後一頁記錄的時間
select * from product limit 866613, 20 37.44秒
像這種分頁最大的頁碼頁顯然這種時間是無法忍受的。
從中我們也能總結出兩件事情:
- limit語句的查詢時間與起始記錄的位置成正比。
- mysql的limit語句是很友善,但是對記錄很多的表并不适合直接使用。
二、 對limit分頁問題的性能優化方法
2.1 利用表的覆寫索引來加速分頁查詢
我們都知道,利用了索引查詢的語句中如果隻包含了那個索引列(覆寫索引),那麼這種情況會查詢很快。
因為利用索引查找有優化算法,且資料就在查詢索引上面,不用再去找相關的資料位址了,這樣節省了很多時間。
另外Mysql中也有相關的索引緩存,在并發高的時候利用緩存就效果更好了。
在我們的例子中,我們知道id字段是主鍵,自然就包含了預設的主鍵索引。現在讓我們看看利用覆寫索引的查詢效果如何:
這次我們之間查詢最後一頁的資料(利用覆寫索引,隻包含id列),如下:
select id from product limit 866613, 20
查詢時間為0.2秒,相對于查詢了所有列的37.44秒,提升了大概100多倍的速度。
那麼如果我們也要查詢所有列,有兩種方法,
id>=的形式:
SELECT * FROM product WHERE ID > =(select id from product limit 866613, 1) limit 20
查詢時間為0.2秒,簡直是一個質的飛躍啊。
利用join
SELECT * FROM product a JOIN (select id from product limit 866613, 20) b ON a.ID = b.id
查詢時間也很短,贊!
其實兩者用的都是一個原理嘛,是以效果也差不多。