前言
日常開發中,我們使用mysql來實現分頁功能的時候,總是會用到mysql的limit語法.而怎么使用卻很有講究的,今天來總結一下.
limit語法
limit語法支持兩個參數,offset和limit,前者表示偏移量,后者表示取前limit條數據.
例如:
## 返回符合條件的前10條語句
select * from user limit 10
## 返回符合條件的第11-20條數據
select * from user limit 10,20
從上面也可以看出來,limit n 等價于limit 0,n.
性能分析
實際使用中我們會發現,在分頁的后面一些頁,加載會變慢,也就是說:
select * from user limit 1000000,10
語句執行較慢.那么我們首先來測試一下.
首先是在offset較小的情況下拿100條數據.(數據總量為200左右).然后逐漸增大offset.
select * from user limit 0,100 ---------耗時0.03s
select * from user limit 10000,100 ---------耗時0.05s
select * from user limit 100000,100 ---------耗時0.13s
select * from user limit 500000,100 ---------耗時0.23s
select * from user limit 1000000,100 ---------耗時0.50s
select * from user limit 1800000,100 ---------耗時0.98s
可以看到隨著offset的增大,性能越來越差.
這是為什么呢?因為limit 10000,10的語法實際上是mysql查找到前10010條數據,之后丟棄前面的10000行,這個步驟其實是浪費掉的.
優化
用id優化
先找到上次分頁的最大ID,然后利用id上的索引來查詢,類似于select * from user where id>1000000 limit 100.
這樣的效率非常快,因為主鍵上是有索引的,但是這樣有個缺點,就是ID必須是連續的,并且查詢不能有where語句,因為where語句會造成過濾數據.
用覆蓋索引優化
mysql的查詢完全命中索引的時候,稱為覆蓋索引,是非常快的,因為查詢只需要在索引上進行查找,之后可以直接返回,而不用再回數據表拿數據.因此我們可以先查出索引的ID,然后根據Id拿數據.
select * from (select id from job limit 1000000,100) a left join job b on a.id = b.id;
耗時0.2秒.
總結
用mysql做大量數據的分頁確實是有難度,但是也有一些方法可以進行優化,需要結合業務場景多進行測試.
當用戶翻到10000頁的時候,不如我們直接返回空好了,這么無聊的嗎...
好了,以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對腳本之家的支持。
您可能感興趣的文章:- MySQL查詢優化:LIMIT 1避免全表掃描提高查詢效率
- 為什么MySQL分頁用limit會越來越慢
- mysql優化之query_cache_limit參數說明
- 詳解Mysql order by與limit混用陷阱
- mysql分頁的limit參數簡單示例
- MySQL limit分頁大偏移量慢的原因及優化方案
- Mysql排序和分頁(order by&limit)及存在的坑
- mysql踩坑之limit與sum函數混合使用問題詳解
- 如何提高MySQL Limit查詢性能的方法詳解
- MySQL Limit性能優化及分頁數據性能優化詳解
- 淺談mysql使用limit分頁優化方案的實現
- MySQL中limit對查詢語句性能的影響