MySQL分頁查詢offset過大，Sql最佳化經驗

MartinDai發表於2024-06-10
MySql

低效能版

SELECT
*
FROM table
where condition1 = 0
and condition2 = 0
and condition3 = -1
and condition4 = -1
order by id asc
LIMIT 2000 OFFSET 50000

當offset特別大時，這條語句的執行效率會明顯減低，而且效率是隨著offset的增大而降低的。
原因為：
MySQL並不是跳過offset行，而是取offset+N行，然後返回放棄前offset行，返回N行，當offset特別大，然後單條資料也很大的時候，每次查詢需要獲取的資料就越多，自然就會很慢。

最佳化版本

SELECT
*
FROM table
JOIN
(select id from table
where condition1 = 0
and condition2 = 0
and condition3 = -1
and condition4 = -1
order by id asc
LIMIT 2000 OFFSET 50000)
as tmp using(id)

或者

SELECT a.* FROM table a, 
(select id from table
where condition1 = 0
and condition2 = 0
and condition3 = -1
and condition4 = -1
order by id asc
LIMIT 2000 OFFSET 50000) b 
where a.id = b.id

先獲取主鍵列表，再透過主鍵查詢目標資料，即使offset很大，也是獲取了很多的主鍵，而不是所有的欄位資料，相對而言效率會提升很多。

相關文章