mysql優(yōu)化 - mysql 分頁查詢優(yōu)化。
問題描述
table 表中30萬記錄 id,自增主鍵, node,create_at 都有索引 但是沒有聯(lián)合索引
下面的語句查一次要8s左右, 可以預(yù)估隨著數(shù)據(jù)的繼續(xù)增加,速度會越來越慢。 最近在學(xué)習(xí) mysql 查詢優(yōu)化
也看了很多文章,教程(但是沒有系統(tǒng)的看mysql手冊,不好意思)
請各位朋友指導(dǎo)下,如何優(yōu)化,如果可以 請大概講述下,怎么分析的,為什么使用xxxx方式優(yōu)化就會有效。
謝謝各位。
EXPLAINSELECT `id` FROM `table` WHERE `node` = 2 ORDER BY `create_at` DESC LIMIT 12 OFFSET 69996------------------------------------------------------------------------ id: 1 select_type: SIMPLEtable: table type: refpossible_keys: node key: node key_len: 5 ref: const rows: 72278Extra: Using where; Using filesort
問題解答
回答1:不要使用OFFSET方式分頁以你的例子來說
MySQL會先查詢所有符合條件的數(shù)據(jù),通過EXPLAIN可以發(fā)現(xiàn)(72278),查詢了這么多
因為OFFSET的關(guān)系,MySQL丟棄前面(69996)的記錄。查詢優(yōu)化就是指在第1步的時候就讓MySQL查詢最少的數(shù)據(jù)。
我目前在用的分頁方式(數(shù)據(jù)量千萬級),依舊拿你的例子來說,假設(shè)分頁大小為10第一頁
#查詢1SELECT `id` FROM `table` WHERE `node` = 2 ORDER BY `id` ASC LIMIT 10
假設(shè)查詢1的第10條數(shù)據(jù)的id是10,第1條數(shù)據(jù)的id是1那么查詢第二頁的SQL如下
SELECT `id` FROM `table` WHERE `node` = 2 AND `id`>10 ORDER BY `id` ASCLIMIT 10
這樣你可以發(fā)現(xiàn)響應(yīng)速度超快。不過有個問題是無法前往指定頁數(shù),不過從我目前的實際情況來看,這個沒有影響,有個搜索功能就可以彌補
回答2:優(yōu)化分頁的問題其實就是offset的問題,尤其是偏移量大的時候。mysql會掃描大量不需要的行然后拋棄,只取limit的數(shù)量。所以一般最好不要用offset。解決方法有1.可以先使用索引覆蓋掃描,而不是查詢所有的列,然后做關(guān)聯(lián)操作返回相關(guān)的列。這個方法可以叫做“延遲關(guān)聯(lián)”2.可以把limit查詢轉(zhuǎn)換成已知位置的查詢,變成between XXX and XXX 。3.可以記錄上次查詢的數(shù)據(jù)的位置,下一次查詢直接從該位置開始掃描,樓上就是用的這種辦法。
鑒于問題好像只查詢id一個字段。1方法用不到,2,3可以考慮。
相關(guān)文章:
1. 淺談vue生命周期共有幾個階段?分別是什么?2. javascript - vue.js如何遞歸渲染組件.3. java - web端百度網(wǎng)盤的一個操作為什么要分兩次請求服務(wù)器, 有什么好處嗎4. macos - mac下docker如何設(shè)置代理5. css - 關(guān)于偽類背景問題6. angular.js - angularjs中添加高德地圖API,地圖顯示不正常,控制臺報錯,何解?7. css3 - 圖片等比例縮放8. html - JavaScript的Dom操作如何改變子元素的文本內(nèi)容9. linux - libpcap抓包結(jié)果不完整?10. python - 抓包只抓到j(luò)son,真實的地址卻找不到
