使用查詢語(yǔ)句的時(shí)候,經(jīng)常要返回前幾條或者中間某幾行數(shù)據(jù),這個(gè)時(shí)候怎么辦呢?不用擔(dān)心,已 經(jīng)為我們提供了這樣一個(gè)功能。
LIMIT 子句可以被用于強(qiáng)制 SELECT 語(yǔ)句返回指定的記錄數(shù)。LIMIT 接受一個(gè)或兩個(gè)數(shù)字參數(shù)。參數(shù)必須是一個(gè)整數(shù)常量。
如果給定兩個(gè)參數(shù),第一個(gè)參數(shù)指定第一個(gè)返回記錄行的偏移量,第二個(gè)參數(shù)指定返回記錄行的最大數(shù)目。
SELECT * FROM table LIMIT [offset,] rows | rows OFFSET offset
這是兩個(gè)參數(shù),第一個(gè)是偏移量,第二個(gè)是數(shù)目
select * from employee limit 3, 7; // 返回4-11行
select * from employee limit 3,1; // 返回第4行
一個(gè)參數(shù)
select * from employee limit 3; // 返回前3行
以前我在mysql中分頁(yè)都是用的 limit 100000,20這樣的方式,我相信你也是吧,但是要提高效率,讓分頁(yè)的代碼效率更高一些,更快一些,那我們又該怎么做呢?
第一部分:看一下分頁(yè)的基本原理:
mysql explain SELECT * FROM message ORDER BY id DESC LIMIT 10000, 20
***************** 1. row **************
id: 1
select_type: SIMPLE
table: message
type: index
possible_keys: NULL
key: PRIMARY
key_len: 4
ref: NULL
rows: 10020
Extra:
1 row in set (0.00 sec)
對(duì)上面的mysql語(yǔ)句說(shuō)明:limit 10000,20的意思掃描滿足條件的10020行,扔掉前面的10000行,返回最后的20行,問(wèn)題就在這里,如果是limit 100000,100,需要掃描100100行,在一個(gè)高并發(fā)的應(yīng)用里,每次查詢需要掃描超過(guò)10W行,性能肯定大打折扣。文中還提到limit n性能是沒(méi)問(wèn)題的,因?yàn)橹粧呙鑞行。
第二部分:根據(jù)雅虎的幾位工程師帶來(lái)了一篇Efficient Pagination Using MySQL的報(bào)告內(nèi)容擴(kuò)展:在文中提到一種clue的做法,給翻頁(yè)提供一些線索,比如還是SELECT * FROM message ORDER BY id DESC,按id降序分頁(yè),每頁(yè)20條,當(dāng)前是第10頁(yè),當(dāng)前頁(yè)條目id最大的是1020,最小的是1000,如果我們只提供上一頁(yè)、下一頁(yè)這樣的跳轉(zhuǎn)(不提供到第N頁(yè)的跳轉(zhuǎn)),那么在處理上一頁(yè)的時(shí)候SQL語(yǔ)句可以是:
SELECT * FROM message WHERE id>1020 ORDER BY id ASC LIMIT 20;//下一頁(yè)
處理下一頁(yè)的時(shí)候SQL語(yǔ)句可以是:
SELECT * FROM message WHERE id<1000 ORDER BY id DESC LIMIT 20;//上一頁(yè)
不管翻多少頁(yè),每次查詢只掃描20行。
缺點(diǎn)是只能提供上一頁(yè)、下一頁(yè)的鏈接形式,但是我們的產(chǎn)品經(jīng)理非常喜歡“上一頁(yè) 1 2 3 4 5 6 7 8 9 下一頁(yè)”這樣的鏈接方式,怎么辦呢?
如果LIMIT m,n不可避免的話,要優(yōu)化效率,只有盡可能的讓m小一下,我們擴(kuò)展前面的clue做法,還是SELECT * FROM message ORDER BY id DESC,按id降序分頁(yè),每頁(yè)20條,當(dāng)前是第10頁(yè),當(dāng)前頁(yè)條目id最大的是2519,最小的是2500;
當(dāng)是第10頁(yè)的SQL如下:
SELECT * FROM tb_goods_info WHERE auto_id >=2500 ORDER BY auto_id ASC LIMIT 0,20
比如要跳到第9頁(yè),SQL語(yǔ)句可以這樣寫:SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 0,20
比如要跳到第8頁(yè),SQL語(yǔ)句可以這樣寫:SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 20,20
比如要跳到第7頁(yè),SQL語(yǔ)句可以這樣寫:SELECT * FROM tb_goods_info WHERE auto_id <2500 ORDER BY auto_id desc LIMIT 40,20
跳轉(zhuǎn)到第11頁(yè):SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 0,20
跳轉(zhuǎn)到第12頁(yè):SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 20,20
跳轉(zhuǎn)到第13頁(yè):SELECT * FROM tb_goods_info WHERE auto_id >2519 ORDER BY auto_id asc LIMIT 40,20
原理還是一樣,記錄住當(dāng)前頁(yè)id的最大值和最小值,計(jì)算跳轉(zhuǎn)頁(yè)面和當(dāng)前頁(yè)相對(duì)偏移,由于頁(yè)面相近,這個(gè)偏移量不會(huì)很大,這樣的話m值相對(duì)較小,大大減少掃描的行數(shù)。其實(shí)傳統(tǒng)的limit m,n,相對(duì)的偏移一直是第一頁(yè),這樣的話越翻到后面,效率越差,而上面給出的方法就沒(méi)有這樣的問(wèn)題。
注意SQL語(yǔ)句里面的ASC和DESC,如果是ASC取出來(lái)的結(jié)果,顯示的時(shí)候記得倒置一下。
已在60W數(shù)據(jù)總量的表中測(cè)試,效果非常明顯。文尾給出第11頁(yè)的圖片