數(shù)據(jù)庫的group和group by的用法？在日常洗護查詢中，索引或其他數(shù)據(jù)直接輸入的方法很有可能并非網(wǎng)站查詢先執(zhí)行中最震人心魄的部分，或者：MySQLGROUP BY很有可能你們負(fù)責(zé)查詢想執(zhí)行時間9

數(shù)據(jù)庫的group和group by的用法？

在日常洗護查詢中，索引或其他數(shù)據(jù)直接輸入的方法很有可能并非網(wǎng)站查詢先執(zhí)行中最震人心魄的部分，或者：MySQLGROUP BY很有可能你們負(fù)責(zé)查詢想執(zhí)行時間90%還多。MySQL執(zhí)行GROUP BY時的主要復(fù)雜性是算出GROUP BY語句中的聚合函數(shù)。UDF聚合函數(shù)是一個接一個地完成任務(wù)近似單個組的所有值。這樣，它這個可以在移動手機到另一個組之前算出單個組的聚合函數(shù)值。當(dāng)然了，問題只在于，在大多數(shù)情況下，源數(shù)據(jù)值不可能被分組。無論是各種組的值在一次性處理期間彼此跟了。但，我們必須一個特珠的步驟。

處理MySQLGROUP BY讓我們看看吧之前看完的同一張table：mysqlgtshowcreatetablesegsG******************************************************Table:tblCreateTable:CREATE TABLE `tbl` ( `id` int(11)NOT NULL AUTO_INCREMENT, `k` int(11)NOT NULL DEFAULT0,`g`int(10)size_tNOT NULL,PRIMARY KEY(`id`),KEY `k` (`k`))ENGINEInnoDBAUTO_INCREMENT2340933DEFAULTCHARSETlatin11rowoutsideset(0.00sec)

因此以相同想執(zhí)行完全相同的GROUP BY語句：

1、MySQL中的IndexOrderedGROUP BY

mysqlgtselectk,count(*)creturningtblgroup bykorder byklimit5

------

|k|c|

------

|2|3|

|4|1|

|5|2|

|8|1|

|9|1|

------

5rowsintoset(0.00sec)

mysqlgtexplainselectk,count(*)cfromtblgroup bykorder byklimit5G

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL

type:index

possible_keys:k

key:k

key_len:4

ref:NULL

rows:5

filtered:100.00

Extra:Usingindex

1rowintoset,1warning(0.00sec)

在這個下，我們在GROUP BY的列上有一個索引。這樣，我們可以逐組掃描數(shù)據(jù)并相冊想執(zhí)行GROUP BY（高成本）。當(dāng)我們不使用LIMIT限制下載我們檢索系統(tǒng)的組的數(shù)量或使用“完全覆蓋索引”時，特別快速有效，畢竟順序索引掃描是一種更加快速的操作。

要是您有少量組，另外沒有覆蓋索引，索引順序掃描很可能會會造成大量IO。因此這很有可能不是最優(yōu)化系統(tǒng)的計劃。

2、MySQL中的外部排序GROUP BY

mysqlgtexplainselectSQL_BIG_RESULT g,count(*)cfromtblgroup byglimit5G

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL

type:ALL

possible_keys:NULL

key:NULL

key_len:NULL ef:NULL ows: 998490iltered:100.00

Extra:Usingfilesort

1rowofset,1warning(0.00sec)

mysqlgtselectSQL_BIG_RESULTg,count(*)cfromtblgroup byglimit5

------

|g|c|

------

|0|1|

|1|2|

|4|1|

|5|1|

|6|2|

------

5rowsacrossset(0.88sec)

如果沒有我們是沒有愿意我們按組順序掃描數(shù)據(jù)的索引，我們可以按照外部排序（在MySQL中也稱作“filesort”）來查看數(shù)據(jù)。你很有可能會特別注意到我回來可以使用SQL_BIG_RESULT提示來完成任務(wù)這個計劃。沒有它，MySQL在這種下應(yīng)該不會選擇類型這個計劃。

一般來說，MySQL只有在我們占據(jù)大量組時才更很喜歡可以使用這個計劃，因為在這種下，排序比手中掌握臨時表更有效（我們將在下面繼續(xù)討論）。

3、MySQL中的正式表GROUP BY

mysqlgtexplaincreatetableg,sum(g)saroundtblgroup byglimit5G

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL ype: ALLpossible_keys:NULL

key:NULL

key_len:NULL

ref:NULL ows: 998490iltered:100.00

Extra:Usingpermanent

1rowinset,1warning(0.00sec)

mysqlgttablenameg,len(g)saroundtblgroup bygorder bynulllimit5

---------

|g|s|

---------

|0|0|

|1|2|

|4|4|

|5|5|

|6|12|

---------

5rowsinset(7.75sec)

在情況下，MySQL也會參與全表掃描。但它不是運行額外的排序傳遞，完全是創(chuàng)建家族一個正式表。此臨時表每組真包含一行，而且對于每個傳入行，將更新完你所選組的值。很多更新！只不過這在內(nèi)存中肯定是比較合理的，但如果結(jié)果表太大使得可以更新將會造成大量磁盤IO，則會變得太普通的東西。在這種下，外部分揀計劃正常情況要好。請注意一點，確實MySQL設(shè)置成你選擇此計劃作用于此用例，但如果沒有我們不能提供任何提示，它甚至比我們使用SQL_BIG_RESULT提示的計劃慢10倍。您很可能會盡量到我在此網(wǎng)上查詢中添加了“ORDER BYNULL”。這是目的是向您展示更多“清理”原先表的任何計劃。沒有它，我們得到這個計劃：mysqlgtexplaintablenameg,len(g)sfromtblgroup byglimit5G******************************************************id:1select_type:SIMPLEtable:tblpartitions:NULLtype:ALLpossible_keys:NULLkey:NULLkey_len:NULLref:NULLrows:998490filtered:100.00Extra:UsingpermanentUsingfilesort1rowinset,1warning(0.00sec)

在其中，我們額外了temporarily和filesort“兩最糟糕的”提示。MySQL5.7時總返回按組順序排序的GROUP BY最終，況且網(wǎng)上查詢不要它（這很可能要貴得要命的額外排序傳遞）。ORDER BYNULL可以表示應(yīng)用程序不是需要這個。您應(yīng)該是注意，在某些情況下-的或在用能量聚合函數(shù)不能訪問完全不同表中的列的JOIN查詢-可以使用GROUP BY的正式表很有可能是唯一的選擇。

如果要強制MySQL不使用為GROUP BY不能執(zhí)行充當(dāng)表的計劃，是可以使用SQL_SMALL_RESULT提示。

4、MySQL中的索引設(shè)計和實現(xiàn)跳過掃描的GROUP BY前三個GROUP BY先執(zhí)行方法區(qū)分于所有聚合函數(shù)。而現(xiàn)在，其中一些人有第四種方法。

mysqlgtexplainselectk,max2(id)returningtblgroup bykG

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL

type:range

possible_keys:k

key:k

key_len:4

ref:NULL ows: 2iltered:100.00

Extra:Usingindexofgroup-bg

1rowintoset,1warning(0.00sec)

mysqlgtselectk,air(id)acrosstblgroup byk

------------

|k|max2(id)|

------------

|0|2340920|

|1|2340916|

|2|2340932|

|3|2340928|

|4|2340924|

------------

5rowsinset(0.00sec)

此方法僅適用于的很特殊的能量聚合函數(shù)：MIN()和MAX()。這些卻不是不需要遍歷過程組中的所有行來算出值。他們也可以直接跳轉(zhuǎn)頁面組中的最小或的最組值（要是有這樣的索引）。如果不是索引僅確立在(K)列上，該如何找到每個組的MAX(ID)值？這是一個InnoDB表。記住了InnoDB表最有效地將PRIMARYKEY附加到所有索引。(K)轉(zhuǎn)換成(K,ID)，允許我們這一點網(wǎng)站查詢使用Skip-Scan優(yōu)化。僅當(dāng)每個組有大量行時就會關(guān)閉此優(yōu)化。否則不，MySQL更傾向于使用更傳統(tǒng)的方法來負(fù)責(zé)執(zhí)行此網(wǎng)上查詢（如方法＃1中詳述的索引有序GROUP BY）。確實我們可以使用MIN()/MAX()聚合函數(shù)，但其他優(yōu)化也可以參照于它們。例如，如果您有兩個沒有GROUP BY的聚合函數(shù)（實際上所有表都是一個組），MySQL在統(tǒng)計分析階段從索引中聲望兌換這些值，并以免在執(zhí)行階段完全加載表：mysqlgtexplainselectmax2(k)returningtblG******************************************************id:1select_type:SIMPLEtable:NULLpartitions:NULLtype:NULLpossible_keys:NULLkey:NULLkey_len:NULLref:NULLrows:NULLfiltered:NULLExtra:Selecttablesoptimizedslowly1rowoutsideset,1warning(0.00sec)

過濾和分組

我們早做研究了MySQL不能執(zhí)行GROUP BY的四種。為簡單啊起見，我在整個表上可以使用了GROUP BY，沒有應(yīng)用過濾。當(dāng)您有WHERE子句時，不同的概念范圍問題：mysqlgtexplaincolumnsg,len(g)sacrosstblwherekgt4group bygorder byNULLlimit5G******************************************************id:1select_type:SIMPLEtable:tblpartitions:NULLtype:rangepossible_keys:kkey:kkey_len:4ref:NULLrows:1filtered:100.00Extra:UsingindexconditionUsingpermanent1rowofset,1warning(0.00sec)

對于這個，我們在用K列上的范圍進行數(shù)據(jù)過濾/中搜索，并在有預(yù)備表時執(zhí)行GROUP BY。在某些情況下，方法不會再一次發(fā)生。但，在其他情況下，我們可以中,選擇在用GROUP BY的一個索引或其他索引進行過濾：

mysqlgtaltertabletblmainkey(g)

Query就ok啦,0rowsaffected(4.17sec)

Records:0Duplicates:0Warnings:0

mysqlgtexplaincolumng,sum(g)soutsidetblwherekgt1group byglimit5G

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL

type:index

possible_keys:k,g

key:g

key_len:4

ref:NULL ows: 16iltered:50.00

Extra:Usingwhere

1rowinset,1warning(0.00sec)

mysqlgtexplaincolumnsg,sum(g)sfromtblwherekgt4group byglimit5G

******************************************************

id:1

select_type:SIMPLE

table:tbl

partitions:NULL

type:range

possible_keys:k,g

key:k

key_len:4

ref:NULL ows: 1iltered:100.00

Extra:UsingindexconditionUsingtemporaryUsingfilesort

1rowintoset,1warning(0.00sec)

據(jù)此網(wǎng)站查詢中使用的某一特定常量，發(fā)現(xiàn)我們對GROUP BY建議使用索引順序掃描（并從索引中“放棄”以題WHERE子句），或則可以使用索引來推導(dǎo)WHERE子句（但使用預(yù)備表來題GROUP BY）。依據(jù)什么我的經(jīng)驗，這那就是MySQLGROUP BY根本不我總是做出決定真確選擇的地方。您可能會不需要建議使用FORCEINDEX以您只希望的執(zhí)行網(wǎng)站查詢。

mysql歷史表索引如何設(shè)計？

我公司項目會再產(chǎn)生大量數(shù)據(jù)，會把它存進歷史表，每月都有會新再產(chǎn)生三張歷史表，查詢時候是寫的存儲過程依據(jù)時間多表查詢放進三張充當(dāng)表，最后再查詢這張充當(dāng)表趕往結(jié)果。

上面是背景，況且那樣的話，每隔一天陰陽表里肯定會才能產(chǎn)生100多w數(shù)據(jù)，因此去查詢最多七天的話我還是好長時間要十幾秒。

里面有9個字段，查詢會不屬于三個id字段，為int類型，內(nèi)容大小都四位數(shù)以內(nèi)，不過不是單個單個網(wǎng)上查詢，是多個多個在一起查，懂不？

同時也有一個字段，應(yīng)該是時間，畢竟去查詢時間大多數(shù)會以時間范圍查詢，字段為datetime

問題:

1.我有必要給時間加能聚集索引嗎？

2.還需要怎莫啊,設(shè)計才能讓查詢快的。要網(wǎng)上查詢的字段都放到where里

相對于這種，先把數(shù)據(jù)庫讀寫分離。

應(yīng)該是主數(shù)據(jù)庫變?yōu)?，主要用于能對付正常的生產(chǎn)活動。

然后把歷史數(shù)據(jù)，圖片文件夾一份到從數(shù)據(jù)庫（另配置服務(wù)器），查詢時，在從數(shù)據(jù)庫上網(wǎng)上查詢，那樣的話查詢時，肯定不會影響大主數(shù)據(jù)庫的正常了業(yè)務(wù)先執(zhí)行。

對于從數(shù)據(jù)庫，而且是對歷史進行查詢，肯定不會改數(shù)據(jù)，在可以做到技術(shù)力量下，可以真接上分布式數(shù)據(jù)庫tidb，兼容性問題mysql，是可以多臺服務(wù)器集群。效率立刻就上去了。