2016 - 2024

感恩一路有你

mysql聚合函数求数据总和 mysql语句设计groupby求高手~?

浏览量:3753 时间:2023-04-10 21:36:29 作者:采采

mysql语句设计groupby求高手~?

在日常查询中,索引或其他数据查找方法可能不是查询执行中开销最大的部分。例如,MySQL GROUP BY可能负责90%以上的查询执行时间。MySQL执行GROUP BY的主要复杂度是计算GROUP BY语句中的聚合函数。UDF聚合函数是逐个获取组成单个组的所有值。这样,它可以在移动到另一个组之前计算单个组的聚合函数值。当然,问题是在大多数情况下,源数据值没有分组。不同组的值在处理过程中会相互跟随。因此,我们需要一个特殊的步骤。

用Let amp处理MySQL组。;让我们再来看一下我们之前见过的同一个表:MySQL show cr: TBL创建Tabl:创建表` TBL `( ` id ` int(11)NOT NULL AUTO _ INCREMENT,` k` int(11) NOT NULL DEFAULT 0,` g` int(10) unsigned NOT NULL,PRIMARY KEY (`id `),KEY ` k `( ` k `))ENGINEInnoDB AUTO _ increm ENT2340933 DEFAULT charset latin1集合中的第1行(0.00秒)

并以不同的执行相同的GROUP BY语句:

中的索引排序分组。

mysql select k,count(*)c from TBL group by k order by k limit 5;

- -

| k | c |

- -

| 2 | 3 |

| 4 | 1 |

| 5 | 2 |

| 8 | 1 |

| 9 | 1 |

- -

一组5行(0.00秒)

mysql解释select k,count(*)c from TBL group by k ord: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:指数

possibl:·k

k:·k

k: 4

r:零

rows: 5

filt: 100.00

:使用指数

集合中的1行,1个警告(0.00秒)

在这种情况下,我们在GROUP BY列上有一个索引。这样我们就可以一组一组的扫描数据,动态的执行GROUP BY(低成本)。当我们使用LIMIT来限制我们检索或使用的组的数量时,这尤其有效覆盖索引 ",因为顺序索引扫描是一种非常快速的操作。

如果您有少量的组并且不覆盖索引,索引顺序扫描可能会导致大量的IO。所以这可能不是最优方案。

中的外部排序分组依据

mysql解释select SQL_BIG_RESULT g,count(*)c from TBL group by G limit 5g

*************************** 1.第*************************行

id: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:所有

possibl:零

k:零

k:零

r:零

rows: 998490

filt: 100.00

使用文件排序的:

集合中的1行,1个警告(0.00秒)

mysql select SQL_BIG_RESULT g,count(*)c from TBL group by g limit 5;

- -

| g | c |

- -

| 0 | 1 |

| 1 | 2 |

| 4 | 1 |

| 5 | 1 |

| 6 | 2 |

- -

一组5行(0.88秒)

如果我们不这样做。;如果没有允许我们按组顺序扫描数据的索引,我们可以通过外部排序(也称为 "文件排序和在MySQL中)。您可能会注意到,我在这里使用SQL_BIG_RESULT提示符来获得这个计划。如果没有它,MySQL在这种情况下也不会选择这个方案。

一般来说,只有当我们有大量的组时,MySQL更喜欢使用这种计划,因为在这种情况下,排序比拥有临时表(我们将在下面讨论)更有效。

中的临时表GROUP BY

mysql解释select g,sum(g) s from tbl group by g limit 5 G

*************************** 1.第*************************行

id: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:所有

possibl:零

k:零

k:零

r:零

rows: 998490

filt: 100.00

:使用临时

集合中的1行,1个警告(0.00秒)

mysql select g,sum(g)s fromm TBL group by g order by null limit 5;

- -

| g | s |

- -

| 0 | 0 |

| 1 | 2 |

| 4 | 4 |

| 5 | 5 |

| 6 | 12 |

- -

一组5行(7.75秒)

在这种情况下,MySQL也会执行全表扫描。但是它不是运行额外的排序过程,而是创建一个临时表。这个临时表在每个组中包含一行,对于每个传入的行,相应组的值将被更新。很多更新!虽然这在内存上可能是合理的,但是如果结果表非常大,以至于更新会导致大量的磁盘IO,那么它就变得非常昂贵。在这种情况下,外部排序计划通常更好。请注意,尽管MySQL默认为这个用例选择了这个计划,但是如果我们不 不提供任何提示,它几乎比我们使用SQL_BIG_RESULT提示的计划慢10倍。你可能注意到我加了 "按空值排序这个问题。这是向你展示的唯一计划清理 "临时桌子。没有它,我们得到这个方案:mysql explain select g,sum(G)s from TBL group by G limit 5g * * * * * * * * * * * * * * * * * * * * * * * 1。排* * * * * * * * * * * * * * * * * * * * * * * * * id: 1 select_typ:简单tabl: TBL partitions: NULL typ: ALL possible _ key sec NULL k: NULL k: NULL r: NULL rows: 998490 filt: 100.00 :使用临时;使用文件对集合中的1行进行排序,1次警告(0.00秒)

其中,我们得到了 "两个最坏的 "来自临时和文件分类的提示。。MySQL 5.7总是返回按分组顺序排序的分组结果,即使查询没有。;我不需要它(这可能需要昂贵的额外排序过程)。ORD: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:山脉

possibl:·k

k:·k

k: 4

r:零

rows: 2

filt: 100.00

:使用索引进行分组

集合中的1行,1个警告(0.00秒)

mysql通过k从tbl组中选择k,max(id);

- -

| k |最大值(id) |

- -

| 0 | 2340920 |

| 1 | 2340916 |

| 2 | 2340932 |

| 3 | 2340928 |

| 4 | 2340924 |

- -

一组5行(0.00秒)

这个方法只适用于非常特殊的聚合函数:MIN()和m。AX().这些不需要遍历组中的所有行来计算值。它们可以直接跳转到组中的最小或最大组值(如果有这样的索引)。如果索引只建立在列(k)上,如何找到每个组的MAX(ID)值?这是一个InnoDB表。请记住,InnoDB表有效地将主键附加到所有索引上。(K)变成(K,ID),这允许我们对这个查询使用跳过扫描优化。只有当每组有大量行时,才会启用这种优化。否则,MySQL更喜欢使用更传统的方法来执行这个查询(比如方法# 1中详述的索引有序分组)。虽然我们使用MIN()/MAX()聚合函数,但其他优化也适用于它们。例如,如果有一个没有GROUP BY的聚合函数(事实上,所有的表都有一个GROUP),MySQL在统计分析阶段从索引中获取这些值。并避免在执行阶段完全读表:MySQL explain select max (k)来自TBL G * * * * * * * * * * * * * * * * * * * * * 1。第* * * * * * * * * * * * *行。id: 1 select_typ:简单tabl: NULL partitions: NULL typ: NULL possibl: NULL k: NULL k: NULL r: NULL rows: NULL filt: NULL : Select tables优化了集合中的1行,1个警告(0.00秒)

过滤和分组

我们已经研究了MySQL执行GROUP BY的四种。为了简单起见,我在整个表上使用了GROUP BY,并且没有应用过滤。当你有一个WHERE子句时,同样的概念也适用:MySQL explain select g,sum(G)s from TBL WH: 1 select_typ:简单tabl: TBL partitions: NULL typ:范围可能_ k: k k: k k: 4 r: NULL rows: 1 filt: 100.00 :使用索引条件;使用集合中的临时1行,1个警告(0.00秒)

在这种情况下,我们使用K列上的范围进行数据过滤/查找,并在有临时表时执行GROUP BY。在某些情况下,方法并不。但是,在其他情况下,我们必须选择使用GROUP BY索引或其他索引进行筛选:

MySQL alter table TBL add key(g);

查询正常,0行受影响(4.17秒)

Records: 0 Duplicat: 0 Warnings: 0

mysql解释select g,sum(g) s from tbl其中k1 group by g限制5 G

*************************** 1.第*************************行

id: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:指数

possibl:k,g

k: g

k: 4

r:零

rows: 16

filt: 50.00

:用在哪里

集合中的1行,1个警告(0.00秒)

mysql解释select g,sum(G)s from TBL wh: 1号

select_typ:简单

tabl: TBL

partitions:零

typ:山脉

possibl:公司

k:·k

k: 4

r:零

rows: 1号

filt: 100.00

:使用索引条件;使用临时;使用文件排序

集合中的1行,1个警告(0.00秒)

根据该查询中使用的特定常量,我们可以看到我们使用了索引顺序扫描(和 "丢弃 "从索引解析WHERE子句)或使用索引解析WHERE子句(但使用临时表解析GROUP BY)。根据我的经验,这就是MySQL GROUP BY doesn 不要总是做出正确的选择。您可能需要使用FORC

count数据库用法?

1.查询表中有多少条记录?

从表中选择计数(*)

2.查询表中符合条件的记录数。

从表中选择计数(*)e其中id gt 100

3.查询每组中的记录数。

select name,count(*)as count from table group by name

(1)如果开发中确实需要count()聚合,那么优先考虑count(*),因为mysql数据库本身就对count(*)做了特殊的优化。

(2)使用count()聚合函数后,最好不要遵循where age 1的条件,这样会导致没有索引,降低查询效率,除非该字段已经被索引。使用count()聚合函数后,如果存在where条件,且where条件的字段未被索引,则查询不会被索引,将直接扫描整个表。

(3) count (field)是非主键字段,最好不要用,因为它不会带索引。

0.00秒 GROUP BY 情况

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。