深入了解MySql中怎么用group by?(用法详解)

来源:这里教程网 时间:2026-02-28 15:06:51 作者:

mysql中怎么用group by?下面本篇文章给大家深入解析下group by用法,希望对大家有所帮助。

深入了解MySql中怎么用group by?(用法详解)

日常开发中,我们经常会使用到

group by
。亲爱的小伙伴,你是否知道
group by
的工作原理呢?
group by
having
有什么区别呢?
group by
的优化思路是怎样的呢?使用
group by
有哪些需要注意的问题呢?本文将跟大家一起来学习,攻克
group by
~

使用group by的简单例子 group by 工作原理 group by + where 和 group by + having的区别 group by 优化思路 group by 使用注意点 一个生产慢SQL如何优化

【相关推荐:mysql视频教程】

1. 使用group by的简单例子

group by
一般用于分组统计,它表达的逻辑就是
根据一定的规则,进行分组
。我们先从一个简单的例子,一起复习一下哈。

假设用一张员工表,表结构如下:

CREATE TABLE `staff` (
  `id` bigint(11) NOT NULL AUTO_INCREMENT COMMENT '主键id',
  `id_card` varchar(20) NOT NULL COMMENT '身份证号码',
  `name` varchar(64) NOT NULL COMMENT '姓名',
  `age` int(4) NOT NULL COMMENT '年龄',
  `city` varchar(64) NOT NULL COMMENT '城市',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=15 DEFAULT CHARSET=utf8 COMMENT='员工表';

表存量的数据如下:

1.png

我们现在有这么一个需求:统计每个城市的员工数量。对应的 SQL 语句就可以这么写:

select city ,count(*) as num from staff group by city;

执行结果如下:

2.png

这条SQL语句的逻辑很清楚啦,但是它的底层执行流程是怎样的呢?

2. group by 原理分析

2.1 explain 分析

我们先用

explain
查看一下执行计划

explain select city ,count(*) as num from staff group by city;

3.png

Extra 这个字段的
Using temporary
表示在执行分组的时候使用了临时表
Extra 这个字段的
Using filesort
表示使用了排序

group by
怎么就使用到
临时表和排序
了呢?我们来看下这个SQL的执行流程

2.2 group by 的简单执行流程

explain select city ,count(*) as num from staff group by city;

我们一起来看下这个SQL的执行流程哈

    创建内存临时表,表里有两个字段
    city
    num
    全表扫描
    staff
    的记录,依次取出city = 'X'的记录。
判断临时表中是否有为 city='X'的行,没有就插入一个记录 (X,1); 如果临时表中有city='X'的行的行,就将x 这一行的num值加 1;
    遍历完成后,再根据字段
    city
    排序,得到结果集返回给客户端。

这个流程的执行图如下:

4.png

临时表的排序是怎样的呢?

对排序有兴趣深入了解的小伙伴,可以看我这篇文章哈。

看一遍就理解:order by详解

3. where 和 having的区别

group by + where 的执行流程 group by + having 的执行流程 同时有where、group by 、having的执行顺序

3.1 group by + where 的执行流程

有些小伙伴觉得上一小节的SQL太简单啦,如果加了where条件之后,并且where条件列加了索引呢,执行流程是怎样

好的,我们给它加个条件,并且加个

idx_age
的索引,如下:

select city ,count(*) as num from staff where age> 30 group by city;
//加索引
alter table staff add index idx_age (age);

再来expain分析一下:

explain select city ,count(*) as num from staff where age> 30 group by city;

5.png

从explain 执行计划结果,可以发现查询条件命中了

idx_age
的索引,并且使用了
临时表和排序

执行流程如下:

1、创建内存临时表,表里有两个字段

city
num

2、扫描索引树

idx_age
,找到大于年龄大于30的主键ID

3、通过主键ID,回表找到city = 'X'

判断临时表中是否有为 city='X'的行,没有就插入一个记录 (X,1); 如果临时表中有city='X'的行的行,就将x 这一行的num值加 1;

4、继续重复2,3步骤,找到所有满足条件的数据,

5、最后根据字段

city
排序,得到结果集返回给客户端。

3.2 group by + having 的执行

如果你要查询每个城市的员工数量,获取到员工数量不低于3的城市,having可以很好解决你的问题,SQL酱紫写:

select city ,count(*) as num from staff  group by city having num >= 3;

查询结果如下:

6.png

having
称为分组过滤条件,它对返回的结果集操作。

3.3 同时有where、group by 、having的执行顺序

如果一个SQL同时含有

where、group by、having
子句,执行顺序是怎样的呢。

比如这个SQL:

select city ,count(*) as num from staff  where age> 19 group by city having num >= 3;

执行

where
子句查找符合年龄大于19的员工数据

group by
子句对员工数据,根据城市分组。

group by
子句形成的城市组,运行聚集函数计算每一组的员工数量值;

最后用

having
子句选出员工数量大于等于3的城市组。

3.4 where + having 区别总结

having
子句用于分组后筛选,where子句用于条件筛选
having
一般都是配合
group by
和聚合函数一起出现如(
count(),sum(),avg(),max(),min()
)
where
条件子句中不能使用聚集函数,而
having
子句就可以。
having
只能用在group by之后,where执行在group by之前

4. 使用 group by 注意的问题

使用group by 主要有这几点需要注意:

group by
一定要配合聚合函数一起使用嘛?
group by
的字段一定要出现在select中嘛
group by
导致的慢SQL问题

4.1 group by一定要配合聚合函数使用嘛?

group by 就是分组统计的意思,一般情况都是配合聚合函数

 如(count(),sum(),avg(),max(),min())
一起使用。

count() 数量 sum() 总和 avg() 平均 max() 最大值 min() 最小值

如果没有配合聚合函数使用可以吗?

比如这个SQL:

select city,id_card,age from staff group by  city;

查询结果是

7.png

大家对比看下,返回的就是每个分组的第一条数据

8.png

当然,平时大家使用的时候,group by还是配合聚合函数使用的,除非一些特殊场景,比如你想去重,当然去重用

distinct
也是可以的。

4.2 group by 后面跟的字段一定要出现在select中嘛。

不一定,比如以下SQL:

select max(age)  from staff group by city;

执行结果如下:

9.png

分组字段

city
不在select 后面,并不会报错。当然,这个可能跟不同的数据库,不同的版本有关吧。大家使用的时候,可以先验证一下就好。有一句话叫做,纸上得来终觉浅,绝知此事要躬行

4.3

<span style="font-size: 16px;">group by</span>
导致的慢SQL问题

到了最重要的一个注意问题啦,

group by
使用不当,很容易就会产生慢SQL 问题。因为它既用到临时表,又默认用到排序。有时候还可能用到磁盘临时表

这些都是导致慢SQL的x因素,我们一起来探讨优化方案哈。

5. group by的一些优化方案

从哪些方向去优化呢?

方向1: 既然它默认会排序,我们不给它排是不是就行啦。 方向2:既然临时表是影响group by性能的X因素,我们是不是可以不用临时表?

我们一起来想下,执行

group by
语句为什么需要临时表呢?
group by
的语义逻辑,就是统计不同的值出现的个数。如果这个这些值一开始就是有序的,我们是不是直接往下扫描统计就好了,就不用临时表来记录并统计结果啦?

group by 后面的字段加索引 order by null 不用排序 尽量只使用内存临时表 使用SQL_BIG_RESULT

5.1 group by 后面的字段加索引

如何保证

group by
后面的字段数值一开始就是有序的呢?当然就是加索引啦。

我们回到一下这个SQL

select city ,count(*) as num from staff where age= 19 group by city;

它的执行计划

10.png

如果我们给它加个联合索引

idx_age_city(age,city)

alter table staff add index idx_age_city(age,city);

再去看执行计划,发现既不用排序,也不需要临时表啦。

11.png

加合适的索引是优化

group by
最简单有效的优化方式。

5.2 order by null 不用排序

并不是所有场景都适合加索引的,如果碰上不适合创建索引的场景,我们如何优化呢?

select city ,count(*) as num from staff group by city order by null

执行计划如下,已经没有

filesort

12.png

5.3 尽量只使用内存临时表

如果

group by
需要统计的数据不多,我们可以尽量只使用内存临时表;因为如果group by 的过程因为数据放不下,导致用到磁盘临时表的话,是比较耗时的。因此可以适当调大
tmp_table_size
参数,来避免用到磁盘临时表

5.4 使用SQL_BIG_RESULT优化

如果数据量实在太大怎么办呢?总不能无限调大

tmp_table_size
吧?但也不能眼睁睁看着数据先放到内存临时表,随着数据插入发现到达上限,再转成磁盘临时表吧?这样就有点不智能啦。

因此,如果预估数据量比较大,我们使用

SQL_BIG_RESULT
这个提示直接用磁盘临时表。MySQl优化器发现,磁盘临时表是B+树存储,存储效率不如数组来得高。因此会直接用数组来存

示例SQl如下:

select SQL_BIG_RESULT city ,count(*) as num from staff group by city;

执行计划的

Extra
字段可以看到,执行没有再使用临时表,而是只有排序

13.png

执行流程如下:

初始化 sort_buffer,放入city字段;

扫描表staff,依次取出city的值,存入 sort_buffer 中;

扫描完成后,对 sort_buffer的city字段做排序

排序完成后,就得到了一个有序数组。

根据有序数组,统计每个值出现的次数。

6. 一个生产慢SQL如何优化

最近遇到个生产慢SQL,跟group by相关的,给大家看下怎么优化哈。

表结构如下:

CREATE TABLE `staff` (
  `id` bigint(11) NOT NULL AUTO_INCREMENT COMMENT '主键id',
  `id_card` varchar(20) NOT NULL COMMENT '身份证号码',
  `name` varchar(64) NOT NULL COMMENT '姓名',
  `status` varchar(64) NOT NULL COMMENT 'Y-已激活 I-初始化 D-已删除 R-审核中',
  `age` int(4) NOT NULL COMMENT '年龄',
  `city` varchar(64) NOT NULL COMMENT '城市',
  `enterprise_no` varchar(64) NOT NULL COMMENT '企业号',
  `legal_cert_no` varchar(64) NOT NULL COMMENT '法人号码',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=15 DEFAULT CHARSET=utf8 COMMENT='员工表';

查询的SQL是这样的:

select * from t1 where status = #{status} group by #{legal_cert_no}

我们先不去探讨这个SQL的=是否合理。如果就是这么个SQL,你会怎么优化呢?有想法的小伙伴可以留言讨论哈,也可以加我微信加群探讨。如果你觉得文章那里写得不对,也可以提出来哈,一起进步,加油呀

更多编程相关知识,请访问:编程入门!!

相关推荐