【MySQL】mysql中函数DISTINCT、group by、CONCAT、GROUP_CONCAT的使用以及mysql group_concat函数被截断的问题

水深无声 2022-07-13 03:28 261阅读 0赞

**一：DISTINCT与GROUP\_CONCAT**

今天在写SQL的时候突然要用到这些关键词，故搜寻了一番，特此整理一下：

在使用mysql时，有时需要查询出某个字段不重复的记录，虽然mysql提供有distinct这个关键字来过滤掉多余的重复记录只保留一条，但往往只用它来返回不重复记录的条数，而不是用它来返回不重记录的所有值。

其原因是distinct只能返回它的目标字段，而无法返回其它字段，这个问题让我困扰了很久，用distinct不能解决的话，我只有用二重循环查询来解决，而这样对于一个数据量非常大的站来说，无疑是会直接影响到效率的。所以我花了很多时间来研究这个问题，网上也查不到解决方案，但最终还是解决了。

数据库表(tms\_sgoods)

![20161222171326207][]

表结构大概这个样子，这只是一个简单的例子，实际情况会复杂很多。比如我想用一条语句查询到SORDER\_NO不重复的所有数据，那就必须使用distinct去掉多余的重复记录。

SELECT DISTINCT SORDER\_NO FROM tms\_sgoods

得到的结果是：

![20161222171422896][]

好像达到了效果，可是，我想要得到的是id值呢？改一下查询语句吧：

SELECT DISTINCT SORDER\_NO,SGOODS\_ID FROM tms\_sgoods

结果是：

![20161222171523273][]

distinct怎么没有起作用？作用是起了，不过它同时作用了两个字段，也就是必须得SGOODS\_ID与SORDER\_NO都相同时才会被排除。。。

我们再改改查询语句：

SELECT SGOODS\_ID,DISTINCT SORDER\_NO FROM tms\_sgoods

很遗憾，除了错误信息你什么也得不到，distinct必须放在开头。难到不能把distinct放到where条件里？能，照样报错。。。。。。。

很麻烦吧？确实，费尽心思都没有解决这个问题。没办法，继续找人问。试了半天，还是不行，最后在mysql手册里找到一个用法，用group\_concat(distinct SORDER\_NO)配合group by SORDER\_NO实现了我所需要的功能，兴奋，天佑我也。

SELECT SGOODS\_ID,GROUP\_CONCAT(DISTINCT SORDER\_NO) FROM tms\_sgoods GROUP BY SORDER\_NO

结果是：

![20161222171613164][]

注意：group\_concat函数是4.1支持的。终于搞定了，不过这样一来，如果是给客户部署的怎么办？因此只能要求客户也升级了。

突然一想，既然可以使用group\_concat函数，那其它函数能行吗？赶紧用count函数一试，成功，我。。。。。。。想哭啊，费了这么多工夫。。。。。。。。原来就这么简单……

SELECT \*,COUNT(DISTINCT SORDER\_NO) FROM tms\_sgoods GROUP BY SORDER\_NO

结果是：

![20161222171654908][]

最后一项是多余的，不用管就行了，目的达到。更郁闷的是：突然发现有更简单的解决方法：

SELECT \*FROM tms\_sgoods GROUP BY SORDER\_NO

结果是：

![20161222171730760][]

**二、GROUP\_CONCAT（）函数**

GROUP\_CONCAT()是MySQL数据库提供的一个函数，通常跟GROUP BY一起用.

具体可参考MySQL官方文挡:[http://dev.mysql.com/doc/refman/5.0/en/group-by-functions.html\#function\_group-concat][http_dev.mysql.com_doc_refman_5.0_en_group-by-functions.html_function_group-concat]。  
语法:  
GROUP\_CONCAT(\[DISTINCT\] expr \[,expr ...\] \[ORDER BY \{unsigned\_integer | col\_name | expr\} \[ASC | DESC\] \[,col\_name ...\]\] \[SEPARATOR str\_val\])

使用语法及特点：  
GROUP\_CONCAT(\[DISTINCT\] expr \[,expr ...\]\[ORDER BY \{unsigned\_integer | col\_name | formula\} \[ASC | DESC\] \[,col ...\]\]\[SEPARATOR str\_val\])

这个函数能将相同的行组合起来，即所谓的行转列。完整语法如下：

group\_concat(\[DISTINCT\]要连接的字段\[order by ASC/DESC排序字段\]\[Separator'分隔符'\])

GROUP\_CONCAT函数返回一个字符串结果，该结果由分组中的值连接组合而成。  
使用表info作为示例，其中语句

SELECT locus,id,journal FROM info WHERE locus IN('AB086827','AF040764');

返回结果为  
\+----------+----+--------------------------+  
| locus    | id | journal                  |  
\+----------+----+--------------------------+  
| AB086827 |  1 | Unpublished              |  
| AB086827 |  2 | Submitted (20-JUN-2002)  |  
| AF040764 | 23 | Unpublished              |  
| AF040764 | 24 | Submitted (31-DEC-1997)  |  
\+----------+----+--------------------------+  
  
1、使用语法及特点：  
GROUP\_CONCAT(\[DISTINCT\] expr \[,expr ...\]\[ORDER BY \{unsigned\_integer | col\_name | formula\} \[ASC | DESC\] \[,col ...\]\]\[SEPARATOR str\_val\])

在 MySQL 中，你可以得到表达式结合体的连结值。通过使用 DISTINCT 可以排除重复值。如果希望对结果中的值进行排序，可以使用 ORDER BY 子句。  
SEPARATOR 是一个字符串值，它被用于插入到结果值中。缺省为一个逗号 (",")，可以通过指定 SEPARATOR "" 完全地移除这个分隔符。  
可以通过变量 group\_concat\_max\_len 设置一个最大的长度。在运行时执行的句法如下： SET \[SESSION | GLOBAL\] group\_concat\_max\_len = unsigned\_integer;  
如果最大长度被设置，结果值被剪切到这个最大长度。如果分组的字符过长，可以对系统参数进行设置：SET @@global.group\_concat\_max\_len=40000;  
  
2、使用示例：  
语句 SELECT locus,GROUP\_CONCAT(id) FROM info WHERE locus IN('AB086827','AF040764') GROUP BY locus;的返回结果为  
\+----------+------------------+  
| locus    | GROUP\_CONCAT(id) |  
\+----------+------------------+  
| AB086827 | 1,2              |  
| AF040764 | 23,24            |  
\+----------+------------------+  
  
语句

SELECT locus,GROUP\_CONCAT(distinct id ORDER BY id DESC SEPARATOR '\_') FROM info WHERE locus IN('AB086827','AF040764') GROUP BY locus;

返回结果为  
\+----------+----------------------------------------------------------+  
| locus    | GROUP\_CONCAT(distinct id ORDER BY id DESC SEPARATOR '\_') |  
\+----------+----------------------------------------------------------+  
| AB086827 | 2\_1                                                      |  
| AF040764 | 24\_23                                                    |  
\+----------+----------------------------------------------------------+  
  
语句

SELECT locus,GROUP\_CONCAT(concat\_ws(', ',id,journal) ORDER BY id DESC SEPARATOR '. ') FROM info WHERE locus IN('AB086827','AF040764') GROUP BY locus;

返回结果为  
\+----------+--------------------------------------------------------------------------+  
| locus    | GROUP\_CONCAT(concat\_ws(', ',id,journal) ORDER BY id DESC SEPARATOR '. ') |  
\+----------+--------------------------------------------------------------------------+  
| AB086827 | 2, Submitted (20-JUN-2002). 1, Unpublished                               |  
| AF040764 | 24, Submitted (31-DEC-1997) . 23, Unpublished                            |  
\+----------+--------------------------------------------------------------------------+

**三、CONCAT（）函数**

**实例一：**

CONCAT（）函数用于将多个字符串连接成一个字符串。

使用数据表Info作为示例，其中SELECT id,name FROM info LIMIT 1;的返回结果为  
\+----+--------+  
| id | name   |  
\+----+--------+  
|  1 | BioCyc |  
\+----+--------+

1、语法及使用特点：  
CONCAT(str1,str2,…)                         
返回结果为连接参数产生的字符串。如有任何一个参数为NULL ，则返回值为 NULL。可以有一个或多个参数。  
  
2、使用示例：  
SELECT CONCAT(id, ‘，’, name) AS con FROM info LIMIT 1;返回结果为  
\+----------+  
| con      |  
\+----------+  
| 1,BioCyc |  
\+----------+  
  
SELECT CONCAT(‘My’, NULL, ‘QL’);返回结果为  
\+--------------------------+  
| CONCAT('My', NULL, 'QL') |  
\+--------------------------+  
| NULL                     |  
\+--------------------------+  
  
3、如何指定参数之间的分隔符  
使用函数CONCAT\_WS（）。使用语法为：

CONCAT\_WS(separator,str1,str2,…)

CONCAT\_WS() 代表 CONCAT With Separator ，是CONCAT()的特殊形式。第一个参数是其它参数的分隔符。分隔符的位置放在要连接的两个字符串之间。分隔符可以是一个字符串，也可以是其它参数。如果分隔符为 NULL，则结果为 NULL。函数会忽略任何分隔符参数后的 NULL 值。但是CONCAT\_WS()不会忽略任何空字符串。 (然而会忽略所有的 NULL）。  
  
如SELECT CONCAT\_WS('\_',id,name) AS con\_ws FROM info LIMIT 1;返回结果为  
\+----------+  
| con\_ws   |  
\+----------+  
| 1\_BioCyc |  
\+----------+  
  
SELECT CONCAT\_WS(',','First name',NULL,'Last Name');返回结果为  
\+----------------------------------------------+  
| CONCAT\_WS(',','First name',NULL,'Last Name') |  
\+----------------------------------------------+  
| First name,Last Name                         |  
\+----------------------------------------------+

**实例二：**

CONCAT()函数用于将多个字符串连接成一个字符串。使用数据表info作为示例，其中 select id,name from info limit 1;

返回的结果是：

![20161222173848090][]

1.语法及使用特点

CONCAT(str1,str2,...)

返回结果为连接参数产生的字符串。如果任何一个参数为NULL，则返回值为NULL。可以有一个或多个参数。

2.使用示例：select concat(id,',',name)as con from info limit 1;返回结果为：

![20161222173914899][]

select concat('My',NULL,'QL');返回结果为：

![20161222173948822][]

3.如何指定参数之间的分隔符

使用函数CONCAT\_WS()。使用语法为：CONCAT\_WS(separator,str1,str2,...)

CONCAT\_WS()代表CONCAT With Separator,是CONCAT()的特殊形式。第一个参数是其他参数的分隔符。分隔符的位置放在要连接的两个字符串之间。分隔符可以是一个字符串，也可以是其他参数。如果分隔符是NULL，则结果为NULL。函数会忽略任何分隔符参数后的NULL值。但是CONCAT\_WS()不会忽略任何空字符串。

如select CONCAT\_WS('\_',id,name) as con\_ws from info limit 1;返回结果为：

![20161222174000184][]

select CONCAT\_WS(',','first name',NULL,'last name');返回结果为：

![20161222174014059][]

**四、GROUP BY**

表结构和数据如下：

![20161222173213811][]

1.列出每个部门最高薪水

SELECT DEPT,MAX(SALARY) AS MAXSALARY FROM tms\_sgoods GROUP BY DEPT

结果如下：

![20161222173241405][]

2.查询每个部门的总薪水数

SELECT DEPT,SUM(SALARY) AS TOTAL FROM tms\_sgoods GROUP BY DEPT

结果如下：

![20161222173256046][]

3.查询公司2016年入职的各个部门每个级别里的最高薪水

SELECT DEPT,EDLEVEL,MAX(SALARY) AS MAXSALARY FROM tms\_sgoods  
　　WHERE HIREDATE >='2016-07-08'  
　　GROUP BY DEPT, EDLEVEL  
　　ORDER BY DEPT, EDLEVEL

结果如下：

![20161222173318953][]

** 五、mysql group\_concat函数被截断的问题**

**1、[MySQL][]的group\_concat 函数默认返回1024个字节长度，超过长度的会被截断。最近程序中就遇到这个问题了。**

**通过如下命令可以查看到当前[mysql][]系统的参数：**

**解决办法：**

设置group\_concat\_max\_len的值

（1） 在 /etc/my.cnf 中的\[mysqld\]加上group\_concat\_max\_len = 1024000，需要重启mysql才能生效

（2） 在命令行下输入：

SET GLOBAL group_concat_max_len=1024000;
    或者  SET SESSION group_concat_max_len=1024000;

GLOBAL 是对全局生效的，而SESSION是对当前会话有效。需要有管理员权限才可以操作！！！

说明： *1024指的是字节。*

**六、添加索引**

ALTER TABLE \`group\_order\_guest\` ADD INDEX index\_name ( \`certificate\_num\` );  
  
**七、删除索引**  
ALTER TABLE group\_order\_guest DROP INDEX index\_name;

[20161222171326207]: /images/20220713/4418491ed0fc4100ba9c5023ecc54b55.png
[20161222171422896]: /images/20220713/64a9c50ecda14274893aeb14ae62d8cb.png
[20161222171523273]: /images/20220713/4e7faeb1e89d45cbbefe349907ff8cd6.png
[20161222171613164]: /images/20220713/291869525d844409a5f8d19c27e6b8c6.png
[20161222171654908]: /images/20220713/5d6ffad36a524579bc4bd6e2010e3d21.png
[20161222171730760]: /images/20220713/4e9caa8902f843ebb2168089a2c654c7.png
[http_dev.mysql.com_doc_refman_5.0_en_group-by-functions.html_function_group-concat]: http://dev.mysql.com/doc/refman/5.0/en/group-by-functions.html#function_group-concat
[20161222173848090]: /images/20220713/5e4151e872b945be83bb984f0b0b188c.png
[20161222173914899]: /images/20220713/3a1082510b4f435d95b43762b01fcc72.png
[20161222173948822]: /images/20220713/5fadcf3ff33c47d8a7e2fd81645d63ac.png
[20161222174000184]: /images/20220713/4218efcd5aab4fcab2478315b764bb56.png
[20161222174014059]: /images/20220713/89d035ecaf5b45b1a8deb068f33ec78c.png
[20161222173213811]: /images/20220713/e88679fa6bf74f319a9902224827c75f.png
[20161222173241405]: /images/20220713/ceb2d6b0c9f8421cba31fc1b70014fe7.png
[20161222173256046]: /images/20220713/217a18abc1c94e42a5fc8b3617832d9f.png
[20161222173318953]: /images/20220713/f1ce47aa54c84c78b3eee868c7099120.png
[MySQL]: http://lib.csdn.net/base/mysql
[mysql]: http://www.rigongyizu.com/tag/mysql/