distinct跟group by 去掉重复数据分析排序 + 分页 ( order by ) ( limit )

灰太狼 2023-01-24 02:16 20阅读 0赞

1、distinct和group by 去掉重复数据分析  
用distinct关键字只能过滤查询字段中所有记录相同的（记录集相同），而如果要指定一个字段却没有效果，另外distinct关键字会排序 。

`select distinct name from t1` 能消除重复记录，但只能取一个字段，现在要同时取id,name这2个字段的值。

`select distinct id,name from t1` 可以取多个字段，但只能消除这2个字段值全部相同的记录

所以用distinct达不到想要的效果，用group by 可以解决这个问题。

例如要显示的字段为A、B、C三个，而A字段的内容不能重复可以用下面的语句：

select A, min(B),min(C),count(*) from [table] where [条件] group by A 
    
    having [条件] order by A desc

为了显示标题头好看点可以把select A, min(B),min©,count(*) 换称select A as A, min(B) as B,min© as C,count(*) as 重复次数

显示出来的字段和排序字段都要包括在group by 中

但显示出来的字段包有min,max,count,avg,sum等聚合函数时可以不在group by 中

如上句的min(B),min©,count(\*)

一般条件写在where 后面

有聚合函数的条件写在having 后面

如果在上句中having加 count(\*)>1 就可以查出记录A的重复次数大于1的记录

如果在上句中having加 count(\*)>2 就可以查出记录A的重复次数大于2的记录

如果在上句中having加 count(\*)>=1 就可以查出所有的记录，但重复的只显示一条，并且后面有显示重复的次数----这就是所需要的结果，而且语句可以通过hibernate

下面语句可以查询出那些数据是重复的：

select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1

**将上面的>号改为=号就可以查询出没有重复的数据了。**

PS：关于group by和distinct到底哪个性能好，我还是不敢太赞同网上的一些说法，自己测试才是王道。

未完，待续。。。

2、 [排序 + 分页 ( order by ) ( limit )][_ _ _ order by _ _ limit]

[_ _ _ order by _ _ limit]: https://www.cnblogs.com/fuyunlin/articles/14006280.html

发表评论取消回复

表情：

评论列表（有 0 条评论，20人围观）

还没有评论，来说两句吧...

相关阅读

相关 mysql同时使用order by排序和limit分页数据重复问题

目录场景再现：解决方案：问题分析： mysql官方描述： -------------------- 场景再现：最近排查数据时发现使用order by

爱被打了一巴掌/ 2024年03月27日 18:26/ 0 赞/ 76 阅读

相关 order by与group by的区别是____。 A.order by用于排序， group by用于分组 B.order by用于排序，group by也用于排序 C.order by用于...

A. order by用于排序，group by用于分组。 order by是用来对查询结果进行排序的，它是在查询完成之后进行的操作。group by是用来对查询结果进行分组

偏执的太偏执、/ 2024年03月26日 10:15/ 0 赞/ 91 阅读

相关 MySql Order by 字段出现重复导致 limit 分页后的数据错乱

问题描述 select \ from standard\_process order by event\_time desc 此条sql查询的结果如下： ![在这里插

骑猪看日落/ 2023年10月12日 09:19/ 0 赞/ 56 阅读

相关 distinct跟group by 去掉重复数据分析排序 + 分页 ( order by ) ( limit )

1、distinct和group by 去掉重复数据分析用distinct关键字只能过滤查询字段中所有记录相同的（记录集相同），而如果要指定一个字段却没有效果，另外dis

灰太狼/ 2023年01月24日 02:16/ 0 赞/ 21 阅读

相关 mysql order by group by limit 查询缓慢

需求：分组排序取一段数据问题：在正常的查询情况下查询效率低下总表有10w,下面的查询语句查询时间达到了2.648s，时间表有80W查询时间达到了18s，显然很不符合要

布满荆棘的人生/ 2023年01月05日 12:21/ 0 赞/ 173 阅读

相关 mysql order by group by limit 查询缓慢

需求：分组排序取一段数据问题：在正常的查询情况下查询效率低下总表有10w,下面的查询语句查询时间达到了2.648s，时间表有80W查询时间达到了18s，显然很不符合要

末蓝、/ 2022年11月19日 12:55/ 0 赞/ 277 阅读

相关如何解决MySQL order by limit语句的分页数据重复问题？

点击上方蓝色“石杉的架构笔记”，选择“设为星标” 回复“PDF”获取独家整理的学习资料！ ![0b4b2a6283970f7aa1abe0f5d10

我不是女神ヾ/ 2022年11月13日 01:57/ 0 赞/ 170 阅读

相关 oracle进行order by排序，分页数据重复

Oracle的分页查询是没有进行任何排序操作的，Oracle是顺序的从数据块中读取符合条件的数据返回到客户端。而Oracle的排序算法不具有稳定性，也就是说，对于排序键值

秒速五厘米/ 2022年05月10日 10:38/ 0 赞/ 207 阅读

相关 distinct && group by

单纯的去重操作使用distinct，速度是快于group by的。 group by使用的频率相对较高，但正如其功能一样，它的目的是用来进行聚合统计的，虽然也可能实现去

- 日理万妓/ 2021年09月28日 11:52/ 0 赞/ 304 阅读

相关 mysql ORDER BY,GROUP BY 和DISTINCT原理

前言除了常规的Join语句之外，还有一类Query语句也是使用比较频繁的，那就是ORDERBY，GROUP BY以及DISTINCT这三类查询。考虑到这三类查询都涉及到

小灰灰/ 2021年06月10日 20:42/ 0 赞/ 495 阅读