|
|
|
|
移动端

数据库MySQL如何查找删除重复行

当你对b字段排序(分组),相同值的c被分到不同的组,因此不能用COUNT(DISTINCT c)来计算大小。COUNT()之类的内部函数只作用于同一个分组,对于不同分组的行就无能为力了。

作者:愤怒的韭菜来源:计算机与网络安全|2018-04-27 13:00

人工智能+区块链的发展趋势及应用调研报告


MySQL | 查找删除重复行

当你对b字段排序(分组),相同值的c被分到不同的组,因此不能用COUNT(DISTINCT c)来计算大小。COUNT()之类的内部函数只作用于同一个分组,对于不同分组的行就无能为力了。类似,如果排序的是c字段,相同值的b也会分到不同的组,无论如何是不能达到我们的目的的。

几种正确的方法

也许最简单的方法是分别对某个字段查找重复行,然后用UNION拼在一起,像这样:

  1. select b as value, count(*) as cnt, 'b' as what_col    
  2. from a_b_c group by b having count(*) > 1    
  3. union    
  4. select c as value, count(*) as cnt, 'c' as what_col   
  5. from a_b_c group by c having count(*) > 1;    
  6. +-------+-----+----------+    
  7. | value | cnt | what_col |    
  8. +-------+-----+----------+   
  9. |     1 |   3 | b        |    
  10. |     2 |   3 | b        |   
  11. |     3 |   3 | b        |   
  12. |     1 |   3 | c        |    
  13. |     2 |   3 | c        |   
  14. |     3 |   3 | c        |   
  15. +-------+-----+----------+ 

输出what_col字段为了提示重复的是哪个字段。另一个办法是使用嵌套查询:

  1. select a, b, c from a_b_c    
  2. where b in (select b from a_b_c group by b having count(*) > 1)    
  3.    or c in (select c from a_b_c group by c having count(*) > 1);   
  4. +----+------+------+    
  5. | a  | b    | c    |   
  6. +----+------+------+   
  7. |  7 |    1 |    1 |    
  8. |  8 |    1 |    2 |   
  9. |  9 |    1 |    3 |    
  10. | 10 |    2 |    1 |    
  11. | 11 |    2 |    2 |    
  12. | 12 |    2 |    3 |    
  13. | 13 |    3 |    1 |   
  14. | 14 |    3 |    2 |   
  15. | 15 |    3 |    3 |   
  16. +----+------+------+ 

这种方法的效率要比使用UNION低许多,并且显示每一重复的行,而不是重复的字段值。还有一种方法,将自己跟group的嵌套查询结果联表查询。写法比较复杂,但对于复杂的数据或者对效率有较高要求的情况,是很有必要的。

  1. select a, a_b_c.b, a_b_c.c    
  2. from a_b_c    
  3.   left outer join (   
  4.      select b from a_b_c group by b having count(*) > 1   
  5.   ) as b on a_b_c.b = b.b    
  6.   left outer join (    
  7.      select c from a_b_c group by c having count(*) > 1    
  8.   ) as c on a_b_c.c = c.c    
  9. where b.b is not null or c.c is not null 

以上方法可行,我敢肯定还有其他的方法。如果UNION能用,我想会是最简单不过的了。

【编辑推荐】

  1. 我曾误删了公司的数据库,但还是活下来了
  2. 王涛:区块链+数据库,底层技术融合是否带来更大爆发?
  3. 即将开源的新一代MySQL高可用组件:MySQL Plus
  4. 关于MySQL 8.0的几个重点,都在这里
  5. 用Python操作MySQL存储,这些你都会了吗?
【责任编辑:庞桂玉 TEL:(010)68476606】

点赞 0
分享:
大家都在看
猜你喜欢

读 书 +更多

非常网管——网络应用

在网络应用越来越复杂的今天,传统的网络应用已经不能满足企业和用户的需要,这就对网络管理员、信息管理部门提出了更高的要求。本书介绍了...

订阅51CTO邮刊

点击这里查看样刊

订阅51CTO邮刊