mysql 查询重复 去除重复等等

查找所有重复标题的记录：

[sql] view plain copy

  1. SELECT * FROM t_info a WHERE ((SELECT COUNT(*) FROM t_info WHERE Title = a.Title) > 1) ORDER BY Title DESC

一、查找重复记录

1、查找全部重复记录

[plain] view plain copy

  1. Select * From 表 Where 重复字段 In (Select 重复字段 From 表 Group By 重复字段 Having Count(*)>1)

2、过滤重复记录(只显示一条)

[plain] view plain copy

  1. Select * From HZT Where ID In (Select Max(ID) From HZT Group By Title)

注：此处显示ID最大一条记录

二、删除重复记录

1、删除全部重复记录（慎用）

[plain] view plain copy

  1. Delete 表 Where 重复字段 In (Select 重复字段 From 表 Group By 重复字段 Having Count(*)>1)

2、保留一条（这个应该是大多数人所需要的 ^_^）

[sql] view plain copy

  1. Delete HZT Where ID Not In (Select Max(ID) From HZT Group By Title)

注：此处保留ID最大一条记录

三、举例

1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断

[sql] view plain copy

  1. select * from people where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)

2、删除表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断，只留有rowid最小的记录

[sql] view plain copy

  1. delete from people where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1) and rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1)

3、查找表中多余的重复记录（多个字段）

[sql] view plain copy

  1. select * from vitae a where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)


4、删除表中多余的重复记录（多个字段），只留有rowid最小的记录


[sql] view plain copy



    

  1. delete from vitae a where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1) and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)
    2. 



5、查找表中多余的重复记录（多个字段），不包含rowid最小的记录


[plain] view plain copy



    

  1. select * from vitae a where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1) and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)
    2. 




四、补充


有两个以上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。
1、对于第一种重复，比较容易解决，使用


[sql] view plain copy



    

  1. select distinct * from tableName
    2. 



就可以得到无重复记录的结果集。
如果该表需要删除重复的记录（重复记录保留1条），可以按以下方法删除


[sql] view plain copy



    

  1. select distinct * into #Tmp from tableName
    2. 

  2. drop table tableName
    3. 

  3. select * into tableName from #Tmp
    4. 

  4. drop table #Tmp
    5. 



发生这种重复的原因是表设计不周产生的，增加唯一索引列即可解决。
2、这类重复问题通常要求保留重复记录中的第一条记录，操作方法如下
假设有重复的字段为Name,Address，要求得到这两个字段唯一的结果集


[sql] view plain copy



    

  1. select identity(int,1,1) as autoID, * into #Tmp from tableName
    2. 

  2. select min(autoID) as autoID into #Tmp2 from #Tmp group by Name,autoID
    3. 

  3. select * from #Tmp where autoID in(select autoID from #tmp2)
    4. 

				


				
时间： 2024-11-06 10:20:37 

		


		


	

	
	

		


		
mysql 查询重复  去除重复等等的相关文章


						

		

			

                SQL查询语句去除重复行
			

		

		

									

				1.存在两条完全相同的纪录 这是最简单的一种情况,用关键字distinct就可以去掉 select distinct * from table(表名) where (条件) 2.存在部分字段相同的纪录(有主键id即唯一键) 如果是这种情况的话用distinct是过滤不了的,这就要用到主键id的唯一性特点及group by分组 select * from table where id in (select min(id) from table group by [去除重复的字段名列表,....])			

		

	

						

		

			

                Mysql查询某字段重复值并删除重复值
			

		

		

									

				1.查询重复值: select code,count(*) as count from hospital group by code having count>1; 该语句查询code重复值大于1的记录 2.删除重复: DELETE FROM hospital WHERE id NOT IN (SELECT dt.minno FROM (SELECT MIN(id) AS minno FROM hospital GROUP BY code) dt); 该语句保留id最小的记录,其余code重复的			

		

	

				

		

			

                mysql查询出所有重复的记录
			

		

		

									

				假如我们有如下一张数据表(很简单,只是举例而已),表名为student.现在我们要取出其中重复记录.重复是以name相同为判定标准. ID name phone age 1 张三 10086 15 2 李四 10010 20 3 王五 10010 22 4 赵六 10010 22 5 孙七 10010 22 查找出所有的重复数据 SELECT * FROM student WHERE phone IN (SELECT shortname FROM student GROUP BY phone H			

		

	

				

		

			

                mysql查询表里的重复数据方法
			

		

		

									

				select username,count(*) as count from hk_test group by username having count>1; 原文地址:https://www.cnblogs.com/xujiating/p/11888183.html			

		

	

				

		

			

                mysql 去除重复 Select中DISTINCT关键字的用法
			

		

		

									

				在使用mysql时,有时需要查询出某个字段不重复的记录,虽然mysql提供 有distinct这个关键字来过滤掉多余的重复记录只保留一条,但往往只用它来返回不重复记录的条数,而不是用它来返回不重记录的所有值.其原因是 distinct只能返回它的目标字段,而无法返回其它字段,这个问题让我困扰了很久,用distinct不能解决的话,我只有用二重循环查询来解决,而 这样对于一个数据量非常大的站来说,无疑是会直接影响到效率的.所以我花了很多时间来研究这个问题,网上也查不到解决方案,期间把容容拉来帮忙,			

		

	

				

		

			

                mysql 去除重复数据 语句
			

		

		

									

				纠结的过程: mysql> select * from role group by role_name,deleted; +---------+-----------+---------+ | role_id | role_name | deleted | +---------+-----------+---------+ | 2 | xue | 12 | | 1 | zhao | 12 | | 3 | zhao | 13 | +---------+-----------+---------+			

		

	

				

		

			

                MySQL查询重复出现次数最多的记录
			

		

		

									

				MySQL查询重复出现次数最多的记录 http://database.51cto.com/art/201011/235139.htm 2010-11-25 14:40 佚名 互联网 字号:T | T 对于MySQL数据库来说,查询永远是最重要的功能,下文就教您查询重复出现次数最多的记录的方法,供您借鉴参考. AD:51CTO移动APP安全沙龙!马上要爆满,手慢没座位! MySQL查询的方法很多,下面为您介绍的MySQL查询语句用于实现查询重复出现次数最多的记录,对于学习MySQL查询有很好的帮助			

		

	

				

		

			

                SQL Server数据库--》top关键字，order by排序，distinct去除重复记录，sql聚合函数，模糊查询，通配符，空值处理。。。。
			

		

		

									

				top关键字:写在select后面 字段的前面 比如你要显示查询的前5条记录,如下所示: select top 5 * from Student 一般情况下,top是和order by连用的 order by用在表名的后面 order by后面就填你要按它排序的字段,是升序排序(从小到大排序) percent:百分比 %=percent 比如要显示5%的数据处理,不能写top 5%,而是top 5 percent 提示:如果top 5 percent出来的数是3.1条数据的话,是取四条数据,而不			

		

	

				

		

			

                sql查询去除重复值语句
			

		

		

									

				sql 单表/多表查询去除重复记录 单表distinct 多表group by group by 必须放在 order by 和 limit之前,不然会报错 ************************************************************************************ 1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 select * from people where peopleId in (select