MySQL删除重复记录的方法

参考网上的方法，总结了产出重复记录的方法，欢迎交流。

方法1：创建一个新表临时储存数据

假设我们有一个存在多个字段的表，表中有部分数据的若干字段重复，此时我们可以使用DISTINCT这个关键字对表数据进行筛选。

1 CREATE [TEMPORARY] TABLE temp LIKE origin_tb;
2 INSERT temp(attr1,attr2,...) SELECT DISTINCT attr1,attr2,... FROM origin_tb;
3 DELETE FROM origin_tb;
4 INSERT origin_tb(attr1,attr2,...) SELECT temp * FROM temp;
5 DROP TABLE temp;

如果全部字段都相同，那么可以直接使用"DISTINCT *"来获取全部字段的记录。这个方法有个问题，就是会改变一条记录中部分字段的值，所以只适用于大部分字段甚至全部字段都重复的记录。并且这种方法创建了一个新的表，效率并不是太高，对于大批量的数据处理，如果使用临时表则要考虑内存占用的问题。

方法二：

适用问题：删除重复的记录，只保留编号最小的那条数据。

mysql中用命令行复制表结构的方法主要有一下几种:

1.只复制表结构到新表

?


1

CREATE TABLE 新表 SELECT * FROM 旧表 WHERE 1=2

或者

?


1

CREATE TABLE 新表 LIKE 旧表 

2.复制表结构及数据到新表

?


1

CREATE TABLE 新表 SELECT * FROM 旧表

3.复制旧表的数据到新表(假设两个表结构一样) 

?


1

INSERT INTO 新表 SELECT * FROM 旧表 

4.复制旧表的数据到新表(假设两个表结构不一样)

?


1

INSERT INTO 新表(字段1,字段2,.......) SELECT 字段1,字段2,...... FROM 旧表

时间： 2024-10-26 13:36:54

MySQL删除重复记录的方法的相关文章

MySQL中查询、删除重复记录的方法大全

前言 本文主要给大家介绍了关于MySQL中查询.删除重复记录的方法,分享出来供大家参考学习,下面来看看详细的介绍: 查找所有重复标题的记录: ? 1 select title,count(*) as count from user_table group by title having count>1; ? 1 SELECT * FROM t_info a WHERE ((SELECT COUNT(*) FROM t_info WHERE Title = a.Title) > 1) ORDER

mysql删除重复记录语句的方法

例如: id name value 1 a pp 2 a pp 3 b iii 4 b pp 5 b pp 6 c pp 7 c pp 8 c iii id是主键 要求得到这样的结果 id name value 1 a pp 3 b iii 4 b pp 6 c pp 8 c iii 方法1 delete YourTable where [id] not in ( select max([id]) from YourTable group by (name + value)) 方法2 delet

Mysql删除重复记录，保留id最小的一条

mysql 查询重复字段,及删除重复记录的方法MySQL, 数据库, 数据库, 字段, 服务器数据库中有个大表,需要查找其中的名字有重复的记录id,以便比较.如果仅仅是查找数据库中name不重复的字段,很容易:SELECT min(`id`),`name` FROM `table` GROUP BY `name`; 但是这样并不能得到说有重复字段的id值.(只得到了最小的一个id值)查询哪些字段是重复的也容易:SELECT `name`,count(`name`) as count FROM `

mysql 删除重复记录

mysql删除重复记录的原理是: 将需要比较的列放到group by后,取出主键的最小值,再删除不在这个临时表主键的行 命令行格式如下 delete from users  where id not in ( select id from ( select min(id)  from users group by name,sex )  as tmp); 需要比较的列是name和sex,取出id后再从users表中取出id查看该id是否在临时表中存在,不存在则删除掉.

mysql 删除重复记录语句

mysql 根据条件删除重复记录 只保留最小id的重复数据 DELETEFROM newsWHERE news_id IN ( SELECT a.news_id FROM ( SELECT news_id FROM news WHERE flag = 1 GROUP BY news_id HAVING count(news_id) > 1 ) a )AND posid NOT IN (SELECT b.posid from ( SELECT min(posid) as posid FROM ne

MySQL删除重复记录只保留一条

删除表中重复记录,只保留一条: delete from 表名 where 字段ID in (select * from (select max(字段ID) from 表名 group by 重复的字段 having count(重复的字段) > 1) as b); 实例:2.当想要为某一个表建立一个唯一索引,由于表中有重复记录而无法进行时,需要删除重复记录.例表 dept id_no id_name 100 'AAA' 101 'BBB' 102 'CCC' 103 'DDD' 100 'EEE

查询及删除重复记录的方法

1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断select * from peoplewhere peopleId in (select  peopleId  from  people  group  by  peopleId  having  count(peopleId) > 1) 2.删除表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,只留有rowid最小的记录delete from people where peopleId  in (

MYSQL 删除重复记录,只保留最大ID

table : productprice table column : id ,productAsin ... 同一个productAsin 只保留最近的那条,即只保留ID 最大的. 第一步: 查出有重复的记录和最大的id SELECT productAsin,MAX(id) maxId FROM productprice GROUP BY productAsin HAVING COUNT(id) >= 2)tempt 第二步:查出在重复记录的,并且小于最大的id SELECT productp

MYSQL查询重复记录的方法

select * from hengtu_demandpush a where (a.did,a.mid) in (select did,mid from hengtu_demandpush group by did,mid having count(*) > 1) 或 select * from hengtu_demandpush group by did,mid having count(*)>1 1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 select