Oracle去重复,作用于多列

 1 用distinct关键字只能过滤查询字段中所有记录相同的(记录集相同),而如果要指定一个字段却没有效果,另外distinct关键字会排序,效率很低 。
 2 select distinct name from t1 能消除重复记录,但只能取一个字段,现在要同时取id,name这2个字段的值。
 3 select distinct id,name from t1 可以取多个字段,但只能消除这2个字段值全部相同的记录
 4 所以用distinct达不到想要的效果,用group by 可以解决这个问题。
 5 例如要显示的字段为A、B、C三个,而A字段的内容不能重复可以用下面的语句:
 6 select A, min(B),min(C),count(*) from [table] where [条件] group by A
 7 having [条件] order by A desc
 8 为了显示标题头好看点可以把select A, min(B),min(C),count(*) 换称select A as A, min(B) as B,min(C) as C,count(*) as 重复次数
 9 显示出来的字段和排序字段都要包括在group by 中
10 但显示出来的字段包有min,max,count,avg,sum等聚合函数时可以不在group by 中
11 如上句的min(B),min(C),count(*)
12 一般条件写在where 后面
13 有聚合函数的条件写在having 后面
14 如果在上句中having加 count(*)>1 就可以查出记录A的重复次数大于1的记录
15 如果在上句中having加 count(*)>2 就可以查出记录A的重复次数大于2的记录
16 如果在上句中having加 count(*)>=1 就可以查出所有的记录,但重复的只显示一条,并且后面有显示重复的次数----这就是所需要的结果,而且语句可以通过hibernate
17 下面语句可以查询出那些数据是重复的:
18 select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1
19 将上面的>号改为=号就可以查询出没有重复的数据了。
20 例如
21 复制代码代码如下:
22
23 select count(*) from (select gcmc,gkrq,count(*) from gczbxx_zhao t group by gcmc,gkrq having
24 count(*)>=1 order by GKRQ)
25 select * from gczbxx_zhao where viewid in ( select max(viewid) from gczbxx_zhao group by
26 gcmc ) order by gkrq desc ---还是这个可行
27 。
28 有一面试题说:distinct去重复的效率很底下,我在网上看到这遍文章的方法好像说是用 group by having 效率很高了?
29 我在了一个测试,有一商品表,26万条记录,只有商品编号建了索引,对品牌名称字段做 distinct
30 复制代码代码如下:
31
32 select brand,count(*) from tab_commbaseinfo group by brand having count(*) =1
33
34 平均时间是:0.453
35 复制代码代码如下:
36
37 select distinct brand from tab_commbaseinfo 

原文地址:https://www.cnblogs.com/yongguang1990/p/10184088.html

时间: 2024-11-12 21:25:23

Oracle去重复,作用于多列的相关文章

Oracle单表去重复(一)

去重有两层含义,一:是记录完全一样:二:是符合一定条件的认为是重复. 根据表的数量,去重可划分为:单表去重和多表关联去重. 对于去重,一般最容易想到的是用distinct,而distinct只能对记录完全重复的记录保留一条. distinct使用的是二重循环的方式来去重的,如果数据量非常大的时候,会导致性能急剧下降. 例如:select distinct 字段名 from 原表; 此应用案例,主要有删除表中的完全重复的记录: insert into 临时表 select distinct 字段名

Oracle单表去重复(二)

Oracle单表去重 去重有两层含义,一:是记录完全一样.二:是符合一定条件的认为是重复. 根据表的数量,去重可划分为:单表去重和多表关联去重. 对于去重,一般最容易想到的是用distinct,而distinct只能对记录完全重复的记录保留一条. distinct使用的是二重循环的方式来去重的,如果数据量非常大的时候,会导致性能急剧下降. 我们前一篇文章已经给出了详解,你可以去查看 Oracle单表去重复(一) 下面是一个单表去重的测试,认为name字段相同的即为重复记录,要查询出一个结果,过滤

awk与sort去重复取最值

文件a内容: 1     341     231     122     542     213     543     323     214     654     125     2345     655     12 想从文件a中得到第一列重复值中对应第二列的最大值和最小值.即: 最大值 1     342     543     544     655     234 最小值 1     122     213     214     125     12 一句程序的写法: 1.得到最

使用Excel2007去重复功能时要注意的一个问题

作者:iamlaosong Excel2007有个去重复功能(菜单:数据----删除重复项),很有用,过去需要用VBA编程实现的功能,现在点击一下图标就行了.去重复一般是指定某列或者某几列,根据这指定的列将重复的删除. 需要注意的是,这个指定的列中的值虽然相同(重复),但未指定的列却不一定相同.删除重复是保留重复项的第一行,删除后续行,因此,最后的结果就和原始数据的排列有关系,不同的排列,虽然指定列留下来的内容是一样的,但非指定列保留下来的内容却有所不同.

Oracle删除重复行

Oracle删除重复行 分类: ORACLE2010-12-12 17:10 423人阅读 评论(0) 收藏 举报 oracletabledeleteintegerinsert.net 查询及删除重复记录的SQL语句1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断select * from peoplewhere peopleId in (select   peopleId from   people group by   peopleId having count(

【知识库】-数据库_MySQL之高级数据查询:去重复、组合查询、连接查询、虚拟表

简书作者:seay 文章出处: 关系数据库SQL之高级数据查询:去重复.组合查询.连接查询.虚拟表 回顾:[知识库]-数据库_MySQL之基本数据查询:子查询.分组查询.模糊查询 Learn [已经过测试校验] 一.去重复(DISTINCT) 二.组合查询 三.UNION(并集) 四.连接查询 五.虚拟表 一.去重复(DISTINCT) DISTINCT:用于返回唯一不同的值,主要是用于某一字段 语法 SELECT DISTINCT <列名>|* FROM <表名> 示例 -- 查

初探oracle删除重复记录,只保留rowid最小的记录

如题,初探oracle删除重复记录,只保留rowid最小的记录(rowid可以反映数据插入到数据库中的顺序) 一.删除重复记录可以使用多种方法,如下只是介绍了两种方法(exist和in两种). 1.首先创建一个测试表. create table my_users( id number, username varchar2(20), sal number ) 2.插入测试数据 begin for i in 1..10 loop insert into my_users values(i,'carl

C# List&lt;T&gt;中Select List Distinct()去重复

List<ModelJD> data = myDalJD.GetAllDataList(); List<string> list= new List<string>(); list= datalist4.Select(p => p.name).ToList(); //只取name字段,重新生成新的List集合 this.cmbJdUserName.DataSource = list.Distinct().ToList(); //去重复,绑定数据后面要加ToList

利用Linq对集合元素合并、去重复处理

今晚看了一篇前辈写的linq对集合元素合并去重复处理,觉得有点麻烦,原文地址如下:http://www.cnblogs.com/yjmyzz/archive/2012/12/18/2823170.html#undefined. 于是我自己琢磨利用linq的分组函数,重新写了一个方法,代码如下: using System;using System.Collections.Generic;using System.Linq;using System.Text; namespace ConsoleAp