我们可能会出现这种情况,某个表原来设计不周全,导致表里面的数据数据重复,那么,如何对重复的数据进行删除呢?

重复的数据可能有这样两种情况,第一种时表中只有某些字段一样,第二种是两行记录完全一样。
一、对于部分字段重复数据的删除
先来谈谈如何查询重复的数据吧。
下面语句可以查询出那些数据是重复的:
select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1
将上面的>号改为=号就可以查询出没有重复的数据了。
想要删除这些重复的数据,可以使用下面语句进行删除
delete from 表名 a where 字段1,字段2 in
(select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)
上面的语句非常简单,就是将查询到的数据删除掉。不过这种删除执行的效率非常低,对于大数据量来说,可能会将数据库吊死。所以我建议先将查询到的重复的数据插入到一个临时表中,然后对进行删除,这样,执行删除的时候就不用再进行一次查询了。如下:
CREATE TABLE 临时表 AS
(select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)
上面这句话就是建立了临时表,并将查询到的数据插入其中。
下面就可以进行这样的删除操作了:
delete from 表名 a where 字段1,字段2 in (select 字段1,字段2 from 临时表);
这种先建临时表再进行删除的操作要比直接用一条语句进行删除要高效得多。
这个时候,大家可能会跳出来说,什么?你叫我们执行这种语句,那不是把所有重复的全都删除吗?而我们想保留重复数据中最新的一条记录啊!大家不要急,下面我就讲一下如何进行这种操作。
在oracle中,有个隐藏了自动rowid,里面给每条记录一个唯一的rowid,我们如果想保留最新的一条记录,
我们就可以利用这个字段,保留重复数据中rowid最大的一条记录就可以了。
下面是查询重复数据的一个例子:
select a.rowid,a.* from 表名 a
where a.rowid !=
(
select max(b.rowid) from 表名 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2
)
下面我就来讲解一下,上面括号中的语句是查询出重复数据中rowid最大的一条记录。
而外面就是查询出除了rowid最大之外的其他重复的数据了。
由此,我们要删除重复数据,只保留最新的一条数据,就可以这样写了:
delete from 表名 a
where a.rowid !=
(
select max(b.rowid) from 表名 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2
)
随便说一下,上面语句的执行效率是很低的,可以考虑建立临时表,讲需要判断重复的字段、rowid插入临时表中,然后删除的时候在进行比较。
create table 临时表 as
  select a.字段1,a.字段2,MAX(a.ROWID) dataid from 正式表 a GROUP BY a.字段1,a.字段2;
  delete from 表名 a
  where a.rowid !=
  (
  select b.dataid from 临时表 b
  where a.字段1 = b.字段1 and
  a.字段2 = b.字段2
  );
  commit;
二、对于完全重复记录的删除
对于表中两行记录完全一样的情况,可以用下面语句获取到去掉重复数据后的记录:
select distinct * from 表名
可以将查询的记录放到临时表中,然后再将原来的表记录删除,最后将临时表的数据导回原来的表中。如下:
CREATE TABLE 临时表 AS (select distinct * from 表名);
  drop table 正式表;
  insert into 正式表 (select * from 临时表);
  drop table 临时表;

转载于:https://blog.51cto.com/yesican/250621

Oracle中如何删除重复数据相关推荐

  1. oracle删除表中数据_Excel工作表中,删除重复数据的2种方法解读,高效且实用!...

    在实际的工作中,经常要对工作表中重复的数据进行删除,如若数据行只有几条,则可通过人工查找出来,如若数据行较多,这种方法就费时费力,而且容易出错,造成对表格数据的准确性和个人能力的怀疑--今天,小编给大 ...

  2. 数据库中关于删除重复数据的方法的详解

    相信大家在实际开发中在数据库方面都遇到过很多重复数据的问题,今天就和大家谈谈关于删除重复数据的方法,为了更加直观的和更容易的掌握方法我就从建表开始到插入重复数据到删除重复数据的核心sql语句给大家演示 ...

  3. 如何在Excel表中快速删除重复数据

    目录 1.例如:删除英文歌重复部分 2.按键盘快捷键Ctrl+Shift+向下方向键 选中歌词部分 3.依次点击[数据][删除重复项][以当前选定区域排序][删除重复项] 4.点击[全选][确定] 1 ...

  4. speedoffice表格中怎么删除重复数据只保留一个

    工作中,在录入数据时,会出现录入重复的情况,如何找出重复的数据尤为重要.今天一起来学习一下excel怎么删除重复项只保留一个吧 1.首先选中数据区域,单击"数据"选项卡下方&quo ...

  5. 达梦数据库中如何删除重复数据

    我们在数据库运维环境中有时会出现需删除表中重复数据的情况,比如说,导入时重复导入了,这时候我们怎么办?如何删除重复的数据,保证数据的正确性和完整性? 测试环境: 操作系统:中标麒麟6.0 数据库系统: ...

  6. mysql中如何去除重复数据_MySQL中如何删除重复数据只保留一条

    在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢 1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断SELECT *FROM peopleWHERE p ...

  7. stream去重_使用Java Stream API中DistinctBy删除重复数据

    Stream API提供distinct()方法,该方法基于数据Object类的equals()方法返回列表的不同元素.下面先做一个数据Object类,用来发现重复数据: public class L ...

  8. oracle去重保留一条_mysql、oracle 去重(数据库删除重复数据保留一条)

    现在在数据库中有2对重复数据,2条正常数据,我想要把重复数据都删掉 讲一下思路 根据重复字段分组,并增加约束条件,查询出所有的,重复数据的最小id,和重复的属性 SELECT uname,MIN(ui ...

  9. oracle表删除重复数据,oracle单表删除重复数据

    1.建立一个mytesttable表 CREATE TABLE mytesttable( idno NUMBER(2), val NUMBER(2) ); 2.插入测试数据 INSERT INTO m ...

最新文章

  1. i386平台和x86-64平台机器代码的区别
  2. [一文一命令]tail命令详解
  3. 5.3.1计算机网络传输层之TCP可靠传输
  4. 第四章:手机平板要兼顾-探究碎片
  5. Python模块——_winreg操作注册表
  6. 【转】数据库水平扩展与垂直扩展
  7. UVa 12169 - Disgruntled Judge(拓展欧几里德)
  8. 资深程序员的书单 - 转载自@Axb
  9. ubuntu vscode通过cmake配置c++和VS2019一样 进行调试
  10. ZYNQ7020 FPGA如何从Flash启动的详细步骤
  11. 图像型PDF如何免费转换成可编辑的文字
  12. 简短的爬虫程序,14行Python代码轻松实现爬取网站视频
  13. python调用excel宏函数,封装
  14. 如何根据观看距离来确定合适的投影幕布尺寸?
  15. java斜体_设置标签字体用粗体和斜体
  16. 【LTE】Qualcomm LTE Packets log 分析(一)LTE Access Stratum Log Analysis 1_PSS 2_RACH
  17. vue 实现静默打印、打印预览
  18. 每日新闻:贾跃亭翻脸 欲清理恒大出局;Win10坑太多 微软紧急叫停;工信部5G发牌推迟半年;联通与腾讯深度合作...
  19. Laravel第三方登录开发之实现微博登录
  20. 【2020算法练习一】笔试选择题 快手2020校园招聘秋招笔试--算法A试卷

热门文章

  1. nasa注册_今天是黑洞星期五!
  2. js 根据掩码位计算可用ip地址_变长子网掩码:轻松分配IP地址(下)
  3. java 找不到构造函数_JAVA找不到符号构造函数
  4. 2021巨量引擎母婴行业白皮书
  5. 互联网被滥用的沟通“话术”
  6. 自定义依赖注解无效_关于Apt注解实践与总结【包含20篇博客】
  7. 手把手教安装java开发环境_手把手教你配置java开发环境-java环境变量设置
  8. 【Python】Smtplib正确模拟发送QQ邮件
  9. 【Python】nltk库使用报错之punkt安装
  10. 【Java】扑克牌の顺子Judge