SQL中删除重复数据问题
点击关注上方“SQL数据库开发”,
设为“置顶或星标”,第一时间送达干货SQL专栏SQL基础知识第二版
SQL高级知识第二版
需求分析
数据库中存在重复记录,删除保留其中一条(是否重复判断基准为多个字段)
解决方案
碰到这样的问题我们先分解步骤来看
创建测试数据
找到重复的数据
删除重复的数据并且保留一行
创建测试数据
我们创建一个人员信息表并在里面插入一些重复的数据。
CREATE TABLE [dbo].[Person](
[ID] [INT] IDENTITY(1,1) NOT NULL,
[Name] [VARCHAR](20) NULL,
[Age] [INT] NULL,
[Address] [VARCHAR](20) NULL,
[Sex] [CHAR](2) NULL
);
SET IDENTITY_INSERT [dbo].[Person] ON;
INSERT INTO [dbo].[Person] (ID,Name,Age,Address,Sex)
VALUES
( 1, '张三', 18, '北京路18号', '男' ),
( 2, '李四', 19, '北京路29号', '男' ),
( 3, '王五', 19, '南京路11号', '女' ),
( 4, '张三', 18, '北京路18号', '男' ),
( 5, '李四', 19, '北京路29号', '男' ),
( 6, '张三', 18, '北京路18号', '男' ),
( 7, '王五', 19, '南京路11号', '女' ),
( 8, '马六', 18, '南京路19号', '女' );
SET IDENTITY_INSERT [dbo].[Person] OFF;
(提示:可以左右滑动代码)
建立好测试数据如下:
我们发现除了自增长ID不同以为,有几条其他字段都重复的数据出现,符合我们的需求。
找出重复的数据
SELECT MAX(ID) ID ,
Name,Age,Address,Sex
FROM dbo.Person
GROUP BY Name,Age,Address,Sex
HAVING COUNT(1)>1
HAVING将分组后统计出来的数量大于1的数据行,就是我们要找的重复数据:
上面用Max函数或者Min函数均可,只是为了保证取出来的数据的唯一性。
删除重复的数据
其实我们数据库中最后要保留的结果就是第二步中查询出来的数据,我们把其他的数据删除即可。怎么删除呢?我们使用ID来排除。
DELETE FROM Person
WHERE EXISTS
(
SELECT * FROM (
SELECT
MAX(ID) ID,
Name,Age,Address,Sex
FROM dbo.Person
GROUP BY Name,Age,Address,Sex
HAVING COUNT(1)>1) T
WHERE Person.Name=T.Name
AND Person.Age=T.Age
AND Person.Address=T.Address
AND Person.Sex=T.Sex
AND Person.ID<T.ID--如果上面使用MIN函数,这里就要改成>
)
执行完后重新查询Person表结果如下:
马六因为只有一条记录,所以没有参与去重,直接显示。
今天的案例分享结束,小伙伴们可以自己动手尝试一下,兴许工作中也会遇到类似问题。如果你在公众中遇到一些有趣的问题也可以发送给我。
最后给大家分享我写的SQL两件套:《SQL基础知识第二版》和《SQL高级知识第二版》的PDF电子版。里面有各个语法的解释、大量的实例讲解和批注等等,非常通俗易懂,方便大家跟着一起来实操。
有需要的可以下载学习,只需要在下面的公众号「数据前线」(非本号),后台回复关键字:SQL,就行
数据前线
后台回复关键字:1024,获取一份精心整理的技术干货
后台回复关键字:进群,带你进入高手如云的交流群。
推荐阅读
可怕,中国生育率已经低于日本!
分析一波:中国月入过万的,究竟有多少人?
17 张程序员专属壁纸,使用频率很高
一个员工的离职成本有多恐怖!
为什么腾讯/阿里巴巴不去开发被卡脖子的工业软件?
SQL中删除重复数据问题相关推荐
- sql 中删除重复数据的方法
a.删除完全重复数据 create table #t1(SN varchar(30)) insert into #t1 values('a'),('a'),('a'),('b'),('b'),('c' ...
- MSSQL如何在没有主键的表中删除重复数据
MSSQL如何在没有主键的表中删除重复数据 原文:MSSQL如何在没有主键的表中删除重复数据 为了对重复数据进行实验,下面建一个设计不太好(没有主键)表并插入了一些重复数据: create datab ...
- 利用sql语句删除重复数据
记录原因: 昨天遇到一个问题:需要写一个sql语句删除重复数据.当时解决的办法,是先查询出重复的数据id,然后再单独写删除语句进行删除.今天想了想应该还是有其他办法解决的,研究了下可以通过一条语句就能 ...
- 数据库中删除重复数据
数据重复,主要分为两种: 一是完全重复的记录,也即所有字段均重复的记录,二是部分关键字段重复的记录,比如身份证号字段重复,而其他字段不一定重复或都重复可以忽略,毕竟我们只要保证身份证号在表中数据唯一. ...
- MySQL中删除重复数据
2019独角兽企业重金招聘Python工程师标准>>> 参考网页 SQL删除重复数据只保留一条 https://blog.csdn.net/anya/article/details/ ...
- 3.23学习内容,竖立seekbar,sql获取删除重复数据
竖立的seekbar: http://blog.csdn.net/metalseed/article/details/8014758 原理: 继承AbsSeekBar 通过重写方法旋转: protec ...
- Excel中删除重复数据(用VBA代码)
请仔细阅读并修改相关数据.我推荐使用第二种方法,是我修改的,很好用,第三种情况用得比较少. 第一种情况保留不重复的记录行,重复的只保留一行. 1.打开有重复数据的EXCEL 2.Alt+F11 打开 ...
- Sql server 删除重复数据
以下内容抄自 : https://www.cnblogs.com/springsnow/p/10334469.html 非常感谢此博主, 为了防止此链接丢失, 特写此文章进行记录,以便后面使用 目录 ...
- Access中删除重复数据行
1.什么是重复数据行: 1>.两笔记录的每一个字段都相同(表中没有主键): 2>.两笔记录的特定字段均相同,其余字段不同(表中可能有主键,也可能没有主键): 2.如何删除重复数据行: 1& ...
- SQL Server中删除重复数据的2个方法
要求: 用SQL语句实现删除一个表里面的重复数据,但要留下一条相同的数据. 思路: 需要两条,一条是进行重复数据标示,将重复数据中随机的一条标注为1其它的标注为0:然后还有一条语句删除所有的标注为1的 ...
最新文章
- 如何挑选靠谱的Java培训机构
- [转载]TopCoder兼职赚钱入门(Part. 1)
- Git分支命令学习使用
- Træfɪk入门教程
- 30万总奖金·垃圾分类挑战赛进入最后冲刺(附baseline完整分享)
- 喜欢网络文学的人有多少?当代年轻人是这样阅读的
- leetcode python3 简单题121. Best Time to Buy and Sell Stock
- Android4.1MediaPlayer无缝播放
- Thingsboard 3.1.0 - REST API
- 《家财通》普及版序列号
- ubuntu 18.04安装Tenda U12驱动
- R语言数据分析之二-《R语言判断相关性-excel文件xlsx文件》
- 字节云数据库未来方向的探索与实践
- ubuntu命令行模式与图形桌面切换方法
- windows进程详解
- 题源报刊精品阅读-词汇1
- 微信小程序点击图片预览真机无法显示的问题
- 聊下Android的专利许可和商标
- Spring注解驱动开发第26讲——总有人让我给他讲讲@EnableAspectJAutoProxy注解
- 推荐三大文献检索下载网站,超级实用!重点是免费
热门文章
- 新浪微博Emoji表情解析
- 144项ppt制作技术
- iOS开发:Pokemon Go试玩,未越狱的iPhone伪造GPS定位信息
- JavaWeb项目开发流程
- 推美妆、搭IP,出货千万的天猫精灵打上95后的主意
- 【机器视觉】独家盘点:详解国内外34家物联网机器视觉技术企业
- css+div页面布局详解(三)
- 思科、华为、Dell visio图下载
- java面试宝典第五版,《程序员面试宝典(第5版)》和《Java程序员面试宝典(第4版)》的一些看法......
- 单片机编程软件很简单(七),Keil单片机编程软件软件仿真+硬件仿真