mysql删除重复记录并且只保留一条
准备的测试表结构及数据
插入的数据中A,B,E存在重复数据,C没有重复记录
CREATE TABLE `tab` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`name` varchar(20) DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=13 DEFAULT CHARSET=utf8;
-- ----------------------------
-- Records of tab
-- ----------------------------
INSERT INTO `tab` VALUES ('1', 'A');
INSERT INTO `tab` VALUES ('2', 'A');
INSERT INTO `tab` VALUES ('3', 'A');
INSERT INTO `tab` VALUES ('4', 'B');
INSERT INTO `tab` VALUES ('5', 'B');
INSERT INTO `tab` VALUES ('6', 'C');
INSERT INTO `tab` VALUES ('7', 'B');
INSERT INTO `tab` VALUES ('8', 'B');
INSERT INTO `tab` VALUES ('9', 'B');
INSERT INTO `tab` VALUES ('10', 'E');
INSERT INTO `tab` VALUES ('11', 'E');
INSERT INTO `tab` VALUES ('12', 'E');
使用HAVING关键字筛选出表中重复数据
SELECT `name`,COUNT(1) FROM TAB GROUP BY `name` HAVING COUNT(1) >1
可以通过分组语句从每种重复数据中都拿出一条标识
SELECT `name`,id FROM TAB GROUP BY `name` HAVING COUNT(1) >1
删除重复记录并且只保留一条 [留意SQL注释]
DELETE from tab where
-- 删除所有的重复时间 Begin --
`name` in (
SELECT * from (SELECT `name`FROM TAB GROUP BY `name` HAVING COUNT(1) >1) tmp2
)
-- 删除所有的重复时间 END --
-- 但一些特定ID的记录不进行删除 Begin --
AND
id NOT in(
select id from (
SELECT `name`,id FROM TAB GROUP BY `name` HAVING COUNT(1) >1
) tmp1
)
-- 但一些特定ID的记录不进行删除 END --
执行后最终结果
方法二
MySql如何删除所有多余的重复数据
方法一查询出的所有多余的重复记录:
方法二查询出的所有多余的重复记录(与方法一的结果相同):
方法三查询出的所有多余的重复记录:这里方法三因为用了MAX()方法(也可改用MIN()),查询结果记录的id不太一样,但也可以被视为重复多余的数据,关键是你希望选择保留哪一条记录而已。
MySql如何删除所有多余的重复数据
- 需要处理的数据,如:
- 出现重复的数据,如:
- 先用SELECT查询看看结果:
-- 方法一 SELECT * FROM t_user WHERE user_name IN (SELECT user_name FROM t_user GROUP BY user_name HAVING COUNT(1)>1 ) AND id NOT IN (SELECT MIN(id) FROM t_user GROUP BY user_name HAVING COUNT(1)>1 )
- 方法一查询出的所有多余的重复记录:
-- 方法二 SELECT * FROM t_user WHERE id NOT IN (SELECT MIN(id) FROM t_user GROUP BY user_name )
- 方法二查询出的所有多余的重复记录(与方法一的结果相同):
-- 方法三 SELECT * FROM t_user AS t1 WHERE t1.id <> (SELECT MAX(t2.id) FROM t_user AS t2 WHERE t1.user_name=t2.user_name )
- 方法三查询出的所有多余的重复记录:
这里方法三因为用了MAX()方法(也可改用MIN()),查询结果记录的id不太一样,但也可以被视为重复多余的数据,关键是你希望选择保留哪一条记录而已。
- 下面是对上面的SELECT语句稍作修改并加入了DELETE
-- 方法一(笨方法但容易理解) DELETE FROM t_user WHERE user_name IN (SELECT t1.user_name FROM (-- 查询出所有重复的user_nameSELECT user_name FROM t_user GROUP BY user_name HAVING COUNT(1)>1) t1 ) AND id NOT IN (SELECT t2.min_id FROM (-- 查询出所有重复的记录并各自只取其中一条(MIN(id)或MAX(id)都可以)SELECT MIN(id) AS min_id FROM t_user GROUP BY user_name HAVING COUNT(1)>1) t2 )
-- 方法二(推荐方法也容易理解) DELETE FROM t_user WHERE id NOT IN (SELECT t.min_id FROM (-- 过滤出重复多余的数据,比如,如果所有记录中存在1条记录是user_name=zhangsan的,那么就取出它;-- 如果所有记录中存在多条记录是user_name=lisi的,那么只取其中1条,其他的不查询出来SELECT MIN(id) AS min_id FROM t_user GROUP BY user_name) t )
-- 方法三(推荐方法但不太容易理解) DELETE FROM t_user WHERE id IN (SELECT t.id FROM (-- 1. 关于所有存在相同user_name的记录,只查询出(保留)重复记录中的1条,假设这样查询出来的集合为A集合。-- 2. 在所有记录中,只要id不在A集合中的,都把它们查询出来SELECT t1.id FROM t_user AS t1 WHERE t1.id <> (SELECT MAX(t2.id) FROM t_user AS t2 WHERE t1.user_name=t2.user_name)) t ) -- 或 DELETE FROM t_user t1 WHERE t1.id <> (SELECT t2.max_id FROM (SELECT MAX(t3.id) AS max_id FROM t_user t3 WHERE t1.user_name=t3.user_name) t2 )
- 最后删除成功之后,显示数据已经没有重复的了
参考:
如何实现 MySQL 中通过SQL语句删除重复记录并且只保留一条记录_51CTO博客_删除重复记录的sql
mysql删除重复记录并且只保留一条相关推荐
- 面试:如何实现 MySQL 删除重复记录并且只保留一条
点击上方蓝色"程序猿DD",选择"设为星标" 回复"资源"获取独家整理的学习资料! 来源 | blog.csdn.net/n950814ab ...
- 如何实现 MySQL 删除重复记录并且只保留一条
作者:千g blog.csdn.net/n950814abc/article/details/82284838 最近在做题库系统,由于在题库中添加了重复的试题,所以需要查询出重复的试题,并且删除掉重复 ...
- SQL Server 删除重复记录,只保留一条记录
原文地址:http://blog.csdn.net/eriato/article/details/17417303 有张表格之前没有设计关键字段的唯一约束,导致有时候执行插入操作时不小心执行了多次就出 ...
- 最简单的删除重复记录(只保留一条)的SQL方法
首先,新建一张表用于示例说明: # 新建一张表A create table A( id varchar(5), name varchar(5), salary float);# 插入数据(包含要去除的 ...
- 通过SQL 语句删除重复记录并且只保留一条记录
这里写自定义目录标题 1 重复字段 2 查询全部重复的数据 3 删除全部重复试题 4 查询表中多余重复试题(根据 depno 来判断,除了 rowid 最小的一个) 4.1 第一种方法 4.2 第二种 ...
- SQL语句删除重复记录且只保留一条有效记录
1.查找表中多余的重复记录,重复记录是根据单个字段(name)来判断 select * from lib where name in (select name from lib group by na ...
- mysql 删除重复记录,只保留id字段值最大的记录
delete from tb_table where id not in (select maxid from (select max(id) as maxid from tb_table group ...
- mysql删除重复数据只保留一条_mysql查找删除重复数据并只保留一条实例详解
有这样一张表,表数据及结果如下: school_id school_name total_student test_takers 1239 Abraham Lincoln High School 55 ...
- php去除重复的数据保留一条,mysql查找删除重复数据并只保留一条实例详解
有这样一张表,表数据及结果如下: school_id school_name total_student test_takers 1239 Abraham Lincoln High School 55 ...
最新文章
- 原子层沉积(ALD)和化学气相沉积(CVD)微电子制造铜金属化的研究进展
- app前后台交互php_PHP丨前端网页是怎么跟后台进行数据交互的(实战)
- nohup-真正的Shell后台运行
- C# 派生类的XmlSerializer序列化XML
- Static Final用法
- C++多态案例二-制作饮品
- 10如何成为卓越领导者摘录——卓越的领导者
- 手机如何连接远程桌面?
- Cisco CCNA考试题库大全
- 应用程序无法正常启动 0xc0150002
- 经纬度坐标转换成px_(转)经纬度坐标转换为屏幕坐标
- 企业微信机器人读取服务器,用企业微信机器人搞事情
- vmware虚拟机连接服务器超时,vmware连接远程服务器超时
- pandas 透视表bug InvalidIndexError: Reindexing only valid with uniquely valued Index objects
- 如果你爱或者恨一个人[转]
- python --eel开发桌面程序
- 今日头条信息流 - 人群包dmp
- 转载 :make报错:/usr/bin/ld: cannot find -lXXX
- 【Fracturing amp; Destruction】Unity3D的物体爆裂、炸裂、碎裂效果
- 网站必备之简繁切换功能实现 1
热门文章
- 微信weui框架页面html,微信小程序设计weui框架
- Android音乐播放器(五)音乐的搜索实现
- python之禅是什么东西_Python之禅 Python之禅的意思解释|Python之禅是什么意思 -我酷百科...
- html文件中img的路径
- 服务器系统装音频设备,windows2008 64位操作系统安装音频图文教程
- 互联网晚报 | 06月16日 星期四 | ​优酷会员涨价;微信朋友圈广告可直达天猫店;爱奇艺否认百度出售其股份...
- 最近读的书和一点感悟
- 零碎Java面试题收集
- 10月1日 情满月圆,举国同庆
- java循环有哪四要素_java-循环