MySQL对于有大量重复数据表的处理方法

需要在MySQL的一张innodb引擎的表(tableA)上添加一个唯一索引(idx_col1_u)。但是对于每个key(col1)表中已经有大量重复数据。此时，做数据的手工清理，或者SQL处理是非常耗时的。

MySQL有一个独有的 alter ignore add unique index的语法。

ALTER [ONLINE | OFFLINE] [IGNORE] TABLE tbl_name

行为类似于insert ignore，即遇到冲突的unique数据则直接抛弃而不报错。对于加唯一索引的情况来说就是建一张空表，然后加上唯一索引，将老数据用insert ignore语法插入到新表中，遇到冲突则抛弃数据。点：alter ignore的语法不支持innodb，所以需要把table的引擎改为MyISAM;

解决方案

ALTER TABLE tableA ENGINE MyISAM;   /*注意：修改表结构为MyISAM */
ALTER IGNORE TABLE tableA ADD UNIQUE INDEX idx_col1_u (col1); /*添加唯一索引，消重*/
ALTER TABLE table ENGINE InnoDB;    /*可选，修改表结构为InnoDB */

MySQL对于有大量重复数据表的处理方法相关推荐

MySQL中有外键时数据表的删除方法
直接删除grade,被引用的数据表时如下报错解决方法先删除student,要引用的数据表然后删除grade,被引用的数据表成功
B-Tree/B+-Tree/二叉树/红黑树/Hash表/MySQL底层到底用哪个数据表建立索引做快速查找？
B-Tree/B+-Tree/二叉树/红黑树/Hash表/MySQL底层到底用哪个数据表建立索引做快速查找? ~~B-Tree~~ ==B+Tree== ~~二叉树(Binary Search Tre ...
mysql重命名数据表称方式_在MySQL中,使用()重命名数据表。_学小易找答案
[单选题]( )的上海文坛被称为"张爱玲年". [多选题]下列哪些是属于共集放大电路的特点?() [阅读理解]Passage Two Thailand is to ban smok ...
MySQL学习笔记_4_MySQL创建数据表（下）
MySQL创建数据表(下) 五.数据表类型及存储位置 1.MySQL与大多数数据库不同,MySQL有一个存储引擎概念.MySQL可以针对不同的存储需求选择不同的存储引擎. 2. showengines ...
MySQL（11）--- 删除数据表
MySQL 删除数据表 MySQL中删除数据表是非常容易操作的, 但是你再进行删除表操作时要非常小心,因为执行删除命令后所有数据都会消失. 语法以下为删除MySQL数据表的通用语法: DROP TA ...
MySQL创建数据库、创建数据表
MySQL创建数据库.创建数据表创建 MySQL 数据库时指定字符集和校对规则 mysql> CREATE DATABASE IF NOT EXISTS test_db_char DEFAUL ...
mysql truncate操作可能导致数据表不存在
mysql truncate操作可能导致数据表不存在最近出现show table 可以查到表,但是select 提示表不存在问题,分析发现所有出问题的数据表都执行过truncate操作,查资料发现 ...
（二）QT5.14.2连接MySQL并使用QtableView显示数据表内容
系列文章目录第一章:(一)QT5.14.2+MSVC2017(32位/64位)+MySQL连接第二章:(二)QT5.14.2连接MySQL并使用QtableView显示数据表内容文章目录系列文 ...
MYSQL数据库（十）- 数据表的插入（insert）、删(delete)、改(update)、查（select）、group by 分组、having语句设置分组条件，order by查询结果排序，
目录结构本章目录一.插入insert: 方法一:insert标准插入数据写法方法二:set插入数据写法方法三:请看本章最后一个案例二.插入update: 方法一:单表更新记录方法二:多表更 ...

MySQL对于有大量重复数据表的处理方法

MySQL对于有大量重复数据表的处理方法相关推荐

最新文章

热门文章