原标题:活见鬼,明明删除了数据,空间却没减少!

作者 |莱乌

来源 |IT界农民工

迁移数据常用

1、导出文件 -mysqldump 命令

‍mysqldump‍是 Mysql 自带的逻辑备份工具。其备份原理是通过协议连接到 Mysql 数据库,将需要备份的数据查询出来转换成对应的insert语句。当需要还原这些数据时,只要执行这些 insert 语句,即可将对应的数据还原。

常用命令:

导出所有数据库

mysqldump -uroot -p123456 --all-databases >/tmp/all.sql

导出指定数据库

mysqldump -uroot -p123456 --databases db >/tmp/db.sql

导出指定表

mysqldump -uroot -p123456 --databases db --tables a >/tmp/a.sql

根据条件导出数据

mysqldump -uroot -p123456 --databases db --tables a --where='id=1' >/tmp/a.sql

只导出表结构

mysqldump -uroot -p123456 --no-data --databases db >/tmp/db.sql

2、导入文件 - source 命令

source命令可以将导出的 sql 文件导入进指定数据库。

操作步骤:

use 数据库;

soucre 已导出的 sql 文件。

迁移思路

1. 数据库A历史数据迁移到 hdfs(一种分布式文件系统)上进行归档;

2. 删除数据库A已归档的表,使用 drop 命令;

3. 数据库A上新建表,用于数据库B迁移;

4. 数据库B中除未完成单外都迁移至数据库A;

5. 脚本进行删除数据库B上已迁移数据。

阿丁开讲

1、参数介绍

在 Innodb 存储引擎中,innodb_file_per_table 参数是用来控制表数据的存储方式的。

当参数为 OFF 的时候, 所有数据都存放于默认路径下名为 ibdata* 的共享表空间里,即将数据库所有的表数据及索引文件存放到一个文件中。在删除数据表的时候, ibdata*文件不会自动收缩。

当参数为 ON 的时候,每一个表都将存储在一个以 .ibd 为后缀的文件中。这样每个表都有了自己独立的表空间,通过 drop table 命令就可以将表空间进行回收。

从 Mysql 5.6.6 版本开始,innodb_file_per_table 默认为 ON 状态。

2、参数设置

通过 show variables like '%per_table%' 命令,可以查看 innodb_file_per_table 参数的当前状态:

如果想修改参数的状态,可通过 SET GLOBAL 动态地修改为 ON 或 OFF,也可以在 my.cnf 中做永久性修改。需要注意的是,在 my.cnf 中修改后生效的话需要重启 mysqld 服务。

疑问:如果之前参数为 OFF 状态,设置为 ON 状态后,表空间如何分配?

答案是仅对后续操作生效。

什么意思呢?修改前的数据还维持原状,也就是说之前的数据继续存放于 ibdata* 文件中,修改后的使用独立表空间。

所以建议在开始就将该参数设置为 ON 状态。

第二天

阿丁二次开讲

在这之前要先介绍下 Innodb 存储数据所用的 B+ 树结构,画个图你理解下:

在图中,P 代表一页数据,R 代表一行数据。

假设我们要删掉 R2 这条记录,InnoDB 引擎只会将其标记为删除状态,并不会真正把这行数据所占的空间释放掉,也就是说这个坑位还留着。如果后续所插入的数据在 R1 与 R3 之间的话,这个空间是可以被使用上的。

假设我们恰好删除了 R1、R2、R3 这三条记录,也就是说 P1 这一页的数据都被删掉了,那么 P1 所在的空间都会被标记为可复用。如果插入的数据需要使用新页的话,P1 的坑位就可以被利用起来了。

那么你可能会问了,我插入的数据恰好巧妙地避开了这些位置呢。那我还能说啥,骚呗。这样会造成很多空间被浪费,如果删除大量的数据的话,被浪费的空间也会是巨大的。

optimize table 的本质是 ALTER TABLE xxx ENGINE = InnoDB;

在5.5版本之前,重建表的过程是这样的:

然后用临时文件替换旧表,这样便实现了表的重建。

注意

1、控制迁移速度,防止主从延迟导致线上故障;

2、创建大表时,使用下面的建表语句可节省 50% 左右的空间:

ROW_FORMAT=COMPRESSED KEY_BLOCK_SIZE=8

3、使用 optimize table 压缩表时,需要留够一定的空间。

责任编辑:

mysql 删除数据 降低_活见鬼,明明删除了数据,空间却没减少!相关推荐

  1. diskgenius 数据迁移_活见鬼,明明删除了数据,空间却没减少! - *IT界农民工*

    迁移数据常用 1.导出文件 - mysqldump 命令  ‍mysqldump 是 Mysql 自带的逻辑备份工具.其备份原理是通过协议连接到 Mysql 数据库,将需要备份的数据查询出来转换成对应 ...

  2. mysql删除十天前数据脚本_前几天手工删除测试数据库并重建的脚本

    原来的dwtest测试库坏掉了,因为是测试库,也懒得去研究如何修复了,征求了几个DBA的意见,干脆重建好了. 首先删除原来的数据库: 删除原来的数据文件.控制文件.密码文件.日志文件等等,目录都保留 ...

  3. mysql逻辑删除的问题_数据库表涉及-逻辑删除

    对于只进行逻辑删除的表,如 CREATE TABLE `pics` ( `pid` bigint(20) unsigned NOT NULL AUTO_INCREMENT, `aid` bigint( ...

  4. wps不小心删除怎么恢复_【】wps表格里的数据误删并点保存了,怎么恢复?

    EXCEL里怎么恢复误删的内容? 在备份文件中找 默认保存位置:C:Documentsand settings/Administrator/Applicationdata /Microsoft/Exc ...

  5. 数据 术语_这5个必须知道的数据科学家进入零售领域的术语

    数据 术语 A brief review of the domain knowledge I gained from working on a Real-Life Retail Project 简要回 ...

  6. datax 持续数据同步_采用DataX实现多表增量数据同步

    这两天验证了一下阿里的DataX数据同步工具,觉得DataX可以用来做管理数据的多级数据同步.DataX用来做批量数据迁移很适合,能够保证数据的一致性,性能也很好,结合时间戳字段,用来实现数据定时增量 ...

  7. 对数据仓库进行数据建模_确定是否可以对您的数据进行建模

    对数据仓库进行数据建模 Some data sets are just not meant to have the geospatial representation that can be clus ...

  8. python自动化数据报告_如何:使用Python将实时数据自动化到您的网站

    python自动化数据报告 This tutorial will be helpful for people who have a website that hosts live data on a ...

  9. influxdb数据过期_为什么腾讯QQ的大数据平台选择了InfluxDB数据库?

    导读:本文带你了解一个开源的.高性能的时序型数据库--InfluxDB. 作者:韩健 来源:华章科技 00 为什么QQ要选择InfluxDB? 从2016年起,笔者在腾讯公司负责QQ后台的海量服务分布 ...

最新文章

  1. PHP Session中保存Object
  2. 解题报告(一)E、(BZOJ4589)Hard Nim(博弈论 + FWT)
  3. 进入Android Dalvik虚拟机之Dalvik指令集
  4. PostgreSQL可视化客户端工具
  5. java url编码解码
  6. Jmeter 新手教程
  7. mysql检查存在_如何检查MySQL中是否存在行?(即检查MySQL中是否存在电子邮件)...
  8. python 查找文件夹下的文件名_python查找模式后面的文件夹中的所有文件名
  9. MyEclipse常用设置方法
  10. VMware基础架构和运营管理
  11. SSH服务配置公钥及双重验证
  12. 东南电子IPO过会:应收账款8023万 美的与格力未付款
  13. 为什么要ROS2而不是对ROS1修修补补?
  14. sklearn.neighbors
  15. 2019年最实用的导航栏设计实践和案例分析全解
  16. 数据挖掘——数据挖掘的起源
  17. java中jam_Jam的计数法 (Java代码)
  18. springboot+vue+element+七牛云+实现图片上传功能
  19. Linux进程调度切换和虚拟空间管理深入分析
  20. Keras调用model.load_weights时报错

热门文章

  1. 自定义EL函数、自定义JSTL标签
  2. Java刷题知识点之方法覆盖(方法重写)和方法重载的区别
  3. Linux+Apache2.4+PHP5.6+MySQL5.6源码安装步骤
  4. 分析Linux磁盘管理与文件系统专题三
  5. VS环境下的makefile编译
  6. win系统下mysql忘记root账户密码的解决办法
  7. 我所有的博客都在这里了,拿出来晒晒~~
  8. 马化腾内部讲座:让产品自己召唤人
  9. 《星际争霸 / StarCraft 》超经典游戏!
  10. easyui中combobox 验证输入的值必须为选项框中的数据