mysql导入大量数据时jbd2 io过高效率低下问题

source一个sql大文件到本地mysql时，发现效率奇低，一秒几十个事物左右。

iotop发现jbd2这个进程占了99%的io。

通过以下方式临时解决问题：

mysql>set global sync_binlog=0 ;
mysql>set global innodb_flush_log_at_trx_commit=2 ;

要彻底处理这个问题的话可写入配置文件。此处sybc_binlog=0只是为了快速写入数据，真正写入配置文件的话可以改成稍大的值，比如100.

mysql导入大量数据时jbd2 io过高效率低下问题相关推荐

datax 导入数据中文乱码_四种方法处理MYSQL导入中文数据时的乱码问题 | 很文博客...
我是用的最后一种方法,前面三种解决MYSQL导入数据乱码的方法没试过,很文博客推荐大家直接使用第四种方法处理MYSQL导入中文数据时的乱码问题. 首先在新建数据库时一定要注意生成原数据库相同的编码形式 ...
php导入excel先检查,php 如何在导入Excel数据时检查Mysql数据库内容是否存在，避免重复录入？：怎么样筛选excel表格重复的数据库...
php 如何在导入Excel数据时检查Mysql数据库内容是否存在,避免重复录入? 如果不想每询一次以提前做一个统询 $sql=mysql_query("select distinct Co ...
mysql转储导入错误_数据库MYSQL导入SQL文件时错误的解决方法（2种）
从服务器数据库用navicate导出的.sql文件后再用navicate导入到本地的数据库中会出现若干条记录的错误: [Err] 1064 – You have an error in your SQ ...
MySQL导入csv数据
MySQL导入csv数据前言一.导入步骤 1.MySQL workbench 操作语句 2.用CMD命令窗口导入数据 3.用cmd时犯的一个错误总结前言下载了一个数据组,数据格式是CSV,再 ...
SqlServer的SSIS导入导出数据时找不到连接错误处理
SqlServer的SSIS导入导出数据时找不到连接错误处理报错: 找不到连接"SourceConnectionOLEDB".如果找不到特定的连接元素,Connections集合 ...
mybatis向mysql数据库插入数据时，中文乱码显示为？解决方法
mybatis向mysql数据库插入数据时,中文乱码显示为?解决方法 1.先查看库.表.表字符字段的编码格式.MySQL默认的库和表的字符编码都是latin1,而我们一般需要使用 utf8 //先查看 ...
Mysql导入导出数据总结
写在前面的话: 1,Mysql数据库在进行导入导出时最好先断开一切访问数据库的连接,否则会发生难以预料的错误,例如:我在导入数据库的时候,一直无法导入,报错无法读取db.sql,或者出现输入指令后加了 ...
mysql导入es_mysql数据导入es
1,py-mysql-elasticsearch-sync<github 工具> 简介: python版本的mysql导入es的插件通过配置config.yaml文件,该插件可以将mys ...
MySQL导入导出数据和结构
1. mysql导出数据和结构使用mysqldump命令 1.1 导出全库连带数据 mysqldump -u root -p app_test > app_test.sql 1.2 导出指定 ...
MySQL 数据库添加数据时为什么会产生外码（外键）约束？原理就是什么？如何解决？
文章目录前言一.插入新数据时报错外键约束? 二.对于出错 SQL 语句的分析三.对于外码约束的分析四.如何处理外键约束? 总结前言我们在使用 MySQL 数据库时,添加数据如果设计不合理很 ...

mysql导入大量数据时jbd2 io过高效率低下问题

mysql导入大量数据时jbd2 io过高效率低下问题相关推荐

最新文章

热门文章