MySQL insert 插入优化技巧，MySQL 优化学习第8天

2024-06-04 18:00:02

本篇博客主要优化 MySQL 中的插入操作，核心实现 insert 优化任务。

插入数据

** load data infile 导入数据**
使用上述命令，可以大幅度提高批量插入数据。
如果希望使用该命令，可以用 show 命令进行测试

show variables like '%infile%'

使用批量插入
如果希望一次性插入多条数据，可以使用一条 insert 语句，然后拼接多行数据。

insert into 表名 values(...),(...),(...)

禁用唯一检查
在插入数据时，可以临时取消唯一性校验，具体办法是在插入前执行下述命令

set unique_checks = 0

插入完毕之后在打开

set unique_checks = 1

禁用外键检查
与上述逻辑一致，相关命令如下所示。

set foreign_key_checks = 0
set foreign_key_checks = 1

禁止自动提交
禁止事务自动提交

set autocommit = 0
set autocommit = 1

禁用索引
临时性关闭索引

alter table 表名 disable keys

执行完毕打开索引

alter table 表名 enable keys

从配置的角度进行修改

bulk_insert_buffer_size 缓存大小，默认 8M，可以提高。

show variables like 'bulk_insert%'

这个参数只能对 MyISAM 使用， innodb 无效。

max_allowed_packet 接受的数据包大小，默认为 16M，可以提高。

show variables like 'max_all%'

net_buffer_length 通信时缓存数据的大小，最小4k，最大16M，默认是1M。

show variables like 'net_buffer_length'

其它可学习内容

尽量在事务中进行插入操作
MySQL 默认每次进行 insert 操作时，都会创建一个事务，所以我们提前将批量插入操作放置到事务中，可以提高效率。

START TRANSACTION;
insert into 表名 values(...),(...),(...);
insert into 表名 values(...),(...),(...);
insert into 表名 values(...),(...),(...);
COMMIT;

感兴趣的化订阅一下《Python爬虫120》吧

橡皮擦的第 595 篇原创博客。

MySQL insert 插入优化技巧，MySQL 优化学习第8天相关推荐

Mysql批量插入数据问题解决和优化
Mysql批量插入数据问题解决和优化一.问题描述项目中mysql批量插入大概50000左右数据,使用事务和批量,但是速度依旧很慢,大约60s左右,迫切希望改进这个问题. 二.问题原因尽管是批量a ...
MySQL INSERT插入条件判断：如果不存在则插入
我们经常需要进行sql的批量插入,要求:该条记录不存在则插入,存在则不插入.如果使用一条INSERT语句实现呢? 对于普通的 INSERT 插入,如果想要保证不插入重复记录,我们只有对某个字段创建唯一 ...
c mysql 批量插入_c#之mysql四种带事务批量插入
前言对于像我这样的业务程序员开发一些表单内容是家常便饭的事情,说道表单我们都避免不了多行内容的提交,多行内容保存,自然要用到数据库,如果循环打扰我数据库,数据库也会觉得很累,从而增加数据库服务器压 ...
mysql insert 字符集_有关 MySQL 字符集的注意事项-爱可生
本文关键字:字符集.建库建表一.数据库和字符集 1. 建库时指定创建数据库时,显式指定字符集和排序规则,同时,当切换到当前数据库后,参数 character_set_database,collat ...
【详解】模型优化技巧之优化器和学习率调整
目录 PyTorch十大优化器 1 torch.optim.SGD 2 torch.optim.ASGD 3 torch.optim.Rprop 4 torch.optim.Adagrad 5 tor ...
mysql insert插入的3种方法
测试表student的字段 1.插入一条数据 INSERT INTO student(sid,sname,sage,ssex) VALUES(1,"wangdali",18,0); ...
Python连接MySQL insert插入语句
连接数据库 import pymysqlconn = pymysql.Connect(host='127.0.0.1', port=3306,user='root',password='123456' ...
mysql数据库插入datetime_往MySQL数据库datetime类型字段中插入数据库的当前时间
代码: StringBuilder sb = new StringBuilder(); sb.append(" insert into uosdetailfile ("); sb. ...
mysql源生插入数据_php+mysql源生连接数据库和增删改查数据
php+mysql源生连接数据库和增删改查数据新建一个init.php文件,执行链接数据库.内容如下 header("Content-type: text/html; charset=ut ...

最新文章

热门文章