第一步: 先创建临时表,表结构,索引与正式表相同
第二步:把全部的数据入库到临时表,每5k条提交一次事务,或者干脆不开启事务
第三步: 删除正式表,是删除表,不是删除数据
第四步: 把临时表改为正式表,表的索引也一起改名

用这种方法,在第三步和第四步之间,正式表会出现不能访问的情况,但时间极短,大概0.000几秒,基本上不会影响业务

【MYSQL】大量数据入库方案相关推荐

  1. 面试官问:在读多写少的情况下,如何优化 MySQL 的数据查询方案

    作者 | 面试官问     责编 | 张文 来源 | 面试官问(ID:interviewer_asked) 面试官问:假设你负责的某业务在双十一期间要搞运营活动,公司投入了大量的营销费用进行推广,此举 ...

  2. mysql 每日数据备份方案_mysql数据库备份方案

    方案 以一天一次的频率,在每天凌晨2:00备份生产环境数据库至文件服务器.为保证备份文件不过多占用文件服务器空间,备份文件以tgz压缩包格式保存且只保存7天的备份文件.另外每次备份都保存备份日志,一旦 ...

  3. 基于Canal的MySQL=>ES数据同步方案

    文章目录 1.MySQL和ES的主要区别? 1.1 功能性 1.2 性能指标 1.3 在搜索业务上的区别 1.3.1 查询 1.3.2 检索 2.为什么要做数据同步 2.1 检索性能 2.2 写入性能 ...

  4. Spring Boot实战解决高并发数据入库: Redis 缓存+MySQL 批量入库

    前言 最近在做阅读类的业务,需要记录用户的PV,UV: 项目状况:前期尝试业务阶段: 特点: 快速实现(不需要做太重,满足初期推广运营即可) 快速投入市场去运营 收集用户的原始数据,三要素: 谁 在什 ...

  5. php mysql 秒杀_redis+PHP实现高并发下秒杀数据入库的问题

    在高并发下实现抢购秒杀功能中,我有一个疑问,就是数据入库的问题,什么时候入库. 设想思路: 1.判断他抢购成功了,立马把生成的订单数据写入mysql订单表,同时库存表字段减少1: 2.判断抢购成功后, ...

  6. php intval trim,php数据入库前清理 注意php intval与mysql的int取值范围不同_PHP教程

    php保存数据到mysql 打算在dao层进行数据入库前的清理,比如varchar进行trim,int进行intval. 有一天突然想起,php intval的取值范围与mysql的int类型一样吗? ...

  7. mysql 数据备份方案_MySQL常见备份方案

    MySQL常见备份方案有以下三种: mysqldump + binlog lvm + binlog xtrabackup 本例为方便演示,数据库里面数据为空.下面开始动手 mkdir /opt/bac ...

  8. HBase实战 | 从MySQL到HBase:数据存储方案转型的演进

    作者介绍 杨宏志,知乎首页架构负责人,主要负责首页工程化建设.工程架构优化.性能提升等工作.知乎专栏:https://zhuanlan.zhihu.com/c_195355141 本文转载自dbapl ...

  9. Mysql大表数据清理方案

    需求:表t_user_login_log中存储了上千条数据,我们需要对该表做数据清理,只保留近三个月的数据. 方案一 数据量<1000条时推荐使用 DELETE方法 推荐力度:极不推荐 是否会影 ...

最新文章

  1. 怎么修照片多余的部分_10 个摄影小技巧,让你的照片拿到超多赞!
  2. 关于log4net使用中遇到的错误
  3. Swift中出现“no such module cocoa”的错误
  4. 【Android 应用开发】Google 官方 EasyPermissions 权限申请库 ( 简介 | 权限申请处理细节 | 添加依赖 | 界面权限申请结果处理 | 权限申请结果回调接口 )
  5. 【整理】如何翻译SAP事务代码描述
  6. NOIP模拟测试8「匹配·回家」
  7. DockPanel 类
  8. python拦截修改数据包_会Python?那么你一定要试一试mitmproxy
  9. 《程序员修炼之道(第2版)》!屹立20年王者归来!
  10. 漫步数学分析十七——连续映射上的运算
  11. 重磅!AI大牛邢波出任AI大学校长,李开复姚期智都是校董
  12. QT 信号与槽 QT简单加法器的实现
  13. 分享这几天做seo优化的心得
  14. Telerik RadColorPicker 漂移问题的解决
  15. Unity人物残影实现
  16. 【理财】富爸爸穷爸爸
  17. AHU计科(伪)新生指南
  18. PAT-1068 万绿丛中一点红
  19. 2021前端智能化发展现状与未来展望
  20. Get 和 Post 请求

热门文章

  1. 上海移动通信企业短信通平台接口协议
  2. java经典24点算法代码
  3. VC 怎么获取windows7系统管理员权限
  4. OpenCV 识别图片中的米粒个数,并计算米粒的平均面积和长度
  5. COOX基础培训之AM
  6. 魔百盒M401A_晶晨S905L3A_2+16G_安卓9_原厂卡刷固件包及详细教程
  7. 磊科(NetCore) nw330 usb无线网卡 win7 x86 驱动程序 (for windows7 32位)
  8. jeeplus请假流程案例
  9. ReID:无监督及领域自适应的目标重识别概述
  10. 如何快速把Excel数据导入SQL数据库