mysql bulk update_Django bulk_create()、update()与数据库事务的效率对比分析
下面以创建10000个对象为例进行测试:
# 用for循环挨个创建,共花费37秒
for i in range(10000):
name="String number %s"%i
Record.objects.create(name=name)
# 用django事务只提交一次,共花费2.65秒
@transaction.commit_manually
def manual_transaction():
for i in range(10000):
name="String number %s"%i
Record.objects.create(name=name)
transaction.commit()
# 用bulk_create创建,共花费0.47秒
def builtin():
insert_list =[]
for i in range(10000):
name="String number %s"%i
insert_list.append(Record(name=name))
Record.objects.bulk_create(insert_list)
# 用for循环挨个更新,共花费72秒:
def auto_transaction():
for record inRecord.objects.all():
record.name ="String without number"
record.save()
# 用django事务只提交一次,共花费17秒
@transaction.commit_manually
def manual_transaction():
for record inRecord.objects.all():
record.name ="String without number"
record.save()
transaction.commit()
# 用update更新,共花费0.33秒
def builtin():
Record.objects.all().update(name="String without number")
补充知识:django的model使用上容易遇到的坑,default=datetime.now和auto_now、null和blank、save和update、bulk_create
一、django设置字段动态默认时间的四种方式:
from django.db import models
from datetime import datetime
class User(models.Model):
id = models.BigAutoField('主键', primary_key=True)
name = models.CharField('名字', max_length=20, db_index=True, default='')
create_time_one = models.DateTimeField('创建时间', default=datetime.now())
update_time_one = models.DateTimeField('更新时间', default=datetime.now)
create_time_tow = models.DateTimeField('创建时间', auto_now_add=True)
update_time_tow = models.DateTimeField('更新时间', auto_now=True)
1. default=datetime.now()
model每次初始化,都会自动设置该字段的默认值为初始化时间。
2. default=datetime.now
model每次进行新增或修改操作,都会自动设置该字段的值为操作时间。设置后仍可以使用ORM手动修改该字段。
3. auto_now_add=True
默认值为False,若设置为True,model每次进行新增操作,都会自动设置该字段的值为操作时间。设置为True后无法使用ORM手动修改该字段,哪怕填充了字段的值也会被覆盖。
4. auto_now=True
默认值为False,若设置为True,model每次进行新增或修改操作,都会自动设置该字段的值为操作时间。设置为True后无法使用ORM手动修改该字段,哪怕填充了字段的值也会被覆盖。
5. 要注意的点
除非想设置动态默认时间为项目的启动时间,否则default=datetime.now()这种用法是错误的,会得到期望之外的结果。
使用User.objects.update方法时,设置的default=datetime.now和auto_now=True都不会生效,由于设置了auto_now=True的字段不能手动修改,此时只能使用save方法修改数据,这对于多个数据的更新是不友好的。
因此如果设置动态默认时间的字段,应该使用default=datetime.now和auto_now_add=True来实现。
二、null=True和blank=True的区别
1. null针对数据库,如果null=True,表示数据库的该字段可以为空。
2. blank针对表单的,如果blank=True,表示表单填写该字段时可以不填。
mysql中空值不占用空间,NULL占用空间,而且使用NULL会使索引的效率下降。因此从性能上来说,不建议使用null=True,最好使用default=''。
三、save和build_create的区别
1. 使用save方法:
names = ['张三', '李四']
for name in names:
user = User(name=name)
user.save()
print(user.id) # 此时user对象有id的值
2. 使用bulk_create方法:
names = ['张三', '李四']
users = [User(name=name) for name in names]
users = User.objects.bulk_create(users)
print([user.id for user in users]) # 此时user对象没有id的值
bulk_create的优点:
批量操作时只与数据库进行一次交互,效率高。
bulk_create的缺点:
对于设置了自增的字段,返回值中不会有该字段的值,如上例2中的user对象。
对于设置了动态默认时间的字段,如设置了auto_now=True,同一批处理的记录中该字段的时间将会相同。
四、上面的知识点使用的例子
1. 定义模型
from django.db import models
from datetime import datetime
class User(models.Model):
id = models.BigAutoField('主键', primary_key=True)
name = models.CharField('名字', max_length=20, db_index=True, blank=False, default='')
create_time = models.DateTimeField('创建时间', auto_now_add=True)
update_time = models.DateTimeField('更新时间', default=datetime.now)
2. 插入数据
# 方法一
names = ['张三', '李四']
users = [User(name=name) for name in names]
users = User.objects.bulk_create(users)
# 方法二
names = ['张三', '李四']
users = [User(name=name) for name in names]
[user.save() for user in users]
3. 修改数据
# 方法一
names = ['张三', '李四']
User.objects.filter(name__in=names).update(name='changed', update_time=datetime.now()) # 这里必须显式对update_time赋值
# 方法二
names = ['张三', '李四']
users = User.objects.filter(name__in=names)
for use in users:
user.name = 'changed'
user.save() # 这里会自动更新update_time,但是多次save效率低
以上这篇Django bulk_create()、update()与数据库事务的效率对比分析就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持我们。
本文标题: Django bulk_create()、update()与数据库事务的效率对比分析
本文地址: http://www.cppcns.com/jiaoben/python/313421.html
mysql bulk update_Django bulk_create()、update()与数据库事务的效率对比分析相关推荐
- mysql隔离级别加锁情况_MySQL数据库事务各隔离级别加锁情况--read committed amp;amp; MVCC...
上节回顾 上篇记录了我对MySQL 事务 隔离级别read uncommitted的理解. 这篇记录我对 MySQL 事务隔离级别 read committed & MVCC 的理解. 前言 ...
- mysql隔离级别 简书_数据库事务和四种隔离级别
什么是事务 事务(Transaction):访问并可能更新数据库中各种数据项的一个程序执行单元(unit),它通常由高级数据库操纵语言或编程语言(如SQL,C++或Java)书写的用户程序的执行所引起 ...
- mysql数据 锁 隔离级别_MySQL数据库事务各隔离级别加锁情况--read uncommitted篇
1.目的 1.1 合适人群 1.数据库事务特征我只是背过,并没有很深刻的理解. 2.数据库事务的隔离级别只是了解,并没有深刻理解,也没有在实际工作中体验使用过. 3.经常面试被人问起数据库加锁情况,一 ...
- 易语言高级表格写入MYSQL_易语言数据库与高级表格思路分析.doc
易语言数据库与高级表格思路分析 篇一:易语言数据库操作指南 易语言数据库操作指南 一.易语言操作Access数据库 前面我们已经对比分析过易语言所支持的几种常见数据库,在这几种数据库中,我们先来学习一 ...
- mysql数据库技术实验小结_Mysql数据库事务实验以及总结
为了做这个实验,设计个场景,要把用户2 上账户的22块钱打一块钱到账户1的账上去.要么全成功,全失败,也就是账要做平. 代码如下: 其中最关键的是: updateMoneyByUserId(1, ge ...
- MySQL 使用SELECT ... FOR UPDATE 做事务写入前的确认(转)
Select-For Update语句的语法与select语句相同,只是在select语句的后面加FOR UPDATE [NOWAIT]子句. 该语句用来锁定特定的行(如果有where子句,就是满足w ...
- Mysql数据库事务详解
80年代中国人结婚四大件:手表.自行车.缝纫机.收音机(三转一响).要把事务娶回家需要四大件,所以事务很刻薄(ACID),四大件清单:原子性(Atom).一致性(Consistent).隔离性(Iso ...
- mysql当前时间减一分钟_MySQL数据库事务的机制【总结】
php中文网最新课程 每日17点准时技术干货分享 这几天面试多次被问到了数据库事务机制.隔离级别.乐观锁悲观锁类的问题,之前对这些只能说有所了解,有些概念还停留在记忆层面,没有理解,所以回答的不好.后 ...
- mysql 数据库事务处理_MySQL数据库事务及其原理
基本概念 MySQL 事务主要用于处理操作量大,复杂度高的数据. 银行转账是经典的解释事务的例子.用户A给用户B转账5000元主要步骤可以概括为如下两步. 第一,账户A账户减去5000元: 第二,账户 ...
最新文章
- Java总复习(二)
- 特斯拉撞了警车:辅助系统Autopilot全程开启,连撞两车还没自动停下
- php树莓派养鱼,树莓派学习11: 将树莓派变成一个Web服务器
- Windows 2003安全事件ID分析(1)
- ASP.NET 2.0 – 如何巢状化GridView控件 (转自章立民CnBlogs)
- 面向对象一些概念简述
- Laravel Cache 的缓存文件在到期后是否会自动删除
- MyBatis(六)------MyBatis映射器(select元素、insert元素、update元素、select元素、sql元素)
- Hadoop学习心得
- Win10应用商店打不开?微软官方提供修复方法
- 脱壳--00.aspack.exe
- [Android系统]android7.1 修改系统默认输入法
- SeetaFace2-master在Windows10 VS2019编译的两种方法
- MATLAB计算英文符号信源熵,基于matlab的英文文本信息量的统计-正确.doc
- 华为云服务器使用之搭建极简服务器
- Codeforces 786 A. Berzerk
- Xilinx HLS FFT IP核运行时动态配置FFT长度
- 微信小程序iOS虚拟支付问题汇总
- ESP32pico-D4,程序编译时出错....
- 计算机组成与设计(二)——指令:计算机指令 (一)
热门文章
- 盘点四款免费在线采购管理系统
- 《惢客创业日记》2019.09.09(周一)姚明的鼓励方式
- “中国芯”——飞凌嵌入式OKA40i-C开发板测评-全志工业级芯片A40i评测
- 【物理应用】Matlab模拟人行走的微多普勒效应
- Qt QSS常用样式总结
- location.href不跳转
- 如何提高蓝队在实战攻防演习中的防御水平?
- remi php ssh2,星梦随缘
- total_method写四个函数 分别包含bmi体重指数计算器、出租车费用计算器、个税计算器、猜数字游戏
- dcat-admin更改首页访问地址