Django分组查询annotate可能遇到的坑

Django ORM的分组查询一般是values（或values_list）和annotate联用，values里面声明以什么字段分组，annotate 执行分组，这其中可能会有个坑

model大概长这样

class AdsEvent(models.Model):id = models.CharField(primary_key=True, max_length=32)dstip = models.GenericIPAddressField()attack_type = models.CharField(max_length=20, blank=True, null=True)start_time = models.DateTimeField(blank=True, null=True)end_time = models.DateTimeField(blank=True, null=True)total_in_bits = models.BigIntegerField(blank=True, null=True)total_in_packets = models.BigIntegerField(blank=True, null=True)total_drop_bits = models.BigIntegerField(blank=True, null=True)total_drop_packets = models.BigIntegerField(blank=True, null=True)attack_port = models.BigIntegerField(blank=True, null=True)objects = ScrubbingEnvironmentADSEventManager()class Meta:managed = Falsedb_table = 't_ads_event'ordering = ('-end_time', '-start_time')

功能需求是要返回每种攻击类型的攻击次数，那我就根据攻击类型分组，统计个数

ret = queryset.values("attack_type").annotate(value=Count('id'))

嗯，看似没问题
但是返回的结果根本没聚合

why？？？
可以把ORM转成sql打印出来看看

print(queryset.values("attack_type").annotate(value=Count('id')).query)

对应的sql：

SELECT "t_ads_event"."attack_type", COUNT("t_ads_event"."id") AS "value"
FROM "t_ads_event"
GROUP BY "t_ads_event"."attack_type", "t_ads_event"."end_time", "t_ads_event"."start_time"
ORDER BY "t_ads_event"."end_time" DESC, "t_ads_event"."start_time" DESC

等等，为啥分组条件里会有开始时间和结束时间？？？
看下model的meta类，原来ordering被指定成默认时间降序

class Meta:managed = Falsedb_table = 't_ads_event'ordering = ('-end_time', '-start_time')

解决方法：查询时把排序参数改成用来分组的参数

ret = queryset.order_by('attack_type').values("attack_type").annotate(value=Count('id'))

对应的sql：

SELECT "t_ads_event"."attack_type", COUNT("t_ads_event"."id") AS "value" FROM "t_ads_event"
GROUP BY "t_ads_event"."attack_type"
ORDER BY "t_ads_event"."attack_type" ASC

ok了

但还存在个问题，如果我的需求是要按照攻击次数从大到小的顺序返回咋办？
那就加个排序喽

ret = queryset.order_by('attack_type').values("attack_type").annotate(value=Count('id')).order_by('-value')

或者这样

ret = queryset.values("attack_type").annotate(value=Count('id')).order_by('-value')

对应sql都是：

SELECT "t_ads_event"."attack_type", COUNT("t_ads_event"."id") AS "value"
FROM "t_ads_event"
GROUP BY "t_ads_event"."attack_type"
ORDER BY "value" DESC

返回结果：

解决！

结论：如果model的meta类中的ordering有被指定，那在annotate分组查询时要多注意

Django分组查询annotate可能遇到的坑相关推荐

Django 分组查询与ordering字段巨坑
样例: class Test(Model):class Meta:db_table = 'test'ordering = ['字段1', '字段2', '字段3'] django里常见的 group ...
Django 【第六篇】ORM跨表操作（聚合查询，分组查询，F和Q查询等）
一:创建表书籍模型: 书籍有书名和出版日期,一本书可能会有多个作者,一个作者也可以写多本书,所以作者和书籍的关系就是多对多的关联关系(many-to-many); 一本书只应该由一个出版商出 ...
Day51python Django 多表操作聚合查询、分组查询、F查询、Q查询
1聚合查询aggregate aggregate()是QuerySet 的一个终止子句,意思是说,它返回一个包含一些键值对的字典,可以自己制定键. 1.# 计算所有图书的平均价格 books = mo ...
Django08-1:模型层(ORM)--聚合查询/分组查询/F与Q查询/开启事务/常用字段及参数/自定义字段/数据库查询优化
聚合查询单独使用时,用aggregate 1.只要是跟数据库相关的模块基本都在django.db.models里面如果没有应该在django.db里面 2. 聚合查询通常配合分组使用 from ...
day08 外键字段的增删改查正向反向插叙概念跨表查询聚合查询与分组查询 F查询
day08 外键字段的增删改查正向反向插叙概念跨表查询聚合查询与分组查询 F查询昨日内容复习自定义过滤器.标签.inclusion_tag 1.首先现在应用目录下创建名字为templatet ...
Django的mode的分组查询和聚合查询和F查询和Q查询
1.聚合查询 # 聚合函数aggregate,求指定字段的最大值,最小值,平均值,和的值,方法如下from django.db.models import Avgfrom django.db.mode ...
day056-58 django多表增加和查询基于对象和基于双下划线的多表查询聚合分组查询自定义标签过滤器外部调用django环境事务和锁...
一.多表的创建 from django.db import models# Create your models here. class Author(models.Model):id = model ...
$Django 聚合函数、分组查询、F,Q查询、orm字段以及参数
一.聚合函数 from django.db.models import Avg,Sum,Max,Min,Count,F,Q #导入 # .查询图书的总价,平均价,最大价,最小价 ...
Django聚合分组查询（F与Q查询｜ORM查询优化｜常见字段参数）
文章目录一.正反向查询进阶操作二.聚合查询三.分组查询四.ORM再次添加字段五.F与Q查询五.ORM查询优化六.事务操作七.模型层常见字段八.ORM常见字段参数九.多对多三种创建方 ...

Django分组查询annotate可能遇到的坑

Django分组查询annotate可能遇到的坑

Django分组查询annotate可能遇到的坑相关推荐

最新文章

热门文章