django场景ORM查询场景
基本操作
# 获取所有数据,对应 SQL:select * from User
User.objects.all()
# 匹配,对应 SQL:select * from User where name = '运维咖啡吧'
User.objects.filter(name='运维咖啡吧')
# 不匹配,对应 SQL:select * from User where name != '运维咖啡吧'
User.objects.exclude(name='运维咖啡吧')
# 获取单条数据(有且仅有一条,id 唯一),对应 SQL:select * from User where id = 724
User.objects.get(id=123)
常用操作
# 获取总数,对应 SQL:select count(1) from User
User.objects.count()
# 获取总数,对应 SQL:select count(1) from User where name = '运维咖啡吧'
User.objects.filter(name='运维咖啡吧').count()
# 大于,>,对应 SQL:select * from User where id > 724
User.objects.filter(id _ _gt=724)
# 大于等于,>=,对应 SQL:select * from User where id >= 724
User.objects.filter(id _ _gte=724)
# 小于,<,对应 SQL:select * from User where id < 724
User.objects.filter(id _ _lt=724)
# 小于等于,<=,对应 SQL:select * from User where id <= 724
User.objects.filter(id _ _lte=724)
# 同时大于和小于, 1 < id < 10,对应 SQL:select * from User where id > 1 and id < 10
User.objects.filter(id _ _gt=1, id _ _lt=10)
# 包含,in,对应 SQL:select * from User where id in (11,22,33)
User.objects.filter(id _ _in= [11, 22, 33])
# 不包含,not in,对应 SQL:select * from User where id not in (11,22,33)
User.objects.exclude(id _ _in= [11, 22, 33])
# 为空:isnull=True,对应 SQL:select * from User where pub_date is null
User.objects.filter(pub_date _ _isnull=True)
# 不为空:isnull=False,对应 SQL:select * from User where pub_date is not null
User.objects.filter(pub_date _ _isnull=True)
# 匹配,like,大小写敏感,对应 SQL:select * from User where name like '%sre%',SQL 中大小写不敏感
User.objects.filter(name _ _contains="sre")
# 匹配,like,大小写不敏感,对应 SQL:select * from User where name like '%sre%',SQL 中大小写不敏感
User.objects.filter(name _ _icontains="sre")
# 不匹配,大小写敏感,对应 SQL:select * from User where name not like '%sre%',SQL 中大小写不敏感
User.objects.exclude(name _ _contains="sre")
# 不匹配,大小写不敏感,对应 SQL:select * from User where name not like '%sre%',SQL 中大小写不敏感
User.objects.exclude(name _ _icontains="sre")
# 范围,between and,对应 SQL:select * from User where id between 3 and 8
User.objects.filter(id _ _range= [3, 8])
# 以什么开头,大小写敏感,对应 SQL:select * from User where name like 'sh%',SQL 中大小写不敏感
User.objects.filter(name _ _startswith='sre')
# 以什么开头,大小写不敏感,对应 SQL:select * from User where name like 'sh%',SQL 中大小写不敏感
User.objects.filter(name _ _istartswith='sre')
# 以什么结尾,大小写敏感,对应 SQL:select * from User where name like '%sre',SQL 中大小写不敏感
User.objects.filter(name _ _endswith='sre')
# 以什么结尾,大小写不敏感,对应 SQL:select * from User where name like '%sre',SQL 中大小写不敏感
User.objects.filter(name _ _iendswith='sre')
# 排序,order by,正序,对应 SQL:select * from User where name = '运维咖啡吧' order by id
User.objects.filter(name='运维咖啡吧').order_by('id')
# 多级排序,order by,先按 name 进行正序排列,如果 name 一致则再按照 id 倒叙排列
User.objects.filter(name='运维咖啡吧').order_by('name','-id')
# 排序,order by,倒序,对应 SQL:select * from User where name = '运维咖啡吧' order by id desc
User.objects.filter(name='运维咖啡吧').order_by('-id')
进阶操作
# limit,对应 SQL:select * from User limit 3;
User.objects.all() [:3]
# limit,取第三条以后的数据,没有对应的 SQL,类似的如:select * from User limit 3,10000000,从第 3 条开始取数据,取 10000000 条(10000000 大于表中数据条数)
User.objects.all() [3:]
# offset,取出结果的第 10-20 条数据(不包含 10,包含 20), 也没有对应 SQL,参考上边的 SQL 写法
User.objects.all() [10:20]
# 分组,group by,对应 SQL:select username,count(1) from User group by username;
from django.db.models import Count
User.objects.values_list('username').annotate(Count('id'))
# 去重 distinct,对应 SQL:select distinct(username) from User
User.objects.values('username').distinct().count()
# filter 多列、查询多列,对应 SQL:select username,fullname from accounts_user
User.objects.values_list('username', 'fullname')
# filter 单列、查询单列,正常 values_list 给出的结果是个列表,里边里边的每条数据对应一个元组,当只查询一列时,可以使用 flat 标签去掉元组,将每条数据的结果以字符串的形式存储在列表中,从而避免解析元组的麻烦
User.objects.values_list('username', flat=True)
# int 字段取最大值、最小值、综合、平均数
from django.db.models import Sum,Count,Max,Min,Avg
User.objects.aggregate(Count(‘id’))
User.objects.aggregate(Sum(‘age’))
时间字段
# 匹配日期,date
User.objects.filter(create_time _ _date=datetime.date(2018, 8, 1))
User.objects.filter(create_time _ _date _ _gt=datetime.date(2018, 8, 2))
# 匹配年,year
User.objects.filter(create_time _ _year=2018)
User.objects.filter(create_time _ _year _ _gte=2018)
# 匹配月,month
User.objects.filter(create_time _ _month _ _gt=7)
User.objects.filter(create_time _ _month _ _gte=7)
# 匹配日,day
User.objects.filter(create_time _ _day=8)
User.objects.filter(create_time _ _day _ _gte=8)
# 匹配周,week_day
User.objects.filter(create_time _ _week_day=2)
User.objects.filter(create_time _ _week_day _ _gte=2)
# 匹配时,hour
User.objects.filter(create_time__hour=9)
User.objects.filter(create_time__hour__gte=9)
# 匹配分,minute
User.objects.filter(create_time__minute=15)
User.objects.filter(create_time__minute_gt=15)
# 匹配秒,second
User.objects.filter(create_time__second=15)
User.objects.filter(create_time__second__gte=15)
# 按天统计归档
today = datetime.date.today()
select = {'day': connection.ops.date_trunc_sql('day', 'create_time')}
deploy_date_count = Task.objects.filter(
create_time__range=(today - datetime.timedelta(days=7), today)
).extra(select=select).values('day').annotate(number=Count('id'))
Q 的使用
Q 对象可以对关键字参数进行封装,从而更好的应用多个查询,可以组合 &(and)、|(or)、~(not) 操作符。
例如下边的语句
from django.db.models import Q
User.objects.filter(
Q(role__startswith='sre_'),
Q(name='公众号') | Q(name='运维咖啡吧')
)
转换成 SQL 语句如下:
select * from User where role like 'sre_%'and (name='公众号'or name='运维咖啡吧')
通常更多的时候我们用 Q 来做搜索逻辑,比如前台搜索框输入一个字符,后台去数据库中检索标题或内容中是否包含
_s = request.GET.get('search')
_t = Blog.objects.all()
if _s:
_t = _t.filter(
Q(title__icontains=_s) |
Q(content__icontains=_s)
)
return _t
外键:ForeignKey
表结构:
class Role(models.Model):
name = models.CharField(max_length=16, unique=True)
class User(models.Model):
username = models.EmailField(max_length=255, unique=True)
role = models.ForeignKey(Role, on_delete=models.CASCADE)
正向查询:
# 查询用户的角色名
_t = User.objects.get(username='运维咖啡吧')
_t.role.name
反向查询:
# 查询角色下包含的所有用户
_t = Role.objects.get(name='Role03')
_t.user_set.all()
另一种反向查询的方法:
_t = Role.objects.get(name='Role03')
# 这种方法比上一种_set 的方法查询速度要快
User.objects.filter(role=_t)
第三种反向查询的方法:
如果外键字段有 related_name 属性,例如 models 如下:
class User(models.Model):
username = models.EmailField(max_length=255, unique=True)
role = models.ForeignKey(Role, on_delete=models.CASCADE,related_name='roleUsers')
那么可以直接用 related_name 属性取到某角色的所有用户
_t = Role.objects.get(name = 'Role03')
_t.roleUsers.all()
M2M:ManyToManyField
表结构:
class Group(models.Model):
name = models.CharField(max_length=16, unique=True)
class User(models.Model):
username = models.CharField(max_length=255, unique=True)
groups = models.ManyToManyField(Group, related_name='groupUsers')
正向查询:
# 查询用户隶属组
_t = User.objects.get(username = '运维咖啡吧')
_t.groups.all()
反向查询:
# 查询组包含用户
_t = Group.objects.get(name = 'groupC')
_t.user_set.all()
同样 M2M 字段如果有 related_name 属性,那么可以直接用下边的方式反查
_t = Group.objects.get(name = 'groupC')
_t.groupUsers.all()
get_object_or_404
正常如果我们要去数据库里搜索某一条数据时,通常使用下边的方法:
_t = User.objects.get(id=734)
但当 id=724 的数据不存在时,程序将会抛出一个错误
abcer.models.DoesNotExist: User matching query does not exist.
为了程序兼容和异常判断,我们可以使用下边两种方式:
方式一:get 改为 filter
_t = User.objects.filter(id=724)
# 取出_t 之后再去判断_t 是否存在
方式二:使用 get_object_or_404
from django.shortcuts import get_object_or_404
_t = get_object_or_404(User, id=724)
# get_object_or_404 方法,它会先调用 django 的 get 方法,如果查询的对象不存在的话,则抛出一个 Http404 的异常
实现方法类似于下边这样:
from django.http import Http404
try:
_t = User.objects.get(id=724)
except User.DoesNotExist:
raise Http404
get_or_create
顾名思义,查找一个对象如果不存在则创建,如下:
object, created = User.objects.get_or_create(username='运维咖啡吧')
返回一个由 object 和 created 组成的元组,其中 object 就是一个查询到的或者是被创建的对象,created 是一个表示是否创建了新对象的布尔值
实现方式类似于下边这样:
try:
object = User.objects.get(username='运维咖啡吧')
created = False
exception User.DoesNoExist:
object = User(username='运维咖啡吧')
object.save()
created = True
returen object, created
执行原生 SQL
Django 中能用 ORM 的就用它 ORM 吧,不建议执行原生 SQL,可能会有一些安全问题,如果实在是 SQL 太复杂 ORM 实现不了,那就看看下边执行原生 SQL 的方法,跟直接使用 pymysql 基本一致了
from django.db import connection
with connection.cursor() as cursor:
cursor.execute('select * from accounts_User')
row = cursor.fetchall()
return row