多表操作

一、数据库表关系

1、单表操作:

Book
    id     title     price     publish     email    addr
    1       php       100     人民出版社     111      北京
    2       python    200     沙河出版社     222      沙河
    3       go        100     人民出版社     111      北京
    4       java      300     人民出版社     111      北京

  总结:重复内容过多,浪费大量存储空间,资源浪费。

2、表关系之一对多:

Book
    id     title     price     publish_id
    1       php       100          1
    2       python    200          1
    3       go        100          2
    4       java      300          1

Pulish
    id      name      email       addr
    1     人民出版社     111        北京
    2     沙河出版社     222        沙河
    
    一个出版社可以对应多本书,但是一本书对应不了多个出版社。

  总结:一旦确定表关系是一对多时,在多对应的表中创建关联字段。

3、表关系之多对多:

Book
    id     title     price     publish_id
    1       php       100          1
    2       python    200          1
    3       go        100          2
    4       java      300          1

Author
    id      name      age       addr
    1       alex      34      beijing
    2       egon      55      nanjing

Book2Author
    id      book_id      author_id
    1           2             1
    2           2             2
    3           3             2

  总结:一旦确定表关系是多对多,创建第三张关系表:id 和 另外两个表的关联字段。

# alex出版过的书籍名称(子查询)
select id from Author where name='alex';
select book_id from Book2Author where author_id=1;
select title from Book where id = book_id;

4、表关系之一对一

Author
    id   name    age     ad_id(UNIQUE)
    1    alex     34        1
    2    egon     55        2

AuthorDetail
    id     addr     gender    tel    gf_name     author_id(UNIQUE)
    1    beijing     male     110     小花            1
    2    nanjing     male     911     杠娘            2

  总结:一旦确定是一对一关系,在两张表中的任意一张表中建立关联字段+ UNIQUE。

5、表关系之关联字段和外键约束

  创建关联字段和约束不是必然关系,但是不建立约束的话,从引擎的角度来说两个表之间没有任何关联,因此删除的时候,再查找时会找不到数据。

  创建关联字段是为了进行查询,建立约束是为了防止出现脏数据。

6、表关系之sql创建关联表

GREATE TABLE publish(
                id INT PRIMARY KEY auto_increment,
                name VARCHAR (20)
                );

GREATE TABLE book(
                id INT PRIMARY KEY auto_increment,
                title VARCHAR (20),
                price DECIMAL (8,2),
                pub_date DATE,
                publish_id INT,   # 关联字段
                FOREIGN KEY (publish_id) REFERENCES publish(id)    # 关联字段约束
                );

GREATE TABLE authordetail (
                id INT PRIMARY KEY auto_increment,
                tel VARCHAR (20)    
                );

GREATE TABLE author (
                id INT PRIMARY KEY auto_increment,
                name VARCHAR (20),
                age INT,
                authordetail_id INT UNIQUE,    # 一对一约束
                FOREIGN KEY (authordetail_id) REFERENCES authordetail(id)
                );
 
GREATE TABLE book2author (   # 多对多
                id INT PRIMARY KEY auto_increment,
                book_id INT,
                author_id INT,
                FOREIGN KEY (book_id) REFERENCES book(id),
                FOREIGN KEY (author_id) REFERENCES author(id)
                ); 

二、创建模型

  实例:我们来假定下面这些概念,字段和关系

  作者模型:一个作者有姓名和年龄。

  作者详细模型:把作者的详情放到详情表,包含生日,手机号,家庭住址等信息。作者详情模型和作者模型之间是一对一的关系(one-to-one)

  出版商模型:出版商有名称,所在城市以及email。

  书籍模型: 书籍有书名和出版日期,一本书可能会有多个作者,一个作者也可以写多本书,所以作者和书籍的关系就是多对多的关联关系(many-to-many);一本书只应该由一个出版商出版,所以出版商和书籍是一对多关联关系(one-to-many)。

1、模型建立如下:

from django.db import models

# 出版社表
class Publish(models.Model):
    nid = models.AutoField(primary_key=True)
    name=models.CharField( max_length=32)
    city=models.CharField( max_length=32)
    email=models.EmailField()


# 作者详情表
class AuthorDetail(models.Model):
    nid = models.AutoField(primary_key=True)
    birthday=models.DateField()
    telephone=models.BigIntegerField()
    addr=models.CharField( max_length=64)


class Author(models.Model):
    nid = models.AutoField(primary_key=True)
    name=models.CharField( max_length=32)
    age=models.IntegerField()

    # 与AuthorDetail建立一对一的关系,一对一的关系建立在任意一边都可以
    # to="AuthorDetail",加了引号之后是在全局中寻找不会因为位置关系找不到AuthorDetail
    authorDetail=models.OneToOneField(to="AuthorDetail", to_field="nid", on_delete=models.CASCADE)
    """  上面语句代表含义为下面sql语句
    authordetail_id INT UNIQUE,    # 一对一约束
    FOREIGN KEY (authordetail_id) REFERENCES authordetail(id)
    """


class Book(models.Model):
    nid = models.AutoField(primary_key=True)
    title = models.CharField(max_length=32)
    publishDate = models.DateField()
    price = models.DecimalField(max_digits=5, decimal_places=2)

    #与publish建立  一对多关系  ,外键字段建立在多的一方
    publish=models.ForeignKey(to="Publish", to_field="nid",on_delete=models.CASCADE)
    """  上面语句代表含义为下面的sql语句
    publish_id INT,   # 关联字段
    FOREIGN KEY (publish_id) REFERENCES publish(id)    # 关联字段约束
    """

    # 多对多  与Author表建立多对多的关系,ManyToManyField可以建在两个模型中的任意一个,自动创建第三张表
    authors = models.ManyToManyField(to="Author")
    """  上面这个语句含义为下面的sql语句
    GREATE TABLE book2author ( 
                id INT PRIMARY KEY auto_increment,
                book_id INT,
                author_id INT,
                FOREIGN KEY (book_id) REFERENCES book(id),
                FOREIGN KEY (author_id) REFERENCES author(id)
                ); 
    """


# 这种多对多写法可以由  authors = models.ManyToManyField(to="Author") 替代
# class Book2Author(models.Model):
#     nid = models.AutoField(primary_key=True)
#     book = models.ForeignKey(to="Book")
#     author = models.ForeignKey(to="Author")

2、参数解析:

ForeignKey一对多多对一

ManyToManyField多对多

OneToOneField一对一

 

ForeignKey.to_field:指定当前关系与被关联对象中的哪个字段关联。默认情况下,to_field 指向被关联对象的主键。

ForeignKey.on_delete:当一个model对象的ForeignKey关联的对象被删除时,默认情况下此对象也会一起被级联删除的。

CASCADE:默认值,model对象会和ForeignKey关联对象一起被删除。

3、数据库配置

(1)配置mysql数据库连接(可选)

INSTALLED_APPS = [
    'django.contrib.admin',
    'django.contrib.auth',
    'django.contrib.contenttypes',
    'django.contrib.sessions',
    'django.contrib.messages',
    'django.contrib.staticfiles',
    'app01',
]

DATABASES = {
    'default': {
        'ENGINE': 'django.db.backends.mysql',
        'NAME':'orm2',   # 要连接的数据库,连接前需要创建好
        'USER':'root',  # 连接数据库的用户名
        'PASSWORD':'1234',  # 连接数据库的密码
        'HOST':'127.0.0.1',     # 连接主机,默认本级
        'PORT': 3306,     #  端口 默认3306
    }
}

(2)使用PyMysql连接mysql数据库实例(可选)

  在Python3.x以后,由于Python统一了数据库连接的接口,开始使用pymysql,pymysql和MySQLdb 在使用方式上是类似的: 

  因此,python3.x链接mysql数据库应安装Python,使用pip安装方法是:

pip install PyMySQL

  在django项目中配置ORM2/__init__.py文件:

import pymysql
pymysql.install_as_MySQLdb()

(3)配置logging查看翻译成sql语句

  在settings.py中添加:

LOGGING = {
    'version': 1,
    'disable_existing_loggers': False,
    'handlers': {
        'console':{
            'level':'DEBUG',
            'class':'logging.StreamHandler',
        },
    },
    'loggers': {
        'django.db.backends': {
            'handlers': ['console'],
            'propagate': True,
            'level':'DEBUG',
        },
    }
}  

  

4、数据迁移

  通过两条数据库迁移命令即可在指定的数据库中创建表:

$ python3 manage.py makemigrations
$ python3 manage.py migrate

  生成如下表:  

  

  

  

  

  

5、注意事项

  • 表的名称myapp_modelName,是根据 模型中的元数据自动生成的,也可以覆写为别的名称
  • id 字段是自动添加的(没有设置id时会自动添加id字段)
  • 对于外键字段,Django 会在字段名上添加"_id" 来创建数据库中的列名
  • 这个例子中的CREATE TABLE SQL 语句使用PostgreSQL 语法格式,要注意的是Django 会根据settings 中指定的数据库类型来使用相应的SQL 语句。
  • 定义好模型之后,你需要告诉Django _使用_这些模型。你要做的就是修改配置文件中的INSTALL_APPSZ中设置,在其中添加models.py所在应用的名称。(见前面settings设置)
  • 外键字段 ForeignKey 有一个 null=True 的设置(它允许外键接受空值 NULL),你可以赋给它空值 None 。

6、字段选项

  每个字段有一些特有的参数,例如,CharField需要max_length参数来指定VARCHAR数据库字段的大小。

  还有一些适用于所有字段的通用参数。这些参数在文档中有详细定义,常用参数如下所示:

 

(1)null

如果为True,Django 将用NULL 来在数据库中存储空值。 默认值是 False.

(1)blank

如果为True,该字段允许不填。默认为False。
要注意,这与 null 不同。null纯粹是数据库范畴的,而 blank 是数据验证范畴的。
如果一个字段的blank=True,表单的验证将允许该字段是空值。如果字段的blank=False,该字段就是必填的。

(2)default

字段的默认值。可以是一个值或者可调用对象。如果可调用 ,每有新对象被创建它都会被调用。

(3)primary_key

如果为True,那么这个字段就是模型的主键。如果你没有指定任何一个字段的primary_key=True,
Django 就会自动添加一个IntegerField字段做为主键,所以除非你想覆盖默认的主键行为,
否则没必要设置任何一个字段的primary_key=True。

(4)unique

如果该值设置为 True, 这个数据字段的值在整张表中必须是唯一的

(5)choices
由二元组组成的一个可迭代对象(例如,列表或元组),用来给字段提供选择项。 如果设置了choices ,默认的表单将是一个选择框而不是标准的文本框,而且这个选择框的选项就是choices 中的选项。

这是一个关于 choices 列表的例子:

YEAR_IN_SCHOOL_CHOICES = (
    ('FR', 'Freshman'),
    ('SO', 'Sophomore'),
    ('JR', 'Junior'),
    ('SR', 'Senior'),
    ('GR', 'Graduate'),
)
每个元组中的第一个元素,是存储在数据库中的值;第二个元素是在管理界面或 ModelChoiceField 中用作显示的内容。 在一个给定的 model 类的实例中,想得到某个 choices 字段的显示值,就调用 get_FOO_display 方法(这里的 FOO 就是 choices 字段的名称 )。例如:

from django.db import models

class Person(models.Model):
    SHIRT_SIZES = (
        ('S', 'Small'),
        ('M', 'Medium'),
        ('L', 'Large'),
    )
    name = models.CharField(max_length=60)
    shirt_size = models.CharField(max_length=1, choices=SHIRT_SIZES)


>>> p = Person(name="Fred Flintstone", shirt_size="L")
>>> p.save()
>>> p.shirt_size
'L'
>>> p.get_shirt_size_display()
'Large'  

  更多详见:字段选项(Field options)

三、添加表记录

操作前先简单录入一些数据:

author表:

  

authordetail表:

  

1、添加普通字段(示例)

# 方式1
publish_obj=Publish(name="人民出版社",city="北京",email="renMin@163.com")
publish_obj.save() # 将数据保存到数据库

# 方式2 
返回值publish_obj是添加的记录对象
publish_obj=Publish.objects.create(name="人民出版社",city="北京",email="renMin@163.com")

# 方式3
表.objects.create(**request.POST.dict())

2、添加一对多关系(外键字段)

# 方式1:
# 为book表绑定出版社:一对多绑定关系  book  publish
book_obj = Book.objects.create(title="西游记", price=100, publishDate="2012-12-1", publish_id=1)
print(book_obj.title)   # 返回值是添加的书籍对象属性

# 方式2:
pub_obj = Publish.objects.filter(nid=1).first()

book_obj = Book.objects.create(title="红楼梦", price=100, publishDate="2012-12-1", publish=pub_obj)
print(book_obj.title)     # 红楼梦
print(book_obj.price)     # 100
print(book_obj.publishDate)   # 2012-12-1
print(book_obj.publish)   # 与这本书关联的出版社对象:Publish object (1),设置__str__后,打印 人民出版社


# 查询西游记出版社对应的邮箱
book_obj = Book.objects.filter(title="西游记").first()
print(book_obj.publish.email)     # 123@qq.com

  book表:

  

核心:book_obj.publish与book_obj.publish_id是什么?

book_obj.publish是与这本书关联的出版社对象,book_obj.publish_id是出版社id号。

3、添加多对多关系

# 书籍和作者  多对多关系
# 当前生成的书籍对象
book_obj = Book.objects.create(title="金瓶*梅", price=100, publishDate="2012-12-1", publish_id=1)
# 添加普通字段:书籍绑定的作者对象
egon = Author.objects.get(name="egon", age=23, authorDetail_id=2)
alex = Author.objects.get(name="alex", age=33, authorDetail_id=1)

# 绑定多对多关系的API接口,即向关系表book_authors中添加记录
book_obj.authors.add(egon, alex)  #  将某个特定的 model 对象添加到被关联对象集合中。   =======    book_obj.authors.add(*[])

# 另一种写法是写入author的主键值
# book_obj.authors.add(1,2,3)
# 另一种写法是传入一个列表,*是函数传列表的时候如果等效位置参数的时候需要加一个*号
# book_obj.authors.add(*[1,2,3])

#创建并保存一个新对象,然后将这个对象加被关联对象的集合中,然后返回这个新对象。
book_obj.authors.create()

(1)数据库表纪录生成如下

book表:

  

book_author表:

  

(2)核心:book_obj.authors.all()是什么?

book = Book.objects.filter(nid=6).first()
print(book.authors.all())    # <QuerySet [<Author: alex>]>     与这本书关联的所有作者对象的集合

   答案:与这本书关联的所有作者对象的集合。queryset数据类型,列表里面放着的都是这本书关联作者对象。

(3)如何拿到书籍所有作者的名字?

# 查询ID为6的书籍的所有作者的名字
ret = book.authors.all().values("name")
print(ret)     # <QuerySet [{'name': 'alex'}]>

  通过book.authors.all().values就可以取到书籍对应作者的属性。

(4)解除多对多关系——将某个特定的对象从被关联对象集合中去除

# 解除多对多关系
book = Book.objects.filter(nid=6).first()

book.authors.remove(2)  # 将book_authors中对应的6-2这条记录删除
# 类似的写法还有:
# book.authors.remove(*[1,2])

  book_authors表:

  

(5)解除多对多关系——清空被关联对象集合

  book_obj.authors.clear() 

(6)先清空再设置

  book_obj.authors.set()

4、关联管理器(RelatedManager)

  "关联管理器"是在一对多或者多对多关联上下文中使用的管理器。它存在于下面两种情况:

(1)ForeignKey关系的“另一边”。像这样:

from django.db import models
 
class Reporter(models.Model):
    # ...
    pass
 
class Article(models.Model):
    reporter = models.ForeignKey(Reporter)

  在上面的例子中,管理器reporter.article_set拥有下面的方法。

(2)ManyToManyField关系的两边:

class Topping(models.Model):
    # ...
    pass
 
class Pizza(models.Model):
    toppings = models.ManyToManyField(Topping)

  这个例子中,topping.pizza_set 和pizza.toppings都拥有下面的方法。

5、关联管理器拥有的方法

add(obj1[, obj2, ...]):把指定的模型对象添加到关联对象集中。

把指定的模型对象添加到关联对象集中。

例如:

>>> b = Blog.objects.get(id=1)
>>> e = Entry.objects.get(id=234)
>>> b.entry_set.add(e) # Associates Entry e with Blog b.
在上面的例子中,对于ForeignKey关系,e.save()由关联管理器调用,执行更新操作。然而,在多对多关系中使用add()并不会调用任何 save()方法,而是由QuerySet.bulk_create()创建关系。

延伸:

# 1 *[]的使用
>>> book_obj = Book.objects.get(id=1)
>>> author_list = Author.objects.filter(id__gt=2)
>>> book_obj.authors.add(*author_list)


# 2 直接绑定主键
book_obj.authors.add(*[1,3])  # 将id=1和id=3的作者对象添加到这本书的作者集合中
                              # 应用: 添加或者编辑时,提交作者信息时可以用到.

create(**kwargs):创建一个新的对象,保存对象,并将它添加到关联对象集之中。返回新创建的对象。

创建一个新的对象,保存对象,并将它添加到关联对象集之中。返回新创建的对象:

>>> b = Blog.objects.get(id=1)
>>> e = b.entry_set.create(
...     headline='Hello',
...     body_text='Hi',
...     pub_date=datetime.date(2005, 1, 1)
... )

# No need to call e.save() at this point -- it's already been saved.
这完全等价于(不过更加简洁于):

>>> b = Blog.objects.get(id=1)
>>> e = Entry(
...     blog=b,
...     headline='Hello',
...     body_text='Hi',
...     pub_date=datetime.date(2005, 1, 1)
... )
>>> e.save(force_insert=True)
要注意我们并不需要指定模型中用于定义关系的关键词参数。在上面的例子中,我们并没有传入blog参数给create()。Django会明白新的 Entry对象blog 应该添加到b中。

remove(obj1[, obj2, ...]):从关联对象集中移除执行的模型对象

从关联对象集中移除执行的模型对象:

>>> b = Blog.objects.get(id=1)
>>> e = Entry.objects.get(id=234)
>>> b.entry_set.remove(e) # Disassociates Entry e from Blog b.
对于ForeignKey对象,这个方法仅在null=True时存在。

clear():从关联对象集中移除一切对象

从关联对象集中移除一切对象。

>>> b = Blog.objects.get(id=1)
>>> b.entry_set.clear()
注意这样不会删除对象 —— 只会删除他们之间的关联。

就像 remove() 方法一样,clear()只能在 null=True的ForeignKey上被调用。

set()方法:先清空,再设置

def change_book(request,edit_book_id):
    edit_book_obj = Book.objects.filter(pk=edit_book_id).first()

    if request.method=="POST":
        title = request.POST.get("title")
        price = request.POST.get("price")
        pub_date = request.POST.get("pub_date")
        publish_id = request.POST.get("publish_id")
        authors_id_list = request.POST.getlist("authors_id_list")  # checkbox,select传多个值的时候用getlist()
        # 更新为修改的新内容
        Book.objects.filter(pk=edit_book_id).update(title=title,price=price,publishDate=pub_date,publish_id=publish_id)

        # 更新书的作者(覆盖原记录)
        # 方法一:
        # edit_book_obj.authors.clear()
        # edit_book_obj.authors.add(*authors_id_list)

        # 方法二:set()方法先清空再设置
        edit_book_obj.authors.set(authors_id_list)

        return redirect("/books/")

    publish_list = Publish.objects.all()
    author_list = Author.objects.all()

    return render(request, "editbook.html", {"edit_book_obj": edit_book_obj,"publish_list":publish_list, "author_list":author_list})

方法使用注意

  对于所有类型的关联字段,add()、create()、remove()和clear(),set()都会马上更新数据库。换句话说,在关联的任何一端,都不需要再调用save()方法。

  直接赋值:

  通过赋值一个新的可迭代的对象,关联对象集可以被整体替换掉。

>>> new_list = [obj1, obj2, obj3]
>>> e.related_set = new_list

  如果外键关系满足null=True,关联管理器会在添加new_list中的内容之前,首先调用clear()方法来解除关联集中一切已存在对象的关联。否则, new_list中的对象会在已存在的关联的基础上被添加。

四、基于对象的跨表查询(子查询)

  子查询概念:子查询是将一个查询语句嵌套在另一个查询语句中。

# 一对多查询的正向查询:查询金瓶*梅这本书的出版社的名字
book_obj = Book.objects.filter(title="金瓶*梅").first()
print(book_obj.publish)       # 与这本书关联出版社对象
print(book_obj.publish.name)

# 等同于下列sql语句形式
# select publish_id from Book where title = "金瓶*梅";
# select name from Publish where id = (select publish_id from Book where title = "金瓶*梅");

1、一对多查询(publish与book)

正向查询:按字段 

# 一对多查询的正向查询:查询金瓶*梅这本书的出版社的名字
book_obj = Book.objects.filter(title="金瓶*梅").first()
print(book_obj.publish)       # 与这本书关联出版社对象
print(book_obj.publish.name)

反向查询:按表名小写_set.all()

# 一对多查询的反向查询:查询人民出版社出版过的书籍名称
publish_obj = Publish.objects.filter(name="人民出版社").first()   # 出版社对象
ret = publish_obj.book_set.all()
print(ret)     # <QuerySet [<Book: 红楼梦>, <Book: 西游记>, <Book: 金瓶*梅>]>

总结:

  (1)假如A、B两个表有关系,关联属性在A表中。正向查询——A去查B对象;反向查询——B去查A对象。

  (2)Book(关联属性:publish) ,用book去找关联对象出版社Publish:book_obj.publish;

  (3)用publish去找关联对象书籍book:publish_obj.book_set.all() ,且数据类型是queryset。

2、一对一查询(author 与 authordetail)

正向查询:按字段

# 一对一查询的正向查询:查询alex的手机号
alex = Author.objects.filter(name="alex").first()
print(alex.authordetail.telephone)  

反向查询:按表名小写 

# 一对一查询的反向查询:查询手机号为110的作者名字和年龄
ad = AuthorDetail.objects.filter(telephone="110").first()
print(ad.author.name)
print(ad.author.age)

3、多对多查询(author 与 book)

正向查询(按字段:authors):

# 金瓶眉所有作者的名字以及手机号
 
book_obj=Book.objects.filter(title="金瓶眉").first()
authors=book_obj.authors.all()
for author_obj in authors:
     print(author_obj.name,author_obj.authorDetail.telephone)

反向查询(按表名:book_set):

# 查询egon出过的所有书籍的名字

author_obj=Author.objects.get(name="egon")
book_list=author_obj.book_set.all()        #与egon作者相关的所有书籍
for book_obj in book_list:
    print(book_obj.title)

注意:

  可以通过在 ForeignKey() 和ManyToManyField的定义中设置 related_name 的值来覆写 FOO_set 的名称。例如,如果 Article model 中做一下更改:

publish = ForeignKey(Book, related_name='bookList')

  那么接下来就会如我们看到这般:

# 查询 人民出版社出版过的所有书籍
 
publish=Publish.objects.get(name="人民出版社")
book_list=publish.bookList.all()  # 与人民出版社关联的所有书籍对象集合

五、基于双下划线的跨表查询(join查询)

  Django 还提供了一种直观而高效的方式在查询(lookups)中表示关联关系,它能自动确认 SQL JOIN 联系。要做跨关系查询,就使用两个下划线来链接模型(model)间关联字段的名称,直到最终链接到你想要的model 为止。 

  正向查询按字段,反向查询按表名小写用来告诉ORM引擎join哪张表。

1、一对多查询

# 一对多查询:查询金瓶*梅这本书的出版社的名字
"""
SELECT 
  app01_publish.name
FROM 
  app01_book 
Inner join 
  app01_publish
ON app01_book.publish_id = app01_publish.nid
WHERE app01_book.title='金瓶*梅';
"""
# 方式一:正向查询按字段
# ret = Book.objects.filter(title="金瓶*梅").values("publish__name")    # 正向查询按字段
# print(ret)      # <QuerySet [{'publish__name': '人民出版社'}]>

# 方式二:反向查询按表名小写
# SELECT app01_publish.name FROM app01_publish INNER JOIN app01_book....仅仅是顺序不同
ret = Publish.objects.filter(book__title="金瓶*梅").values("name")      # 反向查询按表名小写
# publish去找book因此是反向查询,通过表名小写的方式通知ORM引擎去join book表,然后使用book的属性title
print(ret)

  总结:正向查询按字段,反向查询按表名小写用来告诉ORM引擎join哪张表。

2、多对多查询

  value等同于sql语句中的select,filter等同于sql语句中的where。

# 多对多查询:查询金瓶*梅这本书所有作者的名字
"""
SELECT app01_author.name FROM
  app01_book
INNER JOIN
  app01_book_authors
ON app01_book.nid = app01_book_authors.book_id
INNER JOIN
  app01_author
ON app01_book_authors.author_id = app01_author.nid
WHERE app01_book.title="金瓶*梅";
"""
# 方式一:
# 需求:通过Book表join与其关联的Author表,属于正向查询:按字段Book模型中字段authors = models.ManyToManyField(to="Author"),来通知ORM引擎join book_authors 和 author
ret = Book.objects.filter(title="金瓶*梅").values("authors__name")
print(ret)   # <QuerySet [{'authors__name': 'alex'}]>

# 方式二:
# 需求:通过Author表join与其关联的Book表,属于反向查询:按表名小写book通知ORM引擎join book_authors与book表
ret = Author.objects.filter(book__title="金瓶*梅").values("name")
print(ret)    # <QuerySet [{'name': 'alex'}]>

3、一对一查询

# 一对一查询:查询alex的手机号
# 方式一:
# 需求:通过Author表join与其关联的AuthorDetail表,属于正向查询:按Author表中字段authorDetail通知ORM引擎join Authordetail表
ret = Author.objects.filter(name="alex").values("authorDetail__telephone")
print(ret)      # <QuerySet [{'authorDetail__telephone': 110}]>

# 方式二:
# 需求:通过AuthorDetail表join与其关联的Author表,属于反向查询:按表名小写author通知ORM引擎join Author表
ret = AuthorDetail.objects.filter(author__name="alex").values("telephone")
print(ret)      # <QuerySet [{'telephone': 110}]>

4、进阶练习(连续跨表)

# 练习:手机号以110开头的作者出版过得所有书籍名称及书籍出版社名称
# 方式一:
# 需求:通过Book表join AuthorDetail表,Book与AuthorDetail无关联,因此必须连续跨表
# book,book_authors,author,authordetail,publish五张表join
ret = Book.objects.filter(authors__authorDetail__telephone__startswith="110").values("title", "publish")
print(ret)      # <QuerySet [{'title': '金瓶*梅', 'publish': 1}]>

# 方式二:
# 需求:以作者为基表,Author表join与其关联的authorDetail,属于正向查询,找到authorDetail下telephone属性,查看110开头的电话的作者。
ret = Author.objects.filter(authorDetail__telephone__startwith="110").values("book__title", "book__publish__name")
print(ret)

5、related_name

  反向查询时,如果定义了related_name ,则用related_name替换表名,例如: 

publish = ForeignKey(Blog, related_name='bookList')

  练习: 查询人民出版社出版过的所有书籍的名字与价格(一对多)

# 反向查询 不再按表名:book,而是related_name:bookList
    queryResult=Publish.objects
              .filter(name="人民出版社")
              .values_list("bookList__title","bookList__price") 

 六、聚合查询和分组查询

  先了解sql中的聚合与分组概念。

1、聚合:aggregate(*args, **kwargs)

# 查询所有书籍的平均价格
from django.db.models import Avg,Max,Min,Count

ret = Book.objects.all().aggregate(Avg("price"))
print(ret)   # {'price__avg': 100.0}   返回值是一个字典,键自动由字段和聚合函数拼接组成

  aggregate()QuerySet 的一个终止子句,意思是说,它返回一个包含一些键值对的字典聚合 aggregate:返回值是一个字典,不再是一个queryset。

  键的名称是聚合值的标识符,值是计算出来的聚合值。键的名称是按照字段和聚合函数的名称自动生成出来的。

如果你想要为聚合值指定一个名称,可以向聚合子句提供它:

# 自定义键:
ret = Book.objects.all().aggregate(avg_price=Avg("price"))
print(ret)   # {'avg_price': 100.0}

如果你希望生成不止一个聚合,你可以向aggregate()子句中添加另一个参数。所以,如果你也想知道所有图书价格的最大值和最小值,可以这样查询:

ret = Book.objects.all().aggregate(avg_price=Avg("price"),max_price=Max("price"))
print(ret)   # {'avg_price': 100.0, 'max_price': Decimal('100.00')}

2、分组:annotate()

  为调用的QuerySet中每一个对象都生成一个独立的统计值(统计方法用聚合函数)。

  前置准备创建Emp表:

class Emp(models.Model):
    name=models.CharField(max_length=32)
    age=models.IntegerField()
    salary=models.DecimalField(max_digits=8,decimal_places=2)
    dep=models.CharField(max_length=32)
    province=models.CharField(max_length=32)

  添加数据如下:

(1)单表分组查询

  单表分组查询的ORM语法:单表模型.objects.values("group by的字段").annotate(聚合函数("统计字段"))

# --------------------------->分组查询 annotate:返回值依然是queryset
# 单表分组查询
# 示例一:查询每个部门的名称及员工平均薪水
# select dep,Avg(salary) from emp group by dep;
ret = Emp.objects.values("dep").annotate(avg_salary=Avg('salary'))
print(ret)    # <QuerySet [{'dep': '教学部', 'avg_salary': 51000.0}, {'dep': '保安部', 'avg_salary': 5000.0}]>

# 单表分组查询的ORM语法:单表模型.objects.values("group by的字段").annotate(聚合函数("统计字段"))

# 实例二:查询每个省份的名称和员工数
ret = Emp.objects.values("province").annotate(c=Count("id"))
print(ret)    # <QuerySet [{'province': '山东省', 'c': 2}, {'province': '河北省', 'c': 1}]>

  注意:在单表分组下,按照主键进行group by 是没有任何意义的。

# annotate是按照前面显示的字段group by。
ret = Emp.objects.all()   # select * from emp;
print(ret)

ret = Emp.objects.values("name")    # select name from emp;
print(ret)

# 下面代表的是对所有字段进行group by
Emp.objects.all().annotate(avg_salary=Avg("salary"))

 (2)多表分组查询

  多表分组查询示例:

 Book表
        id   title    date      price  publish_id
        1	红楼梦	2012-12-12	101	   1
        2	西游记	2012-12-12	101	   1
        3	三国演绎	2012-12-12	101	   1
        4	金瓶*梅	2012-12-12	301	   2

Publish表
        id    name      addr   email
        1	人民出版社	北京	   123@qq.com
        2	南京出版社	南京	   345@163.com


1 查询每一个出版社出版的书籍个数
Book.objects.values("publish_id").annotate(Count("id"))   # 单表查询即可完成

2 示例 查询每一个出版社的名称以及出版的书籍个数
    join sql : select * from Book inner join Publish on book.publish_id=publish.id

两张表合并为一张大表:
   id   title     date         price    publish_id   publish.id     publish.name  publish.addr     publish.email
    1   红楼梦	2012-12-12	101	   1            1	       人民出版社	     北京	     123@qq.com
    2   西游记	2012-12-12	101	   1            1	       人民出版社	     北京	     123@qq.com
    3   三国演绎	2012-12-12	101	   1            1	       人民出版社	     北京	     123@qq.com
    4   金瓶*梅	2012-12-12	301	   2            2	       南京出版社	     南京	     345@163.com


 分组查询sql:
   select publish.name,Count("title") from Book inner join Publish on book.publish_id=publish.id 
                             group by publish.id;

(3)思考:如何用ORM语法进行跨表分组查询?

  在单表分组下,按照主键进行group by 是没有任何意义的;但是在多表下对主键进行group by是有意义的。

# 查询每一个出版社的名称以及出版的书籍个数
ret = Publish.objects.values("nid").annotate(c=Count("book__title"))  # 与单表分组查询的区别就是统计的字段跨表了
print(ret)   # <QuerySet [{'nid': 1, 'c': 2}, {'nid': 2, 'c': 1}, {'nid': 3, 'c': 0}]>

# 方式一:由于nid不是符合需求,改用name分组:
ret = Publish.objects.values("name").annotate(c=Count("book__title"))  # 与单表分组查询的区别就是统计的字段跨表了
print(ret)    # <QuerySet [{'name': '人民出版社', 'c': 2}, {'name': '苹果出版社', 'c': 1}, {'name': '橘子出版社', 'c': 0}]>

# 方式二:用nid分组,用values去取,也能查询到名称信息
ret = Publish.objects.values("nid").annotate(c=Count("book__title")).values("name","c")
print(ret)    # <QuerySet [{'name': '人民出版社', 'c': 2}, {'name': '苹果出版社', 'c': 1}, {'name': '橘子出版社', 'c': 0}]>

  用一个新例子帮助理解:

# 查询每一个作者的名字以及出版过得书籍的最高价格
"""
SELECT app01_author.name,Max(app01_book.price) FROM app01_book
INNER JOIN app01_book_authors ON app01_book.nid = app01_book_authors.book_id
INNER JOIN app01_author ON app01_author.nid=app01_book_authors.author_id
GROUP BY app01_author.nid;
"""
# pk可以指代id或nid,join book表反向查询
ret = Author.objects.values("pk").annotate(max_price=Max("book__price")).values("name","max_price")
print(ret)  # <QuerySet [{'name': 'alex', 'max_price': Decimal('100.00')}, {'name': 'egon', 'max_price': None}]>

  另一个示例:

# 示例:查询查询每一个书籍的名称以及对应的作者个数
"""
SELECT app01_book.title,COUNT(app01_author.name) FROM app01_book
INNER JOIN app01_book_authors ON app01_book.nid = app01_book_authors.book_id
INNER JOIN app01_author ON app01_author.nid=app01_book_authors.author_id
GROUP BY app01_book.nid;
"""
ret=Book.objects.values("pk").annotate(c=Count("authors__name")).values("title","c")
print(ret)  # <QuerySet [{'title': '金瓶*梅', 'c': 1}, {'title': '红楼梦', 'c': 0}, {'title': '西游记', 'c': 0}]>

  跨表分组查询另一种写法:

# 每一个后的表模型.objects.annotate(聚合函数(关联表__统计字段)).values("表模型的所有字段以及统计字段")
# 示例:查询每一个出版社的名称及出版社书籍个数
ret = Publish.objects.all().annotate(c=Count("book__title")).values("name","email","c")
# 省略all()的简略写法
ret = Publish.objects.annotate(c=Count("book__title")).values("name", "email", "c")
print(ret)   # <QuerySet [{'name': '人民出版社', 'email': '123@qq.com', 'c': 2}, {'name': '苹果出版社', 'email': 'yuan@163.com', 'c': 1}, {'name': '橘子出版社', 'email': 'egon@qq.com', 'c': 0}]>

  总结跨表的分组查询的模型:

每一个后的表模型.objects.values("pk").annotate(聚合函数(关联表__统计字段)).values("表模型的所有字段以及统计字段")

每一个后的表模型.objects.annotate(聚合函数(关联表__统计字段)).values("表模型的所有字段以及统计字段")

(4)查询练习

# 练习1:统计每一个出版社的最便宜的书
# 模板:每一个后的表模型.objects.annotate(聚合函数(关联表__统计字段)).values("表模型的所有字段以及统计字段")
publishList = Publish.objects.annotate(MinPrice=Min("book__price"))
for publish_obj in publishList:
    print(publish_obj.name,publish_obj.MinPrice)
"""
人民出版社 100.00
苹果出版社 100.00
橘子出版社 None
"""
# annotate的返回值是querySet,如果不想遍历对象,可以用上valuelist:
queryResult = Publish.objects.annotate(MinPrice=Min("book__price")).values_list("name", "MinPrice")
print(queryResult)  # <QuerySet [('人民出版社', Decimal('100.00')), ('苹果出版社', Decimal('100.00')), ('橘子出版社', None)]>


# 练习3:统计每一本以py开头的书籍的作者个数
# 每一个后的表模型.objects.values("pk").annotate(聚合函数(关联表__统计字段)).values("表模型的所有字段以及统计字段")
ret = Book.objects.filter(title__startswith="py").values("pk").annotate(c=Count("authors__name")).values("title","c")
print(ret)   # <QuerySet []>

# 练习4:统计不止一个作者的图书  gt:大于
ret = Book.objects.values("pk").annotate(c=Count("authors__name")).filter(c__gt=1).values("title", "c")
print(ret)   # <QuerySet []>

# 练习5:根据一本图书作者数量的多少对查询集queryset进行排序
Book.objects.annotate(num_authors=Count("authors")).order_by("num_authors")

# 练习6:查询各个作者出的书的总价格
# 按author表的所有字段group by
from django.db.models import Sum
queryResult = Author.objects.annotate(sum_price=Sum("book__price")).values_list("name", "sum_price")
print(queryResult)   # <QuerySet [('alex', Decimal('100.00')), ('egon', None)]>

 七、F查询和Q查询

1、F查询

  Django 提供 F() 来对两个字段的值做比较比较。F() 的实例可以在查询中引用字段,来比较同一个 model 实例中两个不同字段的值。

修改models.py内的book类,添加评论数和已读数:

class Book(models.Model):
    nid = models.AutoField(primary_key=True)
    title = models.CharField(max_length=32)
    publishDate = models.DateField()
    price = models.DecimalField(max_digits=5, decimal_places=2)
    # 临时更改表结构:
    # read_num = models.IntegerField()
    # comment_num = models.IntegerField()
    """  由于临时更改没有添加默认值,会提示如下报错:
    Please select a fix:
    1) Provide a one-off default now (will be set on all existing rows with a null value for this column)
    2) Quit, and let me add a default in models.py
    """
    read_num = models.IntegerField(default=0)
    comment_num = models.IntegerField(default=0)

然后在book表内添加修改评论数和已读数:

from django.db.models import F
# 临时更改表结构后,需要查看书籍评论次数大于已读次数
ret = Book.objects.filter(comment_num__gt=F("read_num"))
print(ret)   # <QuerySet [<Book: 红楼梦>, <Book: 金瓶*梅>]>

Django 还支持 F() 对象之间以及 F() 对象和常数之间的加减乘除和取模的操作。

# 查询已读数大于评论数2倍的书籍
ret = Book.objects.filter(read_num__gt=F("comment_num")*2)
print(ret)   # <QuerySet [<Book: 西游记>]>

修改操作也可以使用F函数,比如将每一本书的价格提高10元:

# 所有书籍的价格提升10元
Book.objects.all().update(price=F("price")+10)

2、Q查询

  filter() 等方法中的关键字参数查询都是一起进行“AND” 的。 如果需要执行更复杂的查询(例如OR 语句)可以使用Q对象

from django.db.models import Q
# 书籍的名称为红楼梦或者书的价格为110   Q表示或
ret = Book.objects.filter(Q(title="红楼梦")|Q(price=110))
print(ret)   # <QuerySet [<Book: 红楼梦>, <Book: 西游记>, <Book: 金瓶*梅>]>

  Q 对象可以使用& 和| 操作符组合起来。当一个操作符在两个Q 对象上使用时,它产生一个新的Q 对象。等同于下面的语句:

WHERE title ="红楼梦" OR price > 110

  可以组合& 和|  操作符以及使用括号进行分组来编写任意复杂的Q 对象。

  同时,Q 对象可以使用~ 操作符取反,这允许组合正常的查询和取反(NOT) 查询:

# 书籍名称不为红楼梦或者书的价格为110   ~表示非
ret=Book.objects.filter(~Q(title="红楼梦")|Q(price=110))
print(ret)  # <QuerySet [<Book: 红楼梦>, <Book: 西游记>, <Book: 金瓶*梅>]>

  查询函数可以混合使用Q对象和关键字参数。所有提供给查询函数的参数(关键字参数或Q 对象)都将"AND”在一起。但是,如果出现Q 对象,它必须位于所有关键字参数的前面。例如:

# 在2012年或2013年出版的名称包含"红"
bookList=Book.objects.filter(Q(publishDate__year=2012) | Q(publishDate__year=2014),title__icontains="红")
print(bookList)    # <QuerySet [<Book: 红楼梦>]>

  还有一种特别的Q对象用法,查询条件可以不用是字段名称,可以使用字符串来完成查询。

def test(request):
    from django.db.models import Q
    # Q查询普通写法:
    ret = Book.objects.all().filter(Q(title="go")|Q(price=103))
    print("ret", ret)    # ret <QuerySet [<Book: go>]>
    # Q查询特殊用法:
    q = Q()
    q.connectiion = "or"
    q.children.append(("title", "go"))
    q.children.append(("price", 103))
    print("q", q)   # q (AND: ('title', 'yuan'), ('price', 123))
    return HttpResponse(ret, q)   # q (AND: ('title', 'go'), ('price', 103))

 

posted @ 2018-07-08 03:00  休耕  阅读(956)  评论(0编辑  收藏  举报