ORM回顾
内容回顾
ORM已经学过的内容：
1.Django项目如何使用ORM连接数据库
1.手动创建数据库
2.在settings.py中配置数据库连接信息
DATABASES = {
'default': {
'ENGINE': 'django.db.backends.mysql',
'NAME': 'publisher', #数据库的名字
'USER':'root',
'PASSWORD':'....',
'HOST':'127.0.0.1', #IP
'PORT':3306, #端口
'CHARSET':'utf8',
}
}
3.在项目目录下的__init__.py中告诉Django用pymysql来代替MySQLdb来连接数据库
#要在项目下的__init__.py中写
import pymysql
pymysql.install_as_MySQLdb()
4.在app/models.py中定义类，类一定要继承models.Models
from django.db import models
# Create your models here.
class Student(models.Model):
id = models.AutoField(primary_key=True) #自增的意思
name = models.CharField(max_length=32) #类似于varchar(32)
'''
models.py 数据库
类 数据表
属性 字段
对象 数据行
'''
字段
AutoField(Field)
- int自增列，必须填入参数 primary_key=True
BigAutoField(AutoField)
- bigint自增列，必须填入参数 primary_key=True
注：当model中如果没有自增列，则自动会创建一个列名为id的列
from django.db import models
class UserInfo(models.Model):
# 自动创建一个列名为id的且为自增的整数列
username = models.CharField(max_length=32)
class Group(models.Model):
# 自定义自增列
nid = models.AutoField(primary_key=True)
name = models.CharField(max_length=32)
SmallIntegerField(IntegerField):
- 小整数 -32768 ～ 32767
PositiveSmallIntegerField(PositiveIntegerRelDbTypeMixin, IntegerField)
- 正小整数 0 ～ 32767
IntegerField(Field)
- 整数列(有符号的) -2147483648 ～ 2147483647
PositiveIntegerField(PositiveIntegerRelDbTypeMixin, IntegerField)
- 正整数 0 ～ 2147483647
BigIntegerField(IntegerField):
- 长整型(有符号的) -9223372036854775808 ～ 9223372036854775807
BooleanField(Field)
- 布尔值类型
NullBooleanField(Field):
- 可以为空的布尔值
CharField(Field)
- 字符类型
- 必须提供max_length参数， max_length表示字符长度
TextField(Field)
- 文本类型
EmailField(CharField)：
- 字符串类型，Django Admin以及ModelForm中提供验证机制
IPAddressField(Field)
- 字符串类型，Django Admin以及ModelForm中提供验证 IPV4 机制
GenericIPAddressField(Field)
- 字符串类型，Django Admin以及ModelForm中提供验证 Ipv4和Ipv6
- 参数：
protocol，用于指定Ipv4或Ipv6， 'both',"ipv4","ipv6"
unpack_ipv4， 如果指定为True，则输入::ffff:192.0.2.1时候，可解析为192.0.2.1，开启此功能，需要protocol="both"
URLField(CharField)
- 字符串类型，Django Admin以及ModelForm中提供验证 URL
SlugField(CharField)
- 字符串类型，Django Admin以及ModelForm中提供验证支持 字母、数字、下划线、连接符（减号）
CommaSeparatedIntegerField(CharField)
- 字符串类型，格式必须为逗号分割的数字
UUIDField(Field)
- 字符串类型，Django Admin以及ModelForm中提供对UUID格式的验证
FilePathField(Field)
- 字符串，Django Admin以及ModelForm中提供读取文件夹下文件的功能
- 参数：
path, 文件夹路径
match=None, 正则匹配
recursive=False, 递归下面的文件夹
allow_files=True, 允许文件
allow_folders=False, 允许文件夹
FileField(Field)
- 字符串，路径保存在数据库，文件上传到指定目录
- 参数：
upload_to = "" 上传文件的保存路径
storage = None 存储组件，默认django.core.files.storage.FileSystemStorage
ImageField(FileField)
- 字符串，路径保存在数据库，文件上传到指定目录
- 参数：
upload_to = "" 上传文件的保存路径
storage = None 存储组件，默认django.core.files.storage.FileSystemStorage
width_field=None, 上传图片的高度保存的数据库字段名（字符串）
height_field=None 上传图片的宽度保存的数据库字段名（字符串）
DateTimeField(DateField)
- 日期+时间格式 YYYY-MM-DD HH:MM[:ss[.uuuuuu]][TZ]
DateField(DateTimeCheckMixin, Field)
- 日期格式 YYYY-MM-DD
TimeField(DateTimeCheckMixin, Field)
- 时间格式 HH:MM[:ss[.uuuuuu]]
DurationField(Field)
- 长整数，时间间隔，数据库中按照bigint存储，ORM中获取的值为datetime.timedelta类型
FloatField(Field)
- 浮点型
DecimalField(Field)
- 10进制小数
- 参数：
max_digits，小数总长度
decimal_places，小数位长度
BinaryField(Field)
- 二进制类型
字段相关内容
5.执行两条命令
1.在哪里执行
在项目的根目录下（含有manager.py文件的那个目录）
2.命令
#将models.py文件中的改动记录在小本本（app/migrations/ooxx_***.py）上
python manager.py makemigrations
#将改动翻译成SQL语句，去数据库中执行
python manager.py migrate
2.表与表之间的关系
一对一（作者表和作者详情表）
什么时候使用一对一：
当一张表的某一些字段查询的比较频繁，另外一些字段查询的不是特别频繁，把不怎么常用的字段单独拿出来做成一张表，然后用一对一关联起来
# 作者表 class Author(models.Model): id = models.AutoField(primary_key=True) name = models.CharField(max_length=16,null=False,unique=True) #告诉ORM 我这张表和Book表是多对多关系，ORM就帮我自动生成了第三张表 book = models.ManyToManyField(Book) #作者表 和 作者详情表 一对一关系 detail = models.OneToOneField('AuthorDetail',on_delete=models.CASCADE) def __str__(self): return "<Author Object:{}>".format(self.name) # 作者详情 class AuthorDetail(models.Model): hobby = models.CharField(max_length=32) addr = models.CharField(max_length=128)
#查询操作
author_obj = Author.objects.get(id=1)
obj = author_obj.detail
print(obj.hobby,obj.addr)
>>>茶饭 天水
注意：这里只能用get(),不能用filter(),否则会查不到
一对多（图书管理系统中的出版社和书的关系）
#出版社表
class Publisher(models.Model):
id = models.AutoField(primary_key=True)
name = models.CharField(max_length=50,null=False,unique=True)
#书表
class Book(models.Model):
id = models.AutoField(primary_key=True)
name = models.CharField(max_length=50, null=False, unique=True)
#通过外键和出版社建立联系
publisher = models.ForeignKey(Publisher,on_delete=models.CASCADE)
#在数据库中没有publisher这个字段
数据库中实际生产的 只有一个publisher_id字段（自动加上的）
多对多（书和作者之间的关系）
1.ORM自动帮我创建第三张表
#这里的models是Django内置的models模块 from django.db import models
#出版社表
class Publisher(models.Model):
id = models.AutoField(primary_key=True)
name = models.CharField(max_length=50,null=False,unique=True)
#书表
class Book(models.Model):
id = models.AutoField(primary_key=True)
name = models.CharField(max_length=50, null=False, unique=True)
#通过外键和出版社建立联系
publisher = models.ForeignKey(Publisher,on_delete=models.CASCADE)
#作者表
class Author(models.Model):
id = models.AutoField(primary_key=True)
name = models.CharField(max_length=50, null=False, unique=True)
#通过第三张表和书籍表建立联系
books = models.ManyToManyField(Book)
2.自己创建第三张表，利用外键分别关联作者和书
但是查询比较麻烦，因为没法使用ORM提供的便利方法
# 书表 class Book(models.Model): id = models.AutoField(primary_key=True) price = models.DecimalField(max_digits=5,decimal_places=2,default=99.99) name = models.CharField(max_length=64, null=False, unique=True) #和出版社相关的外键字段,他是Publisher中的一个出版社对象，但是在数据库中是publisher_id publisher = models.ForeignKey(Publisher,on_delete=models.CASCADE) def __str__(self): return "<Book Object:{}>".format(self.name) #自己动手 创建作者和书关联的第三张表 # 此时 在ORM层面 作者和书就没有多对多的关系了 class Author2Book(models.Model): id = models.AutoField(primary_key=True) #作者ID author = models.ForeignKey('Author',on_delete=models.CASCADE) #书ID book = models.ForeignKey(Book,on_delete=models.CASCADE) # 作者表 class Author(models.Model): id = models.AutoField(primary_key=True) name = models.CharField(max_length=16,null=False,unique=True) #告诉ORM 我这张表和Book表是多对多关系，ORM就帮我自动生成了第三张表 # book = models.ManyToManyField(Book) def __str__(self): return "<Author Object:{}>".format(self.name) #注意：当你要建立外键的表在你的表的下面是，要把下面的表用''装饰，不然检索不到该表
3.自己创建第三张表，使用ORM的MangToMangFiled()
中介模型
# 书表 class Book(models.Model): id = models.AutoField(primary_key=True) price = models.DecimalField(max_digits=5,decimal_places=2,default=99.99) name = models.CharField(max_length=64, null=False, unique=True) #和出版社相关的外键字段,他是Publisher中的一个出版社对象，但是在数据库中是publisher_id publisher = models.ForeignKey(Publisher,on_delete=models.CASCADE) def __str__(self): return "<Book Object:{}>".format(self.name) #自己动手 创建作者和书关联的第三张表 # 此时 在ORM层面 class Author2Book(models.Model): id = models.AutoField(primary_key=True) #作者ID author = models.ForeignKey('Author',on_delete=models.CASCADE) #书ID book = models.ForeignKey(Book,on_delete=models.CASCADE) class Meta: #在Author2Book中author_id和book_id不能有同时重复的 unique_together = ('author','book') # 作者表 class Author(models.Model): id = models.AutoField(primary_key=True) name = models.CharField(max_length=16,null=False,unique=True) #通过through='Author2Book',through_fields=('author','book')来指定使用我创建的第三张表来构建多对多的关系 books = models.ManyToManyField(Book,through='Author2Book',through_fields=('author','book'))
#第一个字段：多对多设置在哪一张表中，第三张表应该什么字段找到这张表，就把这个字段写在前面 def __str__(self): return "<Author Object:{}>".format(self.name)
注意：
在中介模型 的情况下，第一种方法（ORM自动创建的方法）中的
add(),remove(),clear(),set()方法都不能用了，：
author_obj = Author.objects.filter(id=1).first() #要是没有.first()的话就是QuerySet对象
author_obj.books.add() ....
要想向第三张表中插入数据就只能使用create()的方法了:
Author2Book.objects.create(author_id=1,book_id=1)
应该怎么选择：
1.如果你第三张表没有额外的字段，就用第一种
2.如果你第三张表有额外的字段，就用第二种或第三种
3.增删改查操作
单表的增删改查
增
#这里的models是我们自己写类的那个models模块 from models import models
book_obj = models.Book.objects.create(
name=new_book_name,
publisher_id=now_publisher_id（或者publisher = publisher_obj）
)
删
models.Book.objects.get(id=??).delect()
修改
book_obj = models.Book.objects.get(id=9)
book_obj.name = request.POST.get('book_name')
book_obj.publisher_id = request.POST.get('publisher')
book_obj.save()
查
book_list = models.Book.objects.all() 书对象的列表
外键的增删改查
增，删，查同上
book_obj = models.Book.objects.get(id = 1)
book_obj.publisher 是什么？ ****
和我这本书关联的出版社对象
book_obj.publisher.id 和我这本书关联的出版社的id 值
book_obj.publisher.name 和我这本书关联的出版社的name值
book_obj.publisher_id是什么？
和我这本书关联的出版社的id值
多对多操作
查id为1的作者都写过的书：
author_obj = models.Author.objects.get(id=1)
author_obj.books.all() 和我这个作者关联的所有的书的对象
给作者绑定多本书
author_obj = models.Author.objects.get(id=1)
author_obj.books.set([1,2,3]) 把id是1，2，3的书和我这个作者关联上
#添加作者
def author_add(request):
if request.method == 'POST':
#获得传上来的信息
new_author = request.POST.get('author_name')
books = request.POST.getlist('books')
#创建一个作者对象
author_obj = Author.objects.create(name=new_author)
author_obj.book.set(books)
#跳转到作者页面
return redirect('/author_list/')
#获得所以的书籍信息
ret = Book.objects.all()
#跳转到另外一个页面
return render(request,'author_add.html',{'book_list':ret})
ORM中的一般操作
必会的13个
# 查询所以信息
ret = Publisher.objects.all()
print("all():",ret)
print("*"*120)
# get查询，但是如果查询的信息不存在，会报错
ret = Publisher.objects.get(id=1)
print("get:",ret)
print("*" * 120)
#filter,也是查询，查询信息不存在不会报错，只会返回空的QuerySet，以后用filter
ret = Publisher.objects.filter(id=1) #id__gt=1是指id > 1
print("filter:",ret)
print("filter:",ret[0] ) #可以使用索引的形式取出值
print("*" * 120)
#exclude 它包含了与所给筛选条件不匹配的对象
ret = Publisher.objects.exclude(id=1)
print("exclude:",ret)
print("*" * 120)
#values 返回一个ValueQuerySet——一个特殊的QuerySet，里面都是字典，不写的话，就默认所以
ret = Publisher.objects.values("id","name")
print("values:",ret)
print("*" * 120)
#values_list 它与values()非常相似，它返回的是一个元组序列，values返回的是一个字典序列,不写的话，就默认所以
ret = Publisher.objects.values_list("id", "name")
print("values_list:", ret)
print("*" * 120)
# order_by 对查询结果排序
ret = Publisher.objects.all().order_by("id")
print("order_by:",ret)
print("*" * 120)
# reverse 对查询结果反向排序,请注意reverse()通常只能在具有已定义顺序的QuerySet上调用(在model类的Meta中指定ordering或调用order_by()方法)。
ret = Publisher.objects.all().order_by("id").reverse()
print("reverse:", ret)
print("*" * 120)
# count 返回数据库中匹配查询(QuerySet)的对象数量。
ret = Publisher.objects.all().count()
print("count:", ret)
print("*" * 120)
#first 返回第一条记录
ret = Publisher.objects.all().first()
print("first:", ret)
print("*" * 120)
# last 返回最后一条记录
ret = Publisher.objects.all().last()
print("last:", ret)
print("*" * 120)
# exists 如果QuerySet包含数据，就返回True，否则返回False
ret = Publisher.objects.all().exists()
print("exists:", ret)
print("*" * 120)
all(): <QuerySet [<Publisher: <Publisher Object:刘>>, <Publisher: <Publisher Object:成一波>>, <Publisher: <Publisher Object:梅德露>>, <Publisher: <Publisher Object:达布>>, <Publisher: <Publisher Object:郑志龙>>]> ************************************************************************************************************************ get: <Publisher Object:刘> ************************************************************************************************************************ filter: <QuerySet [<Publisher: <Publisher Object:刘>>]> filter: <Publisher Object:刘> ************************************************************************************************************************ exclude: <QuerySet [<Publisher: <Publisher Object:成一波>>, <Publisher: <Publisher Object:梅德露>>, <Publisher: <Publisher Object:达布>>, <Publisher: <Publisher Object:郑志龙>>]> ************************************************************************************************************************ values: <QuerySet [{'id': 1, 'name': '刘'}, {'id': 2, 'name': '成一波'}, {'id': 5, 'name': '梅德露'}, {'id': 4, 'name': '达布'}, {'id': 3, 'name': '郑志龙'}]> ************************************************************************************************************************ values_list: <QuerySet [(1, '刘'), (2, '成一波'), (5, '梅德露'), (4, '达布'), (3, '郑志龙')]> ************************************************************************************************************************ order_by: <QuerySet [<Publisher: <Publisher Object:刘>>, <Publisher: <Publisher Object:成一波>>, <Publisher: <Publisher Object:郑志龙>>, <Publisher: <Publisher Object:达布>>, <Publisher: <Publisher Object:梅德露>>]> ************************************************************************************************************************ reverse: <QuerySet [<Publisher: <Publisher Object:梅德露>>, <Publisher: <Publisher Object:达布>>, <Publisher: <Publisher Object:郑志龙>>, <Publisher: <Publisher Object:成一波>>, <Publisher: <Publisher Object:刘>>]> ************************************************************************************************************************ count: 5 ************************************************************************************************************************ first: <Publisher Object:刘> ************************************************************************************************************************ last: <Publisher Object:梅德露> ************************************************************************************************************************ exists: True ************************************************************************************************************************
在Python脚本中调用Django环境
import os
if __name__ == '__main__':
# 加载Django项目配置
os.environ.setdefault("DJANGO_SETTINGS_MODULE", "day69.settings")
#导入Django，并启动Django项目
import django
django.setup()
#然后在里面就可以调用Django环境了
#如：
from app01.models import Publisher
# 查询所以信息
ret = Publisher.objects.all()
print("all():",ret)
print("*"*120)
在Python脚本中调用Django环境中怎样才会在运行界面显示SQL语句
#在Django项目的settings.py文件中，在最后复制粘贴如下代码：
LOGGING = {
'version': 1,
'disable_existing_loggers': False,
'handlers': {
'console':{
'level':'DEBUG',
'class':'logging.StreamHandler',
},
},
'loggers': {
'django.db.backends': {
'handlers': ['console'],
'propagate': True,
'level':'DEBUG',
},
}
}
QuerySet方法大全
################################################################## # PUBLIC METHODS THAT ALTER ATTRIBUTES AND RETURN A NEW QUERYSET # ################################################################## def all(self) # 获取所有的数据对象 def filter(self, *args, **kwargs) # 条件查询 # 条件可以是：参数，字典，Q def exclude(self, *args, **kwargs) # 条件查询 # 条件可以是：参数，字典，Q def select_related(self, *fields) 性能相关：表之间进行join连表操作，一次性获取关联的数据。 总结： 1. select_related主要针一对一和多对一关系进行优化。 2. select_related使用SQL的JOIN语句进行优化，通过减少SQL查询的次数来进行优化、提高性能。 def prefetch_related(self, *lookups) 性能相关：多表连表操作时速度会慢，使用其执行多次SQL查询在Python代码中实现连表操作。 总结： 1. 对于多对多字段（ManyToManyField）和一对多字段，可以使用prefetch_related()来进行优化。 2. prefetch_related()的优化方式是分别查询每个表，然后用Python处理他们之间的关系。 def annotate(self, *args, **kwargs) # 用于实现聚合group by查询 from django.db.models import Count, Avg, Max, Min, Sum v = models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id')) # SELECT u_id, COUNT(ui) AS `uid` FROM UserInfo GROUP BY u_id v = models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id')).filter(uid__gt=1) # SELECT u_id, COUNT(ui_id) AS `uid` FROM UserInfo GROUP BY u_id having count(u_id) > 1 v = models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id',distinct=True)).filter(uid__gt=1) # SELECT u_id, COUNT( DISTINCT ui_id) AS `uid` FROM UserInfo GROUP BY u_id having count(u_id) > 1 def distinct(self, *field_names) # 用于distinct去重 models.UserInfo.objects.values('nid').distinct() # select distinct nid from userinfo 注：只有在PostgreSQL中才能使用distinct进行去重 def order_by(self, *field_names) # 用于排序 models.UserInfo.objects.all().order_by('-id','age') def extra(self, select=None, where=None, params=None, tables=None, order_by=None, select_params=None) # 构造额外的查询条件或者映射，如：子查询 Entry.objects.extra(select={'new_id': "select col from sometable where othercol > %s"}, select_params=(1,)) Entry.objects.extra(where=['headline=%s'], params=['Lennon']) Entry.objects.extra(where=["foo='a' OR bar = 'a'", "baz = 'a'"]) Entry.objects.extra(select={'new_id': "select id from tb where id > %s"}, select_params=(1,), order_by=['-nid']) def reverse(self): # 倒序 models.UserInfo.objects.all().order_by('-nid').reverse() # 注：如果存在order_by，reverse则是倒序，如果多个排序则一一倒序 def defer(self, *fields): models.UserInfo.objects.defer('username','id') 或 models.UserInfo.objects.filter(...).defer('username','id') #映射中排除某列数据 def only(self, *fields): #仅取某个表中的数据 models.UserInfo.objects.only('username','id') 或 models.UserInfo.objects.filter(...).only('username','id') def using(self, alias): 指定使用的数据库，参数为别名（setting中的设置） ################################################## # PUBLIC METHODS THAT RETURN A QUERYSET SUBCLASS # ################################################## def raw(self, raw_query, params=None, translations=None, using=None): # 执行原生SQL models.UserInfo.objects.raw('select * from userinfo') # 如果SQL是其他表时，必须将名字设置为当前UserInfo对象的主键列名 models.UserInfo.objects.raw('select id as nid from 其他表') # 为原生SQL设置参数 models.UserInfo.objects.raw('select id as nid from userinfo where nid>%s', params=[12,]) # 将获取的到列名转换为指定列名 name_map = {'first': 'first_name', 'last': 'last_name', 'bd': 'birth_date', 'pk': 'id'} Person.objects.raw('SELECT * FROM some_other_table', translations=name_map) # 指定数据库 models.UserInfo.objects.raw('select * from userinfo', using="default") ################### 原生SQL ################### from django.db import connection, connections cursor = connection.cursor() # cursor = connections['default'].cursor() cursor.execute("""SELECT * from auth_user where id = %s""", [1]) row = cursor.fetchone() # fetchall()/fetchmany(..) def values(self, *fields): # 获取每行数据为字典格式 def values_list(self, *fields, **kwargs): # 获取每行数据为元祖 def dates(self, field_name, kind, order='ASC'): # 根据时间进行某一部分进行去重查找并截取指定内容 # kind只能是："year"（年）, "month"（年-月）, "day"（年-月-日） # order只能是："ASC" "DESC" # 并获取转换后的时间 - year : 年-01-01 - month: 年-月-01 - day : 年-月-日 models.DatePlus.objects.dates('ctime','day','DESC') def datetimes(self, field_name, kind, order='ASC', tzinfo=None): # 根据时间进行某一部分进行去重查找并截取指定内容，将时间转换为指定时区时间 # kind只能是 "year", "month", "day", "hour", "minute", "second" # order只能是："ASC" "DESC" # tzinfo时区对象 models.DDD.objects.datetimes('ctime','hour',tzinfo=pytz.UTC) models.DDD.objects.datetimes('ctime','hour',tzinfo=pytz.timezone('Asia/Shanghai')) """ pip3 install pytz import pytz pytz.all_timezones pytz.timezone(‘Asia/Shanghai’) """ def none(self): # 空QuerySet对象 #################################### # METHODS THAT DO DATABASE QUERIES # #################################### def aggregate(self, *args, **kwargs): # 聚合函数，获取字典类型聚合结果 from django.db.models import Count, Avg, Max, Min, Sum result = models.UserInfo.objects.aggregate(k=Count('u_id', distinct=True), n=Count('nid')) ===> {'k': 3, 'n': 4} def count(self): # 获取个数 def get(self, *args, **kwargs): # 获取单个对象 def create(self, **kwargs): # 创建对象 def bulk_create(self, objs, batch_size=None): # 批量插入 # batch_size表示一次插入的个数 objs = [ models.DDD(name='r11'), models.DDD(name='r22') ] models.DDD.objects.bulk_create(objs, 10) def get_or_create(self, defaults=None, **kwargs): # 如果存在，则获取，否则，创建 # defaults 指定创建时，其他字段的值 obj, created = models.UserInfo.objects.get_or_create(username='root1', defaults={'email': '1111111','u_id': 2, 't_id': 2}) def update_or_create(self, defaults=None, **kwargs): # 如果存在，则更新，否则，创建 # defaults 指定创建时或更新时的其他字段 obj, created = models.UserInfo.objects.update_or_create(username='root1', defaults={'email': '1111111','u_id': 2, 't_id': 1}) def first(self): # 获取第一个 def last(self): # 获取最后一个 def in_bulk(self, id_list=None): # 根据主键ID进行查找 id_list = [11,21,31] models.DDD.objects.in_bulk(id_list) def delete(self): # 删除 def update(self, **kwargs): # 更新 def exists(self): # 是否有结果 QuerySet方法大全
QuerySet类型相当于一个 列表 ，也就是他的那些方法得到的都是列表
比如：
book_obj = models.Book.objects.get(id=1) ----->得到的是一个对象
book_queryset = models.Book.objects.filter(id=1) ----->得到的是一个QuerySet对象
有：book_queryset[0] == book_obj
2020-03-31
