django Model orm的批量创建、更新 (bulk_create、bulk_update)

批量创建、更新 (bulk_create、bulk_update)

create

1. 定义一个 model对象的列表，
tmpList=[]
2. 用循环将需要创建的model对象，添加到此列表，
tmpList.append(obj)
3. 使用django提供的bulk_create方法将此对象列表填充，即可实现sql中的批量添加
Obj.objects.bulk_create(tmpList)

update

1. 定义一个 model对象的列表，
tmpList=[]
2. 用循环将需要创建的model对象，添加到此列表，
tmpList.append(obj)
3. 使用django提供的bulk_update方法将此对象列表填充，并且需要显示定义fields字段，更新的字段都要显示体现，即可实现sql中的批量添加
Obj.objects.bulk_update(tmpList，fields=["xx"])

以上批量方法针对对数据量小于10000行（安装我自己的数据库配置测试）的情况，当大于10000行插入会出现mysql的网络传输错误，所以这里处理批量插入或者更新是，可以将tmpList这个临时列表切分为n个10000行（具体行数可以自行调整）的子列表，再分批更新

# 遍历完成后，统一使用django提供的 bulk_create 写入数据库
split_list_size=10000
list_nest = [tmpList[i:i + self.split_list_size] for i in
                         range(0, len(tmpList), self.split_list_size)]
for i in list_nest:
    Obj.objects.bulk_create(i)