摘要：
爬虫相关随笔 爬虫开发之get和post请求 selenium alert JS弹窗问题处理 Selenium爬取元素定位 爬虫开发13.UA池和代理池在scrapy中的应用 爬虫开发14.scrapy框架之分布式操作 爬虫开发12.selenium在scrapy中的应用 爬虫开发11.scrapy
阅读全文
posted @ 2020-04-29 10:02
sunny-cheng
阅读(142)
推荐(0)
编辑
摘要：
打开所在页面的控制台Request Method 对应的就是请求方式 1.get请求 2.post请求 请求方式特征 1.传参方式 get 提交的数据放在URL后，以？分割URL和传输数据，参数以&相连 post 放在HTTP包的body中2.各自特长 get请求重点在从服务器上获取资源，而post
阅读全文
posted @ 2020-04-28 21:43
sunny-cheng
阅读(679)
推荐(0)
编辑
摘要：
APScheduler模块四大组件： 触发器 triggers ：用于设定触发任务的条件 任务储存器 job stores：用于存放任务，把任务存放在内存或数据库中 执行器 executors： 用于执行任务，可以设定执行模式为单线程或线程池 调度器 schedulers： 把上方三个组件作为参数，
阅读全文
posted @ 2020-01-08 12:12
sunny-cheng
阅读(404)
推荐(0)
编辑
摘要：
django Termipython ：manage.py makemigrations 报错：python3 manage.py makemigrations zsh: command not found: python3 pycharm virtualenv Environment 虚拟环境创建
阅读全文
posted @ 2019-12-24 23:37
sunny-cheng
阅读(4278)
推荐(0)
编辑
摘要：
python pip安装三方库时WARNING提示有木有？ 错了错了 ，截图错了一个warning 提示我pip升级 ，0.01秒时间 我反应过来了，这还不简单吗 复制 ：pip install --upgrade pip 然而发现没有用， 这时候可以尝试一下用镜像安装 pip3 install l
阅读全文
posted @ 2019-11-28 22:02
sunny-cheng
阅读(4020)
推荐(0)
编辑
摘要：
一、中间件的概念 中间件顾名思义，是介于request与response处理之间的一道处理过程，相对比较轻量级，并且在全局上改变django的输入与输出。因为改变的是全局，所以需要谨慎实用，用不好会影响到性能。Django的中间件的定义： 如果你想修改请求，例如被传送到view中的HttpReque
阅读全文
posted @ 2019-10-06 11:04
sunny-cheng
阅读(154)
推荐(0)
编辑
摘要：
auth模块 from django.contrib import auth auth一些方法 创建用户 #引入auth模块的数据库 from django.contrib.auth.models import User ＃创建一个对象 User.objects.create_user(userna
阅读全文
posted @ 2019-10-06 10:53
sunny-cheng
阅读(130)
推荐(0)
编辑
摘要：
会话跟踪技术 1 什么是会话跟踪技术我们需要先了解一下什么是会话！可以把会话理解为客户端与服务器之间的一次会晤，在一次会晤中可能会包含多次请求和响应。 例如你给10086打个电话，你就是客户端，而10086服务人员就是服务器了。从双方接通电话那一刻起，会话就开始了，到某一方 挂断电话表示会话结束。在
阅读全文
posted @ 2019-10-06 10:23
sunny-cheng
阅读(153)
推荐(0)
编辑
摘要：
forms组件 概念 django框架提供的一个Form类，来进行web开发中的表单提交数据的处理工作。 校验字段功能 models.py views.py 定义检验规则： 前端提交的forms校验 form.is_valid() 判断form类所校验的字段是否通过，返回bool值，是所有检验的类都
阅读全文
posted @ 2019-10-05 23:36
sunny-cheng
阅读(163)
推荐(0)
编辑
摘要：
请求头ContentType ContentType指的是请求体的编码类型，常见的类型共有3种： 1 application/x-www-form-urlencoded 这应该是最常见的 POST 提交数据的方式了。浏览器的原生 表单，如果不设置 enctype 属性，那么最终就会以 applica
阅读全文
posted @ 2019-10-03 15:27
sunny-cheng
阅读(623)
推荐(0)
编辑
