随笔分类 - scrapy
scrpay构造并发送请求&网易招聘职位信息
摘要：scrapy数据建模与请求 学习目标： 应用 在scrapy项目中进行建模 应用 构造Request对象，并发送请求 应用 利用meta参数在不同的解析函数中传递数据 1. 数据建模 通常在做项目的过程中，在items.py中进行数据建模 1.1 为什么建模 定义item即提前规划好哪些字段需要抓，
Scrapy入门使用
摘要：scrapy入门使用 学习目标： 掌握 scrapy的安装 应用 创建scrapy的项目 应用 创建scrapy爬虫 应用 运行scrapy爬虫 应用 scrapy定位以及提取数据或属性值的方法 掌握 response响应对象的常用属性 1 安装scrapy 命令: sudo apt-get ins
