摘要： Scrapy中Item是保存结构数据的地方，Scrapy可以将解析结果以字典形式返回并通过Pipelines中的函数对返回的item进行处理，有点类似Django中的models，却简单的多。 创建Item类： 定义Item非常简单，只需要继承 scrapy.Item 类，并将所有字段都定义为scr 阅读全文

摘要： 安装sqlalchemy： 戳这里 注意: 如果数据库的表格已经存在，可以通过 sqlacodegen模块 生成model。->传送门 sqlacodegen --noviews --noconstraints --noindexes --outfile /Users/_Alex/Desktop/s 阅读全文

摘要： User-Agent： User Agent中文名为用户代理，简称 UA，它是一个特殊字符串头，使得服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本、浏览器渲染引擎、浏览器语言、浏览器插件等。 实际中他是这个样子的： User-Agent:Mozilla/5.0 (Macintos 阅读全文