摘要: Scrapy爬虫框架的基本用法 Scrapy爬虫框架是一个好东西,可以十分简单快速爬取网站,特别适合那些不分离前后端的,数据直接生成在html文件内的网站。本文以爬取 杭电OJ "http://acm.hdu.edu.cn" 的题目ID和标题为例,做一个基本用法的记录 可参考 "https://ww 阅读全文
posted @ 2019-12-25 15:24 AXiangCoding 阅读(124) 评论(0) 推荐(0) 编辑
摘要: 如何使scrapy爬取信息不打印在命令窗口中 一般采用该条命令启动 但是,由这条命令启动的爬虫,会将所有爬虫运行中的debug信息及抓取到的信息打印在运行窗口中。很乱,也不方便查询。所以,可使用该命令代替: ` 这样就会将原本打印在窗口的所有信息保存在spider.log的文件里了。可以在项目根目录 阅读全文
posted @ 2019-12-25 15:21 AXiangCoding 阅读(1536) 评论(0) 推荐(0) 编辑
摘要: Django REST Framework使用案例和教程 什么是Django REST Framework?简单说就是一款快速构建REST风格API的框架。能够以很少的代码和很简单的方式在Django项目中构建符合REST风格的API。十分适合Django框架的后端的编写 本文参考 "https:/ 阅读全文
posted @ 2019-12-25 12:03 AXiangCoding 阅读(1183) 评论(0) 推荐(0) 编辑