叨客厨子

2018年3月12日

该文被密码保护。阅读全文

posted @ 2018-03-12 16:36 叨客厨子阅读(14) 评论(0) 推荐(0) 编辑

摘要： Scrapy项目创建已经目录详情一、新建项目(scrapy startproject) 在开始爬取之前，必须创建一个新的Scrapy项目。进入自定义的项目目录中，运行下列命令： scrapy.cfg 项目的配置文件 sp1/ 项目的Python模块，将会从这里引用代码 sp1/items.py 项阅读全文

posted @ 2018-03-12 10:33 叨客厨子阅读(595) 评论(0) 推荐(0) 编辑

Scrapy 框架安装

摘要： Scrapy 框架 Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛。框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。 Scrapy架构图(绿线是数据流向)： 1. Scrapy Engi 阅读全文

posted @ 2018-03-12 10:25 叨客厨子阅读(135) 评论(0) 推荐(0) 编辑

爬取抽屉网标题

该文被密码保护。阅读全文

posted @ 2018-03-12 10:24 叨客厨子阅读(9) 评论(0) 推荐(0) 编辑

2018年1月29日

爬虫案例

摘要：爬虫案例爬取汽车之家，指定页面的图片url 1.爬取汽车之家，指定页面的图片url 爬取汽车之家，news页面的标题图片摘要通过requests 登录到github页面通过requests给抽屉文章点赞阅读全文

posted @ 2018-01-29 18:19 叨客厨子阅读(194) 评论(0) 推荐(0) 编辑

爬虫基础以及 re,BeatifulSoup,requests模块使用

摘要：爬虫基础以及BeatifulSoup模块使用爬虫的定义：向网站发起请求，获取资源后分析并提取有用数据的程序爬虫的流程发送请求 request 获取响应内容 response 解析内容 BeatifulSoup 保存数据 mysql 1.Request请求内容 1.1请求方式： 1.2请求url 阅读全文

posted @ 2018-01-29 12:55 叨客厨子阅读(442) 评论(0) 推荐(0) 编辑

2018年1月17日

Django_Admin操作

摘要： Django_Admin == 创建Django_Admin 管理账户添加表到 Django_Admin 中进行管理设置显示为正常名而非 UserInfo object 1.在创建表的时候，添加__str__(self) 定制当前列表页面，显示哪几列数据admin.py 文件中自定义编辑列阅读全文

posted @ 2018-01-17 14:06 叨客厨子阅读(155) 评论(0) 推荐(0) 编辑

2018年1月16日

urls.py路由系统分发的本质

摘要：路由系统分发的本质 == 反向生成redirect跳转url 1.在urls.py中指定url的name 2.在views视图函数中使用reverse指定 INDEX地址应用url的分发include 1.将包含cmdb应用的url请求，转发给cmdb引用中的urls.py中 2.在指定APP的项阅读全文

posted @ 2018-01-16 16:10 叨客厨子阅读(158) 评论(0) 推荐(0) 编辑

2018年1月8日

Django-缓存

摘要：缓存 == 由于Django是动态网站，所有每次请求均会去数据进行相应的操作，当程序访问量大时，耗时必然会更加明显，最简单解决方式是使用：缓存，缓存将一个某个views的返回值保存至内存或者memcache中，5分钟内再有人来访问时，则不再去执行view中的操作，而是直接从内存或者Redis中之前缓阅读全文

posted @ 2018-01-08 17:24 叨客厨子阅读(152) 评论(0) 推荐(0) 编辑

Django-信号

摘要：信号 == 需求:当数据库新增数据时，写一条日志，使用信号实现；Django中提供了“信号调度”，用于在框架执行操作时解耦。通俗来讲，就是一些动作发生的时候，信号允许特定的发送者去提醒一些接受者。信号：Django内置预留的钩子，预留可定制操作的位置;通过自定义函数，将注册到这个钩子里面；当操阅读全文

posted @ 2018-01-08 12:28 叨客厨子阅读(185) 评论(0) 推荐(0) 编辑

公告