摘要: 使用scrapy框架出现callback指定的函数不被调用的情况 问题:在学习scrapy框架时,写了一个爬虫,在parse函数里使用yield语句重新请求该网页结果中包含的链接,但是试了好几次parse_info函数都不会被调用 原因:因为自己写了allowed_domains,忘记改随手一写,所 阅读全文
posted @ 2021-08-07 17:16 史可轩 阅读(146) 评论(0) 推荐(0) 编辑
摘要: win10下安装scrapy不成功的问题解决 pip install scrapy 执行命令后发现会报错,一般原因: Scrapy 使用Twisted 这个异步网络库来处理网络通讯所以win10用户先安装Twisted http://www.lfd.uci.edu/~gohlke/pythonlib 阅读全文
posted @ 2021-08-07 17:15 史可轩 阅读(119) 评论(0) 推荐(0) 编辑
摘要: 方法函数区别 class Foo(object): def fench(self): pass Foo.fench() #函数 ​ obj = Foo() #实例化 obj.fench() #方法 通过类直接调用的是函数 通过实例化对象调用的是方法 对于一个类里面的东西到底是函数还是方法取决于谁调用 阅读全文
posted @ 2021-08-07 17:14 史可轩 阅读(44) 评论(0) 推荐(0) 编辑
3 4