10 2021 档案
摘要:flask Flask是由python实现的一个web微框架,让我们可以使用Python语言快速实现一个网站或Web服务 Flask 是轻量级的框架,自由,灵活,可扩展性强,核心基于Werkzeug WSGI工具 和jinja2 模板引擎 适用于做小网站以及web服务的API,开发大型网站无压力,但
阅读全文
摘要:scrapyrt为scrapy提供了一个http接口,有了它,我们不用再执行命令,而是直接请求一个http接口来启动项目,如果项目是部署在远程的,会比较方便。 1、安装: pip install scrapyrt 2、在任意一个项目中运行scrapyrt,再此我们在quotes爬虫项目中运行。默认会
阅读全文
摘要:如果只是在Flask中调用Scrapy爬虫,可能会遇到如下错误: ValueError: signal only works in main thread # 或者 twisted.internet.error.ReactorNotRestartable 解决的办法有几个。 1 使用python子进
阅读全文
摘要:Splash是一个javascript渲染服务。它是一个带有HTTP API的轻量级Web浏览器,使用Twisted和QT5在Python 3中实现。QT反应器用于使服务完全异步,允许通过QT主循环利用webkit并发。一些Splash功能: 并行处理多个网页 获取HTML源代码或截取屏幕截图 关闭
阅读全文
摘要:一、开发接口的作用: 1、mock接口:模拟一些接口。有一些有关联的接口,在别的接口没有开发好的时候,需要用这个接口,就可以写一个假接口,返回想要的结果来模拟这个接口。 2、知道服务端的开发逻辑,有助于测试; 3、比如不想让其他人看很多数据库中的数据,可以通过接口只返回一部分数据。 二、开发一个接口
阅读全文