摘要: Scrapy: Scrapy使用了Twisted作为框架,Twisted有些特殊的地方是它是事件驱动的,并且比较适合异步的代码。对于会阻塞线程的操作包含访问文件、数据库或者Web、产生新的进程并需要处理新进程的输出(如运行shell命令)、执行系统层次操作的代码(如等待系统队列),Twisted提供 阅读全文
posted @ 2019-05-22 21:23 Rollo|St 阅读(208) 评论(0) 推荐(0) 编辑