五杀摇滚小拉夫

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2024年1月3日

摘要: Scrapy的功能强大,爬取效率高,相关扩展组件多,可配置和可拓展程度非常高。基于Twisted的异步处理框架,是纯python实现的爬虫框架,架构清晰,模块之间耦合度低,可扩展型极强,可以灵活完成各种需求。Scrapy架构重要组成:Engine:引擎,处理系统的数据流数据、触发事务,框架核心。It 阅读全文
posted @ 2024-01-03 11:05 五杀摇滚小拉夫 阅读(2) 评论(0) 推荐(0) 编辑