摘要: Scrapy 架構圖Spiders --> Scheduler --> Downloader --> 回到 Spiders,過濾抓到的資訊 --> 依 Item Pipeline存抓到的資料想了更深入了解架構可以細讀這篇官方文件在寫 Spider 時心中要有這張圖,很重要!!從 Scrapy Shell 開始吧~Scrapy shell 這是一個 python 直譯器,可以動態顯示執行的結果。Step1. 開啟一個 Scrapy shell 抓以下網站的資料scrapy shell "http://www.dmoz.org/Computers/Programm 阅读全文
posted @ 2014-03-27 22:46 a-jay 阅读(393) 评论(0) 推荐(0) 编辑