scrapy爬虫编写过程中的小技巧

小工具:

关于网页代码中意向信息的查找可以借助几个工具:

第一个——Firefox插件Firebug。

第二个——Firefox插件XPath。可以快速的在网页中对xpath表达式的正确性进行验证。

第三个——scrapy shell.关于其使用可以查看教程。

posted @ 2015-10-17 16:18  fukan  阅读(203)  评论(0编辑  收藏  举报