会员
周边
新闻
博问
闪存
赞助商
YouClaw
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
029
博客园
首页
新随笔
联系
订阅
管理
2018年10月10日
关于爬取网站的信息遇到的有关问题
摘要: 问题一:在scrapy框架中,使用的xpath去获取网站信息,没能拿到? 解决方法:xpath在scrapy框架中使用需要注意两件事:第一是使用的user-agent和你去获取的xpath,使用的浏览器需要相匹配;第二就是需要注意使用谷歌浏览器的时候一定要删去tbody标签,这样就基本可以成功爬取到
阅读全文
posted @ 2018-10-10 14:00 029黄甲栋
阅读(674)
评论(0)
推荐(0)
公告