2019年4月22日

scrapy meta信息丢失

摘要: 在做58同城爬二手房时,由于房产详情页内对价格进行了转码处理,所以只能从获取详情页url时同时获取该url对应房产的价格,并通过meta传递给下回调函数 现在问题是,在回调函数中找不到原函数meta信息: 我第一猜想是由于请求经过各种retry重试,和rediret到jump_url、firewal 阅读全文

posted @ 2019-04-22 14:59 Tarantino 阅读(524) 评论(0) 推荐(0) 编辑

导航