摘要: 淘宝商品比价定向爬虫 功能描述: 1、目标:获取淘宝搜索页面的信息,提取其中的商品名称和价格 2、理解:淘宝的搜索接口,翻页处理 技术路线:requests + re 程序的结构设计: 1、提交商品搜索的请求,循环获取页面。 2、对于每个页面,提取商品名称和价格信息。 3、将信息输出到屏幕上。 重要 阅读全文
posted @ 2018-12-06 17:31 Mr.chris 阅读(1819) 评论(0) 推荐(0) 编辑
摘要: 本次是股票定向爬取,从东方财富网上获取所有股票代码,然后在百度股票网上打开每个个股股票信息,提取所要保存的股票信息。采取的技术路线是re+bs4+requests。 阅读全文
posted @ 2018-12-06 16:25 Mr.chris 阅读(977) 评论(0) 推荐(0) 编辑