会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Tony_xiao
博客园
首页
新随笔
联系
管理
订阅
2023年1月19日
进程+线程+队列爬取斗图网
摘要: 需求:爬取斗图网数据 首先我们使用线程的方式,爬取前4页数据 准备工作 图片链接存在页面源代码中 但是,界面使用了懒加载技术,真正的url在data-original中 import requests from lxml import etree from concurrent.futures im
阅读全文
posted @ 2023-01-19 22:57 Tony_xiao
阅读(109)
评论(0)
推荐(0)
编辑
公告