随笔分类 - Crawler爬虫
摘要:之前写的一个开源的微博相册下载,需要用户手动进入浏览器开发者工具,查看请求,再获取微博的Cookie。 这样对一些新手小白很不友好,于是想着怎么样才能简化这个流程,让所有人都能轻松使用。 于是我发现了Selenium这个强大的可以实现浏览器操作自动化工具。它支持市面上几乎所有的浏览器,Chrome、
阅读全文
摘要:最近发现一些快手的作者,作品还不错,出于学习研究的目的,决定看一下怎么爬取数据。现在网上有一些爬虫工具,不过大部分都失效了,或者不开源。于是自己就写了一个小工具。先看一下成果: 软件只需要填写作者uid以及网页版的请求Cookie,即可实现自动下载,下载目录在程序根目录下的Download文件夹。
阅读全文
摘要:最近发现Windows聚焦桌面壁纸质量都挺高的,比如下图,无奈图片不给保存。所有只有想办法把他爬下来。 没有这个功能的可以在桌面右击鼠标,选择个性化,背景,Windows聚焦 这样桌面上就出现一个图标 右击这个图标,出现一个弹窗,选择“了解详情” 就打开一个网页,我们按F12打开开发人员工具,点击“
阅读全文