原创爬虫开源项目——更新维护
前言
已经有十几天没有更新文章了,但是这些天并没有闲着,状态和封面上的人一样,写代码和思考。。。
最近事宜
这些天主要干了些什么事情呢?这个必须要给大家说一下,不然大家以为我消失了呢。这些天一直在维护我github上的两个开源项目,一个是IPProxy(代理IP池),另一个是spider_smooc(慕课网视频抓取器,无需账号密码)。
这两个项目都在博客园进行了说明:
IPProxys开源项目
IPProxy代理池项目已经拥有60多star,这个项目对于爬虫开发者来说是非常有用的,如果你不想花钱买代理IP,这里面抓取到的免费代理IP还是能满足个人的需要。根据大家提出的问题,主要是修复了一些bug,加强了代理验证的功能,同时添加了一些新的代理网站。但是,抓取到的有用代理IP还是有些少,希望大家提供更多免费的代理IP网址。
github:https://github.com/qiyeboy/IPProxys.
如果你感兴趣,请给我更多的star.
spider_smooc开源项目
spider_smooc项目是当初为了快速下载慕课网视频,放到手机上观看的需求(不想在线看)。近期慕课网改变了解析方式,导致视频抓取器失效。本次进行了解析方式的更新,同时添加了使用说明图片。又可以无需账号密码,下载慕课网视频了。
github:https://github.com/qiyeboy/spider_smooc
如果你感兴趣,请给我更多的star.
休息。。。心累
这些天真心感觉到打江山容易,守江山难。但我会一如既往地支持开源,贡献我的思想和程序。。。
如果大家觉得还可以呀,记得推荐呦。
欢迎大家支持我公众号:
本文章属于原创作品,欢迎大家转载分享,禁止修改文章的内容。尊重原创,转载请注明来自:七夜的故事 http://www.cnblogs.com/qiyeboy/
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 分享 3 个 .NET 开源的文件压缩处理库,助力快速实现文件压缩解压功能!
· Ollama——大语言模型本地部署的极速利器
· DeepSeek如何颠覆传统软件测试?测试工程师会被淘汰吗?