C# 爬虫框架实现 概述
目录:
开发目的:写这个程序主要是为了找工作。因为没项目在简历上吃大亏,空口无凭,只能做出点东西证明自己能做事情。其次是为了练习使用MVC做的博客网站提供素材。
需自定义:
- patternlist匹配项定义
- 定义结果输出方式:本地sqlserver 的spider数据库,或者终端
- 种子库
需要:
- 开发使用了开源类:CSQuery解析HTML,所以patternlist匹配项的书写规范要符合CSQuery,其实基本和CSS选择器差不多
- 使用visual studio 2015 update2
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步