摘要: 昨天写了一篇关于“c#批量抓取免费代理并验证有效性”的文章,接着昨天的目标继续完成吧,最终实现的目的就是刷新csdn文章的浏览量(实际上很简单,之前博客园的文章也是可以使用代理ip来刷的,后来不行了),刷文章的浏览量本身是可耻的,没有任何意义,当然技术无罪。之前是在csdn写文章,自从csdn改版之 阅读全文
posted @ 2020-04-24 16:48 易胆大888 阅读(312) 评论(0) 推荐(0) 编辑
摘要: 之前看到某公司的官网的文章的浏览量刷新一次网页就会增加一次,给人的感觉不太好,一个公司的官网给人如此直白的漏洞,我批量发起请求的时候发现页面打开都报错,100多人的公司的官网文章刷新一次你给我看这个,这公司以前来过我们学校宣传招人+在园子里搜招聘的时候发现居然以前招xamarin,挺好奇的,所以就关 阅读全文
posted @ 2020-04-24 16:46 易胆大888 阅读(397) 评论(0) 推荐(0) 编辑
摘要: C# 代理HTTP请求 目的: 应该有不少人需要去某些网站不停爬取数据,有时会使用HTTPRequest一直请求某个网站的某个网址。有的网站比如 QQ空间,赶集网(这是我测试的网站),不停刷新会提醒你的账号异常,可能会查封你几天禁止访问该网站。我想为了网站的安全,大多大型网站都会有这样一个措施。 但 阅读全文
posted @ 2020-04-24 16:36 易胆大888 阅读(543) 评论(0) 推荐(0) 编辑
摘要: c# 代理IP获取通用方法 调用: ConcurrentQueue<string> proxyIpQueue = new ConcurrentQueue<string>(); Grab_ProxyIp(proxyIpQueue); 返回结果: 一下是获取代理IP集合的方法: #region 生产IP 阅读全文
posted @ 2020-04-24 16:34 易胆大888 阅读(678) 评论(2) 推荐(0) 编辑
摘要: C#简单爬取数据(.NET使用HTML解析器NSoup和正则两种方式匹配数据) 一、获取数据 想弄一个数据库,由于需要一些人名,所以就去百度一下,然后发现了360图书馆中有很多人名 然后就像去复制一下,发现复制不了,需要登陆 此时f12查看源码是可以复制的,不过就算可以复制想要插入数据也是很麻烦的。 阅读全文
posted @ 2020-04-24 16:26 易胆大888 阅读(335) 评论(0) 推荐(0) 编辑
摘要: Thread、ThreadPool、Task、Parallel的基本用法、区别以及弊端 多线程的操作在程序中也是比较常见的,比如开启一个线程执行一些比较耗时的操作(IO操作),而主线程继续执行当前操作,不会造成主线程阻塞。线程又分为前台线程和后台线程,区别是:整个程序必须要运行完前台线程才会退出,而 阅读全文
posted @ 2020-04-24 16:22 易胆大888 阅读(532) 评论(0) 推荐(0) 编辑