随笔分类 -  HttpClient & Jsoup

Jsoup入门
摘要：1、什么是Jsoup？ jsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。 2、pox.xml 3、相关代码 运行结果： Reference： [1] Java 阅读全文
posted @ 2017-07-29 22:42 ryelqy 阅读(374) 评论(0) 推荐(0) 编辑
HttpClient代理IP及设置连接读取超时
摘要：1、不废话，上代码： 2、关于IP代理 IP代理分为：透明代理、匿名代理、混淆代理、高匿代理 1）透明代理(Transparent Proxy) REMOTE_ADDR = Proxy IP HTTP_VIA = Proxy IP HTTP_X_FORWARDED_FOR = Your IP 透明代 阅读全文
posted @ 2017-07-18 22:25 ryelqy 阅读(415) 评论(0) 推荐(0) 编辑
HttpClient爬取网站及图片
摘要：1、什么是HttpClient？ HttpClient 是 Apache Jakarta Common 下的子项目，用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议。 通过Java程序模拟浏览器访问网页，获取网页代码及图片的应用程序 阅读全文
posted @ 2017-07-17 22:40 ryelqy 阅读(694) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示