随笔分类 - httpClient

webMagic的PageProcessor接口实现类知识整理

摘要：webMagic的PageProcessor（页处理器,通过此实现类，可能过css,xpath,json来分析网页中内容）接口实现类知识整理站点配置成功，可获取网站html内容后， 1:PageProcessor.java接口主要两个方法process()和getSite()， public in 阅读全文

posted @ 2020-03-16 16:04 码哥之旅阅读(1092) 评论(0) 推荐(0) 编辑

webmagic创始人回答：ebMagic默认的HttpClient只会用TLSv1去请求，对于某些只支持TLS1.2的站点（例如 https://juejin.im/），就会报错：

摘要：见官方文档解决方案:https://github.com/code4craft/webmagic/issues/701 webmagic创始人回答： code4craft commented on 29 Nov 2017 • 更新会在0.7.4版本发布。临时适配方式，修改HttpClientGen 阅读全文

posted @ 2020-03-14 12:13 码哥之旅阅读(1078) 评论(0) 推荐(0) 编辑

httpClient的 Post发送的请求，用 list的数据类型是NameValuePair来封装表单中数据

摘要：Post设置请求参数的 a、b、c三个步骤a:声明List集合封装表单参数b:创建表单的entity对象c：设定表单独的entity到httpPost请求中完整代码 /**设置postMan带参数的Post方式请求 * @version 1.0.0 * @program: recuit_gath 阅读全文

posted @ 2020-03-13 17:27 码哥之旅阅读(5177) 评论(0) 推荐(0) 编辑

HttpClient 学习记录---URIBuilder

摘要：来源： httpClient学习记录--URIBuilder 构造函数 URIBuilder() URIBuilder(final String string) 内部会创建URI对象 URIBuilder(final URI uri) 非空的两个构造实际内部都调用了digestURI（uri）将U 阅读全文

posted @ 2020-03-13 15:24 码哥之旅阅读(4936) 评论(0) 推荐(0) 编辑

httpClient带一个或多个参数实现

摘要：听课视频：https://www.bilibili.com/video/av68932809?p=5 思路分析：先创建httpClient对象，再通过URIBuilder对象根上网址，最后一步带上一个多个参数。如何写一个HttpClient[1]——URI的处理 1核心代码分: //1：创建htt 阅读全文

posted @ 2020-03-13 15:04 码哥之旅阅读(2548) 评论(0) 推荐(0) 编辑

httpClient 配置与测试

摘要：1:pom.xml 输入依赖jar坐标  <dependency> <groupId>org.apache.httpcomponents</ 阅读全文

posted @ 2020-03-13 11:52 码哥之旅阅读(792) 评论(0) 推荐(0) 编辑