摘要: 记上一次v1.0的空间爬虫之后,准备再写一个爬虫分析本人说说的点赞情况 首先分析Json: 可以发现点赞的节点为data-->vFeeds(list)-->like-->likemans(list)-->user-->nickname&uin 代码如下: like_me_list是一个list of 阅读全文
posted @ 2017-12-01 16:01 南瓜1996 阅读(1136) 评论(0) 推荐(0) 编辑
摘要: 经测试上一节的代码成功跑通,接下来加上循环爬取所有说说-。- 完整代码: 阅读全文
posted @ 2017-11-29 15:25 南瓜1996 阅读(812) 评论(0) 推荐(3) 编辑
摘要: 工作需要写一个程序调用菜鸟物流云五级地址查询api,此处决定用python实现。 调用实例如图: 接口文档: 先申请获得appkey与resourceid: 需要查询的数据集: 读取文件存入一个list: 构造请求参数: 构造公共请求参数: 计算请求签名(MD5值算法与base64编码): 此处踩到 阅读全文
posted @ 2017-11-29 14:11 南瓜1996 阅读(17189) 评论(0) 推荐(0) 编辑
摘要: 我们把上一篇访问得到的json数据拿来先分析一下,这里需要借助json解析工具,推荐json.cn: 观察图片右边,具体的分析过程不再赘述了,我们发现图片url信息在 date-->vFeeds(list)-->pic-->picdata-->pic(list)-->photourl-->0-->u 阅读全文
posted @ 2017-11-22 16:38 南瓜1996 阅读(740) 评论(0) 推荐(0) 编辑
摘要: 闲来无事准备写一个爬虫来爬取自己QQ空间的所有说说和图片-。- 首先准备工作,进入手机版QQ空间,分析页面: 我们发现,手机版空间翻页模式是采用瀑布流翻页(查看更多),而非传统翻页模式,所以我们需要来分析一下点击“查看更多”时发送的请求: 可以发现,上面红框中的xhr就是点击“查看更多”时发送的请求 阅读全文
posted @ 2017-11-22 15:54 南瓜1996 阅读(1305) 评论(0) 推荐(0) 编辑
摘要: 1. public void testFunctions() { 2. //测试组合两个功能函数,用于集合转换 3. //1、定义第一个功能函数,用于将School类转为地址字符串,即:f(school)=location 4. //传入一个School,返回一个String 5. ... 阅读全文
posted @ 2017-11-08 11:14 南瓜1996 阅读(439) 评论(0) 推荐(0) 编辑
摘要: 端到端测试(非单元测试) 将系统作为一个整体来测试 运行速度慢 无法隔离与定位问题 什么不是单元测试: 网络 文件IO 数据库 临时单元测试: 打印语句 日志 调试器 格式 //Given ... //When ... //Then 单元测试DEMO main.FizzBuzz.java 1 pac 阅读全文
posted @ 2017-11-08 11:11 南瓜1996 阅读(222) 评论(0) 推荐(0) 编辑
摘要: 有return的递归较麻烦,所以用ArrayList存储最大节点,使用void递归。 阅读全文
posted @ 2017-11-08 11:02 南瓜1996 阅读(295) 评论(0) 推荐(0) 编辑
摘要: 代码有点乱,有待改进。 阅读全文
posted @ 2017-11-08 10:58 南瓜1996 阅读(229) 评论(0) 推荐(0) 编辑