Fork me on GitHub

02 2017 档案

摘要:一种环境一种节奏,一种节奏一份感受。 阅读全文
posted @ 2017-02-18 01:06 JackieZheng 阅读(1494) 评论(23) 推荐(3) 编辑
摘要:从字面意思来看,Profile表示侧面,那什么情况下才会用到侧面这个功能呢,而侧面具体又有什么含义和用法呢,本篇介绍Profile的用法,让你可以自由的在产品、开发、测试等环境中自由穿梭…… 阅读全文
posted @ 2017-02-12 01:06 JackieZheng 阅读(1765) 评论(0) 推荐(0) 编辑
摘要:修复每次都从种子网站爬取的bug,针对"程序运行,从种子地址开始,对于每次爬取的网站地址先查询数据库是否存在该条记录,如果不存在,则立即插入","当前网站地址爬取完毕后,查找数据库从中取出第一个crawled为0的记录进行爬取,每次只取一条;"以及"存储电影详情页记录以及短评数据都是采用解析一条则立即存储到数据库"等问题使用批量读写减少与数据库的交互以及频繁的方法调用。 阅读全文
posted @ 2017-02-05 20:36 JackieZheng 阅读(1446) 评论(3) 推荐(0) 编辑

点击右上角即可分享
微信分享提示