摘要: webmagic 是一个很好并且很简单的爬虫框架,其教程网址:http://my.oschina.net/flashsword/blog/180623 webmagic参考了scrapy的模块划分,分为Spider(整个爬虫的调度框架)、Downloader(页面下载)、PageProcessor( 阅读全文
posted @ 2017-07-25 14:49 Faron 阅读(2091) 评论(0) 推荐(0) 编辑
摘要: 用IntelliJ 15打开一个以前的工程,发现代码出现很多关于@Override的错误,编辑器提示:“@Override is not allowed when implementing interface method”,怎么会这样子?看来@Override是个有故事的家伙,呵呵! 先来上张图吧 阅读全文
posted @ 2017-07-25 14:47 Faron 阅读(1179) 评论(0) 推荐(0) 编辑
摘要: 本文章来给大家提供三种在mysql中避免重复插入记录方法,主要是讲到了ignore,Replace,ON DUPLICATE KEY UPDATE三种方法,有需要的朋友可以参考一下 方案一:使用ignore关键字 如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录 阅读全文
posted @ 2017-07-25 13:37 Faron 阅读(9157) 评论(0) 推荐(0) 编辑
摘要: 前言,在我们的业务逻辑中,很有可能会遇到这样的情况。 1.我要更新一条记录的值。 2.但是我不确定这条记录存不存在??? 3.那如果存在?我就更新,如果不存在,我就插入! 那么如果这样,一般情况下,我就要发出三条sql,第一条sql查询这条记录,然后用程序判断,如果存在,则更新,如果不存在,则插入。 阅读全文
posted @ 2017-07-25 13:08 Faron 阅读(5056) 评论(0) 推荐(0) 编辑