摘要: 学习完python爬虫之后,脑袋发热想实践一下,看看下各位大佬的博客,然后自己也开始做了些测试,以下将介绍scrapy框架爬去腾讯社招网的数据并保存至mongoDB。 首先在搭建好scrapy框架后,首先进入在需要创建项目的路径进入cmd 输入命令:scrapy startproject 项目名,本 阅读全文
posted @ 2018-05-31 17:03 古巷青砖 阅读(322) 评论(0) 推荐(0) 编辑
摘要: 前面两篇文章介绍了如何创建索引和搜索索引,理解了的话基本上就已经可以使用Lucene进行简单的全文检索了。学习完lucene之后,我个人有一个小小的demo,只是为了练习,在这里我将分享出来,才疏学浅,不喜勿喷! 项目介绍: 数据库:mongo数据库,mysql数据库 jdk:1.8 lucene: 阅读全文
posted @ 2018-05-31 15:10 古巷青砖 阅读(93) 评论(0) 推荐(0) 编辑
摘要: 上篇文章给出了如何创建索引的例子,在这里我将介绍全文检索的第二大部分:索引的搜索操作。 索引搜索其实也就是一个先读索引然后在查索引的操作,理解了会很快的使用了,个人认为要多实践。 直接上代码了(这是我个人写的一个小demo,后面会给出源码): 注意的是,我这里的代码仅仅是为了提供参考的,其中有很多的 阅读全文
posted @ 2018-05-31 15:09 古巷青砖 阅读(161) 评论(0) 推荐(0) 编辑