摘要: 以写文件为例,串联整个流程的源码: FSDataOutputStream out = fs.create(outFile);1. DistributedFileSystem继承并实现了FileSystem,该对象是终端用户和hadoop分布式文件系统交互的接口。原文说明:/*************... 阅读全文
posted @ 2015-09-07 16:39 一天不进步,就是退步 阅读(3226) 评论(0) 推荐(0) 编辑
摘要: 我们知道solr提供了一个DIHandler,提供将关系数据库中的数据导成索引,然后使用solr查询。对于一个大表中关联数个小表的查询,这非常耗费时间。我的思路是:1. 将一个大表做成索引,使用solr查询。2.数据库查询关联小表的数据。3. 在接口端进行聚合(使用java做聚合)正在实践中,特此做... 阅读全文
posted @ 2015-09-07 14:21 一天不进步,就是退步 阅读(937) 评论(0) 推荐(0) 编辑