上一页 1 ··· 7 8 9 10 11 12 13 14 15 16 下一页
摘要: 一.查询分类 1.基本查询: 使用elasticsearch内置查询条件进行查询。 2.组合查询: 把多个查询组合在一起进行复合查询。 3.过滤: 查询同时,通过filter条件在不影响打分的情况下筛选数据。 二.设置索引和映射 1.建立lagou索引: 2.插入数据: 3.elasticsearc 阅读全文
posted @ 2018-10-29 10:45 biu嘟 阅读(1426) 评论(0) 推荐(0) 编辑
摘要: 一.简介: 映射:在创建索引时,可以预先定义字段的类型(映射类型,也就是type,一个索引可以有一个或多个类型)及相关属性。 Elasticsearch会根据JSON源数据的基础类型猜测你想要的字段映射。将输入的数据转变成可搜索的索引项。Mapping就是我们定义的字段的数据类型,同时告诉Elast 阅读全文
posted @ 2018-10-28 19:45 biu嘟 阅读(2666) 评论(0) 推荐(0) 编辑
摘要: 一·_mget: 1.创建的索引如下: 2.批量查询: 二.bulk批量操作: 增删改查:把所有操作发送到一个节点解析,在由节点分发,数据量一次也不能提交太多 阅读全文
posted @ 2018-10-27 19:45 biu嘟 阅读(6083) 评论(0) 推荐(1) 编辑
摘要: 1.初始化索引: 运行后返回: 访问elasticsearch-head: 刷新出现lagou 查看索引信息 2.查看索引设置信息: 执行效果 执行效果 3.更新索引信息: 执行后 执行后 4.保存文档: 执行后 head中可查看 执行后 查询 5.获取某条完整数据: 执行后 6.获取部分字段: 执 阅读全文
posted @ 2018-10-27 17:03 biu嘟 阅读(4531) 评论(0) 推荐(0) 编辑
摘要: 一.概念 集群:一个或者多个节点组织在一起 节点:一个节点是集群中的一个服务器,由一个名字来标识,默认是一个随机的漫威角色名字。 分片:将索引划分为多份的能力,允许水平分割和扩展容量,多个分片相应请求,提高性能和吞吐量。 副本:创建分片的一份或多份的能力,在一个节点失败,其余节点可以顶上。 二.el 阅读全文
posted @ 2018-10-26 10:44 biu嘟 阅读(898) 评论(0) 推荐(0) 编辑
摘要: 一.elasticsearch介绍 1.简介(使用的是nosql,更新比mongodb慢): ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可 阅读全文
posted @ 2018-10-25 16:05 biu嘟 阅读(1119) 评论(0) 推荐(0) 编辑
摘要: 合作者:201631062222,201631062232 代码地址:https://gitee.com/biubiubiuLYQ/ceshi_secend 本次作业链接地址:https://edu.cnblogs.com/campus/xnsy/2018softwaretest2398/homew 阅读全文
posted @ 2018-10-18 21:26 biu嘟 阅读(346) 评论(0) 推荐(0) 编辑
摘要: 一.分布式爬虫简介 1.介绍: 分布式爬虫就是多台计算机上都安装爬虫程序,重点是联合采集。比如爬虫A,B,C分别在三台服务器上,需要一个状态管理器集中分配,去重这三个爬虫的url,状态管理器也是一个服务,需要部署在某一个服务器上。 2.优点: (1)充分利用多机器的带宽加速爬取; (2)充分利用多机 阅读全文
posted @ 2018-10-11 20:51 biu嘟 阅读(1638) 评论(3) 推荐(0) 编辑
摘要: 一.scrapy暂停与重启 1.要暂停,就要保留一些中间信息,以便重启读取中间信息并从当前位置继续爬取,则需要一个目录存放中间信息: scrapy crawl spider_name -s JOBDIR=dir/001——spider_name是你要爬取得spider的py文件名,JOBDIR是命令 阅读全文
posted @ 2018-10-11 16:02 biu嘟 阅读(4235) 评论(0) 推荐(0) 编辑
摘要: 一.在开发某运动app时,遇见以下情况 1.部分表内容如下: 2.序列化想实现的功能: 在序列化Schedule表时,sport是一个外键字段,想筛选sport的外键school是当前已登录的用户的school字段下的该学校所有运动项目(即筛选为queryset=Sports.objects.fil 阅读全文
posted @ 2018-10-10 21:56 biu嘟 阅读(3336) 评论(0) 推荐(0) 编辑
上一页 1 ··· 7 8 9 10 11 12 13 14 15 16 下一页