09 2017 档案

ElasticSearch学习笔记（三）logstash安装和logstash-input-jdbc插件
摘要：ElasticSearch的索引可以手动添加索引的，就是类似下面这样添加的 但是如果很多的信息，这样添加显然是不可能的，尤其是一般数据都在数据库中。 于是elasticsearch提供了可以直接和数据库关联，并且自动根据数据库中的数据更新索引logstash。 安装logstash logstash 阅读全文
posted @ 2017-09-30 16:23 a-du 阅读(396) 评论(0) 推荐(0) 编辑
logstash-out-mongodb实现elasticsearch到Mongodb的数据同步
摘要：本文主要实现将Elasticsearch中的索引数据Index同步到Mongodb中的集合collection中。 0、前提 1）已经安装好源数据库：elasticsearch V2.X; 2）已经安装好目的数据库：Mongodb; 3）已经安装好logstash及相关插件logstash-outp 阅读全文
posted @ 2017-09-29 20:40 a-du 阅读(577) 评论(0) 推荐(0) 编辑
logstash jdbc 各种数据库配置
摘要：MySQL数据库 Driver ="path/to/jdbc-drivers/mysql-connector-java-5.1.35-bin.jar" //驱动程序Class ="com.mysql.jdbc.Driver"; URL ="jdbc:mysql://localhost:3306/db 阅读全文
posted @ 2017-09-29 20:27 a-du 阅读(1030) 评论(0) 推荐(0) 编辑
Elasticsearch（9）：使用Logstash-input-jdbc同步数据库中的数
摘要：1、数据同步方式 全量同步与增量同步 全量同步是指全部将数据同步到es，通常是刚建立es，第一次同步时使用。增量同步是指将后续的更新、插入记录同步到es。 全量同步与增量同步 全量同步是指全部将数据同步到es，通常是刚建立es，第一次同步时使用。增量同步是指将后续的更新、插入记录同步到es。 2、常 阅读全文
posted @ 2017-09-29 16:29 a-du 阅读(3012) 评论(0) 推荐(0) 编辑
在Windows系统下搭建ELK日志分析平台
摘要：再记录一下elk的搭建，个人觉得挺麻烦的，建议还是在linux系统下搭建，性能会好一些，但我是在windows下搭建的，还是记录一下吧，像我这种记性差的人还是得靠烂笔头 简介： ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成： Elasticsearch是个开源 阅读全文
posted @ 2017-09-29 13:25 a-du 阅读(418) 评论(0) 推荐(0) 编辑
ELK安装成windows服务
摘要：一、Elasticsearch安装成windows服务 我的es所在路径为：D:\ELK5.5.0\elasticsearch-5.5.0 Java 安装目录为：C:\Program Files\Java\ 1. 设置HAVA_HOME环境变量 2. cmd以管理员身份打开命令窗口 cd D:\EL 阅读全文
posted @ 2017-09-28 17:40 a-du 阅读(482) 评论(0) 推荐(0) 编辑
ElasticSearch NEST笔记
摘要：1. 什么是ElasticSearch? ElasticSearch is a powerful open source search and analytics engine that makes data easy to explore. 可以简单理解成索引加检索的工具，当然它功能多于此。Ela 阅读全文
posted @ 2017-09-27 17:58 a-du 阅读(1044) 评论(0) 推荐(0) 编辑
ElasticSearch5.0——IK词库加载
摘要：Dictionary ConfigurationIKAnalyzer.cfg.xml can be located at {conf}/analysis-ik/config/IKAnalyzer.cfg.xml or {plugins}/elasticsearch-analysis-ik-*/con 阅读全文
posted @ 2017-09-27 16:38 a-du 阅读(403) 评论(0) 推荐(0) 编辑
ElasticSearch速学 - IK中文分词器远程字典设置
摘要：前面已经对”IK中文分词器“有了简单的了解： 但是可以发现不是对所有的词都能很好的区分，比如： 逼格这个词就没有分出来。 词库 实际上IK分词器也是根据一些词库来进行分词的，我们可以丰富这个词库。 IK分词器(IK Analysis for Elasticsearch)给了我们一个基本的配置： ht 阅读全文
posted @ 2017-09-27 10:41 a-du 阅读(2683) 评论(0) 推荐(0) 编辑
搜索引擎选择： Elasticsearch与Solr
摘要：搜索引擎选型调研文档 Elasticsearch简介* Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。 它可以用于全文搜索，结构化搜索以及分析，当然你也可以将这三者进行组合。 Elasticsearch是一个建立在全文搜索引擎 Apache 阅读全文
posted @ 2017-09-21 20:04 a-du 阅读(149) 评论(0) 推荐(0) 编辑
windows文件名太长无法删除的解决办法
摘要：安装nodejs 的模块hexo后，由于香重新安装，在删除的时候却提示文件名太长无法删除，dos命令、回收站各种都无法搞定，后来找到解决办法： 1、进入这些文件的所在目录的上层目录，右键这些文件的所在目录，添加到压缩文件，并选中“压缩后删除原来的文件”，搞定。已测试成功。 2、修改文件夹名称，每个目 阅读全文
posted @ 2017-09-19 11:23 a-du 阅读(684) 评论(0) 推荐(0) 编辑
Elasticsearch(八)【NEST高级客户端--Mapping映射】
摘要：要使用NEST与Elasticsearch进行交互，我们需要能够将我们的解决方案中的POCO类型映射到存储在Elasticsearch中的反向索引中的JSON文档和字段。本节介绍NEST中可用的所有不同功能，使POCO和Elasticsearch变得轻而易举。 在Elasticsearch中显式映射 阅读全文
posted @ 2017-09-11 18:16 a-du 阅读(646) 评论(0) 推荐(0) 编辑
elasticsearch 配置详解
摘要：elasticsearch的config文件夹里面有两个配置文件：elasticsearch.yml和logging.yml，第一个是es的基本配置文件，第二个是日志配置文件，es也是使用log4j来记录日志的，所以logging.yml里的设置按普通log4j配置文件来设置就行了。下面主要讲解下e 阅读全文
posted @ 2017-09-08 13:13 a-du 阅读(258) 评论(0) 推荐(0) 编辑
Elasticsearch(八)【NEST高级客户端--分析器】
摘要：分析 分析是将文本（如任何电子邮件的正文）转换为添加到反向索引中进行搜索的tokens或terms的过程。 分析由analyzer执行，分析器可以是内置分析器或每个索引定义的定制分析器。 书写分析器测试分析器书写分析器 有时候，您可以通过配置Elasticsearch内置分析器的工作原理，或将分析组 阅读全文
posted @ 2017-09-06 19:51 a-du 阅读(386) 评论(0) 推荐(0) 编辑
Create Index using NEST .NET
摘要：Hello Guys, I have a doubt about how create index using NEST .NET. I created every fields in my C# method, however when i'll see the json created in e 阅读全文
posted @ 2017-09-06 19:48 a-du 阅读(271) 评论(0) 推荐(0) 编辑