如何把数据快速批量添加到Elasticsearch中
摘要:问题来源 最近新做一个项目,有部分搜索比较频繁的数据,而且量级比较大,预计一两年时间很可能达到100G,项目要求不要存在数据库中,最终出来有两个方案,一个是使用Protocol Buffers存储在文件上,另外就是存在Elasticsearch中,也方便搜索,但这两个方案需要验证,到底哪个方案好,从
阅读全文
Kibana基本使用
摘要:现在你已经安装了Kibana,现在你一步步通过本教程快速获取Kibana核心功能的实践经验。学习完本教程,你将: 1.加载案例数据到你安装的Elasticsearch中 2. 定义至少一个索引匹配模式 3.使用Discover功能探索你的数据 4.建立一个visualization图形化地展示你的数
阅读全文
TF-IDF及其算法
摘要:概念 TF-IDF(term frequency–inverse document frequency)是一种用于资讯检索与资讯探勘的常用加权技术。TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加,但同时会
阅读全文
Elasticsearch 2.x.x版本如何安装bigdesk
摘要:ES插件BigDesk安装 bigdesk支持的最新版本的ES是1.3.0 ... 1.3.x 然而想要在新版本ES上安装(2.x.x),项目中遇到过一些BUG,在ES在最新版本中有修复,所以采用了2.3.0的版本 head插件查看数据和集群其他一些挺方便,但是对集群状况监控不够细致,而且使用中有一
阅读全文
ElasticSearch之常用插件安装命令
摘要:#head监控安装,推荐 bin/plugin -install mobz/elasticsearch-head #bigdesk集群状态,推荐 bin/plugin -install lukas-vlcek/bigdesk #kopf插件 bin/plugin -install lmenezes/
阅读全文
ELK_Elastic Search和kibana版本对应关系
摘要:https://www.elastic.co/downloads/past-releases/kibana-5-0-0 https://www.elastic.co/downloads/past-releases/kibana-4-6-2 https://www.elastic.co/downloa
阅读全文
ElasticSearch 5.0及head插件安装
摘要:ElasticSearch 5.0及head插件安装 plugin install mobz/elasticsearch-head ElasticSearch 5.0及head插件安装 本文主要介绍elasticsearch5.0安装及head插件安装。确保系统已经安装好jdk1.8.0_73以上,
阅读全文
安装Elasticsearch5.0 部署Head插件
摘要:5.0版本的ES跟之前的版本最大的不同之处就是多了很多环境的校验,比如jdk,max-files等等。 设置内核参数 设置资源参数 修改elasticsearch的参数 修改一下es使用的参数: 注意,设置参数的时候:后面要有空格! 安装部署head 第一步,安装git 需要从github上面下载代
阅读全文
Elasticsearch 5.1.1 head插件安装指南
摘要:一、下载安装包 下载Elasticsearch 5.1.1 下载地址:https://www.elastic.co/downloads/elasticsearch zip和tar格式是各种系统都通用的,解压之后启动Elasticsearch即可。 下载elasticsearch-head 下载地址:
阅读全文
使用logstash+elasticsearch+kibana快速搭建日志平台
摘要:https://www.loggly.com/ 日志的分析和监控在系统开发中占非常重要的地位,系统越复杂,日志的分析和监控就越重要,常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析,比如接口的调用次数、执行时间、成功率等 异常数据自动触发消息通知 基于日志的数据挖掘 很多团队在日
阅读全文
ELK 集中日志分析 windows部署实战
摘要:一步步来 1.下载软件 Elasticsearch: https://download.elasticsearch.org/...p/elasticsearch/2.0.0/elasticsearch-2.0.0.zipLogstash: https://download.elastic.co/lo
阅读全文