打赏

随笔分类 -  ELK(Elasticsearch/Logstash/Kibana)集群搭建

摘要:概念,见博客 Storm概念学习系列之storm的定时任务 Storm的定时任务,分为两种实现方式,都是可以达到目的的。 我这里,分为StormTopologyTimer1.java 和 StormTopologyTimer2.java 编写代码StormTopologyTimer1.java 我这 阅读全文
posted @ 2017-07-28 15:10 大数据和AI躺过的坑 阅读(1439) 评论(0) 推荐(0) 编辑
摘要:这个Hadoop插件的安装是非常重要。 Hadoop插件安装 在es的安装目录下 官网安装说明 以下是elasticsearch针对不同的版本 Hadoop插件配置 vi elasticsearch.yml gateway : type : hdfs gateway : hdfs : uri : h 阅读全文
posted @ 2017-07-01 21:15 大数据和AI躺过的坑 阅读(1815) 评论(0) 推荐(0) 编辑
摘要:前提博客是 Elasticsearch之sense插件的安装(图文详解) 立马,可以看到 以后更新 阅读全文
posted @ 2017-06-30 18:51 大数据和AI躺过的坑 阅读(1661) 评论(0) 推荐(0) 编辑
摘要:sense插件可以方便的执行rest请求,但是中文输入的体验不是很好。 安装sense只需要在Kibana端安装插件即可,插件会自动安装到kibana的应用菜单中。 立马,可以看到 阅读全文
posted @ 2017-06-30 18:50 大数据和AI躺过的坑 阅读(2649) 评论(0) 推荐(0) 编辑
摘要:前期博客 kibana-4.6.3-linux-x86_64.tar.gz的下载(图文详解) 因为,我的机器情况是如下: 1、上传 2、解压 3、删除压缩包和赋予用户组和用户权限 4、为了后续灵活多变,使用多版本(想变成高手的实力必备),创建软链接 大数据各子项目的环境搭建之建立软连接(博主推荐) 阅读全文
posted @ 2017-04-21 22:21 大数据和AI躺过的坑 阅读(2009) 评论(0) 推荐(0) 编辑
摘要:我这里,搭建在 继续 阅读全文
posted @ 2017-03-26 22:45 大数据和AI躺过的坑 阅读(390) 评论(0) 推荐(0) 编辑
摘要:对于Kibana ,我们知道,是Elasticsearch/Logstash/Kibana的必不可少成员。 第一步:进入Elasticsearch的官网 https://www.elastic.co/ 第二步:点击downloads https://www.elastic.co/downloads 阅读全文
posted @ 2017-03-26 19:57 大数据和AI躺过的坑 阅读(3074) 评论(0) 推荐(0) 编辑
摘要:第一步:进入Elasticsearch的官网 https://www.elastic.co/ 第二步:点击downloads https://www.elastic.co/downloads 第三步:选择Logstash https://www.elastic.co/downloads/logsta 阅读全文
posted @ 2017-03-26 17:56 大数据和AI躺过的坑 阅读(1676) 评论(0) 推荐(0) 编辑
摘要:前期博客 Filebeat的下载(图文讲解) 前提 Elasticsearch-2.4.3的下载(图文详解) Elasticsearch-2.4.3的单节点安装(多种方式图文详解) Elasticsearch-2.4.3的3节点安装(多种方式图文详解) Logstash安装(图文详解)(多节点的EL 阅读全文
posted @ 2017-03-26 10:58 大数据和AI躺过的坑 阅读(1843) 评论(0) 推荐(0) 编辑
摘要:第一步:进入Elasticsearch的官网 https://www.elastic.co/ 第二步:点击downloads https://www.elastic.co/downloads 第三步:选择Filebeat https://www.elastic.co/downloads/beats 阅读全文
posted @ 2017-03-26 10:06 大数据和AI躺过的坑 阅读(3817) 评论(0) 推荐(0) 编辑
摘要:项目由来 (1)开发人员不能登录线上服务器查看详细日志,经过运维周转费时费力 (2)日志数据分散在多个系统,难以查找与整合 (3)日志数据量巨大,查询速度太慢,无法满足需求 (4)无法全局掌控项目运行状况 (5)日志数据查询不够实时 (6)数据分析人员不会写代码,无法分析统计数据 (7)...... 阅读全文
posted @ 2017-03-26 09:58 大数据和AI躺过的坑 阅读(9955) 评论(0) 推荐(0) 编辑
摘要:Elasticsearch之插件介绍及安装 Elasticsearch之head插件安装之后的浏览详解 Elasticsearch之kopf插件安装之后的浏览详解 Elasticsearch-2.4.3的3节点安装(多种方式图文详解)(含 head、kopf和marvel插件安装) Elastics 阅读全文
posted @ 2017-03-25 22:14 大数据和AI躺过的坑 阅读(649) 评论(0) 推荐(0) 编辑
摘要:后续更新 阅读全文
posted @ 2017-03-25 22:13 大数据和AI躺过的坑 阅读(1100) 评论(0) 推荐(0) 编辑
摘要:前期博客 Elasticsearch-2.4.3的3节点安装(多种方式图文详解)(含 head、kopf、marvel、shield和watcher插件安装和使用) 访问es:-u es_admin 表示使用用户es_admin进行访问 访问的会提示输入刚才设置的密码。(我刚才输入的密码是12345 阅读全文
posted @ 2017-03-25 22:12 大数据和AI躺过的坑 阅读(2995) 评论(0) 推荐(0) 编辑
摘要:前提 Elasticsearch-2.4.3的下载(图文详解) Elasticsearch-2.4.3的单节点安装(多种方式图文详解) Elasticsearch-2.4.3的3节点安装(多种方式图文详解) Logstash-2.4.1的下载(图文详解) Logstash是一个管理日志和事件的工具。 阅读全文
posted @ 2017-03-25 14:49 大数据和AI躺过的坑 阅读(6565) 评论(0) 推荐(0) 编辑
摘要:问题一: [2016-11-06T16:27:21,712][WARN ][o.e.b.JNANatives ] unable to install syscall filter: Java.lang.UnsupportedOperationException: seccomp unavailabl 阅读全文
posted @ 2017-03-25 10:02 大数据和AI躺过的坑 阅读(12056) 评论(0) 推荐(0) 编辑
摘要:ElasticSearch的Web管理 或者 其他两台,自行去演示。不多赘述。 Kibana的Web管理 或者 比如我这里, http://192.168.80.145:5601/app/marvel 阅读全文
posted @ 2017-03-25 00:06 大数据和AI躺过的坑 阅读(3438) 评论(1) 推荐(0) 编辑
摘要:前提: Elasticsearch-2.4.3的下载(图文详解) Elasticsearch-2.4.3的单节点安装(多种方式图文详解) Elasticsearch-2.4.3的3节点安装(多种方式图文详解) Kibana安装(图文详解)(多节点的ELK集群安装在一个节点就好) 或者 kibana- 阅读全文
posted @ 2017-03-25 00:05 大数据和AI躺过的坑 阅读(38896) 评论(4) 推荐(0) 编辑
摘要:对于Kibana ,我们知道,是Elasticsearch/Logstash/Kibana的必不可少成员。 前提: Elasticsearch-2.4.3的下载(图文详解) Elasticsearch-2.4.3的单节点安装(多种方式图文详解) Elasticsearch-2.4.3的3节点安装(多 阅读全文
posted @ 2017-03-25 00:03 大数据和AI躺过的坑 阅读(8916) 评论(0) 推荐(0) 编辑
摘要:前提 Elasticsearch之插件介绍及安装 https://i.cnblogs.com/posts?categoryid=950999&page=2 (强烈建议,从头开始看) 比如,我的这里是 1、概览 若大家,在这一步,出现了。 则, Kibana里No Marvel Data Found问 阅读全文
posted @ 2017-03-24 21:45 大数据和AI躺过的坑 阅读(1852) 评论(0) 推荐(0) 编辑