11 2019 档案

Springboot操作Elasticsearch

摘要：常见的日志系统是基于logstach+elasticsearch+kibna框架搭建的,但是有时候kibana的查询无法满足我们的要求，因此有时需要代码去操作es,本文后续都以es代替elasticsearch。一.es基本概念理解索引：含有相同属性的文档的集合.(可理解为数据库database 阅读全文

posted @ 2019-11-27 23:11 人不疯狂枉一生阅读(1178) 评论(0) 推荐(0) 编辑

基于Livy的Spark提交平台搭建与开发

摘要：为了方便使用Spark的同学提交任务以及加强任务管理等原因，经调研采用Livy比较靠谱，下图大致罗列一下几种提交平台的差别。本文会以基于mac的单机环境搭建一套Spark+Livy+Hadoop来展示如何提交任务运行,本文只针对框架能够运行起来，至于各个组件参数怎么配置性能更好，各位兄弟就自行找度阅读全文

posted @ 2019-11-26 10:06 人不疯狂枉一生阅读(2512) 评论(0) 推荐(0) 编辑

Hbase操作集锦

摘要：一.Hbase架构与理解 Hbase架构大致如下，图片取自https://www.cnblogs.com/linkworld/p/10963910.html。二.Hbase shell操作创建Hbase表时默认有一个region,这个region的rowkey是没有边界的，即没有开始的star 阅读全文

posted @ 2019-11-22 11:41 人不疯狂枉一生阅读(217) 评论(0) 推荐(0) 编辑