Redis——封装通用的Redis组件
摘要：前言 鉴于公司Redis目前的使用现状及问题，架构组将提供统一Redis使用方案，在通用组件包内置redis功能，提高开发效率，降低项目的耦合性。以下是我这次设计改造的过程。 一、Redis使用现状 1、每个应用使用jedis自行配置并实现访问redis的功能。具体依赖如下： <dependency
阅读全文
posted @ 2020-04-29 18:25
04 2020 档案
Redis——Springboot集成Redis集群
摘要：前言 在 springboot 1.5.x版本的默认的Redis客户端是 Jedis实现的，springboot 2.x版本中默认客户端是用 lettuce实现的。 Lettuce 与 Jedis 比较 Lettuce 和 Jedis 的都是连接 Redis Server的客户端。 Jedis 在实
阅读全文
posted @ 2020-04-29 18:23
Redis——Spring集成Redis集群
摘要：前言 ................... 使用Jedis连接Redis集群 spring-redis配置文件： <beans xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="http://www.springframewo
阅读全文
posted @ 2020-04-29 18:20
Redis——使用Jedis操作Redis
摘要：前言 Jedis是我们使用最多的Java客户端Redis，Jedis整合Redis有两种方式，分别是单机和集群。单机通常我们使用JedisPool连接池进行整合，集群通常我们使用JedisCluster进行整合。 准备 Jedis的github网址：https://github.com/xetort
阅读全文
posted @ 2020-04-29 18:19
Prometheus + Grafana（十三）系统监控之Cassandra
摘要：前言 利用jmx_exporter的方式对cassandra进行监控。 配置JavaAgent cassandra 集群下的所有節點都要進行如下配置 上传 下载并上传jmx_prometheus_javaagent-0.12.0.jar安装包到cassandra集群$CASSANDRA_HOME/l
阅读全文
posted @ 2020-04-20 17:15
Prometheus + Grafana（十二）系统监控之Spark
摘要：前言 Spark 提供的 webui 已经提供了很多信息，用户可以从上面了解到任务的 shuffle，任务运行等信息，但是运行时 Executor JVM 的状态对用户来说是个黑盒， 在应用内存不足报错时，初级用户可能不了解程序究竟是 Driver 还是 Executor 内存不足，从而也无法正确的
阅读全文
posted @ 2020-04-20 17:13
Prometheus + Grafana（十一）系统监控之HBase
摘要：前言 HBase Metrics是一种监控信息实时收集机制。它负责收集的信息有： 功能性信息（Compaction Queue、Store Files个数等） JVM使用信息 (Heap Memory 的变化) rpc访问信息 HMaster地址： http://master_host:60010/
阅读全文
posted @ 2020-04-20 17:12
Prometheus + Grafana（九）系统监控之RabbitMQ
摘要：前言 第一种：RabbitMQ内部集成Prometheus来获取指标 3.8.0之前版本，RabbitMQ可以使用单独的插件prometheus_rabbitmq_exporter来向Prometheus公开指标，要单独下载到RabbitMQ安装目录中进行安装； prometheus_rabbitm
阅读全文
posted @ 2020-04-20 17:11
Prometheus + Grafana（八）系统监控之Kafka
摘要：前言 第一种：JMX https://help.aliyun.com/document_detail/141108.html?spm=a2c4g.11186623.6.621.12bb4dea7EyM9F 第二种：kafka_exporter 本文就是采用第二种方式实现，相比JMX，优势在于不需要消
阅读全文
posted @ 2020-04-20 17:09
Prometheus + Grafana（七）系统监控之Redis
摘要：前言 利用prometheus监控redis. github地址：https://github.com/oliver006/redis_exporter 技术架构 prometheus通过redis_exporter抓取redis的指标，一个prometheus可以配置很多redis_exporte
阅读全文
posted @ 2020-04-20 17:08
Logstash——利用Kafka Group实现高可用
摘要：日志架构 所有日志由Rsyslog或者Filebeat收集，然后传输给Kafka，Logstash作为Consumer消费Kafka里边的数据，分别写入Elasticsearch和Hadoop，最后使用Kibana输出到web端供相关人员查看，或者是由Spark接手进入更深层次的分析。 在以上整个架
阅读全文
posted @ 2020-04-13 15:41
