随笔分类 -  中间件

摘要:监控问题罗列 # 1.线上发布了服务,怎么知道它一切正常,比如发布5台服务器,如何直观了解是否有请求进来,访问一切正常。 # 2.当年有一次将线上的库配置到了Beta,这么低级的错误,排错花了一个通宵,十几个人。 # 3.某个核心服务挂了,导致大量报错,如何确定到底是哪里出了问题。 # 4.SOA带 阅读全文
posted @ 2020-06-18 10:34 myseries 阅读(604) 评论(0) 推荐(0) 编辑
摘要:简介 用官方的话来说,RcoketMQ 是一款低延迟、高可靠、可伸缩、易于使用的消息中间件,具有以下特性(ps:对于这些特性描述,大家简单过一眼就即可,深入学习之后自然就明白了): 支持发布/订阅(Pub/Sub)和点对点(P2P)消息模型 在一个队列中可靠的先进先出(FIFO)和严格的顺序传递 支 阅读全文
posted @ 2020-06-17 17:42 myseries 阅读(5098) 评论(2) 推荐(3) 编辑
摘要:关于 Redis HyperLogLog 在说明 HyperLogLog 之前,我们需要先了解一个概念:基数统计。维基百科中的解释是: cardinality of a set is a measure of the “number of elements“ of the set 它的意思是:一个集 阅读全文
posted @ 2020-04-10 23:29 myseries 阅读(901) 评论(0) 推荐(0) 编辑
摘要:出处: 《今天面试了吗》-Redis Redis是什么 面试官:你先来说下redis是什么吧 我:(这不就是总结下redis的定义和特点嘛)Redis是C语言开发的一个开源的(遵从BSD协议)高性能键值对(key-value)的内存数据库,可以用作数据库、缓存、消息中间件等。它是一种NoSQL(no 阅读全文
posted @ 2019-12-20 10:01 myseries 阅读(773) 评论(0) 推荐(2) 编辑
摘要:出处:https://zhuanlan.zhihu.com/p/46353221 熟悉Redis的人都知道,它是单线程的。因此在使用一些时间复杂度为O(N)的命令时要非常谨慎。可能一不小心就会阻塞进程,导致Redis出现卡顿。 有时,我们需要针对符合条件的一部分命令进行操作,比如删除以test_开头 阅读全文
posted @ 2019-12-06 09:55 myseries 阅读(738) 评论(0) 推荐(1) 编辑
摘要:出处:redis4.0之基于LFU的热点key发现机制 前言 业务中存在访问热点是在所难免的,redis也会遇到这个问题,然而如何发现热点key一直困扰着许多用户,redis4.0为我们带来了许多新特性,其中便包括基于LFU的热点key发现机制。 Least Frequently Used Leas 阅读全文
posted @ 2019-12-06 09:55 myseries 阅读(1321) 评论(0) 推荐(0) 编辑
摘要:redis是什么: Redis is an open source, BSD licensed, advanced key-value store. It is often referred to as a data structure server since keys can contain s 阅读全文
posted @ 2019-12-01 22:27 myseries 阅读(364) 评论(0) 推荐(0) 编辑
摘要:java通过jedis操作redis(从JedisPool到JedisCluster) redis作为一个缓存数据库,在绝大多数java项目开发中是必须使用的,在web项目中,直接配合spring-redis,各种配置都直接在spring配置文件中做了,一般都是使用redis连接池。在非web项目中 阅读全文
posted @ 2019-11-27 22:24 myseries 阅读(1034) 评论(0) 推荐(0) 编辑
摘要:出处: redis主从复制和哨兵 Redis集群方式共有三种:主从模式,哨兵模式,cluster(集群)模式 一、Redis主从复制 主从复制:主节点负责写数据,从节点负责读数据,主节点定期把数据同步到从节点保证数据的一致性 1. 主从复制的相关操作 a,配置主从复制方式一、新增redis6380. 阅读全文
posted @ 2019-11-27 22:23 myseries 阅读(871) 评论(0) 推荐(1) 编辑
摘要:1. Redis服务端是个单线程的架构,不同的Client虽然看似可以同时保持连接,但发出去的命令是序列化执行的,这在通常的数据库理论下是最高级别的隔离2. 用MULTI/EXEC 来把多个命令组装成一次发送,达到原子性(有点像命令具有打包功能)3. 用WATCH提供的乐观锁功能,在你EXEC的那一 阅读全文
posted @ 2019-11-24 22:11 myseries 阅读(4530) 评论(0) 推荐(1) 编辑
摘要:1.SETBIT key offset value 对 key 所储存的字符串值,设置或清除指定偏移量上的位(bit)。 在redis中,存储的字符串都是以二级制的进行存在的。 举例: 设置一个 key-value ,键的名字叫“andy” 值为字符'a' 我们知道 'a' 的ASCII码是 97。 阅读全文
posted @ 2019-11-21 23:16 myseries 阅读(3016) 评论(1) 推荐(0) 编辑
摘要:出处: 使用Redis完成定时任务 场景 使用Java做过项目的人大概都用过定时器。一般来说,项目里订单模块和评论模块,都会涉及到定时任务执行。比如说: 用户下订单后,需要在5分钟内完成支付,否则订单关闭; 用户在完成订单后,如果没有评论,过一星期,系统自动评论,并完结。 我以前曾经做过一个租车系统 阅读全文
posted @ 2019-11-19 16:09 myseries 阅读(1131) 评论(0) 推荐(0) 编辑
摘要:单线程模型 Redis客户端对服务端的每次调用都经历了发送命令,执行命令,返回结果三个过程。其中执行命令阶段,由于Redis是单线程来处理命令的,所有每一条到达服务端的命令不会立刻执行,所有的命令都会进入一个队列中,然后逐个被执行。并且多个客户端发送的命令的执行顺序是不确定的。但是可以确定的是不会有 阅读全文
posted @ 2019-10-24 18:03 myseries 阅读(28578) 评论(3) 推荐(7) 编辑
摘要:出处:https://www.cnblogs.com/fixzd/p/9479970.html redis分布式锁相关命令的背景 Redis 2.6.12之前使用 setnx和 expire来实现分布式锁,expire和setnx不是原子操作,setnx的节点1突然挂掉,那么expire来不及执行就 阅读全文
posted @ 2019-10-22 16:19 myseries 阅读(487) 评论(0) 推荐(0) 编辑
摘要:Redis简介: Redis 是一个开源(BSD许可)的,内存中的数据结构存储系统,它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构,如 字符串(strings), 散列(hashes), 列表(lists), 集合(sets), 有序集合(sorted sets) 与范围查询, bi 阅读全文
posted @ 2019-08-27 15:41 myseries 阅读(290) 评论(0) 推荐(0) 编辑
摘要:一:监听服务端zookeeper节点数据改变 console结果截图: 二:集群管理 应用集群中,我们常常需要让每一个机器知道集群中(或依赖的其他某一个集群)哪些机器是活着的,并且在集群机器因为宕机,网络断链等原因能够不在人工介入的情况下迅速通知到每一个机器 思路:用三个类模拟成三个服务器,去连接z 阅读全文
posted @ 2019-08-03 12:00 myseries 阅读(687) 评论(0) 推荐(0) 编辑
摘要:一、前言 前面学习了Zookeeper服务端的相关细节,其中对于集群启动而言,很重要的一部分就是Leader选举,接着就开始深入学习Leader选举。 二、Leader选举 2.1 Leader选举概述 Leader选举是保证分布式数据一致性的关键所在。当Zookeeper集群中的一台服务器出现以下 阅读全文
posted @ 2019-08-01 22:37 myseries 阅读(2128) 评论(0) 推荐(1) 编辑
摘要:zookeeper是什么 Zookeeper是一个开源的分布式协调服务,其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一些列简单的接口提供给用户使用。其是一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据发布/发布、负载均衡、命名 阅读全文
posted @ 2019-08-01 18:22 myseries 阅读(419) 评论(0) 推荐(0) 编辑
摘要:大致来说,zookeeper 的使用场景如下,我就举几个简单的,大家能说几个就好了: 分布式协调 分布式锁 元数据/配置信息管理 HA高可用性 分布式协调 这个其实是 zookeeper 很经典的一个用法,简单来说,就好比,你 A 系统发送个请求到 mq,然后 B 系统消息消费之后处理了。那 A 系 阅读全文
posted @ 2019-06-03 10:52 myseries 阅读(209) 评论(0) 推荐(0) 编辑
摘要:目录 1、redis cluster介绍 2、最老土的hash算法和弊端(大量缓存重建) 3、一致性hash算法(自动缓存迁移)+虚拟节点(自动负载均衡) 不用遍历 --》 hash算法: 缓存位置= hash(key)%n 新增/减少 节点 --》缓存位置失效--》hash环 hash环 节点少- 阅读全文
posted @ 2019-06-01 11:44 myseries 阅读(7751) 评论(0) 推荐(2) 编辑