04 2020 档案
摘要:[toc] 转载 https://www.cnblogs.com/williamjie/p/9481774.html 一、rabbitmq简介 1.1 MQ介绍 什么是MQ 消息队列(Message Queue,简称MQ),从字面意思上看,本质是个队列,FIFO先入先出,只不过队列中存放的内容是me
阅读全文
摘要:[toc] 一、Kafka、RabbitMQ、Redis消息中间件对比 在分布式系统中、消息中间件常用于系统间的数据交换, 按照实际业务需求场景以及运维成本,可以选择适合自己的产品. 二、相关概念介绍 Kafka 1.基于Pull的模式来处理消息消费 2.追求高吞吐量 3.一开始的目的就是日志收集和
阅读全文
摘要:[toc] 一、kafka简介 Kafka是一个开源的分布式消息引擎/消息中间件,同时Kafka也是一个流处理平台。Kakfa支持以发布/订阅的方式在应用间传递消息,同时并基于消息功能添加了Kafka Connect、Kafka Streams以支持连接其他系统的数据(Elasticsearch、H
阅读全文
摘要:[toc] 一、简介 顾名思义 zookeeper 就是动物园管理员,他是用来管 hadoop(大象)、Hive(蜜蜂)、pig(小 猪)的管理员, Apache Hbase 和 Apache Solr 的分布式集群都用到了 zookeeper;Zookeeper: 是一个分布式的、开源的程序协调服
阅读全文
摘要:CentOS使用chkconfig增加开机服务提示service xxx does not support chkconfig的问题解决 在service服务管理目录下的shell脚本的第二行增加如下内容即可:指定运行级别 chkconfig: 2345 10 90 服务必须在运行级2,3,4,5下
阅读全文
摘要:[toc] 转载https://www.cnblogs.com/FengGeBlog/p/9951319.html 本篇来介绍MongoDB的安装。安装版本是3.4.18 如果安装老版本的mongodb,你会发现安装比较顺利,但是新版本的mongo安装稍微麻烦一点 ,主要是多了安全机制认证等步骤。
阅读全文
摘要:```redis简介1.基于内存的key-value数据库2.基于c语言编写的,可以支持多种语言的api //set每秒11万次,取get 81000次3.支持数据持久化4.value可以是string,hash, list, set, sorted set使用场景1. 去最新n个数据的操作2. 排行榜,取top n个数据 //最佳人气前10条3. 精确的设置过期时间4. 计数器5. 实时系统, ...
阅读全文
摘要:[toc] 官网: https://www.goaccess.cc/?mod=man 一、GoAccess简介 GoAccess 是一款开源(MIT许可证)的且具有交互视图界面的实时 Web 日志分析工具,通过你的 Web 浏览器或者 nix 系统下的终端程序即可访问。 能为系统管理员提供快速且有价
阅读全文
摘要:旧 remote_addr, $http_x_forwarded_for 记录客户端IP地址 remote_user 记录客户端用户名称 request 记录请求的URL和HTTP协议 status 记录请求状态 body_bytes_sent 发送给客户端的字节数,不包括响应头的大小; 该变量与A
阅读全文