2020年8月4日
04搭建cdh 集群角色规划
摘要： 搭建cdh 集群时候的角色规划 1、大规模节点规划如下图 2、已4个节点为例： 阅读全文
posted @ 2020-08-04 18:09 GaoYanbing 阅读(365) 评论(0) 推荐(0) 编辑
Impala 介绍
摘要： 一、简介 1、概述 Impala是Cloudera公司推出，提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。 •基于Hive使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点 impala使用hive的元数据, 完全在内存中计算 •是CDH平台首选的PB级大数据实时查询 阅读全文
posted @ 2020-08-04 16:41 GaoYanbing 阅读(833) 评论(0) 推荐(0) 编辑
CDH的介绍和部署
摘要： CDH：全称Cloudera’s Distribution Including Apache Hadoop。 CDH版本衍化 hadoop是一个开源项目，所以很多公司在这个基础进行商业化，Cloudera对hadoop做了相应的改变。Cloudera公司的发行版，我们将该版本称为CDH(Cloude 阅读全文
posted @ 2020-08-04 15:51 GaoYanbing 阅读(446) 评论(0) 推荐(0) 编辑
高并发与高可用知识总结
摘要： 究竟啥才是互联网架构“高并发” 一、什么是高并发 高并发（High Concurrency）是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理很多请求。 高并发相关常用的一些指标有响应时间（Response Time），吞吐量（Throughput），每秒查 阅读全文
posted @ 2020-08-04 11:08 GaoYanbing 阅读(507) 评论(0) 推荐(0) 编辑
2020年8月3日
负载均衡——LVS DR模式
摘要： 背景 相比于nginx只能用于7层负载均衡，LVS就比较强大了，能在4层做负载均衡。而且性能和稳定性上LVS也比较占优，毕竟是合入内核模块，不稳定肯定不行。 关于LVS LVS通过工作于内核的ipvs模块来实现功能，其主要工作于netfilter的INPUT链上。除此之外，还需要一个用户态工具，ip 阅读全文
posted @ 2020-08-03 19:55 GaoYanbing 阅读(155) 评论(0) 推荐(0) 编辑
2020年7月16日
iptables四表五链
摘要： 如下是具有双网卡的Linux服务器，数据入口网卡是eth0，数据出口网卡是eth1： 而Linux**防火墙**的工作区域为下图中的绿色阴影部分(防火墙的概念这里不赘述)： Linux系统中防火墙功能的两大角色：iptables和netfilter。iptables是Linux系统下应用层内置控制防 阅读全文
posted @ 2020-07-16 17:10 GaoYanbing 阅读(208) 评论(0) 推荐(0) 编辑
2020年6月19日
CentOS7安装RabbitMQ
摘要： 目录 安装erlang 安装RabbitMQ 启动命令 WEB管理 用户管理 登陆 回到顶部 安装erlang 由于rabbitmq是基于erlang语言开发的，所以必须先安装erlang。 安装依赖 yum -y install gcc glibc-devel make ncurses-devel 阅读全文
posted @ 2020-06-19 10:19 GaoYanbing 阅读(258) 评论(0) 推荐(0) 编辑
2020年6月15日
CentOS7.5安装SVN和可视化管理工具iF.SVNAdmin
摘要： 一、安装Apache和PHP 由于iF.SVNAdmin使用php写的，因此我们需要安装php yum install httpd php 二、安装SVN服务器（其中，mod_dav_svn是Apache服务器访问SVN的一个模块） yum install subversion mod_dav_sv 阅读全文
posted @ 2020-06-15 17:08 GaoYanbing 阅读(680) 评论(0) 推荐(0) 编辑
2020年6月9日
shell 堡垒机 jumpserver
摘要： [root@h020 ~]# cat /bin/jumpserver #!/bin/bash########################linux jump-server#########################忽略键盘输入的一些信号#linux键盘信号详细请看： trap "" HUP 阅读全文
posted @ 2020-06-09 18:43 GaoYanbing 阅读(341) 评论(0) 推荐(0) 编辑
shell堡垒机
摘要： 配置 普通用户配置 useradd ops su - ops vim .bashrc /usr/bin/conn root用户配置 .bashrc /sbin/super 连接脚本： [root@h020 ~]# cat /usr/bin/conn #!/bin/bashecho "Please e 阅读全文
posted @ 2020-06-09 18:40 GaoYanbing 阅读(279) 评论(0) 推荐(0) 编辑