10 2017 档案
centos更换yum源为aliyun源
摘要:国外的yum源由于众所周知的GFW原因,有的被墙,有的很慢,阿里云依靠强大的技术优势建立了国内的开源镜像。阿里云Linux安装镜像源地址:http://mirrors.aliyun.com/ 第一步:备份你的原镜像文件,以免出错后可以恢复。 备份(如有配置其他epel源) 1 mv /etc/yum 阅读全文
posted @ 2017-10-25 15:50 heidsoft 阅读(598) 评论(0) 推荐(0) 编辑
EPEL源
摘要:EPEL (Extra Packages for Enterprise Linux)是基于Fedora的一个项目,为“红帽系”的操作系统提供额外的软件包,适用于RHEL、CentOS和Scientific Linux. 使用很简单:1. 首先我们需要安装一个叫”epel-release”的软件包,这 阅读全文
posted @ 2017-10-25 15:49 heidsoft 阅读(239) 评论(0) 推荐(0) 编辑
haproxy 学习
摘要:https://cbonte.github.io/haproxy-dconv/configuration-1.5.html#4-option%20tcp-check https://www.haproxy.com/documentation/hapee/1-5r2/traffic-managemen 阅读全文
posted @ 2017-10-25 11:37 heidsoft 阅读(223) 评论(0) 推荐(0) 编辑
如何修改jenkins的启动用户?
摘要:如何修改运行jenkins进程的linux帐号? 1、找的jenkins的配置文件,一般是/etc/sysconfig/jenkins 2、修改下面的参数为相应的用户,比如JENKINS_USER="admin" ## Type: string## Default: "jenkins"## Serv 阅读全文
posted @ 2017-10-24 16:48 heidsoft 阅读(881) 评论(0) 推荐(0) 编辑
rsync同步时,删除目标目录比源目录多余文件的方法(--delete)
摘要:在日常运维工作中,我们经常用到rsync这个同步神器。有时在同步两个目录时,会要求删除目标目录中比源目录多出的文件,这种情况下,就可用到rsync的--delete参数来实现这个需求了。 实例说明:在服务器A上同步/tmp/work目录到远程服务器B的/tmp/work目录下(A和B已经提前做好ss 阅读全文
posted @ 2017-10-24 16:48 heidsoft 阅读(740) 评论(0) 推荐(0) 编辑
awk学习
摘要:awk是行处理器: 相比较屏幕处理的优点,在处理庞大文件时不会出现内存溢出或是处理缓慢的问题,通常用来格式化文本信息 awk处理过程: 依次对每一行进行处理,然后输出 awk命令形式: awk [-F|-f|-v] ‘BEGIN{} //{command1; command2} END{}’ fil 阅读全文
posted @ 2017-10-20 10:02 heidsoft 阅读(227) 评论(0) 推荐(0) 编辑
awk:好用的数据处理工具
摘要:awk 也是一个非常棒的数据处理工具!sed 常常用于一整个行的处理, awk 则比较倾向于一行当中分成数个『栏位』(或者称为一个域,也就是一列)来处理。因此,awk 相当的适合处理小型的数据数据处理呢!awk 通常运行的模式是这样的: awk 后面接两个单引号并加上大括号 {} 来配置想要对数据进 阅读全文
posted @ 2017-10-20 10:01 heidsoft 阅读(976) 评论(0) 推荐(0) 编辑
nginx服务器安装及配置文件详解
摘要:https://yq.aliyun.com/articles/47359 摘要: nginx在工作中已经有好几个环境在使用了,每次都是重新去网上扒博客,各种编译配置,今天自己也整理一份安装文档和nginx.conf配置选项的说明,留作以后参考。像负载均衡配置(包括健康检查)、缓存(包括清空缓存)配置 阅读全文
posted @ 2017-10-20 09:59 heidsoft 阅读(178) 评论(0) 推荐(0) 编辑
Kubernetes环境搭建
摘要:第一种安装方案(官网) 基于官方的安装方式(安装包并非是最新版本的) 准备CentOS 7.x环境 查看内核版本 1 2 3 [root@k8s-master kube-yaml]# uname -r 3.10.0-514.6.1.el7.x86_64 [root@k8s-master kube-y 阅读全文
posted @ 2017-10-20 09:58 heidsoft 阅读(2853) 评论(0) 推荐(0) 编辑
CentOS 7 安装 GlusterFS
摘要:CentOS 7 GlusterFS 环境说明:3台机器安装 GlusterFS 组成一个集群。使用 docker volume plugin GlusterFS 服务器:10.6.0.14010.6.0.19210.6.0.196配置 hosts 10.6.0.140 swarm-manager1 阅读全文
posted @ 2017-10-20 09:58 heidsoft 阅读(206) 评论(0) 推荐(0) 编辑
在CentOS7上部署Kubernetes集群
摘要:在CentOS7上部署Kubernetes集群 文/FCBusquest 2015-12-22 18:36:00 简介 Kubernetes(k8s)是Google开源的大规模容器集群管理系统, 本文将基于CentOS7自带的Kubernetes组件、分布式键值存储系统etcd以及Flannel实现 阅读全文
posted @ 2017-10-20 09:57 heidsoft 阅读(322) 评论(0) 推荐(0) 编辑
使用Ansible部署etcd 3.2高可用集群
摘要:之前写过一篇手动搭建etcd 3.1集群的文章《etcd 3.1 高可用集群搭建》,最近要初始化一套新的环境,考虑用ansible自动化部署整套环境, 先从部署etcd 3.2集群开始。 需要部署etcd的主机信息如下: node1 192.168.61.11 node2 192.168.61.12 阅读全文
posted @ 2017-10-20 09:56 heidsoft 阅读(1276) 评论(0) 推荐(0) 编辑
Kafka学习整理五(Consumer配置)
摘要:备注:从 0.9.0.0版本后,kafkat添加了新的消费者API及对应的consumer配置,有一些较大的变化,这就要求使用对应的kafka-clients(客户端)版本。 阅读全文
posted @ 2017-10-20 09:55 heidsoft 阅读(698) 评论(0) 推荐(0) 编辑
创建Kafka0.8.2生产者与消费者
摘要:一、下载安装Kafka0.8.2 二、vi config/server.properties 三、修改为advertised.host.name=192.168.1.76 四、rm -rf /tmp *移除临时目录下的文件 五、修改vi /etc/hosts中的127.0.0.1为192.168.1 阅读全文
posted @ 2017-10-20 09:54 heidsoft 阅读(408) 评论(0) 推荐(0) 编辑
Kafka学习之四 Kafka常用命令
摘要:Kafka常用命令 以下是kafka常用命令行总结: 1.查看topic的详细信息 ./kafka-topics.sh -zookeeper 127.0.0.1:2181 -describe -topic testKJ1 2、为topic增加副本 ./kafka-reassign-partition 阅读全文
posted @ 2017-10-20 09:53 heidsoft 阅读(238) 评论(0) 推荐(0) 编辑
Kafka消费组(consumer group)
摘要:一、 误区澄清与概念明确 一、 误区澄清与概念明确 1 Kafka的版本 很多人在Kafka中国社区(替群主做个宣传,QQ号:162272557)提问时的开头经常是这样的:“我使用的kafka版本是2.10/2.11, 现在碰到一个奇怪的问题。。。。” 无意冒犯,但这里的2.10/2.11不是kaf 阅读全文
posted @ 2017-10-20 09:53 heidsoft 阅读(10300) 评论(0) 推荐(1) 编辑
kafka监控工具kafkaOffsetMoniter的使用
摘要:简介 KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面,用来实时监控Kafka的Consumer以及Partition中的Offset,可以在web界面直观的看到每个Partition的Message的增长速度,是否消费,是否阻塞等。 使用 如果不想编译,可以直接去 阅读全文
posted @ 2017-10-20 09:52 heidsoft 阅读(207) 评论(0) 推荐(0) 编辑
kafka监控工具kafkaOffsetMoniter的使用
摘要:简介 KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面,用来实时监控Kafka的Consumer以及Partition中的Offset,可以在web界面直观的看到每个Partition的Message的增长速度,是否消费,是否阻塞等。 使用 如果不想编译,可以直接去 阅读全文
posted @ 2017-10-20 09:52 heidsoft 阅读(720) 评论(0) 推荐(0) 编辑
阿里云监控
摘要:https://develop.aliyun.com/tools/sdk?#/python 预设监控项参考 https://help.aliyun.com/document_detail/28624.html?spm=5176.doc28622.6.660.jH63VC 云监控自定义监控SDK ht 阅读全文
posted @ 2017-10-20 09:48 heidsoft 阅读(224) 评论(0) 推荐(0) 编辑
Jenkins构建时间Poll Scm的设置(常用设置)
摘要:每15分钟构建一次:H/15 * * * * 或*/5 * * * * 每天8点构建一次:0 8 * * * 每天8点~17点,两小时构建一次:0 8-17/2 * * * 周一到周五,8点~17点,两小时构建一次:0 8-17/2 * * 1-5 每月1号、15号各构建一次,除12月:H H 1, 阅读全文
posted @ 2017-10-20 09:46 heidsoft 阅读(628) 评论(0) 推荐(0) 编辑
Kafka管理工具介绍
摘要:Kafka内部提供了许多管理脚本,这些脚本都放在$KAFKA_HOME/bin目录下,而这些类的实现都是放在源码的kafka/core/src/main/scala/kafka/tools/路径下。 Consumer Offset Checker Consumer Offset Checker主要是 阅读全文
posted @ 2017-10-20 09:45 heidsoft 阅读(641) 评论(0) 推荐(0) 编辑
阿里云自定义监控
摘要:自定义监控:对上面监控的补充,可以自定义相应的监控项,在服务器上执行相应的脚本采集数据,然后调用阿里云封装的JDK将数据上传,进行报警处理。 下载阿里云的JDK到服务器相应的目录下 http://help.aliyun.com/knowledge_detail.htm?knowledgeId=597 阅读全文
posted @ 2017-10-20 09:45 heidsoft 阅读(1115) 评论(0) 推荐(0) 编辑
阿里云自定义监控tomcat进程数
摘要:阿里云提供自定义监控SDK,这有助于我们定制化的根据自身业务来做监控,下面我就根据业务需求来介绍一个简单的自定义监控配置。 阿里提供了2个版本的自定义监控接口:自定义监控SDK(python版) :cms_post.py自定义监控SDK(bash版) :cms_post.sh下载地址:http:// 阅读全文
posted @ 2017-10-20 09:44 heidsoft 阅读(402) 评论(0) 推荐(0) 编辑
Kafka监控
摘要:Kafka使用Yammer Metrics来报告server和client的众多metric。还可以使用其他的插件来跟你的监控系统连接起来,比如https://cwiki.apache.org/confluence/display/KAFKA/JMX+Reporters中提到的ganglia和Gra 阅读全文
posted @ 2017-10-20 09:43 heidsoft 阅读(1114) 评论(0) 推荐(0) 编辑
阿里云ECS主机自定义进程监控
摘要:由于业务的关系我们用的是阿里云的ECS主机,需要对业务进程需要监控,查看后发现阿里云提供自定义监控SDK,这有助于我们定制化的根据自身业务来做监控,下面我就根据业务需求来介绍一个简单的自定义监控配置 1 2 PYTHON脚本下载地址:http://imgs-storage.cdn.aliyuncs. 阅读全文
posted @ 2017-10-20 09:42 heidsoft 阅读(1127) 评论(0) 推荐(0) 编辑
kafka常用运维命令
摘要:列出所有topic:bin/kafka-topics.sh --zookeeper localhost:2181 --list说明:其实就是去检查zk上节点的/brokers/topics子节点,打印出来 创建topic:bin/kafka-topics.sh --zookeeper localho 阅读全文
posted @ 2017-10-19 16:04 heidsoft 阅读(871) 评论(0) 推荐(0) 编辑
命令--cut
摘要:--按文件大小排序 显示前100行 显示后五列 ll -Sh|head -n 100|cut -d ' ' -f 5- 一、基本语法cut是一个选取命令,以行为单位,用指定分隔符将行切分为若干字段,选取所需要的字段。1、语法格式cut [option] filesoption常用参数如下: -d:用 阅读全文
posted @ 2017-10-19 16:03 heidsoft 阅读(222) 评论(0) 推荐(0) 编辑
Linux查看用户及分组
摘要:cat /etc/group文件包含所有组cat /etc/shadow和cat /etc/passwd系统存在的所有用户名 usermod 或者修改 /etc/passwd文件即可修改当前用户所属组的方法 w 可以查看当前活跃的用户列表 usermod 功能说明:修改用户帐号。 语 法:userm 阅读全文
posted @ 2017-10-19 16:02 heidsoft 阅读(1659) 评论(0) 推荐(0) 编辑
使用Bind搭建DNS服务
摘要:DNS域名解析服务(Domain Name System)是用于解析域名与IP地址对应关系的服务,功能上可以实现正向解析与反向解析: 正向解析:根据主机名(域名)查找对应的IP地址。 反向解析:根据IP地址查找对应的主机名(域名)。 工作形式上又分主服务器、从服务器和缓存服务器。 主服务器:在特定区 阅读全文
posted @ 2017-10-18 13:17 heidsoft 阅读(192) 评论(0) 推荐(0) 编辑
Bind搭建DNS服务
摘要:DNS域名解析服务(Domain Name System)是用于解析域名与IP地址对应关系的服务,功能上可以实现正向解析与反向解析: 正向解析:根据主机名(域名)查找对应的IP地址。 反向解析:根据IP地址查找对应的主机名(域名)。 工作形式上又分主服务器、从服务器和缓存服务器。 主服务器:在特定区 阅读全文
posted @ 2017-10-18 13:17 heidsoft 阅读(236) 评论(0) 推荐(0) 编辑
DNS开源服务器BIND最小配置详解
摘要:一,简介 相对于存储和大数据领域,CDN是一个相对小的领域,但行行出状元,BIND就是CDN领域的蝉联N届的状元郎。BIND是一款非常常用的DNS开源服务器,全球有90%的DNS用BIND实现。值得一提的是,BIND9.8.1用C语言实现,代码量巨大,其设计实现几乎涵盖了服务器编程的所有细节。 本文 阅读全文
posted @ 2017-10-18 13:16 heidsoft 阅读(430) 评论(0) 推荐(0) 编辑
Linux运维实战之DNS(bind)服务器的安装与配置
摘要:转自http://sweetpotato.blog.51cto.com/533893/1598225 上次博文我们讨论了DNS的基础,本次博文我们重点来看看如何配置一台DNS服务器。 【本次博文的主要内容】 bind服务器简介(包括客户端工具dig的介绍) 配置正向解析DNS服务器 配置反向解析DN 阅读全文
posted @ 2017-10-18 13:14 heidsoft 阅读(10997) 评论(0) 推荐(0) 编辑
基于Bind实现的DNS正反向解析及主从DNS的配置
摘要:一、什么是DNS? 1.1 简单的理解,Domain Name System,是互联网一项核心的服务,他作为一个桥梁可以将域名和IP地址相互因素的一个分布式数据库,能够使人更加方便的访问互联网,而不用去记复杂的IP地址。 1.2 DNS分成3类: 主DNS 从DNS 转发DNS 1.3 DNS的查询 阅读全文
posted @ 2017-10-18 13:12 heidsoft 阅读(2541) 评论(0) 推荐(0) 编辑
DNS BIND之rndc介绍及使用
摘要:rndc(Remote Name Domain Controllerr)是一个远程管理bind的工具,通过这个工具可以在本地或者远程了解当前服务器的运行状况,也可以对服务器进行关闭、重载、刷新缓存、增加删除zone等操作。 使用rndc可以在不停止DNS服务器工作的情况进行数据的更新,使修改后的配置 阅读全文
posted @ 2017-10-18 13:12 heidsoft 阅读(1579) 评论(0) 推荐(0) 编辑
优化 resolv.conf
摘要:DNS lookup 在把域名解析成 IP 过程中耽误了不少时间,尤其是访问比较复杂的网站的时候,比如某个页面包含多个 url,一次请求需要做多次 DNS 解析,并且从用户浏览器到 DNS server,以及 DNS server 和 DNS server 之间都会产生延迟或有可能发生的错误,Goo 阅读全文
posted @ 2017-10-18 13:00 heidsoft 阅读(493) 评论(0) 推荐(0) 编辑
nat转发
摘要:http://www.revsys.com/writings/quicktips/nat.html https://www.alibabacloud.com/zh/product/nat?spm=a3c0i.7919406.692950.dznavproductsc3.143733e26UobLQ 阅读全文
posted @ 2017-10-17 13:50 heidsoft 阅读(296) 评论(0) 推荐(0) 编辑
阿里云EIP按流量计费
摘要:https://help.aliyun.com/document_detail/27767.html 计费周期为1小时,账单周期也为1小时。在一个计费周期内,如果您使用的时间不足一小时,按一小时收费。 流量使用指的是EIP的出方向流量累计值,入方向流量不参与计费(出方向指从阿里云数据中心流向互联网, 阅读全文
posted @ 2017-10-17 13:47 heidsoft 阅读(1322) 评论(0) 推荐(0) 编辑
SNAT和DNAT的区别
摘要:SNAT: Source Network Address Translation,是修改网络包源ip地址的。DNAT: Destination Network Address Translation,是修改网络包目的ip地址的。 明白了这些后,要再知道使用它们的原因,也就是你什么时候要修改源ip地址 阅读全文
posted @ 2017-10-17 13:40 heidsoft 阅读(1588) 评论(0) 推荐(0) 编辑
基于Dcoker的ZooKeeper集群的搭建
摘要:背景 原来学习 ZK 时, 我是在本地搭建的伪集群, 虽然说使用起来没有什么问题, 但是总感觉部署起来有点麻烦. 刚好我发现了 ZK 已经有了 Docker 的镜像了, 于是就尝试了一下, 发现真是爽爆了, 几个命令就可以搭建一个完整的 ZK 集群. 下面我简单记录一下使用 Docker 搭建 ZK 阅读全文
posted @ 2017-10-16 14:10 heidsoft 阅读(378) 评论(0) 推荐(0) 编辑
Docker使用link建立容器之间的连接
摘要:我们在使用Docker的时候,经常可能需要连接到其他的容器,比如:web服务需要连接数据库。按照往常的做法,需要先启动数据库的容器,映射出端口来,然后配置好客户端的容器,再去访问。其实针对这种场景,Docker提供了--link 参数来满足。 这里使用数据库服务器和客户端的例子来介绍下--link的 阅读全文
posted @ 2017-10-16 13:34 heidsoft 阅读(776) 评论(0) 推荐(0) 编辑
拒绝用户登录:/bin/false和/usr/sbin/nologin
摘要:要拒绝系统用户登录,可以将其shell设置为/usr/sbin/nologin或者/bin/false 1 # usermod -s | --shell /usr/sbin/nologin username 或者 1 # usermod -s | -shell /bin/false username /bin/false /bin/false什么也不做只是返回一个错误状态,然后立即退出。将... 阅读全文
posted @ 2017-10-15 22:21 heidsoft 阅读(1748) 评论(0) 推荐(0) 编辑




点击右上角即可分享
微信分享提示