自动化运维软件Saltstack安装配置
自动化运维saltstack
一、Saltstack介绍
saltstack简单介绍
Saltstack是一种全新的基础设施管理方式,是一个服务器基础架构集中化管理平台,几分钟内便可运行起来,速度够快,服务器之间秒级通讯,扩展性好,很容易批量管理上万台服务器,显著降低人力与运维成本;它具备配置管理、远程执行、监控等功能,一般可以理解为简化版的puppet和加强版的func;通过部署SaltStack环境,可以在成千上万台服务器上做到批量执行命令,根据不同业务特性进行配置集中化管理、分发文件、采集服务器数据、操作系统基础及软件包管理等,SaltStack是运维人员提高工作效率、规范业务配置与操作的利器。SaltStack基于Python语言实现,结合轻量级消息队列(ZeroMQ)(SaltStack的通信模式总共分为2种模式:ZeroMQ、REAT,鉴于REAT目前还不是太稳定,通常会选择ZeroMQ模式)与Python第三方模块(Pyzmq、PyCrypto、Pyjinjia2、python-msgpack和PyYAML等)构建。
Saltstack运行模式
Local:本地,一台机器玩,不建议
Master/Minion:通过server/agent的方式进行管理,效率很高(批量管理1000台机器,25秒搞定)
Salt SSH:通过SSH方式进行管理,效率相对来说比较低(批量管理1000台机器,83秒搞定)
Saltstack三大功能
远程执行(执行远程命令)
配置管理(状态管理)
云管理
Saltstack特征
1)部署简单、方便;
2)支持大部分UNIX/Linux及Windows环境;
3)主从集中化管理;
4)配置简单、功能强大、扩展性强;
5)主控端(master)和被控端(minion)基于证书认证,安全可靠;
6)支持API及自定义模块,可通过Python轻松扩展。
Master与Minion认证
- 1)minion在第一次启动时,会在/etc/salt/pki/minion/(该路径在/etc/salt/minion里面设置)下自动生成minion.pem(private key)和 minion.pub(public key),然后将 minion.pub发送给master。
- 2)master在接收到minion的public key后,通过salt-key命令accept minion public key,这样在master的/etc/salt/pki/master/minions下的将会存放以minion id命名的 public key,然后master就能对minion发送指令了。
Master与Minion的连接
-
1)SaltStack master启动后默认监听4505和4506两个端口。4505(publish_port)为saltstack的消息发布系统,4506(ret_port)为saltstack客户端与服务端通信的端口。如果使用lsof 查看4505端口,会发现所有的minion在4505端口持续保持在ESTABLISHED状态。
-
2)minion与master之间的通信模式如下
二、SaltStack 安装配置过程
服务端:Rich63:
IP:192.168.0.63
Hostname:Rich63.com
被控端:Rich64
IP:192.168.0.64
Hostname:Rich64.com
1、配置FQDN,让ip和主机名对应
[root@Rich63 ~]# vim /etc/hosts
192.168.0.63 Rich63 Rich63.com
192.168.0.64 Rich64 Rich64.com
[root@Rich64 ~]# cat /etc/hosts
192.168.0.64 Rich64 Rich64.com
192.168.0.63 Rich63 Rich63.com
2、两台机器都关闭防火墙和selinux
3、服务组件安装:
[root@Rich63 ~]# yum install epel-release -y #安装 epel源
[root@Rich63 ~]# yum install salt-master salt-minion -y #安装服务端和被监控端服务
[root@Rich64 ~]# yum install epel-release -y && yum install salt-minion –y
#被控端:安装被监控端服务
4、服务启动:
配置主控服务:
[root@Rich63 ~]# vim /etc/salt/minion
在16行下面增加一行:
master: 192.168.0.63 ##说明服务端的地址
修改python编写的配置文件千万注意缩进(空格)
启动主控端服务:
[root@Rich63 ~]# systemctl start salt-master
[root@Rich63 ~]# systemctl start salt-minion
配置被控端服务:
[root@Rich64 ~]# vim /etc/salt/minion
在16行下面增加一行:
master: 192.168.0.63 ##指定服务端的地址
启动被监控服务:
[root@Rich64 ~]# systemctl start salt-minion
启动完,可以查看下进程,可以看到相关服务是python来执行运行的
[root@Rich63 ~]# ps aux|grep salt
root 1772 0.0 2.0 288104 21088 ? S 09:46 0:00 /usr/bin/python2.6 /usr/bin/salt-master –d
root 2166 0.1 2.5 442228 25216 ? S 09:46 0:00 /usr/bin/python2.6 /usr/bin/salt-minion –d
5、配置认证
下面认证操作都是在Rich63上操作:
salt-key -a Rich64.com ##增加一个Rich64的密钥认证
[root@Rich63 ~]# salt-key -a Rich64.com
The following keys are going to be accepted:
Unaccepted Keys:
Rich64.com
Proceed? [n/Y] y
Key for minion Rich64.com accepted.
查看已经签名的客户端:
[root@Rich63 ~]# salt-key -A
Accepted Keys:
Rich64.com
Denied Keys:
Unaccepted Keys:
Rich63.com
Rejected Keys:
签名完成,可以在被监控端看到生成的密钥minion_master.pub
[root@Rich64 ~]# cd /etc/salt/pki/minion/
[root@Rich64 minion]# ls
minion_master.pub minion.pem minion.pub
补充: salt-key 可以使用-A 来签名所有主机,也可以使用-d 删除指定的主机
6、saltstack 远程执行命令演示:
探测主机是否在线
[root@Rich63 ~]# salt '*'test.ping
Rich64.com:
True
查看分区等信息:
[root@Rich63 ~]# salt'Rich64.com' cmd.run 'df -h'
Rich64.com:
Filesystem Size Used Avail Use% Mounted on
/dev/sda2 9.5G 2.0G 7.1G 22% /
tmpfs 491M 12K 491M 1% /dev/shm
/dev/sda1 2.9G 39M 2.7G 2% /boot
/dev/sda3 5.7G 12M 5.4G 1% /usr/local
可以调用cmd.run 来执行其他的命令,比如负载,时间,主机名等等
这里的* 表示所有已经签名的客户端,也可以指定其中特定的一个,比如 Rich64.com,但是这些客户端必须是在master上被接受认证的客户端,
如果有多个被监控的客户端,我们可以通过通配符,列表,正则等来一次性的控制多个主机,比如我们现在有两个客户端,web10 web11.可以写成:
salt ‘web*’或者salt ‘web1[01]’或者 salt -L ‘web10,web11’使用列表的时候,多个机器用逗号隔开
7、saltstack之grains介绍
GRAINS 组件是saltstack中非常重要的一个组件,其主要用于记录Minion的一些静态信息,如比:CPU、内存、磁盘、网络等。grains信息是每次客户端启动后自动上报给master的,一旦这些静态信息发生改变需要重启minion 或者 重新同步下 grains。
grains 是在minion启动收集到的一些信息,比如操作系统的类型,网卡IP,内存版本,CPU信息等
[root@Rich63 ~]# salt 'Rich64.com' grains.ls ##列出所有的grains项目名称
Rich64.com:
- SSDs
- biosreleasedate
- biosversion
- cpu_flags
- cpu_model
- cpuarch
等等
[root@Rich63 ~]# salt 'Rich64.com' grains.items ##列出所有的grains项和对应的值
Rich64.com:
----------
SSDs:
biosreleasedate:
05/20/2014
biosversion:
6.00
cpu_flags:
- fpu
- vme
- de
启动grains的信息并不是动态的,并不会时时变更,它只是在minion启动时收集到的,我们可以根据grains收集到的一些信息,做配置管理工作,可以支持自定义一些监控项
8、自定义grains
在被监控端Rich64上 添加grains:
[root@Rich64 ~]# vim /etc/salt/grains ##此文件默认没有,需要创建
添加如下信息,监控项:对应的信息
role: zabbix_server
env: test
myname: Richlinux
myhostname: Rich64.com
重启minion服务
[root@Rich64 ~]# systemctl restart salt-minion
可以再次执行salt 'Rich64.com' grains.items 查看是否存在自定义的项,或者使用
[root@Rich63 ~]# salt 'Rich64.com' grains.item env 单独查看
我们可以借助grains的一些属性信息来执行一些命令
[root@Rich63 ~]# salt -G env:test cmd.run 'w'
9、saltstack之pillar介绍
grains用于存储静态不易变更的数据,而pillar一般用来存储动态的、敏感的数据;通过minion端和master端都可以配置设置或获取grains信息,而pillar信息只能在master端配置,再到minion端执行。
pillar和grains不一样,是在master上定义的,并且是针对minion定义的一些信息,可以自定义变量等
自定义配置pillar过程:
[root@Rich63 ~]# vim /etc/salt/master
找到pillar_roots 这项,取消下面三行的注释
529 pillar_roots:
530 base:
531 - /srv/pillar
# pillar_roots 前面加一个空格
创建pillar文件的存放目录:
[root@Rich63 ~]# mkdir -p /srv/pillar
[root@Rich63 ~]# cd !$
创建配置文件,编辑如下内容:
[root@Rich63 pillar]# vim test.sls
conf: /etc/123.conf
myname: saltstack-server
注意冒号后有空格
创建编写入口配置文件
[root@Rich63 ~]# vim /srv/pillar/top.sls
base:
'Rich64.com':
- test
注意- 后有空格
重启服务:
[root@Rich63 pillar]# systemctl restart salt-master
可以通过刷新来获取新的状态
[root@Rich63 pillar]# salt '*' saltutil.refresh_pillar
查看:
[root@Rich63 pillar]# salt '*' pillar.items
Rich64.com:
----------
conf:
/etc/123.conf
myname:
saltstack-server
三、Saltstack 配置管理服务
1、 配置安装apache
[root@Rich63 ~]# vim /etc/salt/master
取消406-408行的注释
406 file_roots:
407 base:
408 - /srv/salt/
创建配置文件存储目录
[root@Rich63 ~]# mkdir /srv/salt
[root@Rich63 ~]#cd /srv/salt
创建入口配置文件
[root@Rich63 salt]# vim top.sls
base:
'Rich64.com':
- apache
意思是指定客户端上执行apache的模块
重启服务:
[root@Rich63 salt]# systemctl restart salt-master
创建编写apache模块的配置文件
[root@Rich63 salt]# vim /srv/salt/apache.sls
apache-service:
pkg.installed:
- names:
- httpd
- httpd-devel
service.running:
- name: httpd
- enable: True
注意:行对齐 -有空格
apache-service是ID的名称,自定义的。pkg.installed为包安装函数,下面是要安装的包的名字。service.running也是一个函数,来保证指定的服务启动,enable表示开机启动。
配置好文件,执行
[root@Rich63 salt]# salt 'Rich64.com' state.highstate
查看被控端,已经安装成功。
2.配置远程文件管理
http://www.comblogs.com/lgeng/p/6567424.html
创建一个文件管理的模块
[root@Rich63 salt]# vim filetest.sls
file_test:
file.managed:
- name: /tmp/Richlinux.txt
- source: salt://test/Rich.php
- user: root
- group: root
- mode: 644
注意:第一行的 file-test 为自定的名字,表示该配置段的名字,可以在别的配置段中引用它;source指定文件从哪里拷贝,这里的 test 目录相当于是 /srv/salt/test 目录;name指定远程客户端要生成的文件。
新建所要测试的源文件
[root@Rich63 salt]#mkdir -p /srv/salt/test
[root@Rich63 salt]# echo 'Rich.com'>/srv/salt/test/Rich.php
在入口文件里添加模块
[root@Rich63 salt]# vim top.sls
base:
'Rich64.com':
- apache
- filetest
测试执行:
[root@Rich63 salt]# salt 'Rich64.com' state.highstate
客户端查看是否有/tmp/Richlinux.txt
3、配置文件夹管理:
创建一个文件夹管理的模块
[root@Rich63 salt]# vim filedir.sls
file_dir:
file.recurse:
- name: /tmp/testdir
- source: salt://test
- user: root
- file_mode: 644
- dir_mode: 755
- mkdir: True
- clean: True
在入口文件里添加模块
[root@Rich63 salt]# vim top.sls
base:
'Rich64.com':
- filedir
测试文件夹管理:
[root@Rich63 salt]# salt 'Rich64.com' state.highstate
客户端查看是否有/tmp/testdir 目录
4、saltstack远程执行命令
创建执行命令的配置文件
[root@Rich63 salt]# vim cmd.sls
cmd_test:
cmd.run:
- unless: test -f /tmp/Richtext.txt
- names:
- touch /tmp/11.txt
- mkdir /tmp/1233
- user: root
注意:unless: 表示若/tmp/Richtext.txt文件不存在,也就是结果为True则执行-name后面的命令,为false则不执行;还可以使用 onlyif 表示若/tmp/Richtext.txt文件存在,则执行后面的命令;两者正好相反。
在入口文件里添加模块
[root@Rich63 salt]# vim top.sls
base:
'Rich64.com':
- cmd
测试执行命令:
[root@Rich63 salt]# salt 'Rich64.com' state.highstate
5、saltstack远程执行shell脚本
[root@Rich63 salt]# vim shell.sls
shell_test:
cmd.script:
- source: salt://test/1.sh
- user: root
[root@Rich63 salt]# cat test/1.sh
#!/bin/bash
touch /tmp/111222333.jsp
echo 'this is jsp page'>> /tmp/111222333.jsp
[root@Rich63 salt]# vim top.sls
base:
'Rich64.com':
- shell
测试执行命令:
[root@Rich63 salt]# salt 'Rich64.com' state.highstate
客户端查看是否执行成功.
No pain, no gain!