Subversion+Ansible搭建自动化提交代码
一、基本的SVN的服务配置
查看可使用的 svn 命令:
[root@wchongeweb ~]# svn
svn svndumpfilter svnrdump svnsync
svnadmin svnlook svnserve svnversion
1、新建一个目录用于存储SVN所有文件
[root@wchongeweb ~]# mkdir /home/svn
2、新建一个版本仓库
[root@wchongeweb ~]# svnadmin create /home/svn/project
3、初始化版本仓库中的目录
[root@wchongeweb ~]# mkdir -p /root/project/{server,client,test} (建立临时目录) [root@wchongeweb ~]# svn import /root/project/ file:///home/svn/project/ -m "svn dir init" Adding /root/project/test Adding /root/project/server Adding /root/project/client Committed revision 1. [root@wchongeweb ~]# rm -rf /root/project/ (删除临时建立的目录)
4、添加用户
要添加SVN用户非常简单,只需在/home/svn/project/conf/passwd文件添加一个形如“username=password”的条目就可以了。为了测试,我添加了如下内容:
[users] # harry = harryssecret # sally = sallyssecret test = test@pass server_group = server_pw client_group = client_pw test_group = test_pw
5、修改用户访问策略
/home/svn/project/conf/authz记录用户的访问策略,以下是参考:
[groups] project_p = test project_s = server1,server2,server3 project_c = client1,client2,client3 project_t = test1,test1,test1 [project:/] @project_p = rw * = [project:/server] @project_p = rw @project_s = rw * = [project:/client] @project_p = rw @project_c = rw * = [project:/doc] @project_p = rw @project_s = r @project_c = r @project_t = r * =
说明:以上信息表示,只有project_p用户组有根目录的读写权。r表示对该目录有读权限,w表示对该目录有写权限,rw表示对该目录有读写权限。
最后一行的*=表示,除了上面设置了权限的用户组之外,其他任何人都被禁止访问本目录。这个很重要,一定要加上!
6、修改svnserve.conf文件,让用户和策略配置升效.
svnserve.conf内容如下:
[general] anon-access = none auth-access = write password-db = /home/svn/project/conf/passwd authz-db = /home/svn/project/conf/authz
7、启动服务器
# svnserve -d -r /home/svn
注意:如果修改了svn配置,需要重启svn服务,步骤如下:
# ps -aux|grep svnserve # kill -9 ID号 # svnserve -d -r /home/svn
8、测试服务器
# svn co svn://172.18.188.63/project Authentication realm: <svn://172.18.188.63:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d Password for 'root': Authentication realm: <svn://172.18.188.63:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d Username: server_group Password for 'server_group': svn: Authorization failed ( server_group没用根目录的访问权 ) # svn co svn://172.18.188.63/project Authentication realm: <svn://172.18.188.63:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d Password for ‘root’: Authentication realm: <svn://172.18.188.63:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d Username: test Password for ‘test’: A project/test A project/server A project/client Checked out revision 1. ( 测试提取成功 ) # cd project/server # vim main.c # svn add main.c # svn commit main.c -m “测试一下我的C程序,看什么看,不行啊??” Adding main.c Transmitting file data . Committed revision 2. ( 测试提交成功 )
二,Ansible安装部署
实验环境:
- svn服务器:172.18.188.63 (wchongeweb)
- 目标服务器:172.18.188.65 (abroadweb)
测试目标:使用 svn 提交代码,如果提交时添加注释中含有 "auto_deploy" 字符串,则自动部署到目标服务器中。
编辑 post-commit 脚本:
[root@wchongeweb hooks]# vi /home/svn/project/hooks/post-commit #!bin/bash REPOS="$1" REV="$2" export LC_CTYPE=en_US.UTF-8 if (svnlook log -r $REV /home/svn/project | grep "auto_deploy"); then echo "`date` $REV auto deploy command received" >> /tmp/test_svnautocommit.txt ansible web -a "svn checkout "svn://172.18.188.63/project" /var/www/html/web1 --force --username="test" --password="test@pass" --non-interactive" fi
脚本说明:
如果提交时添加注释中含有 "auto_deploy",则记录一条简单的日志,并且执行一条 web 命令,意思是在 web组的所有主机上(这里只定义了一个abroadweb),执行 svn checkout 操作,将目标 repo 检出到本地 /var/www/html/web1。第一次执行时,如果目录不存在,会自动创建目录;否则进行检出。
ansible 的用户组配置:
[root@wchongeweb hooks]# vi /etc/ansible/hosts
[web]
abroadweb
ansible 主机和abroadweb 建立 ssh 信任步骤等暂略,注意那是必要的。
测试:
1.abroadweb 主机上,现在还没有创建 web1 目录:
[root@abroadweb html]# pwd /var/www/html [root@abroadweb html]# ll total 4 -rw-r--r-- 1 root root 24 Jul 16 14:54 index.html [root@abroadweb html]# hostname abroadweb
2.在 svn 服务器上,现在 /root/project/test 目录下有如下文件,
[root@wchongeweb test]# pwd /root/project/test [root@wchongeweb test]# ll total 0 -rw-r--r-- 1 root root 0 Aug 5 11:00 ccc -rw-r--r-- 1 root root 0 Aug 5 11:06 ddd -rw-r--r-- 1 root root 0 Aug 5 11:37 eee -rw-r--r-- 1 root root 0 Aug 5 12:31 fff
3.我们添加一个 ggg 文件,并且提交
[root@wchongeweb test]# touch ggg [root@wchongeweb test]# svn add ggg A ggg [root@wchongeweb test]# svn commit -m "auto_deploy" Adding test/ggg Transmitting file data . Committed revision 47.
现在版本是 47
4.查看abroadweb上是否同步过去了:
[root@abroadweb html]# ll total 8 -rw-r--r-- 1 root root 24 Jul 16 14:54 index.html drwxr-xr-x 6 root root 4096 Aug 5 13:29 web1 [root@abroadweb html]# ll web1/test/ total 0 -rw-r--r-- 1 root root 0 Aug 5 13:29 ccc -rw-r--r-- 1 root root 0 Aug 5 13:29 ddd -rw-r--r-- 1 root root 0 Aug 5 13:29 eee -rw-r--r-- 1 root root 0 Aug 5 13:29 fff -rw-r--r-- 1 root root 0 Aug 5 13:29 ggg
我们看到,在 /var/www/html 目录下多了一个 web1 目录,并且 test 子目录的内容是同步的
5.现在到abroadweb上删除一个文件 ccc ,并提交:
[root@wchongeweb test]# svn del ccc D ccc [root@wchongeweb test]# svn commit -m "auto_deploy" Deleting test/ccc Committed revision 48. [root@wchongeweb test]# ll total 0 -rw-r--r-- 1 root root 0 Aug 5 11:06 ddd -rw-r--r-- 1 root root 0 Aug 5 11:37 eee -rw-r--r-- 1 root root 0 Aug 5 12:31 fff -rw-r--r-- 1 root root 0 Aug 5 13:28 ggg
现在版本号到了 48
6.再查看 abroadweb 上是否同步过去了:
[root@abroadweb html]# ll web1/test/ total 0 -rw-r--r-- 1 root root 0 Aug 5 13:29 ddd -rw-r--r-- 1 root root 0 Aug 5 13:29 eee -rw-r--r-- 1 root root 0 Aug 5 13:29 fff -rw-r--r-- 1 root root 0 Aug 5 13:29 ggg
可以看到 ccc 文件成功被删除了。
好了,到了这里已经基本实现了。这是使用 svn 检出实现的方式。
后续需要完善的几个方面:
1.实验里的检出可能没有加密,后面考虑使用 svn+ssh 协议,类似这样,更为安全,这个等有时间再完善一下:
# Checkout subversion repository to specified folder. - subversion: repo=svn+ssh://172.18.188.63/project dest=/var/www/html/web1 ansible web -m subversion -a "repo=svn+ssh://172.18.188.63/project dest=/var/www/html/web1 username=test password=test@pass revision=$REV"
2.检出时,加上 -r $REV 应该更好,因为默认是检出 HEAD 版本,对于这一点待查
3.我们根据注释里的 auto_deploy 触发自动部署线上环境,也可以使用其他字符串,如 auto_test_deploy 触发自动部署测试环境。进一步设想,是开发一个 web 界面,手动选择自动部署测试环境,或者部署线上环境,这样比较直观好看一些。
4.checkout 是每次都拷贝覆盖,还是只更新需要更新的?
我们实验一下 svn update:
ansible web -a "svn update "svn://172.18.188.63/project" /var/www/html/web1 --force --username="test" --password="test@pass" --non-interactive"
增加 hhh 文件,并提交,注释为空,不要触发自动部署:
[root@wchongeweb test]# touch hhh [root@wchongeweb test]# svn add hhh A hhh [root@wchongeweb test]# svn commit -m "" Adding test/hhh Transmitting file data . Committed revision 49. [root@wchongeweb test]# ansible web -a "svn update "svn://172.18.188.63/project" /var/www/html/web1 --force --username="test" --password="test@pass" --non-interactive" abroadweb | SUCCESS | rc=0 >> Skipped 'svn://172.18.188.63/project' A /var/www/html/web1/test/hhh Updated to revision 49. Summary of conflicts: Skipped paths: 1
查看 abroadweb 上是否同步过去了:
[root@abroadweb html]# ll web1/test/ total 0 -rw-r--r-- 1 root root 0 Aug 5 13:29 ddd -rw-r--r-- 1 root root 0 Aug 5 13:29 eee -rw-r--r-- 1 root root 0 Aug 5 13:29 fff -rw-r--r-- 1 root root 0 Aug 5 13:29 ggg -rw-r--r-- 1 root root 0 Aug 5 13:38 hhh
可以看到成功添加了 hhh
试一试删除 ddd 文件,并且提交:
[root@wchongeweb test]# ll total 0 -rw-r--r-- 1 root root 0 Aug 5 11:06 ddd -rw-r--r-- 1 root root 0 Aug 5 11:37 eee -rw-r--r-- 1 root root 0 Aug 5 12:31 fff -rw-r--r-- 1 root root 0 Aug 5 13:28 ggg -rw-r--r-- 1 root root 0 Aug 5 13:38 hhh [root@wchongeweb test]# svn del ddd D ddd [root@wchongeweb test]# svn commit -m "" Deleting test/ddd Committed revision 50. [root@wchongeweb test]# ansible web -a "svn update "svn://172.18.188.63/project" /var/www/html/web1 --force --username="test" --password="test@pass" --non-interactive" abroadweb | SUCCESS | rc=0 >> Skipped 'svn://172.18.188.63/project' D /var/www/html/web1/test/ddd Updated to revision 50. Summary of conflicts: Skipped paths: 1
查看 abroadweb 上是否同步过去了:
[root@abroadweb html]# ll web1/test/ total 0 -rw-r--r-- 1 root root 0 Aug 5 13:29 eee -rw-r--r-- 1 root root 0 Aug 5 13:29 fff -rw-r--r-- 1 root root 0 Aug 5 13:29 ggg -rw-r--r-- 1 root root 0 Aug 5 13:38 hhh
已经删除了 ddd 文件,证明是同步了
注,svn 非交互式:--non-interactive,第一次 checkout 不再问你是否需要保存密码。
看来也是可行的。
到这里为止,已经可以用一个实际的项目做部署测试,后面有时间再来补上这一部分。但是我想看了这整个的步骤,自己做实验验证一下也比较简单了。
Nginx 反向代理配置
# svn update server server { listen 80; server_name svn.ccnna.xin; #access_log off; access_log /tmp/dosvn.log; location / { include proxy.conf proxy_pass http://wchongeweb:8180; } }
参考博客 https://www.jianshu.com/p/50b7dc07f1f1
更多详情,请访问个人博客:https://www.wchonge.com