Walle 2.0(瓦力)的安装
一、简介
walle 让用户代码发布终于可以不只能选择 jenkins!支持各种web代码发布,php、java、python、go等代码的发布、回滚可以通过web来一键完成。walle 一个可自由配置项目,更人性化,高颜值,支持git、多用户、多语言、多项目、多环境同时部署的开源上线部署系统。开源官网:http://www.walle-web.io/。有兴趣的同学可以到官网上查阅资料。
二、原理分析
宿主机、目标机群、操作用户
宿主机、目标机群、操作用户关系如下图所示,宿主机(walle所在的机器),是一个中间机器,是代码托管与远程目标机群的纽带。所以宿主机需要与代码托管(github/gitlab)和远程目标机群都建立ssh-key信任。
权限模型
权限的角色分为SUPER 超管、OWNER 所有者、MASTER 负责人、DEVELOPER 开发者、REPORTER 访客,操作的资源包括空间、项目、上线单(任务)、环境、用户等
更详细的权限模型说明:权限模型
用户关系与信任关系
- A 能密码登录所有服务器(把A的key加入其它机器信任列表)
- A 能拉git代码(把A的key加入git信任列表)
- 免密码登录三个条件
- ~ 755
- ~/.ssh 700
- ~/.ssh/authorized_keys 644 或 600
- 时间宝贵。不要部署在mac os,请直接部署到Centos 6/7试用,减少不必要的麻烦
更详细的信任关系配置手册说明:权限模型
上线流程图
权限模型
权限模型角色
SUPER 超管
walle的管理员:负责平台运维、开通空间并分配空间owner
OWNER 所有者
空间所有者:业务线负责,如大数据,新建项目并分配项目master,增加各方向leader作为空间master
MASTER 负责人
具体子方向leader:空间master作为一个部门的具体子方向leader,管理该方向的服务器、项目等,为Owner分担具体事务
具体项目leader:项目master作为一个具体项目leader,辅助Master审核上线单等
DEVELOPER 开发者
普通开发者:提交上线单、上线
REPORTER 访客
访客:我也不知道为什么这么低级别的角色有什么用,可能是我一直都是级别很高的原因吧
权限码表
action | reporter | developer | master | owner | super |
---|---|---|---|---|---|
Dashboard-xxx-查看 | ✓ | ✓ | ✓ | ✓ | ✓ |
部署中心-上线单-查看 | ✓ | ✓ | ✓ | ✓ | ✓ |
配置中心-项目管理-查看 | ✓ | ✓ | ✓ | ✓ | |
部署中心-上线单-新建、更新、删除 | ✓ | ✓ | ✓ | ✓ | |
用户中心-用户管理-查看 | ✓ | ✓ | ✓ | ||
用户中心-用户组管理-查看 | ✓ | ✓ | ✓ | ||
部署中心-上线单-审核 | ✓ | ✓ | ✓ | ||
配置中心-服务器管理-查看 | ✓ | ✓ | ✓ | ||
配置中心-项目管理-更新、删除 | ✓ | ✓ | ✓ | ||
配置中心-服务器管理-新建、更新、删除 | ✓ | ✓ | ✓ | ||
配置中心-项目管理-新建 | ✓ | ✓ | ✓ | ||
用户中心-用户管理-更新、删除 | ✓ | ✓ | |||
用户中心-用户组管理-更新、删除 | ✓ | ✓ | |||
用户中心-负责空间管理-查看、更新 | ✓ | ✓ | |||
空间管理-新建、查看、更新、删除 | ✓ |
权限模型的解释
- 用户的角色分为两种:space/role、project/role。空间的Master权限是空间级别,项目的Master权限是项目级别
- 一个空间space下只有一个用户组,由Owner管理,空间下的项目用户权限继承于空间用户组。但也可以单独设定项目的用户角色。
- 一个用户必须先分配一个空间,方可登录系统。
- 用户所有操作均在登录空间下,或有多个空间可以切换
三、安装示例
主机环境:centos7.6
安装前的配置需求:
- Linux + Bash(git、ssh)
- 意味着不支持win,也不要装在mac,兼容性问题
- Python 3.5+ 和 Python 2.7+
- MySQL 5.6.5以上,否则会在安装时报错
1、安装前置的基础配置
- 更换阿里源
cp /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.bak wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo wget -P /etc/yum.repos.d/ http://mirrors.aliyun.com/repo/epel-7.repo yum clean all yum makecache
- 安装EPEL源 RHEL/CentOS 7
yum install -y https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm
- 安装的MySQL
yum install -y mysql-devel gcc gcc-c++ python-devel MySQL-python
2、Colen Walle包
git clone https://github.com/meolu/walle-web.git
3、安装Nginx代为HTTP代理
yum install nginx
配置nginx.conf文件/etc/nginx/nginx.conf
别忘了要重启nginx,注意标出可能需要改的地方
egrep -v "^$|#" /etc/nginx/nginx.conf.default >/etc/nginx/nginx.conf
worker_processes 1;
events {
worker_connections 1024;
}
http {
include conf.d/*.conf;
}
配置nginx虚拟文件
vim /etc/nginx/conf.d/walle.conf upstream webservers { server 0.0.0.0:5000 weight=1; #这个是walle项目的启动端口 } server { listen 80; server_name server.walle.com; # walle域名设置,这个域名设置比较重要,需要在walle的配置一致 access_log /var/log/nginx/walle.log combined; index index.html index.htm index.php; # 日志目录 location / { try_files $uri $uri/ /index.html; add_header access-control-allow-origin *; root /walle-web/fe; # 前端代码已集成到walle-web,即walle-web/fe的绝对路径 } location ^~ /api/ { add_header access-control-allow-origin *; proxy_pass http://webservers; proxy_set_header X-Forwarded-Host $host:$server_port; proxy_set_header X-Real-IP $remote_addr; proxy_set_header Origin $host:$server_port; proxy_set_header Referer $host:$server_port; } location ^~ /socket.io/ { add_header access-control-allow-origin *; proxy_pass http://webservers; proxy_set_header X-Forwarded-Host $host:$server_port; proxy_set_header X-Real-IP $remote_addr; proxy_set_header Origin $host:$server_port; proxy_set_header Referer $host:$server_port; proxy_set_header Host $http_host; proxy_set_header X-NginX-Proxy true; # WebScoket Support proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection "upgrade"; } }
测试nginx配置文件是否正确
nginx -t
然后得重启Nginx
systemctl restart nginx
4、Hosts
vim /etc/hosts # 新增一行 127.0.0.1 server.walle.com # 与nginx配置一致
5、INSTALL Walle
安装Python 2.7 + pip
cd walle-web
sh admin.sh init
出现错误 :
解决方法:
virtualenv --system-site-packages venv
然后接着运行admin.sh init
出现错误:
解决方法:
修改./requiremnets/prod.txt中的GitPython==2.1.11改为2.1.15
vim ./requirements/prod.txt # Auth Flask-Login==0.4.0 Flask-Bcrypt==0.7.1 anyjson==0.3.3 celery==3.1.18 pycrypto==2.6.1 pytz==2015.7 requests==2.20.0 GitPython==2.1.15 pymysql ==0.9.3
然后接着运行admin.sh init。
出现下图提示,说明Walle安装成功
6、配置walle的设置文件
注意: 带了 @TODO 的地方可能需要你的调整
vi walle/config/settings_prod.py
# -*- coding: utf-8 -*- """ walle-web Application configuration. 注意: 带了 @TODO 的地方可能需要你的调整 :copyright: © 2015-2019 walle-web.io :created time: 2018-11-24 07:05:35 :author: wushuiyong@walle-web.io """ import os from walle.config.settings import Config SETTINGS = { "MYSQL_USER": "root", "MYSQL_PASSWORD": "walle", "MYSQL_DATABASE": "walle", "MYSQL_ROOT_PASSWORD": "walle", "MYSQL_HOST": "127.0.0.1", "MYSQL_PORT": 3306, } class ProdConfig(Config): """Production configuration.""" ENV = 'prod' DEBUG = False SQLALCHEMY_ECHO = False # 服务启动 @TODO # HOST 修改为与 nginx server_name 一致. # 后续在web hooks与通知中用到此域名. HOST = 'server.walle.com' PORT = 5000 # https True, http False SSL = False # 数据库设置 @TODO # SQLALCHEMY_DATABASE_URI = 'mysql://user:password@localhost:3306/walle?charset=utf8' SQLALCHEMY_DATABASE_URI = 'mysql+pymysql://{}:{}@{}:{}/{}?charset=utf8mb4'.format( SETTINGS["MYSQL_USER"], SETTINGS["MYSQL_PASSWORD"], SETTINGS["MYSQL_HOST"], SETTINGS["MYSQL_PORT"], SETTINGS["MYSQL_DATABASE"]) # 阿里云RDS强制释放空闲连接导致经常报错 mysql server has gone way # 适当修改该参数即可 单位为秒 # N秒不用的连接自动释放 # SQLALCHEMY_POOL_RECYCLE = 30 # 本地代码检出路径(用户查询分支, 编译, 打包) #TODO CODE_BASE = '/tmp/walle/codebase/' # 日志存储路径 @TODO # 默认为walle-web项目下logs, 可自定义路径, 需以 / 结尾 # LOG_PATH = '/var/logs/walle/' LOG_PATH = os.path.join(Config.PROJECT_ROOT, 'logs') LOG_PATH_ERROR = os.path.join(LOG_PATH, 'error.log') LOG_PATH_INFO = os.path.join(LOG_PATH, 'info.log') LOG_FILE_MAX_BYTES = 100 * 1024 * 1024 # 邮箱配置 @TODO MAIL_SERVER = 'smtp.exmail.qq.com' MAIL_PORT = 465 MAIL_USE_SSL = True MAIL_USE_TLS = False MAIL_DEFAULT_SENDER = 'service@walle-web.io' MAIL_USERNAME = 'service@walle-web.io' MAIL_PASSWORD = 'Ki9y&3U82' # 登录cookie 防止退出浏览器重新登录 COOKIE_ENABLE = False
7、安装和配置数据库
安装数据库,版本选择mysql5.7的。具体安装方法网上有很多,这里就不在述说了。
创建一个数据库walle
mysql> create database walle;
创建相对应的用户
mysql> grant all on walle.* to root@'127.0.0.1' identified by 'walle';
8、Data Migration
执行如下命令:
sh admin.sh migration
9、Satrt
sh admin.sh start
10、打开浏览器http//:IP或http://server.walle.com
输入帐号和密码
超管:super@walle-web.io \ Walle123 所有者:owner@walle-web.io \ Walle123 负责人:master@walle-web.io \ Walle123 开发者:developer@walle-web.io \ Walle123 访客:reporter@walle-web.io \ Walle123