python服务器环境搭建（2）——安装相关软件

　　在上一篇我们在本地的虚拟服务器上安装好CentOS7后，我们的python web服务、自定义的python service或python脚本需要在服务器上运行，还需要在服务器安装各种相关的软件才行，一般来说，想要实现自动化部署需求，还需要安装nginx、svn、uwsgi、python3.0（系统自带python2.7.5）、supervisor、postgresql、redis（nosql缓存根据自己代码的需要而定）。

　　PS：本人不是专业的运维，只能根据自己的研究弄弄单机版的python web服务器，而对于多服务器自动化同步的部署、服务器的监控、Linux服务器的安全、服务器的调优（很多服务安装不是重点，能将各种参数运用配置到洽到好处才是难点），大家最好找专业的运维工程师来处理。再一次感谢小戴同学的尽心帮助，让我学会了很多服务器运维方面的知识，才有这篇文章。（在这里帮小戴做做广告：人品好、技术牛、外包费用低，我们公司服务器维护外包给了他，配置各种服务器非常快，想学python与自动化运维的可以上他的博客http://www.linuxyw.com/）

 

　　一、安装常用工具包

　　输入下面命令，安装各种常用工具包，可以逐项直接输入下面命令进行安装（如果出现y/n/d选择时，输入y加回车就可以了）

 

yum install -y pcre-devel
yum install -y openssl openssl-devel
yum install gcc gcc-c++ ncurses-devel perl -y
yum -y install zlib zlib-devel
yum install wget lrzsz libxml2 -y
yum install kernel-devel libxslt-devel libpqxx-devel libffi-devel python-devel libpq-dev -y

 

　　在使用yum安装各种工具包时，由于使用的源默认是国外的，所以有时有一些源由于网络或什么原因会安装不上，所以可以通过更改yum安装源来提升安装效率，下面是使用网易源（阿里源在虚拟机上好像使用不了，如果使用阿里云的话可以替换为阿里源）

mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup
cd /etc/yum.repos.d/
wget -O CentOS-Base.repo http://mirrors.163.com/.help/CentOS7-Base-163.repo
## wget -O CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo 
yum makecache 
yum -y update

 　　PS：如果Python已升级到3，更改yum源需要将python的软链接指回2的版本（即输入命令python -V可看到的是2.7版本），不然运行yum -y update后可能会出错，导至yum无法使用。另外，使用yum升级，好像会将内核一些程序也升级了。

 

　　二、安装nginx服务

 

　　首先在网上找到下面安装包（如果下面组件版本对不上，可能会造成nginx安装失败）

 

nginx-1.10.3.tar.gz
openssl-1.0.2n.tar.gz
pcre-8.39.tar.gz
zlib-1.2.11.tar.gz

 

　　将它们上传到服务器：/usr/local/src 目录下面，openssl、pcre和zlib这些组件不安装问题也不大，不过这些常用的组件安装好了，以后需要时就不必重新安装了

 

　　1、安装pcre

cd /usr/local/src
mkdir /usr/local/pcre
tar zxvf pcre-8.39.tar.gz
cd pcre-8.39
./configure --prefix=/usr/local/pcre
make
make install

　　2、安装openssl

cd /usr/local/src
mkdir /usr/local/openssl
tar zxvf openssl-1.0.2n.tar.gz
cd openssl-1.0.2n
./config --prefix=/usr/local/openssl
make
make install
vi /etc/profile
在vi编辑器的最后面添加下面代码（vi编辑器的使用请自己百度）
export PATH=$PATH:/usr/local/openssl/bin
按esc键，输入:wq! 保存退出
输入下面代码让刚添加的代码生效
source /etc/profile

　　3、安装zlib

cd /usr/local/src
mkdir /usr/local/zlib
tar zxvf zlib-1.2.11.tar.gz
cd zlib-1.2.11
./configure --prefix=/usr/local/zlib
make
make install

　　4、安装Nginx

groupadd www
useradd -g www www -s /bin/false
cd /usr/local/src
tar zxvf nginx-1.10.3.tar.gz
cd nginx-1.10.3
./configure --prefix=/usr/local/nginx --without-http_memcached_module --user=www --group=www --with-http_stub_status_module --with-http_ssl_module --with-http_gzip_static_module --with-openssl=/usr/local/src/openssl-1.0.2n --with-zlib=/usr/local/src/zlib-1.2.11 --with-pcre=/usr/local/src/pcre-8.39
make
make install

 

 

　　完成nginx安装后，我们可以检查一下nginx能否正常启动

　　输入nginx初次启动命令：/usr/local/nginx/sbin/nginx

　　检查nginx是否在进程中：ps -ef | grep nginx    （可以看到nginx已在服务器上正常 运行了）

　　检查nginx启动后点用的端口：netstat -antup | grep nginx

　　

　　这时如果想要用浏览器访问的话，需要先关闭防火墙才行

　　输入命令：systemctl stop firewalld

　　然后打开浏览器，输入地址：http://192.168.0.128/   就可以看到下面的页面了（这个ip怎么来的，请看上一篇《python服务器环境搭建（1）——本地服务器准备》，也可以输入ifconfig命令来查询）

　　

 

 

　　三、安装supervisor（Python进程管理器）

　　因为supervisor目前只支持python2，所以得在升级到3之前进行安装，不然会比较麻烦（文后附有升级到python3后，怎么调用python2安装的说明）

　　安装之前需要先安装python的pip（程序自动安装程序）

　　输入命令：curl https://bootstrap.pypa.io/get-pip.py | python  （回车后就会自动下载pip并自动安装）

　　完成后查看pip版本：pip -V

　　安装supervisor：pip install supervisor

 

　　四、安装postgresql

　　登录官网获取安装版本安装地址 https://www.postgresql.org/download/linux/redhat/

　　输入命令安装postgresql数据库

yum -y install https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm
yum -y install postgresql11
yum -y install postgresql11-server
yum -y install postgresql11-libs
yum -y install postgresql11-contrib
yum -y install epel-release
yum -y install postgresql11-llvmjit
yum -y install postgresql11-devel
mkdir -p /data/pg/data
mkdir -p /data/logs/pg
chown postgres:postgres /data/pg
chown postgres:postgres /data/pg/data
chown postgres:postgres /data/logs/pg

 　　初始化数据库

su postgres
initdb -D /data/pg/data
/usr/pgsql-11/bin/initdb -D /data/pg/data
systemctl enable postgresql-11
systemctl start postgresql-11

　　修改服务器系统环境变量

vi /etc/profile

　　添加下面配置

export PGHOME=/usr/pgsql-11
export PGDATA=/data/pg/data
export PGLIB=/usr/pgsql-11/lib
export PATH=$PGHOME/bin:$PATH

　　保存退出后，运行命令，让配置马上生效

source /etc/profile

　　配置postgresql.conf

cd /data/pg/data
vi postgresql.conf

　　修改数据库访问地址（localhost为本地访问，可以设置可访问地址为对应的局域网IP或外网IP，也可以改为*，即允许所有地址访问）

listen_addresses = '192.168.xxx.xxx'

　　配置pg_hba.conf

vi pg_hba.conf

　　找到# IPv4 local connections: 在它的下面添加一行，设置数据库需要密码访问

host    all             all             0.0.0.0/0         md5

　　启动pg服务

su postgres -c "/usr/pgsql-11/bin/pg_ctl -D /data/pg/data -l /data/logs/pg/logfile.log start"

　　修改postgres用户登录密码

su postgres
psql -U postgres
Alter user postgres with password '123456';

 　　我们可以在本地的windows系统里安装postgresql11（官方下载地址：https://www.postgresql.org/download/windows/），然后使用pgAdmin4连接上服务器的数据库，用图形界面来管理数据库

 

　　五、安装redis

　　登录http://download.redis.io/releases/ 选择需要安装的版本

　　进入tmp文件夹：cd /tmp/

　　然后再次输入：wget http://download.redis.io/releases/redis-3.2.8.tar.gz

　　创建redis安装文件夹：mkdir /usr/local/redis

　　解压缩安装包：tar -zxvf redis-3.2.8.tar.gz

　　进入安装包文件夹：cd redis-3.2.8

　　执行安装命令：make PREFIX=/usr/local/redis/ install

　　上面安装命令执行完成，/usr/local/redis/目录下就有个bin目录，里面放的是redis服务相关的可执行命令

　　复制redis配置文件到指定目录：cp redis.conf /usr/local/redis

 

　　六、安装python3.5.4版本（python2.7.5还可以继续使用）

　　PS：由于升级到python3以后，在yum安装一些软件时（只是部分），可能这些软件的安装还是使用python2来写的，会导致无法使用yum安装，所以最好将相关内容先安装好以后再进行升级

　　安装python依赖包：

yum groupinstall "Development tools"
yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel -y

　　下载Python3.5.4安装包并进行安装

cd /usr/local/src
wget https://www.python.org/ftp/python/3.5.4/Python-3.5.4.tgz
tar -zxvf Python-3.5.4.tgz
cd Python-3.5.4
./configure --prefix=/usr/local --enable-shared && make && make install

　　在运行Python之前需要配置库：

echo /usr/local/lib >> /etc/ld.so.conf.d/local.conf
ldconfig

　　备份python2.7版本bin

mv /usr/bin/python /usr/bin/python2.7.5
ln -s /usr/local/bin/python3 /usr/bin/python

　　完成安装，输入下面命令就可以查看到当前安装python的版本信息Python 3.5.4了

 

python --version

 

　　升级pip3安装包

pip3 install --upgrade pip

 

　　修改python2.7版本运行的脚本链接，将以下文件全部用vi编辑器打开，将第一行的 #!/usr/bin/python 改为 #!/usr/bin/python2

 

vi /usr/bin/yum
vi /usr/bin/yum-config-manager
vi /usr/sbin/tuned
vi /usr/libexec/urlgrabber-ext-down
vi /usr/bin/supervisord
vi /usr/bin/supervisorctl

 

　　批量安装python3各种常用包

　　输入命令：vi requirements.txt    粘贴下面内容

amqp
anyjson
argh
asn1crypto
Beaker
beakeredis
beautifulsoup4
bleach
bottle
bs4
cffi
click
cryptography
cycler
decorator
dynaconf
enum-compat
eventlet
flasgger
Flask
gevent
greenlet
html5lib
idna
itsdangerous
Jinja2
jpush
jsonschema
kombu
lxml
MarkupSafe
matplotlib
mistune
mock
Naked
nameko
networkx
numpy
olefile
packaging
panda
pandas
paramiko
pathtools
path.py
pbr
Pillow
print
psycopg2
psycopg2-binary
pyasn1
pycparser
pycrypto
pycryptodome
pyparsing
python-dateutil
python-alipay-sdk
python-box
python-dateutil
python-dotenv
pytz
PyWavelets
PyYAML
qrcode
redis
reload
requests
scikit-image
scipy
shellescape
six
typing
tushare
watchdog
webencodings
Werkzeug
wrapt
XlsxWriter
yagmail

   

　　保存后，输入命令：pip3 install -r requirements.txt

　　安装程序会将里面常用的依赖包全部安装，方便快捷

 

　　PS：使用源码包编译安装python3以后，还会保留原python2的相关命令，所以直接使用pip安装的是python2的包，要安装python3的包，必须使用pip3

 

　　七、安装uwsgi

　　安装pepl源（不安装有时安装相关模块时会找不到源）

yum -y install epel-release

　　安装uwsgi依赖包

yum -y install uwsgi-devel

 　　使用python的pip再安装一次uwsgi（这样可以避免后续安装后，uwsgi运行时执行的是python2.7版本的问题）

pip3 install uwsgi

  

　　下载uwsgi安装包

cd /usr/local/src/
wget https://projects.unbit.it/downloads/uwsgi-2.0.18.tar.gz
tar zxvf uwsgi-2.0.18.tar.gz
cd uwsgi-2.0.18
make -j 8
python3 uwsgiconfig.py --build
cp uwsgi /usr/bin/

 

　　修改配置文件：vi buildconf/core.ini  （在 buildconf/core.ini 文件中添加下面内容） 

plugin_dir = /etc/uwsgi
bin_name = /usr/bin/uwsgi

 　　创建uwsgi配置存放文件夹

mkdir /etc/uwsgi

 　　编译 python3.5 版本的uwsgi plugins（如果你修改了python35为其他名称，记录同步修改下面复制的文件名）

python3 uwsgiconfig.py --plugin plugins/python core python35

 

　　把生成好的*python35*.so复制到项目目录下面

 

cp /etc/uwsgi/python35_plugin.so /usr/local/src/uwsgi-2.0.18
# 将uwsgi/python35_plugin.so复制到你的python项目源码目录下面
cp /etc/uwsgi/python35_plugin.s /data/www/xxx

 

　　 python35_plugin.so不在正确的目录下面时，使用uwsgi启动python服务会经常出现 No such file or directory 错误，如下所示：

[uWSGI] parsing config file /etc/uwsgi/manager.xml
open("./python35_plugin.so"): No such file or directory [core/utils.c line 3724]
!!! UNABLE to load uWSGI plugin: ./python35_plugin.so: cannot open shared object file: No such file or directory !!!

　　这是因为在uwsgi的配置中，指定了运行插件python35_plugin.so，但在工作目录中没有找到这个插件引起的错误，只需要将它复制到项目所在的根目录下面就可以了

 

　　输入命令：uwsgi --version 就可以查询到安装的版本了

 

　　八、安装svn服务

　　由于已升级到python3了，直接使用yum安装会出现错误，所以我们需要操作一下，改回python2版本（PS：这是一个安装了Python3后，需要使用Python2进行安装软件的例子）

　　删除之前创建的python3链接：rm -rf /usr/bin/python

　　将之前备份的python2.7.5复制为python：cp /usr/bin/python2.7.5 /usr/bin/python 

　　输入安装命令：yum install subversion

　　查看svn安装的版本：svnserve --version

 

　　PS：一定要将python链接指向python2，不然执行的还是python3版本的命令

 

　　将python链接重新指向python3.5.2

　　删除刚刚复制的python链接：rm -rf /usr/bin/python

　　创建新的链接指向新安装的python3.5.4：ln -s /usr/local/bin/python3 /usr/bin/python

  

　　python服务器需要的相关软件基本上就安装完成了（当然redis与postgresql并不是python服务器运行的必要软件，这是我自己框架所需要的），具体测试与配置，下一篇再写

 

 

 版权声明：

　　本文由AllEmpty原创并发布于博客园，版权与博客园共同所有，欢迎转载，未经本人同意必须保留此段声明，且在文章页面明显位置给出原文链接，否则保留追究法律责任的权利。如有问题，可以通过1654937@qq.com 联系我，非常感谢。

 

   　发表本编内容，主要是为了和大家共同学习共同进步，有兴趣的朋友可以加加Q群：669058475（本群已满）、733466321（可以加2群），大家一起探讨。

 

　　更多内容，敬请观注博客：http://www.cnblogs.com/EmptyFS/