openstack 网络更改版
Openstack环境部署 （参考文献：http://www.cnblogs.com/kevingrace/p/5707003.html 和 https://docs.openstack.org/mitaka/zh_CN）
注：建议更改某个服务的配置文件时，拷贝一份，防止修改错误而乱删乱改！！！
1、系统：centOS7
2、数量：暂定4台
1、控制节点：controller1 IP：192.168.2.201 外网：124.65.181.122
2、计算节点：nova1 IP：192.168.2.202 外网：124.65.181.122
3、块存储节点：cinder IP：192.168.2.222
4、共享文件节点：manila IP：192.168.2.223
3、域名解析和关闭iptables、selinux（所有节点）
域名解析：vi /etc/hosts
192.168.2.201 controller1
192.168.2.202 nova1
192.168.2.222 cinder1
192.168.2.223 manila1
注：可选择编辑controller1节点的hosts文件然后逐一发送至其他节点：scp /etc/hosts IP地址：/etc/hosts
关闭selinux
永久关闭：vi /etc/selinux/config
SELINUX=disabled
临时关闭：setenforce 0
关闭iptables
永久关闭：systemctl disable firewalld.service
临时关闭：systemctl stop firewalld.service
4、配置网络时间协议（NTP）
控制节点：
yum install chrony
编辑：vi /etc/chrony.conf
allow 192.168/24 #允许的服务器和自己同步时间
systemctl enable chronyd.service #开机自启
systemctl start chronyd.service
timedatectl set-timezone Asia/Shanghai #设置时区
timedatectl status #查看
其他节点：
yum install chrony
编辑：vi /etc/chrony.conf
servcer controller1 iburst #设置时间服务主机名/IP
systemctl enable chronyd.service #开机自启
systemctl start chronyd.service
timedatectl set-timezone Asia/Shanghai #设置时区
chronyc sources
测试是否时间同步
所有节点执行相同：chronyc sources
5、升级包、系统（所有节点）
yum install centos-release-openstack-mitaka
升级包：yum upgrade #若更新新内核，需重启来使用新内核
客户端：yum install python-openstackclient
安全策略：yum install openstack-selinux
6、数据库---mysql （控制节点）
安装软件包：yum install mariadb mariadb-server MySQL-python
拷贝配置文件：cp /usr/share/mariadb/my-medium.cnf /etc/my.cnf #或者/usr/share/mysql/my-medium.cnf /etc/my.cnf
编辑：vi /etc/my.cnf
[mysqld]
default-storage-engine = innodb
innodb_file_per_table
collation-server = utf8_general_ci
init-connect = 'SET NAMES utf8'
character-set-server = utf8
设置开机自启：systemctl enable mariadb.service
链接： ln -s /usr/lib/systemd/system/mariadb.service /etc/systemd/system/multi-user.target.wants/mariadb.service
初始化数据库：mysql_install_db --datadir="/var/lib/mysql" --user="mysql"
开启数据库：systemctl start mariadb.service
设置密码及初始化：mysql_secure_installation
此处我们登陆数据库，分别创建核心节点的数据库然后赋予相应权限
CREATE DATABASE keystone; #身份认证
GRANT ALL PRIVILEGES ON keystone.* TO 'keystone'@'localhost' IDENTIFIED BY 'keystone';
GRANT ALL PRIVILEGES ON keystone.* TO 'keystone'@'%' IDENTIFIED BY 'keystone';
CREATE DATABASE glance; #镜像服务
GRANT ALL PRIVILEGES ON glance.* TO 'glance'@'localhost' IDENTIFIED BY 'glance';
GRANT ALL PRIVILEGES ON glance.* TO 'glance'@'%' IDENTIFIED BY 'glance';
CREATE DATABASE nova; #计算服务
GRANT ALL PRIVILEGES ON nova.* TO 'nova'@'localhost' IDENTIFIED BY 'nova';
GRANT ALL PRIVILEGES ON nova.* TO 'nova'@'%' IDENTIFIED BY 'nova';
CREATE DATABASE neutron; #网络服务
GRANT ALL PRIVILEGES ON neutron.* TO 'neutron'@'localhost' IDENTIFIED BY 'neutron';
GRANT ALL PRIVILEGES ON neutron.* TO 'neutron'@'%' IDENTIFIED BY 'neutron';
CREATE DATABASE cinder; #块存储服务
GRANT ALL PRIVILEGES ON cinder.* TO 'cinder'@'localhost' IDENTIFIED BY 'cinder';
GRANT ALL PRIVILEGES ON cinder.* TO 'cinder'@'%' IDENTIFIED BY 'cinder';
刷新数据库：flush privileges;
查看：show databases;
7、消息队列----rabbitmq （控制节点）
安装软件包：yum install rabbitmq-server
启动rabbitmq：端口为5672
systemctl enable rabbitmq-server.service
链接：
ln -s /usr/lib/systemd/system/rabbitmq-server.service /etc/systemd/system/multi-user.target.wants/rabbitmq-server.service
启动：systemctl start rabbitmq-server.service
#启动会报错则去/usr/sbin/ 找到这个服务用./rabbitmq-server 启动会看到详细报错原因
#报错原因是hostname里面的主机名要和hosts里面主机名对应才可以，否则rabbitmq-server.service 检测不到，识别不了
注：若验证是否开启成功执行查看端口命令：netstat -anpt
添加openstack用户及密码：rabbitmqctl add_user openstack openstack123 #openstack123表示自行定义的密码
为openstack用户设置权限：rabbitmqctl set_permissions openstack “.*” “.*” “.*” #允许配置、写、读访问openstack
查看支持的插件：rabbitmq-plugins list
启动插件：rabbitmq-plugins enable rabbitmq_management #rabbitmq_management表示实现WEB管理
重启rabbitmq服务： systemctl restart rabbitmq-server.service
端口：lsof -i:15672
测试访问http：//192.168.2.201:15672 登陆的用户密码皆是guest
8、认证服务----keystone （端口：5000和35357） #控制节点执行
1、安装软件包：yum install openstack-keystone httpd mod_wsgi memcached python-memcached
注：memcached表示认证服务缓存
2、首先生成随机值：openssl rand -hex 10
3、拷贝一份keystone配置文件，防止修改出错后排查：cp /etc/keystone/keystone.conf /etc/keystone/keystone.conf.bak
编辑文件vi /etc/keystone/keystone.conf：
[DEFAULT]
admin_token = b6f89e3f5d766bb71bf8 #此处是生成的随机值
token_format = UUID
[database]
connection = mysql+pymysql://keystone:keystone123@controller1/keystone
[memcache]
servers = controller1:11211
[token]
provider = uuid
driver = keystone.token.persistence.backends.sql.Token
注：keystone默认使用SQL数据库存储token，token默认值为1天（24h）。Openstack中每个组件执行的每次命令（请求）都需要token验证，每次访问都会创建token，增长速度非常快，token表数据也会越来越多。随着时间的推移，无效的记录越来越多，企业私有云的量就可以几万条、几十万条。这么多无效的token导致针对token表的SQL语句变慢，性能也会变差，要么手动写个定时脚本清理token表；要么把token存放在memcache缓存中，利用memcache特性，自动删除不使用的缓存。（本次使用第二种方法）
4、创建数据库表，使用命令同步：su -s /bin/sh -c "keystone-manage db_sync" keystone
数据库检查表：mysql -h 192.168.2.201 -u keystone -pkeystone123 #密码键入，直接登陆keystone库
#echo -n redhat | openssl md5 生成md5加密密码
#update users set passwd='e2798af12a7a0f4f70b4d69efbc25f4d' where userid = '1';
5、启动apache和memcache
启动memcache：
systemctl enable memcached
注：执行此命令后若出现：Created symlink from /etc/systemd/system/multi-user.target.wants/memcached.service to /usr/lib/systemd/system/memcached.service.表示做了一条链接，让其开机自启。然后重新执行此命令！
systemctl start memcached #启动memcache
### /usr/bin/memcached -d -uroot #若没有11211端口则用此方法启动
验证方法则是查看其默认的11211端口是否开启
6、配置httpd，编辑其/etc/httpd/conf/httpd.conf文件
ServerName controller1:80
创建文件/etc/httpd/conf.d/wsgi-keystone.conf，内容如下：
Listen 5000
Listen 35357
<VirtualHost *:5000>
WSGIDaemonProcess keystone-public processes=5 threads=1 user=keystone group=keystone display-name=%{GROUP}
WSGIProcessGroup keystone-public
WSGIScriptAlias / /usr/bin/keystone-wsgi-public
WSGIApplicationGroup %{GLOBAL}
WSGIPassAuthorization On
ErrorLogFormat "%{cu}t %M"
ErrorLog /var/log/httpd/keystone-error.log
CustomLog /var/log/httpd/keystone-access.log combined
<Directory /usr/bin>
Require all granted
</Directory>
</VirtualHost>
<VirtualHost *:35357>
WSGIDaemonProcess keystone-admin processes=5 threads=1 user=keystone group=keystone display-name=%{GROUP}
WSGIProcessGroup keystone-admin
WSGIScriptAlias / /usr/bin/keystone-wsgi-admin
WSGIApplicationGroup %{GLOBAL}
WSGIPassAuthorization On
ErrorLogFormat "%{cu}t %M"
ErrorLog /var/log/httpd/keystone-error.log
CustomLog /var/log/httpd/keystone-access.log combined
<Directory /usr/bin>
Require all granted
</Directory>
</VirtualHost>
启动httpd：
systemctl enable httpd
systemctl start httpd
过滤查看：netstat -lntup | grep httpd #或者查看全部其开启的端口 netstat -anpt
7、创建keystone用户
临时设置admin_token用户的环境变量，用来创建用户
配置认证令牌：export OS_TOKEN=b6f89e3f5d766bb71bf8 #产生的随机值要写/etc/keystone/keystone.conf里面的
配置端点URL：export OS_URL=http://controller1:35357/v3
配置认证API版本：export OS_IDENTITY_API_VERSION=3
8、创建服务实体和身份认证服务：openstack service create --name keystone --description "Openstack Identity" identity
（注：实体ID：e6aa9c8d2e504978a77d09d09d8213d4 名称：keystone 类：identity） #只是标记，你可忽略
#出现错误则：keystone-manage db_sync 重新命名解决
9、创建认证服务API端点：（public公共的、internal内部的、admin管理的）
openstack endpoint create --region RegionOne identity public http://controller1:5000/v3
openstack endpoint create --region RegionOne identity internal http://controller1:5000/v3
openstack endpoint create --region RegionOne identity admin http://controller1:5000/v3
查看端点列表：
10、创建域‘default’：openstack domain create --description "Default Domain" default
查看域列表：
11、创建admin项目、admin用户、admin角色；添加``admin`` 角色到 admin 项目和用户上
项目：openstack project create --domain default --description "Admin Project" admin
用户：openstack user create --domain default --password-prompt admin #执行命令后，输入自定义密码，本次密码为admin123
角色：openstack role create admin
添加：openstack role add --project admin --user admin admin #--project admin代表项目，--user admin代表用户
注意：此处陈述下大致的openstack逻辑关系======================================================
1、创建域，以下说明皆在域内，可以说域相当于总框架
2、admin表示管理任务服务的项目；demo表示常务任务服务的项目；service表示每个服务包含独有用户的项目
3、service项目中对应每个模块的一个实体
4、每个模块对应三个变种端点：public(公共)、internal(内部)、admin(管理)
5、除了service独有用户的项目以外，基本其他项目都相对应一个用户、角色
6、每个模块的用户我们使用openstack项目名称做代表（keystone、glance、nova等）
7、而每个模块下的用户基本会对应一个角色
8、基本架构可简单描述：域--->项目→用户→角色
↓
变种端点
其他：
查看域列表：openstack domain list
查看API端点列表：openstack endpoint list
查看项目列表：openstack project list
查看用户列表：openstack user list
查看角色列表：openstack role list
过滤配置文件内容：cat 配置文件路径 grep -v "^#"|grep -v "^$"
( 一些常见问题：http://www.cnblogs.com/kevingrace/p/5811167.html )
注意问题：若查看列表时出现以下显示
1、[root@controller1 ~]# openstack project list
Could not find requested endpoint in Service Catalog.或者
__init__() got an unexpected keyword argument 'token'或者
The resource could not be found. (HTTP 404)
请重新执行token认证：（unset OS_TOKEN OS_URL）
12、创建service项目：openstack project create --domain default --description "Service Project" service
13、创建demo项目：openstack project create --domain default --description "Demo Project" demo
查看项目列表：
创建demo用户：openstack user create --domain default --password-prompt demo #执行后输入自定义密码，本次密码为demo123
创建user角色：openstack role create user
添加：openstack role add --project demo --user demo user
查看用户列表：
查看角色列表：
14、验证，获取token（只有获取到才能说明keystone配置成功）：unset OS_TOKEN OS_URL
用户admin，请求认证令牌：openstack --os-auth-url http://controller1:35357/v3 --os-project-domain-name default --os-user-domain-name default --os-project-name admin --os-username admin token issue
15、创建环境变量脚本：
编辑admin：
export OS_PROJECT_DOMAIN_NAME=default
export OS_USER_DOMAIN_NAME=default
export OS_PROJECT_NAME=admin
export OS_USERNAME=admin
export OS_PASSWORD=admin123
export OS_AUTH_URL=http://controller1:35357/v3
export OS_INENTITY_API_VERSION=3
export OS_IMAGE_API_VERSION=2
编辑demo：
export OS_PROJECT_DOMAIN_NAME=default
export OS_USER_DOMAIN_NAME=default
export OS_PROJECT_NAME=demo
export OS_USERNAME=demo
export OS_PASSWORD=demo123
export OS_AUTH_URL=http://controller1:5000/v3
export OS_IDENTITY_API_VERSION=3
export OS_IMAGE_API_VERSION=2
测试切换admin环境变量： .admin-openrc
测试切换demo环境变量： . demo-openrc
镜像模块（端口 API9191；registry9292）
1、安装包：yum install openstack-glance python-glance python-glanceclient
2、编辑修改/etc/glance/glance-api.conf #注意，修改前请拷贝一份其配置文件；使其配置出错可以恢复
[database]
connection = mysql+pymysql://glance:glance123@controller1/glance
[glance_store]
stores = file,http
default_store = file
filesystem_store_datadir = /var/lib/glance/images/
[keystone_authtoken]
auth_uri = http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = glance
password = glance123
[paste_deploy]
flavor = keystone
3、编辑修改/etc/glance/glance-registry.conf #注意，修改前请拷贝一份其配置文件；使其配置出错可以恢复
[database]
connection = mysql+pymysql://glance:glance123@controller1/glance
[glance_store]
[keystone_authtoken]
auth_uri = http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = glance
password = glance123
[paste_deploy]
flavor = keystone
创建数据库表，初始化数据库： su -s /bin/sh -c "glance-manage db_sync" glance #忽略输出信息，比如：
测试登陆数据然后查看列表：mysql -h controller1 -uglance -pglanage123
4、切换环境变量： . admin-openrc
创建关于glance用户：openstack user create --domain default --password-prompt glance #本次glance用户密码定义为glance123
查看用户列表：
添加admin角色到glance用户和service项目上：openstack role add --project service --user glance admin
设置开机自启：systemctl enable openstack-glance-api openstack-glance-registry
开启：systemctl start openstack-glance-api openstack-glance-registry
查看是否有相应端口，确认是否开启：netstat -lnutp |grep 9191
5、创建glance服务实体：openstack service create --name glance --description "OpenStack Image service" image
查看实体列表：
创建镜像服务的API端点：
openstack endpoint create --region RegionOne image public http://controller1:9292
openstack endpoint create --region RegionOne image internal http://controller1:9292
openstack endpoint create --region RegionOne image admin http://controller1:9292
查看端点列表：
6、测试
下载源镜像：wget -q http://download.cirros-cloud.net/0.3.4/cirros-0.3.4-x86_64-disk.img
注：若提示wget命令未找到须执行：yum install wget -y
上传：glance image-create --name "cirros" --file cirros-0.3.4-x86_64-disk.img --disk-format qcow2 --container-format bare --visibility public --progress
查看镜像列表：
#####若上传报500错误则执行su -s /bin/sh -c "glance-manage db_sync" glance
计算服务
控制节点安装的软件包：
yum install -y openstack-nova-api openstack-nova-cert openstack-nova-conductor openstack-nova-console openstack-nova-novncproxy openstack-nova-scheduler python-novaclient
注：具体安装包解释请查看编写的openstack技术数据文档！
控制节点执行编辑/etc/nova/nova.conf（表示如果控制节点也作为计算节点便设置）
[DEFAULT]#只启用计算和元数据API
my_ip=192.168.2.201 #控制节点IP
enabled_apis=osapi_compute,metadata
auth_strategy=keystone
allow_resize_to_same_host=true
firewall_driver=nova.virt.firewall.NoopFirewallDriver
network_api_class=nova.network.neutronv2.api.API
use_neutron=true
rpc_backend=rabbit
[api_database]#配置数据库连接
connection=mysql+pymysql://nova:nova123@controller1/nova_api
[database]
connection=mysql+pymysql://nova:nova123@controller1/nova
[glance]#配置服务API的位置
...
api_servers= http://controller1:9292
[keystone_authtoken]#配置认证服务访问
...
auth_uri=http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = nova
password = nova123
[libvirt]
...
virt_type=kvm #若控制节点也作为计算节点，这一行需添加
[neutron]#网络配置
...
url=http://controller1:9696
auth_url = http://controller1:35357
auth_type = password
project_domain_name = default
user_domain_name = default
region_name = RegionOne
project_name = service
username = neutron
password = neutron123
service_metadata_proxy = True
metadata_proxy_shared_secret = neutron
[oslo_messaging_rabbit]#配置消息队列访问
...
rabbit_host=controller1
rabbit_userid=openstack
rabbit_password=openstack123 #openstack定义的密码
[vnc]#配置VNC代理
...
keymap=en-us #若控制节点也作为计算节点，需添加
vncserver_listen=$my_ip
vncserver_proxyclient_address=$my_ip
novncproxy_base_url=http://124.65.181.122:6080/vnc_auto.html #若控制节点也作为计算几点，需添加
同步compute数据库：
su -s /bin/sh -c "nova-manage api_db sync" nova
su -s /bin/sh -c "nova-manage db sync" nova
创建nova用户：openstack user create --domain default --password-prompt nova #注：本次密码自定义设置的是nova123
查看用户列表：
给nova用户添加admin角色：openstack role add --project service --user nova admin
启动相关nova相关的服务：
systemctl enable openstack-nova-api.service openstack-nova-cert.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service
systemctl start openstack-nova-api.service openstack-nova-cert.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service
创建nova实体：openstack service create --name nova --description "OpenStack Compute" compute
查看实体列表：
创建compute服务API端点：
openstack endpoint create --region RegionOne compute public http://controller1:8774/v2.1/%\(tenant_id\)s
openstack endpoint create --region RegionOne compute internal http://controller1:8774/v2.1/%\(tenant_id\)s
openstack endpoint create --region RegionOne compute admin http://controller1:8774/v2.1/%\(tenant_id\)s
端点列表查看：
检查：
计算节点安装的软件包：yum install -y openstack-nova-compute sysfsutils
编辑文件计算节点/etc/nova/nova.conf
[DEFAULT]
my_ip=192.168.2.202 #计算节点1的IP
enabled_apis=osapi_compute,metadata
auth_strategy=keystone
firewall_driver=nova.virt.firewall.NoopFirewallDriver
network_api_class=nova.network.neutronv2.api.API
use_neutron=true
rpc_backend=rabbit
[api_database]
connection=mysql+pymysql://nova:nova123@controller1/nova_api
[database]
connection=mysql+pymysql://nova:nova123@controller1/nova
[glance]
api_servers= http://controller1:9292
[keystone_authtoken]
auth_uri=http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = nova
password = nova123 #自定义的计算节点密码
[libvirt]
virt_type=qemu
[neutron]
url=http://controller1:9696
auth_url = http://controller1:35357
auth_type = password
project_domain_name = default
user_domain_name = default
region_name = RegionOne
project_name = service
username = neutron
password = neutron123 #自定义的网络模块密码
[oslo_concurrency]
lock_path=/var/lib/nova/tmp
[oslo_messaging_rabbit]
rabbit_host=controller1
rabbit_userid=openstack
rabbit_password=openstack123
[vnc]
keymap=en-us
vncserver_listen=0.0.0.0 #所有IP访问
vncserver_proxyclient_address=$my_ip
novncproxy_base_url=http://192.168.2.201:6080/vnc_auto.html #控制节点IP
启动服务：
systemctl enable libvirtd openstack-nova-compute
systemctl start libvirtd openstack-nova-compute
测试glance是否正常：（已解决，详情在下）
测试keystone是否正常：
网络模块
控制节点安装：yum install openstack-neutron openstack-neutron-ml2 openstack-neutron-linuxbridge ebtables 计算节点安装：yum install -y openstack-neutron openstack-neutron-linuxbridge ebtables ipset
1、控制节点编辑以下配置文件
1、编辑/etc/neutron/neutron.conf
[DEFAULT]
auth_strategy = keystone
core_plugin = ml2
service_plugins = router
allow_overlapping_ips = True
notify_nova_on_port_status_changes = true
notify_nova_on_port_data_changes = true
rpc_backend = rabbit
[database]
connection = mysql+pymysql://neutron:neutron123@controller1/neutron
[keystone_authtoken]
auth_uri = http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = neutron
password = neutron123
[nova]#配置网络通知计算网络拓扑变化
auth_url = http://controller1:35357
auth_type = password
project_domain_name = default
user_domain_name = default
region_name = RegionOne
project_name = service
username = nova
password = nova123
[oslo_concurrency]
lock_path = /var/log/neutron/tmp
[oslo_messaging_rabbit]
rabbit_host = controller1
rabbit_userid = openstack
rabbit_password = openstack123
2、编辑/etc/neutron/plugins/ml2/ml2_conf.ini
[ml2]
type_drivers = flat,vlan,vxlan
tenant_network_types = vxlan
mechanism_drivers = linuxbridge,l2population
extension_drivers = port_security #启用端口安全
[ml2_type_flat]#虚拟网络配置提供者平面网络
flat_networks = provider
[ml2_type_vxlan]
vni_ranges = 1:1000
[securitygroup]
enable_ipset = true
3、编辑/etc/neutron/plugins/ml2/linuxbridge_agent.ini
[linux_bridge]
physical_interface_mappings = provider:enp5s0 #网卡名称
[securitygroup]
firewall_driver = neutron.agent.linux.iptables_firewall.IptablesFirewallDriver
enable_security_group = true
[vxlan]
enable_vxlan = true
local_ip = 192.168.2.201
l2_population = true
4、编辑/etc/neutron/dhcp_agent.ini
[DEFAULT]
interface_driver = neutron.agent.linux.interface.BridgeInterfaceDriver
dhcp_driver = neutron.agent.linux.dhcp.Dnsmasq
enable_isolated_metadata = true
5、编辑/etc/neutron/l3_agent.ini，添加如下
[DEFAULT]
interface_driver = neutron.agent.linux.interface.BridgeInterfaceDriver
external_network_bridge =
6、编辑/etc/neutron/metadata_agent.ini
[DEFAULT]
nova_metadata_ip = controller1
metadata_proxy_shared_secret = neutron123
1、创建连接：ln -s /etc/neutron/plugins/ml2/ml2_conf.ini /etc/neutron/plugin.ini
2、创建neutron用户：openstack user create --domain default --password-prompt neutron #本次设置自定义用户密码为neutron123
查看用户列表：
3、添加admin角色到neutron用户：openstack role add --project service --user neutron admin
4、更新数据库：su -s /bin/sh -c "neutron-db-manage --config-file /etc/neutron/neutron.conf --config-file /etc/neutron/plugins/ml2/ml2_conf.ini upgrade head" neutron
5、创建neutron服务实体：openstack service create --name neutron --description "OpenStack Network" network
查看实体列表：
6、创建网络服务API端点：
openstack endpoint create --region RegionOne network public http://controller1:9696
openstack endpoint create --region RegionOne network internal http://controller1:9696
openstack endpoint create --region RegionOne network admin http://controller1:9696
查看端点列表：
5、启动服务并检查（注：由于计算和网络有联系，在nova.conf中做了网络的关联配置，需重启api）
systemctl restart openstack-nova-api.service openstack-nova-cert.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service
6、启动网络相关服务
开机自启：systemctl enable neutron-server.service neutron-linuxbridge-agent.service neutron-dhcp-agent.service neutron-metadata-agent.service
启动服务：systemctl start neutron-server.service neutron-linuxbridge-agent.service neutron-dhcp-agent.service neutron-metadata-agent.service
计算节点配置：
1、编辑/etc/neutron/neutron.conf #可从controller1节点中把文件拷贝到compute1节点
[DEFAULT]
state_path = /var/lib/neutron
auth_strategy = keystone
core_plugin = ml2
service_plugins = router
notify_nova_on_port_status_changes = true
notify_nova_on_port_data_changes = true
nova_url = http://controller1:8774/v2.1
rpc_backend = rabbit
[database]
connection = mysql+pymysql://neutron:neutron123@controller1/neutron
[keystone_authtoken]
auth_uri = http://controller1:5000
auth_url = http://controller1:35357
auth_plugin = password
project_domain_id = default
user_domain_id = default
project_name = service
username = neutron
password = neutron123
admin_tenant_name = %SERVICE_TENANT_NAME%
admin_user = %SERVICE_USER%
admin_password = %SERVICE_PASSWORD%
[nova]
auth_url = http://controller1:35357
auth_plugin = password
project_domain_id = default
user_domain_id = default
region_name = RegionOne
project_name = service
username = nova
password = nova123
[oslo_concurrency]
lock_path = $state_path/lock
[oslo_messaging_rabbit]
rabbit_host = controller1
rabbit_port = 5672
rabbit_userid = openstack
rabbit_password = openstack123
2、编辑/etc/neutron/plugins/ml2/linuxbridge_agent.ini
[agent]
prevent_arp_spoofing = true
[linux_bridge]
bridge_mappings = provider:em1
[securitygroup]
firewall_driver = neutron.agent.linux.iptables_firewall.IptablesFirewallDriver
enable_security_group = true
[vxlan]
enable_vxlan = false
7、公网测试查看：
查看neutron-server进程是否正常启动：
问题：在控制节点测试若发现以下问题
1、[root@controller1 ~]# neutron agent-list
404-{u'error': {u'message': u'The resource could not be found.', u'code': 404, u'title': u'Not Found'}}
Neutron server returns request_ids: ['req-649eb926-7200-4a3d-ad91-b212ee5ef767']
请执行：unset OS_TOKEN OS_URL #初始化
2、[root@controller1 ~]# neutron agent-list
Unable to establish connection to http://controller1:9696/v2.0/agents.json
请执行重新启动：systemctl restart neutron-server.service neutron-linuxbridge-agent.service neutron-dhcp-agent.service neutron-metadata-agent.service
创建虚拟机
1、创建桥接网络
在那个项目下创建虚拟机，此处我们选择admin： .admin-openrc(若选择demo，相应切换即可)
执行：neutron net-create flat --shared --provider:physical_network provider --provider:network_type flat#provider表示在配置文件中的：provider:网卡名称。
创建子网：neutron subnet-create flat 192.168.2.0/24 --name flat-subnet --allocation-pool start=192.168.2.100,end=192.168.2.200 --dns-nameserver 192.168.2.1 --gateway 192.168.2.1
注：填写宿主机的内网网关，下面DNS和内网网关可以设置成宿主机的内网ip，下面192.168.2.100-200是分配给虚拟机的ip范围
查看子网：
注：创建的网络删除方法
1、查看是否有路由------neutron router-list
2、删除路由网关-----neutron router-gateway-clear 路由名称（查看路由后，直接输入要删除的路由）
3、删除路由接口-----neutron router-interface-delete 路由名称 路由接口（注：路由接口则是你在创建时键入的名称）
4、删除路由-----neutron router-delete 路由名称
5、删除子网----neutron subnet-delete 子网名称（注：子网名称则是同删除路由相关而创建的子网）
6、删除网络----neutron net-delete 网络名称
注：查看网络----neutron net-list
查看子网----neutron subnet-list
查看路由---neutron router-list
若没有路由则直接删除子网即可！
创建虚拟机
1、创建key
[root@controller1 ~]# . demo-openrc #这是在demo账号下常见虚拟机；如果要在admin账号下创建虚拟机，相应切换即可
[root@controller1 ~]# ssh-keygen -q -N ""
2、将公钥添加到虚拟机
[root@controller1 ~]# nova keypair-add --pub-key /root/.ssh/id_rsa.pub mykey
3、创建安全组
nova secgroup-add-rule default icmp -1 -1 0.0.0.0/0 #表示可ping
nova secgroup-add-rule default tcp 22 22 0.0.0.0/0 #表示可ssh连接
4、创建虚拟机
查看支持的虚拟机类型
查看镜像：
查看网络：
创建虚拟机：nova boot --flavor m1.tiny --image cirros --nic net-id=f3a7aa1e-9799-47cd-a1d4-fb1e4d191f2d --security-group default --key-name mykey hello-instance
注：--flavor m1.tiny #表示选择的虚拟机类型
--image cirros #cirros表示的是镜像名称，可自定义
--key-name mykey #表示key的名称，可以自定义
hello-instance #表示虚拟机名称，可自定义
查看列表：
执行命令，让其Web界面打开虚拟机：（输入URL即可进入登陆界面）
使用浏览器登陆novnc：（谷歌浏览器）
注：登陆云主机用户名为：cirros 密码为默认密码：cubswin:) （图中有提示）
控制节点删除虚拟机使用的命令：nova delete ID（查看列表中的ID）
也可以在控制节点命令行中执行ssh命令，然后切换云主机：ssh cirros@IP；如果ssh切换提示失败等，我们把生成的key文件修改权限至700。在主机使用ssh切换时，需要使用默认用户名登陆，登陆成功后则使用su命令切换即可。 （查看列表中有相应IP显示）
其他centOS镜像地址：http://cloud.centos.org/centos/
本次使用镜像下载地址：http://cloud.centos.org/centos/7/images/CentOS-7-x86_64-GenericCloud.qcow2
远程是否可以连接参考文献：https://sanwen8.cn/p/171lmWW.html
建议在控制节点使用ssh登陆，一般情况下centos镜像6.x默认用户为“centos-user”；centos7.x默认用户是“centos”；由于创建虚拟机时我们创建了公钥，所以不需要密码就可以登陆虚拟机，登陆到虚拟机时我们需要修改下密码，命令为：sudo passwd 用户名
另外当我们ssh进入云主机时，在novnc中我们可以选择用户名root，密码则为我们修改的密码
安装dashboard，登陆web管理界面：（控制节点）
1、安装包：yum install openstack-dashboard -y
2、编辑/etc/openstack-dashboard/local_settings
OPENSTACK_HOST = "192.168.2.201"#或者书写controller1
ALLOWED_HOSTS = ['*', ]#表示允许所有主机访问仪表盘
添加此句：SESSION_ENGINE = 'django.contrib.sessions.backends.file'’#表示配置memcached会话存储服务
CACHES = {
'default': {
'BACKEND': 'django.core.cache.backends.memcached.MemcachedCache',
'LOCATION': '192.168.2.202:11211',
}
}
OPENSTACK_KEYSTONE_URL=”http://%s:5000/v3”% OPENSTACK_HOST#启用第3版认证API
OPENSTACK_API_VERSIONS = {#配置API版本
"identity": 3,
"volume": 2,
"compute": 2,
}
OPENSTACK_KEYSTONE_DEFAULT_ROLE = "user"#通过仪表盘创建的用户默认角色配置为user
OPENSTACK_NEUTRON_NETWORK = {#本次选择的网络参数是公共网络，禁用支持3层网络服务
'enable_router': False,
'enable_quotas': False,
'enable_distributed_router': False,
'enable_ha_router': False,
'enable_lb': False,
'enable_firewall': False,
'enable_vpn': False,
'enable_fip_topology_check': False,
TIME_ZONE = "Asia/Shanghai"#配置时区
3、重启web服务器以及会话存储服务：systemctl restart httpd.service memcached.service
4、测试登陆：http://192.168.2.201/dashboard
此处显示的则是创建时的项目、用户等
查看云主机
添加、删除安全规则：
使创建的VM主机联网，配置如下：
1、安装软件包：yum install squid #在控制节点
2、修改配置文件/etc/squid如下 #建议修改之前备份一份配置文件
把http_access deny all改为http_access allow all #表示所有用户都可以访问这个代理
把http_port 3128改为http_port 192.168.2.201:3128 #IP及端口是squid的代理IP及端口（也就是宿主机的IP）
3、启动前测试，命令如下：
使用命令启动：
查看3128端口是否开启： #其他------netstat -nltp。此命令是查看所有tcp端口
4、虚拟机VM（云主机）上进行squid代理配置
编辑系统环境变量配置文件/etc/profile，在文件最后位置添加即可：export http_proxy=http://192.168.2.201:3128
刷新配置文件：source /etc/profile
5、测试虚拟机是否对外访问：
访问：curl http：//www.baidu.com
正常在线使用yum： yum list
安装块存储（cinder）
创建cinder用户：[root@controller1 ~]# openstack user create --domain default --password-prompt cinder
查看用户列表
添加admin角色到cinder用户上：[root@controller1 ~]# openstack role add --project service --user cinder admin
创建服务实体（块设备存储要求两个服务实体）：
openstack service create --name cinder --description "OpenStack Block Storage" volume
openstack service create --name cinderv2 --description "OpenStack Block Storage" volumev2
查看实体列表：
创建块设备存储服务的API入口点：
实体volume：
openstack endpoint create --region RegionOne volume public http://controller1:8776/v1/%\(tenant_id\)s
openstack endpoint create --region RegionOne volume internal http://controller1:8776/v1/%\(tenant_id\)s
openstack endpoint create --region RegionOne volume admin http://controller1:8776/v1/%\(tenant_id\)s
实体volumev2：
openstack endpoint create --region RegionOne volumev2 public http://controller1:8776/v2/%\(tenant_id\)s
openstack endpoint create --region RegionOne volumev2 internal http://controller1:8776/v2/%\(tenant_id\)s
openstack endpoint create --region RegionOne volumev2 admin http://controller1:8776/v2/%\(tenant_id\)s
API端点列表查看：
安装软件包：yum install openstack-cinder
编辑修改/etc/cinder/cinder.conf：
[DEFAULT]
...
my_ip = 192.168.2.201
auth_strategy = keystone
rpc_backend = rabbit
[database]
...
connection = mysql+pymysql://cinder:cinder123@controller1/cinder
[oslo_messaging_rabbit]
...
rabbit_host = controller1
rabbit_userid = openstack
rabbit_password = openstack123
[keystone_authtoken]
...
auth_uri = http://controller1:5000
auth_url = http://controller1:35357
memcached_servers = controller1:11211
auth_type = password
project_domain_name = default
user_domain_name = default
project_name = service
username = cinder
password = cinder123
[oslo_concurrency]
...
lock_path = /var/lib/cinder/tmp
初始化块设备服务的数据库：su -s /bin/sh -c "cinder-manage db sync" cinder
配置计算节点以使用块存储(/etc/nova/nova.conf)：
[cinder]
...
os_region_name=RegionOne
重启计算API服务：systemctl restart openstack-nova-api.service
启动块存储并开机自启
systemctl enable openstack-cinder-api.service openstack-cinder-scheduler.service
systemctl start openstack-cinder-api.service openstack-cinder-scheduler.service
在存储节点执行：
查看是否安装包：[root@cinder1 ~]# yum install lvm2
启动服务：[root@cinder1 ~]# service lvm2-lvmetad start
在“devices”部分，添加一个过滤器，只接受“/dev/sdb”设备，拒绝其他所有设备：
devices {
...
filter = [ "a/sda/","a/sdb/","r/.*/"]
