Linux : 综合架构存储服务(rpc,nfs,mount)--05
综合架构存储服务
命令总结:
mount -t nfs 172.16.1.31:/data /mnt ## -t -type 文件类型,将/mnt挂载到172.16.1.31的/data目录下
showmount -e 172.16.1.31 ## 显示远端172.16.1.31、/etc/exports中定义的允许挂载信息
00. 介绍部分
1) 存储服务的概念
2) 存储服务的部署(NFS)
3) 存储服务的配置
服务端配置操作
客户端配置操作
4) 存储服务的原理(数据无法存储)
5) 客户端挂载应用
mount -o ro
6) 存储服务企业应用
01. 知识回顾
1) 项目完成前项目规划(和领导确认)
2) 按照规划一步一步完成任务
如何编写脚本实现运维自动化(逻辑)
3) 进行检查测试
02. NFS存储服务概念介绍
NFS是Network File System的缩写,中文意思是网络文件共享系统,
它的主要功能是通过网络(一般是局域网)让不同的主机系统之间可以共享文件或目录
原理图:
存储服务的种类
用于中小型企业: 实现数据共享存储
早期:FTP(文件传输协议)
运维01 服务器A 服务器B FTP服务器
运维02 服务器C 服务器D
中小型电商公司(游戏点卡 游戏币 道具 Q币 充值话费) --- 财务对账信息(数据库) --- 对账文件 --- FTP服务器
权限(用户认证的权限 存储目录的权限(用户))
获取数据的方式 ??? SSH远程服务 sFTP
samba windows--linux之间数据传输 Linux部署samba
NFS linux--linux之间数据传输
用于门户网站(大型企业):
一个用户 -- 存储服务器
上万个用户 -- 存储服务器
利用分布式存储
Moosefs(mfs) 比较落伍,初学学习比较简单
GlusterFS
FastDFS 企业应用较多
03. NFS存储服务作用
1) 实现数据的共享存储
2) 编写数据操作管理
3) 节省购买服务器磁盘开销 淘宝--上万 用电开销
04. NFS服务部署流程
NFS工作流程图:
RPC: 远程过程调用服务程序--- 相当于租房的中介(网络编程知识)
NFS会想RPC服务注册启动的端口(NFS启动会产生多个随机端口,rpc服务就是解决NFS多端口问题的)
1.先启动RPC服务
2.启动NFS服务
3.客户端请求NFS服务(向RPC请求NFS服务)
4.RPC服务向客户端返回NFS的端口
5.客户端拿到NFS的地址端口向NFS请求传输数据
服务端部署
第一个历程: 下载安装软件
rpm -qa|grep -E "nfs|rpc"
yum install -y nfs-utils rpcbind
第二个历程: 编写nfs服务配置文件
vim /etc/exports (man exports)
01 02(03)
01: 设置数据存储的目录 /data
02: 设置网络一个白名单 (允许哪些主机连接到存储服务器进行数据存储)
03: 配置存储目录的权限信息 存储目录一些功能
/data 172.16.1.0/24(rw,sync)
第三个历程: 创建一个存储目录
mkdir /data
chown nfsnobody.nfsnobody /data
第四个历程: 启动服务程序
先启动 rpc服务
systemctl start rpcbind.service
systemctl enable rpcbind.service
再启动 nfs服务
systemctl start nfs
systemctl enable nfs
客户端部署
第一个历程: 安装nfs服务软件(为了挂在时能识别文件类型nfs)
yum install -y nfs-utils
第二个历程: 实现远程挂载共享目录
mount -t nfs 172.16.1.31:/data /mnt
-t -type 文件类型
05. NFS服务工作原理:
服务端:
1. 启动rpc服务,开启111端口
2. 启动nfs服务
3. 实现nfs服务进程和端口好的注册
补充: 检查nfs服务进程与端口注册信息
systemctl stop nfs
systemctl stop rpcbind.service,rpcbind.socket
systemctl start rpcbind.service
rpcinfo -p localhost
systemctl start nfs
rpcinfo -p localhost
没有注册时候:
[root@nfs01 ~]# rpcinfo -p 172.16.1.31
program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
nfs服务注册之后信息:
[root@nfs01 ~]# rpcinfo -p 172.16.1.31
program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
100024 1 udp 53997 status
100024 1 tcp 49863 status
100005 1 udp 20048 mountd
100005 1 tcp 20048 mountd
100005 2 udp 20048 mountd
100005 2 tcp 20048 mountd
100005 3 udp 20048 mountd
100005 3 tcp 20048 mountd
客户端:
1. 建立TCP网络连接
2. 客户端执行挂载命令,进行远程挂载
3. 可以实现数据远程传输存储
06. nfs服务端详细配置说明
实现多个网段主机可以进行挂载
第一种方法:
/data 172.16.1.0/24(rw,sync) 10.0.0.0/24(rw,sync)
第二种方法:
/data 172.16.1.0/24(rw,sync)
/data 10.0.0.0/24(rw,sync)
总结:共享目录的权限和哪些因素有关:
1)和存储目录的本身权限有关 (755 属主:nfsnobody)
2)和配置文件中的权限配置有关 rw/ro xxx_squash anonuid/anongid
3)和客户端挂载命令的参数有关 ro
??
NFS配置参数权限
rw -- 存储目录是否有读写权限
ro -- 存储目录是否时只读权限
sync -- 同步方式存储数据 直接将数据保存到磁盘(数据存储安全)
async -- 异步方式存储数据 先将数据保存到内存(提高数据存储效率)
no_root_squash -- 不要将root用户身份进行转换
root_squash -- 将root用户身份进行转换
all_squash -- 将所有用户身份都进行转换
no_all_squash -- 不要将普通用户身份进行转换
操作演示all_squash参数功能:
vim /etc/exports
/data 172.16.1.0/24(ro,sync,all_squash)
[oldboy@backup mnt]$ touch oldboy_data.txt
[oldboy@backup mnt]$ ll
total 4
-rw-rw-r-- 1 nfsnobody nfsnobody 0 May 9 12:11 oldboy_data.txt
操作演示no_all_squash参数功能:
[root@nfs01 ~]# vim /etc/exports
/data 172.16.1.0/24(rw,sync,no_all_squash)
[oldboy@backup mnt]$ touch oldboy_data02.txt
touch: cannot touch ‘oldboy_data02.txt’: Permission denied
解决权限问题:
[root@nfs01 ~]# chmod o+w /data/
[root@nfs01 ~]# ll /data/ -d
drwxr-xrwx. 2 nfsnobody nfsnobody 52 May 9 12:11 /data/
[oldboy@backup mnt]$ touch oldboy_data02.txt
[oldboy@backup mnt]$ ll
total 4
-rw-r--r-- 1 nfsnobody nfsnobody 7 May 9 10:57 backup_data.txt
-rw-rw-r-- 1 oldboy oldboy 0 May 9 12:17 oldboy_data02.txt
-rw-rw-r-- 1 nfsnobody nfsnobody 0 May 9 12:11 oldboy_data.txt
操作演示root_squash参数功能:
vim /etc/exports
/data 172.16.1.0/24(rw,sync,root_squash)
[root@backup mnt]# touch root_data.txt
[root@backup mnt]# ll
-rw-r--r-- 1 nfsnobody nfsnobody 0 May 9 12:20 root_data.txt
操作演示no_root_squash参数功能
[root@backup mnt]# ll
total 4
-rw-r--r-- 1 root root 0 May 9 12:23 root_data02.txt
企业互联网公司如何配置NFS 各种squash参数
保证网站存储服务器用户数据安全性:
no_all_squash 需要进行配置 共享目录权限为www(确保客户端用户 服务端用户 uid数值一致)
root_squash 需要进行配置 root---nfsnobody data目录---www
以上默认配置(很多服务默认配置都是从安全角度出发)
服务端:
useradd www;id www --id=1022
cat >/etc/exports<<EOF
/data 172.16.1.0/24(rw,root_squash,no_all_squash)
EOF
chown -R www.www /data
客户端:
mount -t nfs 172.16.1.31:/data /mnt
useradd www -u 1022
su - www
cd mnt
如何查看nfs默认配置
cat /var/lib/nfs/etab --- 记录nfs服务的默认配置记录信息
/data 172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,no_all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,rw,secure,root_squash,no_all_squash)
如何让root用户可以操作管理www用户管理的data目录
root --- root_squash --- www ---操作--- data目录
anonuid=65534,anongid=65534 --- 可以指定映射的用户信息
修改映射用户:www=1002,服务端
/data 172.16.1.0/24(rw,sync,anonuid=1002,anongid=1002)
企业中如何编辑nfs配置文件
01. 通用方法 *****
/data 172.16.1.0/24(rw,sync)
02. 特殊情况 (让部分人员不能操作存储目录 可以看目录中的数据)
/data 10.0.0.0/24(ro,sync)
03. 修改默认的匿名用户
/data 10.0.0.0/24(ro,sync,anonuid=xxx,anongid=xxx)
nfs服务问题:
01. nfs服务器重启,挂载后创建数据比较慢
服务器重启方式不正确
服务重启:
01. restart 重启服务 强制断开所有连接 用户感受不好
02. reload 重启服务(平滑重启) 强制断开没有数据传输的连接 提升用户感受
07. nfs客户端详细配置说明
mount -t nfs 172.16.1.31:/data /mnt
如何实现自动挂载:
01. 利用rc.local
echo "mount -t nfs 172.16.1.31:/data /mnt" >>/etc/rc.local
02. 利用fstab文件
vim /etc/fstab
172.16.1.31:/data /mnt nfs defaults 0 0
特殊的服务已经开启了
centos6:无法实现网路存储服务自动挂载原因
根据系统服务启动顺序
假设按照顺序依次启动 network服务--- sshd服务--- crond服务--- rsync服务--- rpcbind服务--- nfs服务
先加载/etc/fstab --- network服务 --- autofs服务
autofs服务程序:开机自动启动
服务启动好之后,重新加载fstab
centos7:无法实现网路存储服务自动挂载原因
根据系统服务启动顺序
network服务
sshd服务
crond服务
rsync服务
先加载/etc/fstab network服务
autofs==centos7??
客户端mount命令参数
rw --- 实现挂载后挂载点目录可读可写 (默认)
ro --- 实现挂载后挂载点目录可读可写
suid --- 在共享目录中可以让setuid权限位生效 (默认)
nosuid --- 在共享目录中可以让setuid权限位失效 提供共享目录的安全性
exec --- 共享目录中的执行文件可以直接执行
noexec --- 共享目录中的执行文件可以无法直接执行 提供共享目录的安全性
auto --- 可以实现自动挂载 mount -a 实现加载fstab文件自动挂载
noauto --- 不可以实现自动挂载
nouser --- 禁止普通用户可以卸载挂载点
user --- 允许普通用户可以卸载挂载点
[oldboy@web01 ~]$ umount /mnt
umount: /mnt: umount failed: Operation not permitted
客户端如何卸载
umount -lf /mnt --- 强制卸载挂载点
-l 不退出挂载点目录进行卸载
-f 强制进行卸载操作
08. 总结:
1)NFS存储服务器概念
2)NFS存储工作原理图
3)NFS存储服务部署
4)NFS服务端详细配置说明
服务端配置参数 xxx_squash
5) NFS客户端详细配置说明
如何实现自动挂载
客户端挂载参数说明 man mount
如何强制卸载共享目录
作业:
- 实现fatab文件自动挂载的特殊服务是什么?
- 研究user参数作用
- NFS服务部署过程
实时同步服务
SSH远程服务
作者:moox
出处:http://www.cnblogs.com/moox/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。