网络存储(三)之ISCSI搭建的入门
搭建iscsi
我们就拿两台linux服务器来做吧,
服务器系统均为CentOs6.6 64位的,信息如下
IP | 安装的软件 |
---|---|
192.168.22.142 | iscsi target端:scsi-target-utils.x86_64 |
192.168.160.191 | iscsi客户端:iscsi-initiator-utils |
在172.16.22.142安装iscsi-target
采用yum安装
[root@salt ~]# yum -y install scsi-target-utils
[root@salt ~]# rpm -ql scsi-target-utils
/etc/rc.d/init.d/tgtd #启动脚本
/etc/sysconfig/tgtd
/etc/tgt/targets.conf #配置文件
/usr/sbin/tgt-admin
/usr/sbin/tgt-setup-lun
/usr/sbin/tgtadm
/usr/sbin/tgtd
/usr/sbin/tgtimg
/usr/share/doc/scsi-target-utils-1.0.24
/usr/share/doc/scsi-target-utils-1.0.24/README
/usr/share/doc/scsi-target-utils-1.0.24/README.iscsi
/usr/share/doc/scsi-target-utils-1.0.24/README.iser
/usr/share/doc/scsi-target-utils-1.0.24/README.lu_configuration
/usr/share/doc/scsi-target-utils-1.0.24/README.mmc
/usr/share/man/man5/targets.conf.5.gz
/usr/share/man/man8/tgt-admin.8.gz
/usr/share/man/man8/tgt-setup-lun.8.gz
/usr/share/man/man8/tgtadm.8.gz
编辑配置文件,置iscsi。
[root@salt ~]# vim /etc/tgt/targets.conf
'''
<target iqn.2016-11.com.ljf:server.target1>
backing-store /dev/sdb #/dev/sdb 新硬盘,没有格式化和创建文件系统的
</target>
'''
参数解释:
iqn.2016-11.com.ljf:\server.target1
notice: :\server这里的\是为了不让有道markdown自动生成表情
target 后面跟着的名称(也就是iqn.2016-11.com.ljf:\server.target1)在同一子网内应该是唯一的。标准命名方式是:
iqn.yyyy-mm.
参数含义如下:
- iqn iscsi Qualified name
- YYYY-MM 表示“年份-月份”
- reversed domain name 表示倒过来的域名
- identified 表示识别代码。
backing-store /dev/sdb
关于backing-store,这里先解释下共享的两种store,
- backing-store : 任何Initiator可以访问
- direct-store:可以设定acl进行限制哪些Initiator访问
/dev/sdb 表示把/dev/sdb/作为iscsi盘共享出去。
启动服务
确定配置没有问题后,启动
[root@salt ~]# service tgtd start
Starting SCSI target daemon: [ OK ]
[root@salt ~]# service tgtd status
tgtd (pid 4839 4837) is running...
[root@salt ~]# netstat -lnpt |grep tgtd
tcp 0 0 0.0.0.0:3260 0.0.0.0:* LISTEN 4837/tgtd
在172.16.160.191安装iscsi-initiator-utils
命令如下
[root@localhost ~]# yum -y install iscsi-initiator-utils
[root@localhost ~]# rpm -ql iscsi-initiator-utils
/etc/NetworkManager
/etc/NetworkManager/dispatcher.d
/etc/NetworkManager/dispatcher.d/04-iscsi
/etc/iscsi
/etc/iscsi/iscsid.conf
/etc/logrotate.d/iscsiuiolog
/etc/rc.d/init.d/iscsi
/etc/rc.d/init.d/iscsid
/sbin/brcm_iscsiuio
/sbin/iscsi-iname
/sbin/iscsiadm
/sbin/iscsid
/sbin/iscsistart
/sbin/iscsiuio
/usr/lib64/libiscsi.so.0
/usr/lib64/python2.6/site-packages/libiscsimodule.so
/usr/share/doc/iscsi-initiator-utils-6.2.0.873
/usr/share/doc/iscsi-initiator-utils-6.2.0.873/README
/usr/share/man/man8/iscsi-iname.8.gz
/usr/share/man/man8/iscsiadm.8.gz
/usr/share/man/man8/iscsid.8.gz
/usr/share/man/man8/iscsistart.8.gz
/usr/share/man/man8/iscsiuio.8.gz
/var/lib/iscsi
/var/lib/iscsi/ifaces
/var/lib/iscsi/isns
/var/lib/iscsi/nodes
/var/lib/iscsi/send_targets
/var/lib/iscsi/slp
/var/lib/iscsi/static
/var/lock/iscsi
安装好iscsi-initiator-utils以后,我们可以使用它了,但是需要先了解下面三样:
- iscsiadm
此命令用来管理(更新,删除,插入,查询)iscsi配置数据库文件的命令行工具,用户能够用它对ISCSI nodes,sessions,connections 和discovery records进行以系列草走 - /var/lib/iscsi/send_targets/
在此目录下,会生成一个或者多个以ISCSI存储服务器的IP地址和端口号命名的文件夹,文件名“ISCSI Target ip,端口号”,例如我这里的显示的:172.16.22.142,3260 - /var/lib/iscsi/nodes/
在这个目录下会生成一个或者多个以ISCSI存储服务器上的Target命名的文件夹,在该文件夹下有一个文件名为“iscsi portal IP,端口号”,例如:iqn.2016-11.com.ljf:\server.target1。该文件是ISCSI Initiator登陆ISCSI target使用的参数,而这些参数的设置从/etc/iscsi/iscsi.conf中的参数继承而来,可以通过一个iscsiadm命令对这个参数进行更改的。
了解上面的以后,下面执行命令试试看
[root@localhost ~]# iscsiadm -m discovery --type sendtargets --portal 172.16.22.142
172.16.22.142:3260,1 iqn.2016-11.com.ljf:server.target1
或者下面这条
[root@localhost ~]# iscsiadm -m discovery --type sendtargets -p 172.16.22.142
172.16.22.142:3260,1 iqn.2016-11.com.ljf:server.target1
iqn.2016-11.com.ljf:\server.target1 是ISCSI target的名称。由于在配置ISCSI target的时候,没有做任何限制,所以允许所有的客户端连接ISCSI target共享磁盘。
在第一次成功执行上面的命令后,ISCSI Initiator就会将查询记录写到/var/lib/iscsi/send_targets对应的目录下。
接下来登陆iscsi共享出来的磁盘
[root@localhost ~]# iscsiadm -m node -T iqn.2016-11.com.ljf:server.target1 -p 172.16.22.142 -l
参数解释
- -l login,登陆
- -T name of target
- -p ip of HOST
登陆后,我们通过“fdisk -l”检查下本地是否正常识别出来了,或者查看dmesg也可以看出来。
[root@localhost ~]# fdisk -l
Disk /dev/sda: 32.2 GB, 32212254720 bytes
255 heads, 63 sectors/track, 3916 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x0003a69b
Device Boot Start End Blocks Id System
/dev/sda1 * 1 26 204800 83 Linux
Partition 1 does not end on cylinder boundary.
/dev/sda2 26 157 1048576 82 Linux swap / Solaris
Partition 2 does not end on cylinder boundary.
/dev/sda3 157 3917 30202880 8e Linux LVM
Disk /dev/mapper/VolGroup-LogVol00: 30.9 GB, 30924603392 bytes
255 heads, 63 sectors/track, 3759 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000
# 看/dev/sdb已经在本地显示了,说明挂载成功了,
Disk /dev/sdb: 21.5 GB, 21474836480 bytes
64 heads, 32 sectors/track, 20480 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000
或者通过iscsiadmin命令查看,命令如下:
[root@localhost ~]# iscsiadm -m session
tcp: [2] 172.16.22.142:3260,1 iqn.2016-11.com.ljf:server.target1 (non-flash) #[2]代表seesion id
[root@localhost ~]# iscsiadm -m session -r 2 # -r 指明session id即可。
# BEGIN RECORD 6.2.0-873.13.el6
node.name = iqn.2016-11.com.ljf:server.target1
node.tpgt = 1
node.startup = automatic
node.leading_login = No
此处省略一万字
至此,我们可以像使用本地磁盘一样的操作/dev/sdb这块磁盘了.
Notice
关机之前或者不使用的时候切记一定要取消target的挂载,避免浪费资源,命令如下:
[root@localhost ~]# iscsiadm -m node -T iqn.2016-11.com.ljf:server.target1 -p 172.16.22.142 -u
Logging out of session [sid: 1, target: iqn.2016-11.com.ljf:server.target1, portal: 172.16.22.142,3260]
Logout of [sid: 1, target: iqn.2016-11.com.ljf:server.target1, portal: 172.16.22.142,3260] successful.
[root@localhost ~]# fdisk -l
Disk /dev/sda: 32.2 GB, 32212254720 bytes
255 heads, 63 sectors/track, 3916 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x0003a69b
Device Boot Start End Blocks Id System
/dev/sda1 * 1 26 204800 83 Linux
Partition 1 does not end on cylinder boundary.
/dev/sda2 26 157 1048576 82 Linux swap / Solaris
Partition 2 does not end on cylinder boundary.
/dev/sda3 157 3917 30202880 8e Linux LVM
Disk /dev/mapper/VolGroup-LogVol00: 30.9 GB, 30924603392 bytes
255 heads, 63 sectors/track, 3759 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000
很明显,/dev/sdb已经取消挂载了。