网络存储ISCSI配置

IP网络存储ISCSI

IP网络存储ISCSI

一、    ISCSI概述

1.1、   介绍

本章主要介绍了基于IP SAN 的网络存储ISCSI ，iscsl技术以其低廉的构成和优秀的存储性能，博得了很多CIO和存储管理的喜爱，目前陆续进入企业应用领域，推动了企业的存储环境向集中式转变，虽然， 目前对于ISCSI因该在什么样的环境中使用还存在诸多争议，ISCSI的前途是光明的，在未来的存储世界中，将会占据重要位置。

1.2、   SCSI介绍

SCSI是小型计算机系统接口(Samll Computer System Inerface) 的简称，SCSI作用输入/输出接口，主要用于硬盘、光盘、磁带机、扫描仪、打印机等设备.

 

 

1.3、   FC介绍

FC是光纤通道(Fibre Channel)的简称，是一种适合于前兆数据传输的、成熟而安全的解决方案。与传统的SCSI技术相比，FC提供更高的数据传输速率，更远的传输距离，更多的设备连接支持、更稳定的性能，更简易的安装。

1.4、   DAS介绍

DAS是直接式存储(Direct-Attached Stroage)的简称，是指将通过scsi接口或者光纤通道直接连接到一台计算机上面，当服务器在地理上比较分散，很难通过远程进行互连时，DAS是比较好的解决方案。但是这种方式存储之能通过与连接的主机进行访问，不能实现数据与其它主机的共享。同时DAS会占用服务器的操作资源。如：CPU资源 I/O资源，数据量越大，占用的资源就越多。

1.5、   NAS介绍

网络接入存储 (Network-Attached Stroge)简称NAS，它通过网络交换机连接存储系统和服务器，建立专门用于数据存储的私有网络，用户通过TCP/IP协议访问数据，采用标准的文件协议如：NFS、HTTP、CIFS来实现基于文件级的数据共享，NAS存储是文件共享访问变得更加方便快捷，并且能很容易的增加存储容量，通过专业化与存储技术相结合，NAS为那些需要共享大量文件数据的企业提供一个高效的，高可靠、高性价比的决绝方案。但是NAS也有一定的局限性，它会受到网络带宽和网络拥堵的影响，在一定程序上限制了NAS的网络传输能力.

1.6、   SAN介绍

存储区域网络(Storage Area Network)简称SAN，它是通过光纤交换机，光纤路由器，光纤集线器等设备将磁盘阵列、磁带等存储设备与相关服务器连接起来的告诉专用子网。

SAN主要由3个部分组成：

连接设备(如、路由器、光纤交换机)

通信接口(如、SICI、FC)

通信协议(如、IP和SCSI) 这3个部分再加上存储设备和服务器构成了一个SAN系统。

1.7、   iSCSI概念

iscsi，即internet SCSI，是IETF制定的一项标准，用于将SCSI数据块映射为以太网数据包，它一种基于IP Storage的理论的新型存储技术，该技术将存储行业广泛应用SCSI接口技术与IP网络技术相结合，可以在IP网络上构建SAN，简单的说iscsi就是在IP网络上运行SCSI协议的一种网络存储技术，

二、    iSCSI工作原理

2.1、iSCSI的组成

一个简单的iSCSI系统大概是由以下部分组成：

       iSCSI Initiator 或者iSCSI HBA

       iSCSI Target

       以太网交换机

       一台或者多台服务器

 

2.2、iSCSI Initiator

       iSCSI Initiator是一个安装在计算上的软件或者硬件设备，它负责与iSCSI存储设备进行通信iSCSI 服务器与iSCSI存储设备之间的连接方式有两种:

第一种基于软件的方式：是iSCSI Initiator（免费）, 在iSCSI服务器上安装Initiator 后，Initiator软件可以将以太网卡虚拟为iSCSI卡，进而接受报和发送iSCSI数据报文，从而实现主机和iSCSI存储设备之间的iSCSI协议和TCP/IP协议传输功能。

第二种方式: 是硬件iSCSI HBA(Host Bus Adapter) HBA硬件卡，即iSCSI Initiator硬件。这种方式需要先购买iSCSI HBA卡，然后将其安装在iSCSI服务器上，从而实现iSCSI服务器与交换机之间、iSCSI服务器与存储设备之间的高效数据传输.

iSCSI适配卡大致分成两类，一为TOE HBA卡，一为iSCSI HBA卡，前者价格较便宜，后者效能极佳，但价格非常昂贵。代表性的厂商有Adaptec、Alacritech、Intel、LSI、Qlogic等，其中Intel专注于TOE HBA卡的开发

2.3、iSCSI Target 

iSCSI Target是一个可以用于存储数据的iSCSI磁盘阵列或者具有iSCSI功能的设备都可以被称为”iSCSI Target”，以为大多数操作系统都可以利用一些软件将系统转变为一个”iSCSI Target”。

 利用iSCSI target软件，可以将服务器的存储空间分配给客户机使用,客户机可以像使用本地硬盘一样使用iSCSI磁盘，包括对其进行分区、格式化及读写等。而且每个客户端可以向iSCSI磁盘写数据，户不干扰，而且不会破坏存储到服务器中的数据。同时,iSCSI对可以通过配置文件对权限进行限制。非常的灵活。

    我们知道，iSCSI使用了TCIP/IP协议进行通信的，因此，将iSCSI两端连接起来，仅仅需要一个以太网络就可以了，由此可知，iSCSI的存储性能和这个以太网有直接的关系，所以最好在iSCSI网络中使用千兆以太网交换机，劣质的网络设备会严重影响存储系统的性能，也就说，要为每个服务器配置高质量的千M以太网和千M交换机，并且提供两个链接，对于 ISCSI Target，应该为每个独立阵列中的两个独立端口配置一个设备交换机，最后将交换机连接起来，采用这种配置防止。其中一个交换机出现问题。另外一个任然可以保证数据的正常运行。

IP网络存储ISCSI

一、    ISCSI概述

1.1、   介绍

本章主要介绍了基于IP SAN 的网络存储ISCSI ，iscsl技术以其低廉的构成和优秀的存储性能，博得了很多CIO和存储管理的喜爱，目前陆续进入企业应用领域，推动了企业的存储环境向集中式转变，虽然， 目前对于ISCSI因该在什么样的环境中使用还存在诸多争议，ISCSI的前途是光明的，在未来的存储世界中，将会占据重要位置。

1.2、   SCSI介绍

SCSI是小型计算机系统接口(Samll Computer System Inerface) 的简称，SCSI作用输入/输出接口，主要用于硬盘、光盘、磁带机、扫描仪、打印机等设备.

 

1.3、   FC介绍

FC是光纤通道(Fibre Channel)的简称，是一种适合于前兆数据传输的、成熟而安全的解决方案。与传统的SCSI技术相比，FC提供更高的数据传输速率，更远的传输距离，更多的设备连接支持、更稳定的性能，更简易的安装。

1.4、   DAS介绍

DAS是直接式存储(Direct-Attached Stroage)的简称，是指将通过scsi接口或者光纤通道直接连接到一台计算机上面，当服务器在地理上比较分散，很难通过远程进行互连时，DAS是比较好的解决方案。但是这种方式存储之能通过与连接的主机进行访问，不能实现数据与其它主机的共享。同时DAS会占用服务器的操作资源。如：CPU资源 I/O资源，数据量越大，占用的资源就越多。

1.5、   NAS介绍

网络接入存储 (Network-Attached Stroge)简称NAS，它通过网络交换机连接存储系统和服务器，建立专门用于数据存储的私有网络，用户通过TCP/IP协议访问数据，采用标准的文件协议如：NFS、HTTP、CIFS来实现基于文件级的数据共享，NAS存储是文件共享访问变得更加方便快捷，并且能很容易的增加存储容量，通过专业化与存储技术相结合，NAS为那些需要共享大量文件数据的企业提供一个高效的，高可靠、高性价比的决绝方案。但是NAS也有一定的局限性，它会受到网络带宽和网络拥堵的影响，在一定程序上限制了NAS的网络传输能力.

1.6、   SAN介绍

存储区域网络(Storage Area Network)简称SAN，它是通过光纤交换机，光纤路由器，光纤集线器等设备将磁盘阵列、磁带等存储设备与相关服务器连接起来的告诉专用子网。

SAN主要由3个部分组成：

连接设备(如、路由器、光纤交换机)

通信接口(如、SICI、FC)

通信协议(如、IP和SCSI) 这3个部分再加上存储设备和服务器构成了一个SAN系统。

1.7、   iSCSI概念

iscsi，即internet SCSI，是IETF制定的一项标准，用于将SCSI数据块映射为以太网数据包，它一种基于IP Storage的理论的新型存储技术，该技术将存储行业广泛应用SCSI接口技术与IP网络技术相结合，可以在IP网络上构建SAN，简单的说iscsi就是在IP网络上运行SCSI协议的一种网络存储技术，

二、    iSCSI工作原理

2.1、iSCSI的组成

一个简单的iSCSI系统大概是由以下部分组成：

       iSCSI Initiator 或者iSCSI HBA

       iSCSI Target

       以太网交换机

       一台或者多台服务器

 

2.2、iSCSI Initiator

       iSCSI Initiator是一个安装在计算上的软件或者硬件设备，它负责与iSCSI存储设备进行通信iSCSI 服务器与iSCSI存储设备之间的连接方式有两种:

第一种基于软件的方式：是iSCSI Initiator（免费）, 在iSCSI服务器上安装Initiator 后，Initiator软件可以将以太网卡虚拟为iSCSI卡，进而接受报和发送iSCSI数据报文，从而实现主机和iSCSI存储设备之间的iSCSI协议和TCP/IP协议传输功能。

第二种方式: 是硬件iSCSI HBA(Host Bus Adapter) HBA硬件卡，即iSCSI Initiator硬件。这种方式需要先购买iSCSI HBA卡，然后将其安装在iSCSI服务器上，从而实现iSCSI服务器与交换机之间、iSCSI服务器与存储设备之间的高效数据传输.

iSCSI适配卡大致分成两类，一为TOE HBA卡，一为iSCSI HBA卡，前者价格较便宜，后者效能极佳，但价格非常昂贵。代表性的厂商有Adaptec、Alacritech、Intel、LSI、Qlogic等，其中Intel专注于TOE HBA卡的开发

2.3、iSCSI Target 

iSCSI Target是一个可以用于存储数据的iSCSI磁盘阵列或者具有iSCSI功能的设备都可以被称为”iSCSI Target”，以为大多数操作系统都可以利用一些软件将系统转变为一个”iSCSI Target”。

 利用iSCSI target软件，可以将服务器的存储空间分配给客户机使用,客户机可以像使用本地硬盘一样使用iSCSI磁盘，包括对其进行分区、格式化及读写等。而且每个客户端可以向iSCSI磁盘写数据，户不干扰，而且不会破坏存储到服务器中的数据。同时,iSCSI对可以通过配置文件对权限进行限制。非常的灵活。

    我们知道，iSCSI使用了TCIP/IP协议进行通信的，因此，将iSCSI两端连接起来，仅仅需要一个以太网络就可以了，由此可知，iSCSI的存储性能和这个以太网有直接的关系，所以最好在iSCSI网络中使用千兆以太网交换机，劣质的网络设备会严重影响存储系统的性能，也就说，要为每个服务器配置高质量的千M以太网和千M交换机，并且提供两个链接，对于 ISCSI Target，应该为每个独立阵列中的两个独立端口配置一个设备交换机，最后将交换机连接起来，采用这种配置防止。其中一个交换机出现问题。另外一个任然可以保证数据的正常运行。

    

    

二、基于命令行的操作:

Target 10.0.0.201操作:

对于每个Target来说，主机的ID是唯一，

存储设备的LUN ID 是由ISCSI target来分配的。

ISCSI驱动器为了scsi请求和回应提供了一个通过IP网络传输的驱动.

# yum -y install scsi-target-utils

# /etc/init.d/tgtd start

# chkconfig tgtd on

# chkconfig --list tgtd

 

 

(1)模拟一个控制器 

# tgtadm  --lld iscsi --mode target --op new --targetname iqn.2014-07-03.com.sxkj.mydisk1 --tid 1 

--lld：表示驱动或者接口类型

--mode:target目标

--op：new 新建

--targetname:表示创建targename名称.iqn.xxxxxxx.mydisk1 前和尾部固定，中间自由定义.

--tid：标识号

#查看

# tgtadm --lld iscsi --mode target --op show

 

 

 

(2)在模拟控制器关联一个设备 

# tgtadm --lld iscsi --mode logicalunit --op new --tid 1 --lun 1 -b /dev/sdb

--lld：表示驱动或者接口类型

--mode:target目标

--op：new 新建

--tid：标识号

--lun:lun标识号

-b:指定设备号

 #查看

# tgtadm --lld iscsi --mode target --op show

(3)基于IP的授权

# tgtadm --lld iscsi --mode target --op bind --tid 1 -I 10.0.0.0/16

    取消授权

    #tgtadm --lld iscsi --mode target --op unbind --tid 1 -I 10.0.0.0/16

    

    删除一个逻辑卷

    #tgtadm --lld iscsi --mode target --op delete --tid 1 --lun 1

    

    删除一个target

    #tgtadm --lld iscsi --mode target --op delete --tid 1

    

 Initiator 10.0.0.202操作:    

 

# iscsi-iname

iqn.1994-05.com.redhat:d18ee3c506b 

# iscsi-iname -p iqn.2014-07-03.com.skkjgongda

iqn.2014-07-03.com.skkjgongda:fb66a38ae152

# vim /etc/iscsi/initiatorname.iscsi 

InitiatorName=iqn.2014-07-03.com.skkjgongda:fb66a38ae152 给自己的客户端取个固定的名字。

发现服务端Target

# iscsiadm -m discovery -t sendtargets -p 10.0.0.201

登录服务端:

# iscsiadm -m node -T iqn.2014-07-03.com.sxkj.mydisk1 -p 10.0.0.201 -l

# iscsiadm -m node -o delete -T iqn.2014-07-03.com.sxkj.mydisk1 -p 10.0.0.201

先退出登录。

# iscsiadm -m node -T iqn.2014-07-03.com.sxkj.mydisk1 -p 10.0.0.201 -U all

在删除一个发现:

iscsiadm -m node -o delete -T iqn.2014-07-03.com.sxkj.mydisk1 -p 10.0.0.201

    

    

     

    

五、总结所有的步骤简单化精华

iscsi单机文件共享系统，也就说比如有服务端共享一个/sdb存储出来

每个客户端可以在/sdb里面使用一个分区.

比如客户端1可以使用fdisk /sdb 分一个/sdb1

比如客户端2可以使用fdisk /sdb 分一个/sdb2

比如客户端3可以使用fdisk /sdb 分一个/sdb3

如果客户端1和客户端2同时使用/sdb1就会出现内存奔溃的情况。这个一大BUG，

5.1、环境描述:

服务器端target 10.0.0.203 增加一块30G sisci硬盘

客户端：10.0.0.204

客户端：10.0.0.202

5.2、服务安装

(1)、安装服务

# yum -y install scsi-target-utils

(2)、修改配置文件

#vim /etc/tgt/targets.conf

<target iqn.2014-06-10.com.sxkj.mydisk1>

    backing-store /dev/sdb    #如果多个存储设备。直接加多一个backing-store

    incominguser alvin alvin123 #基于用户认证

    initiator-address 10.0.0.0/16 #基于IP授权访问

</target>

(3)、重启服务

# /etc/init.d/tgtd restart

(4)、查看是否成功

# tgtadm --lld iscsi --mode target --op show

5.3、客户端安装

(1)安装软件

# yum -y install iscsi-initiator-utils

(2)修改Initiator唯一标识号

跟target一样也需要一个唯一标识号。可以使用-p来更改,然后编辑配置文件永久修改

# iscsi-iname

# iscsi-iname -p iqn.2014-06.com.sxkjgongda

# vim /etc/iscsi/initiatorname.iscsi

InitiatorName=iqn.1994-05.com.redhat:1c39abfdfa0  #给自己的客户端Initiator起个名字

(3)、修改配置文件

# vim /etc/iscsi/iscsid.conf

node.session.auth.authmethod = CHAP  #开启chap认证

node.session.auth.username = Alvin    #服务端target创建和绑定的用户

node.session.auth.password = alvin123  #服务端target创建的密码写进来

(4)、发现targe命令

# iscsiadm -m discovery -d 2 -t st -p 10.0.0.203

(5)、重启服务

# /etc/init.d/iscsi restart  是否可以看到共享磁盘？

(6)、可以使用fdisl对共享磁盘进行分区。然后挂在到本地