NFS网络文件共享存储服务器

NFS网络文件共享存储服务器
什么是NFS
NFS（Network File System）即网络文件系统，它允许网络中的计算机之间通过TCP/IP网络共享资源。在NFS的应用中，本地NFS的客户端应用可以透明地读写位于远端NFS服务器上的文件，就像访问本地文件一样。在企业集群架构的工作场景中，NFS网络文件系统一般被用来共享存储视频、图片、附件等静态资源文件，通常网站用户上的文件都会存放到NFS共享里。例如bbs产品的图片、附件头像等。然后前段所有的节点访问这些静态资源时都会读取NFS存储上的资源。企业生成集群中为什么要部署NFS存储服务



1）在没有NFS文件共享存储时的原理解释：
当A用户上传图片到web1服务器时，然后B用户访问这张图片，结果B用户访问图片的请求到了负载均衡器的时候，被分发到web2服务器上，因为web2没有A用户上传的图片，所以B用户就无法看到A用户上传的图片。 实例：淘宝卖家将新出的产品资料上传到淘宝服务器。如果没有存储服务器，那么当大量的用户访问到这个淘宝卖家店里的时候，分发器将用户的请求都分发给淘宝的其他服务器，那么用户就无法看到卖家新出的产品了，这就导致了降低了用户体验。这样对一个户门网站来说是一个很大的错误。



2）在有NFS文件共享存储时的原理解释：
当A用户上传一张图片到web服务器中，分发器不论是转发到那一台web服务器，其内容最后都会被存放到NFS共享文件存储中。而当B用户访问A用户上传的图片时，无论请求被分发器分发web1还是web2上，最终都会到共享存储上找，都可以找到A用户上传的图片。NFS的工作原理



服务端设置一个专门用来共享的目录（/test）。设置好共享目录的权限，IP等内容。然后具有权限的客户端访问NFS服务器端，将这个共享目录挂载到客户端的某个目录下。客户端在正确挂载完之后，就可以通过NFS客户端的挂载点所在的目录中查看到NFS服务端共享目录/test下的所有数据。客户端查看时，NFS服务端的/test目录就相当于客户端本地的磁盘分区或目录。什么RPC服务
RPC指远程过程调用。因为NFS支持的功能比较多，而不同的功能都会使用不同的程序来启动，为启动一个功能就会启用一些未被使用的端口来作为传输只用，因为端口的不固定，这样一来就会造成NFS客户端与NFS服务器端的通信障碍没因为NFS客户端必须要知道NFS服务器端的数据传输端口才能进行通信，才能交互数据。为了解决上述的问题，就需要RPC服务，NFS服务的RPC服务最主要的功能就是记录每个NFS功能所对饮的端口号，并且NFS客户端请求时将该端口和功能对应的信息传输给请求数据的NFS客户端，从而保证客户端可以连接到正确的NFS端口上去，达到实现数据交互的目的。服务端的RPC服务如何知道每个NFS的端口的：
当NFS读取端启动服务时会随机取用若干端口，并主动向RPC服务注册相关端口的对应的功能，然后RPC服务使用固定的111端口来监听NFS客户端提交的请求，并将正确的NFS端口信息回复给请求的NFS客户端。NFS的挂载基本使用过程



请求数据的流程：
1）首先用户访问网站程序，由程序在NFS客户端上发出存取NFS文件的请求，这是NFS客户端的RPC服务就不通过网络向NFS服务器端的RPC服务的111端口发出NFS文件存取功能的查询请求，包括要实现的什么功能。
2）NFS服务器端的RPC服务找到对饮的已注册的NFS端口，通知NFS客户端的RPC服务。
3）此时NFS客户端获取到正确的端口，并与NFS联机存取数据。
4）NFS客户端把数据存取成功后，返回给客户端程序，告知用户存取结果。
注意：
因为NFS的各项功能都需要向RPC服务注册端口，所以只有RPC服务才能获取到NFS服务的各项功能对应的端口号，PID、NFS在主机监听的Ip等信息，而客户端也只能通过向RPC服务询问才能找到正确 的端口，因此，无论是NFS服务端还是NFS客户端都需要RPC服务的协助才能完成对外服务及请求。
一：实验目标
1、完成NFS的文件共享

二：实验环境

服务器系统	主机名	IP	作用	软件
Rhel6.5	yu61	192.168.1.61	Nfs-server	nfs-utils、rpcbind
Rhel6.5	yu62	192.168.1.62	Nfs-client1	nfs-utils、rpcbind
Rhel6.5	yu63	192.168.1.63	Nfs-client2	nfs-utils、rpcbind

三：实验步骤
1、安装NFS服务端
[root@yu61 ~]# yum install nfs-utils rpcbind -y
[root@yu61 ~]#
[root@yu61 ~]# /etc/init.d/rpcbind status
rpcbind (pid 1615) is running...
[root@yu61 ~]# lsof -i :111
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
rpcbind 1615 rpc 6u IPv4 11330 0t0 UDP *:sunrpc
rpcbind 1615 rpc 8u IPv4 11333 0t0 TCP *:sunrpc (LISTEN)
rpcbind 1615 rpc 9u IPv6 11335 0t0 UDP *:sunrpc
rpcbind 1615 rpc 11u IPv6 11338 0t0 TCP *:sunrpc (LISTEN)

2、查看NFS服务向RPC服务注册的端口信息
因为NFS服务还没有启动，一次没有太多注册端口映射信息。[root@yu61 ~]# rpcinfo -p localhost
program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
100024 1 udp 43521 status
100024 1 tcp 60423 status3、启动NFS服务
[root@yu61 ~]# /etc/init.d/nfs start
rpc.rquotad (pid 49232) is running...
[root@yu61 ~]# rpcinfo -p localhost
program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
100024 1 udp 43521 status
100024 1 tcp 60423 status
100011 1 udp 875 rquotad
100011 2 udp 875 rquotad
100011 1 tcp 875 rquotad
100011 2 tcp 875 rquotad
100005 1 udp 38917 mountd
100005 1 tcp 44150 mountd
100005 2 udp 42858 mountd
100005 2 tcp 52228 mountd
100005 3 udp 41216 mountd
100005 3 tcp 60796 mountd4、NFS服务常见的进程详解
[root@yu61 ~]# ps -ef | egrep "rpc|nfs"
rpc 1615 1 0 11:00 ? 00:00:00 rpcbind
rpcuser 1755 1 0 11:00 ? 00:00:00 rpc.statd
root 49221 2 0 18:35 ? 00:00:00 [rpciod/0]
root 49222 2 0 18:35 ? 00:00:00 [rpciod/1]
root 49223 2 0 18:35 ? 00:00:00 [rpciod/2]
root 49224 2 0 18:35 ? 00:00:00 [rpciod/3]
root 49232 1 0 18:35 ? 00:00:00 rpc.rquotad
root 49236 1 0 18:35 ? 00:00:00 rpc.mountd
root 49242 2 0 18:35 ? 00:00:00 [nfsd4]
root 49243 2 0 18:35 ? 00:00:00 [nfsd4_callbacks]
root 49249 2 0 18:35 ? 00:00:00 [nfsd]
root 49250 2 0 18:35 ? 00:00:00 [nfsd]
root 49251 2 0 18:35 ? 00:00:00 [nfsd]
root 49274 1 0 18:35 ? 00:00:00 rpc.idmapd
root 49318 2821 0 18:36 pts/0 00:00:00 egrep rpc|nfs
（1）Nfs服务启动的进程说明
NFS服务的主要任务是共享文件刺痛的数据，而文件系统数据的共享离不开权限问题。所以NFS服务器启动后时掷筛需要两个不同的进程，一个是管理NFS客户端是否能够登入rpxc.nfsd主进程，另一个用于管理NFS客户端是否能够取得对应权限的rpc.mountd进程，如果还需要管理磁盘配额，则NFS还需要再加载rpc.rpuotad进程。

服务或进程	用途说明
nfsd (rpc.nfsd)	Rpc.nfsd的主要功能是管理NFS服务器端主机
Mountd (rpc.mountd)	rpc.mountd的主要功能则是管理NFS文件系统，当NFS客户端顺利通过rpc.nfsd登入NFS服务器端的主机时，在使用NFS服务器提供数据之前，他会去读NFS的配置文件/etc/exports来对比NFS客户端的权限，通过这一关之后，还要经过NFS服务器端本地文件系统使用权限的认证程序，
rpc.locke	可以用来锁定文件，用于多客户端同时写入
rpc.statd	检查文件的一致性
rpc.idmapd	名字映射后台进程

5、配置NFS服务器端的服务开机自启动
[root@yu61 ~]# chkconfig rpcbind on
[root@yu61 ~]# chkconfig nfs on
[root@yu61 ~]# chkconfig --list | egrep "nfs\b|rpcbind"
nfs 0:off1:off2:on3:on4:on5:on6:off
rpcbind 0:off1:off2:on3:on4:on5:on6:off
[root@yu61 ~]# tail -3 /etc/rc.local
tail: inotify cannot be used, reverting to polling
#start uo nfs
/etc/init.d/rpcbind start
/etc/init.d/nfs start

6、Nfs服务器端共享文件的配置文件路径
[root@yu61 ~]# cat /etc/exports
格式：
Nfs共享目录 nfs客户端1地址（权限） nfs客户端2地址（权限）
例如：可以编辑/etc/exports为：
/tmp*(rw,no_root_squash)
/home/public192.168.0.*(rw)*(ro)
/home/test192.168.0.100(rw)
/home/linux*.the9.com(rw,all_squash,anonuid=40,anongid=40)

7、NFS配置权限设置常用参数说明

参数名称	参数用途
ro	只读访问
rw	读写访问
sync	所有数据在请求时写入共享
async	NFS在写入数据前可以相应请求
secure	NFS通过1024以下的安全TCP/IP端口发送
insecure	NFS通过1024以上的端口发送
wdelay	如果多个用户要写入NFS目录，则归组写入（默认）
no_wdelay	如果多个用户要写入NFS目录，则立即写入，当使用async时，无需此设置。
hide	在NFS共享目录中不共享其子目录
no_hide	共享NFS目录的子目录
subtree_check	如果共享/usr/bin之类的子目录时，强制NFS检查父目录的权限（默认）
no_subtree_check	不检查父目录权限
all_squash	共享文件的UID和GID映射匿名用户anonymous，适合公用目录。
no_all_squash	保留共享文件的UID和GID（默认）
root_squash	root用户的所有请求映射成如anonymous用户一样的权限（默认）
anonuid=xxx	指定NFS服务器/etc/passwd文件中匿名用户的UID

实战：NFS服务案例配置1、创建需要共享的目录并授权
[root@yu61 ~]# mkdir -p /data
[root@yu61 ~]# touch /data/a.txt
[root@yu61 ~]# cp /etc/shadow /data/
[root@yu61 ~]# chown -R nfsnobody.nfsnobody /data
[root@yu61 ~]# chmod 777 /data/
[root@yu61 ~]# ls -ld /data/
drwxrwxrwx 3 nfsnobody nfsnobody 4096 May 20 19:16 /data/
[root@yu61 ~]# grep nfsnobody /etc/passwd
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
2、配置NFS服务的配置文件，并在本地查看挂在信息
[root@yu61 ~]# vim /etc/exports
[root@yu61 ~]# cat /etc/exports
/data 192.168.1.0/24 (rw,sync)
[root@yu61 ~]# exportfs -rv
exporting 192.168.1.0/24:/data
exporting *:/data
[root@yu61 ~]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sr0 3.6G 3.6G 0 100% /mnt
[root@yu61 ~]# mount -t nfs 192.168.1.61:/data/ /mnt/
[root@yu61 ~]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sr0 20G 4.6G 14G 26% /mnt
192.168.1.61:/data/ 20G 4.6G 14G 26% /mnt
3、客户端安装rpcbind
[root@yu63 ~]# yum install rpcbind nfs-utils -y
[root@yu63 ~]# /etc/init.d/rpcbind status
rpcbind (pid 1695) 正在运行...
[root@yu63 ~]# echo "/etc/init.d/rpcbind start" >> /etc/rc.local
[root@yu63 ~]# echo "/bin/mount -t nfs 192.168.1.61:/data /mnt " >> /etc/rc.local
[root@yu63 ~]# tail -2 /etc/rc.local
tail: inotify cannot be used, reverting to polling
/etc/init.d/rpcbind start
/bin/mount -t nfs 192.168.1.61:/data /mnt
[root@yu63 ~]# showmount -e 192.168.1.61
Export list for 192.168.1.61:
/data (everyone)
4、挂在服务端的共享文件
[root@yu63 ~]# mount -t nfs 192.168.1.61:/data /mnt
[root@yu63 ~]# df -h
Filesystem Size Used Avail Use% Mounted on
hm
/dev/sda1 4.9G 162M 4.5G 4% /boot
/dev/sr0 20G 4.6G 14G 26% /mnt
192.168.1.61:/data 20G 4.6G 14G 26% /mnt
[root@yu63 ~]# mount
.........
192.168.1.61:/data on /mnt type nfs (rw,vers=4,addr=192.168.1.61,clientaddr=192.168.1.63)
5、测试读写数据
[root@yu63 ~]# ls /mnt
a.txt shoadow
[root@yu63 ~]# mkdir /mnt/test
[root@yu63 ~]# ls /mnt
a.txt shoadow test
[root@yu61 ~]# ls /mnt
a.txt shoadow test

附件：

NFS常用路径	说明
/etc/exports	NFS服务的主配置文件。
/usr/sbin/exports	NFS的管理命令，可以加载NFS配置生效等
/usr/sbin/showmount	用来客户端查看NFS配置及挂在结果命令
/var/lib/nfs/etab	NFS配置文件的完整参数设定文件
/pro/mounts	客户端挂在参数
/vae/lib/nfs/rmtab	客户端访问服务器exports的信息列表