环境准备

主机名 WanIP LanIP 角色
web01 10.0.0.7 172.16.1.7 网站服务(nfs客户端)
web02 10.0.0.8 172.16.1.8 网站服务(nfs客户端)
nfs 10.0.0.31 172.16.1.31 共享存储(nfs服务端)

NFS概述

NFS(Network File System)通过网络来做文件存储

NFS用于企业集群架构中, 如果是大型网站, 会用到更复杂的分布式文件系统FastDFS,glusterfs,HDFS

为什么使用共享存储

img

没有共享存储时

例:比如你微信发了朋友圈 你的朋友圈内容被负载均衡分配到了web01服务器 你的好友是被分配在web02服务器

而服务器没做共享存储 你的好友就看不到你发的朋友圈 他就无法给你点赞

NFS工作原理

img

1.用户进程访问NFS客户端,使用不同的函数对数据进行处理
2.NFS客户端通过TCP/IP的方式传递给NFS服务端。
3.NFS服务端接收到请求后,会先调用portmap进程进行端口映射。
4.nfsd进程用于判断NFS客户端是否拥有权限连接NFS服务端。
5.Rpc.mount进程判断客户端是否有对应的权限进行验证。
6.idmap进程实现用户映射和压缩
7.最后NFS服务端会将对应请求的函数转换为本地能识别的命令,传递至内核,由内核驱动硬件。

端口映射

将一个端口映射到另一个端口上

例:比如物理机做了端口映射后 物理机33端口映射的是虚拟机的22端口

那么其他用户访问你物理机的33端口时 实际上是访问了你虚拟机的22端口

安装部署NFS服务端

#安装nfs服务 
#centos6
yum install -y nfs rpcbind
# centos7
[root@nfs ~]# yum install -y nfs-utils

# 配置服务端
NFS配置文件的位置
[root@nfs ~]# ll /etc/exports
-rw-r--r--. 1 root root 0 Jun  7  2013 /etc/exports
[root@nfs ~]# vim /etc/exports
# 共享目录 允许访问NFS服务端的网段 (可读可写,同步,任何用户都映射成nfs的匿名用户)
/data               172.16.1.0/24(rw,sync,all_squash)

## 创建共享目录
[root@nfs ~]# mkdir /data

## 修改共享目录的属主和属组为nfs的匿名用户
[root@nfs ~]# chown nfsnobody:nfsnobody /data

## 启动服务并加入开机自启
[root@nfs ~]# systemctl start nfs
[root@nfs ~]# systemctl enable nfs

## 检查进程
[root@nfs ~]# ps -ef|grep nfs
[root@nfs ~]# ps -ef|grep nfs
root       1390      2  0 20:55 ?        00:00:00 [nfsd4_callbacks]
root       1396      2  0 20:55 ?        00:00:00 [nfsd]
root       1397      2  0 20:55 ?        00:00:00 [nfsd]
root       1398      2  0 20:55 ?        00:00:00 [nfsd]
root       1399      2  0 20:55 ?        00:00:00 [nfsd]
root       1400      2  0 20:55 ?        00:00:00 [nfsd]
root       1401      2  0 20:55 ?        00:00:00 [nfsd]
root       1402      2  0 20:55 ?        00:00:00 [nfsd]
root       1403      2  0 20:55 ?        00:00:00 [nfsd]
root       1433   1001  0 20:56 pts/0    00:00:00 grep --color=auto nfs

## 检测配置文件是否生效
[root@nfs ~]# cat /var/lib/nfs/etab
/data   172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,rw,secure,root_squash,all_squash)

安装部署NFS客户端

# 1.安装nfs
[root@web01 ~]# yum install -y nfs-utils
[root@web02 ~]# yum install -y nfs-utils

# 2.查看哪些目录可以挂载
[root@web01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24

[root@web02 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24

# 3.挂载共享目录
[root@web01 ~]# mount -t nfs 172.16.1.31:/data /opt
[root@web02 ~]# mount -t nfs 172.16.1.31:/data /opt

## 查看挂载
[root@web01 ~]# df -h
Filesystem         Size  Used Avail Use% Mounted on
devtmpfs           476M     0  476M   0% /dev
tmpfs              487M     0  487M   0% /dev/shm
tmpfs              487M  7.7M  479M   2% /run
tmpfs              487M     0  487M   0% /sys/fs/cgroup
/dev/sda3           19G  1.7G   17G  10% /
/dev/sda1          497M  125M  373M  26% /boot
tmpfs               98M     0   98M   0% /run/user/0
172.16.1.31:/data   19G  1.7G   17G   9% /opt

## 卸载挂载
[root@web01 ~]# umount 172.16.1.31:/data
## 强制卸载
[root@web01 ~]# umount -lf 172.16.1.31:/data

NFS共享存储实战

环境准备

主机名 WanIP LanIP 角色 部署应用
web01 10.0.0.7 172.16.1.7 网站服务(nfs客户端) httpd、php、nfs
web02 10.0.0.8 172.16.1.8 网站服务(nfs客户端) httpd、php、nfs
nfs 10.0.0.31 172.16.1.31 共享存储(nfs服务端) bfs

部署交作业网站

# 1.安装apache和php
[root@web01 ~]# yum install -y httpd php
[root@web02 ~]# yum install -y httpd php

# 2.下载代码(到站点目录下)
[root@web01 html]# wget https://download.wodeyumengouwo.com/nginx/kaoshi_modify.zip
[root@web01 html]# pwd
/var/www/html

# 3.解压代码
[root@web01 html]# unzip kaoshi_modify.zip
[root@web02 html]# unzip kaoshi_modify.zip

# 4.启动apache服务
[root@web01 html]# systemctl start httpd
[root@web02 html]# systemctl start httpd

# 5.检查进程
[root@web01 html]# ps -ef|grep httpd
root       1425      1  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1426   1425  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1427   1425  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1428   1425  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1429   1425  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1430   1425  0 21:08 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
root       1434    918  0 21:08 pts/0    00:00:00 grep --color=auto httpd

[root@web02 html]# ps -ef|grep httpd
root       1472      1  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1473   1472  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1474   1472  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1475   1472  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1476   1472  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     1477   1472  0 21:12 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
root       1481    881  0 21:13 pts/0    00:00:00 grep --color=auto httpd

# 6.端口检查
[root@web01 html]# netstat -lntup | grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      1425/httpd  
[root@web02 html]# netstat -lntup|grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      1472/httpd

# 7.打开浏览器访问
http://10.0.0.7/
http://10.0.0.8/

img

img

# 8.授权站点目录
[root@web01 html]# chown apache.apache /var/www/html
[root@web02 html]# chown apache.apache /var/www/html

# 9.测试上传文件

img

img

# 上传成功后文件夹内生成user_data目录 
[root@web01 html]# ll
total 80
-rw-r--r-- 1 root   root   38772 Apr 27  2018 bg.jpg
-rw-r--r-- 1 root   root    2633 May  4  2018 index.html
-rw-r--r-- 1 root   root      52 May 10  2018 info.php
-rw-r--r-- 1 root   root   27020 Aug  3 21:05 kaoshi_modify.zip
-rw-r--r-- 1 root   root    1117 May 18  2022 upload_file.php
drwxr-xr-x 2 apache apache    22 Aug  3 21:18 user_data

[root@web02 html]# ll
total 80
-rw-r--r-- 1 root   root   38772 Apr 27  2018 bg.jpg
-rw-r--r-- 1 root   root    2633 May  4  2018 index.html
-rw-r--r-- 1 root   root      52 May 10  2018 info.php
-rw-r--r-- 1 root   root   27020 Aug  3 21:05 kaoshi_modify.zip
-rw-r--r-- 1 root   root    1117 May 18  2022 upload_file.php
drwxr-xr-x 2 apache apache    22 Aug  3 21:17 user_data

# 上传的文件位置
[root@web01 html]# ll /var/www/html/user_data/
total 92
-rw-r--r-- 1 apache apache 93946 Aug  3 21:18 2_sc.jpg

[root@web02 html]# ll /var/www/html/user_data/
total 96
-rw-r--r-- 1 apache apache 95029 Aug  3 21:17 1_sc.jpg

# 统一用户
[root@nfs ~]# groupadd www -g 666
[root@nfs ~]# useradd www -u 666 -g 666 -s /sbin/nologin -M

# 修改NFS配置文件
[root@nfs ~]# vim /etc/exports
/data          172.16.1.0/24(rw,sync,anonuid=666,anongid=666,all_squash)

# 重启nfs服务
[root@nfs ~]# systemctl restart nfs

# 统一用户
[root@web01 ~]# groupadd www -g 666
[root@web01 ~]# useradd www -u 666 -g 666 -s /sbin/nologin -M
[root@web02 ~]# groupadd www -g 666
[root@web02 ~]# useradd www -u 666 -g 666 -s /sbin/nologin -M

# 修改apache配置文件
[root@web01 ~]# vim /etc/httpd/conf/httpd.conf
[root@web02 ~]# vim /etc/httpd/conf/httpd.conf
#把User 和 Group 指定的的apache 改成 www
User www
Group www

# 重启apache服务
[root@web01 ~]# systemctl restart httpd
[root@web02 ~]# systemctl restart httpd

# 授权
[root@web01 ~]# chown www:www /var/www/html/
[root@web02 ~]# chown www:www /var/www/html/

# 挂载共享目录
[root@web01 ~]# mount -t nfs 172.16.1.31:/data /var/www/html/user_data/
[root@web02 ~]# mount -t nfs 172.16.1.31:/data /var/www/html/user_data/

# 查看挂载
[root@web01 ~]# df -h
Filesystem         Size  Used Avail Use% Mounted on
devtmpfs           476M     0  476M   0% /dev
tmpfs              487M     0  487M   0% /dev/shm
tmpfs              487M  7.7M  479M   2% /run
tmpfs              487M     0  487M   0% /sys/fs/cgroup
/dev/sda3           19G  1.7G   17G  10% /
/dev/sda1          497M  125M  373M  26% /boot
tmpfs               98M     0   98M   0% /run/user/0
172.16.1.31:/data   19G  1.7G   17G   9% /var/www/html/user_data
[root@web02 ~]# df -h
Filesystem         Size  Used Avail Use% Mounted on
devtmpfs           476M     0  476M   0% /dev
tmpfs              487M     0  487M   0% /dev/shm
tmpfs              487M  7.7M  479M   2% /run
tmpfs              487M     0  487M   0% /sys/fs/cgroup
/dev/sda3           19G  5.6G   13G  31% /
/dev/sda1          497M  125M  373M  26% /boot
tmpfs               98M     0   98M   0% /run/user/0
172.16.1.31:/data   19G  1.7G   17G   9% /var/www/html/user_data

# 打开浏览器上传图片

img

# 查看共享目录
[root@nfs ~]# ll /data/
total 188
-rw-r--r-- 1 www www 95029 Aug  4 22:10 1_nfs.jpg