day 32 综合架构存储服务章节

课程介绍:

1. rsync备份服务常见异常问题
2. rsync备份服务全网备份
3. 网站架构存储服务作用说明
4. 网站架构存储服务部署过程 NFS
5. 网站架构存储服务部署过程
6. 网站架构存储服务配置参数

知识回顾

1.rsync备份服务数据传输原理

客户端--服务端 发起请求
第一步: 客户端 --> 服务端 发送请求传输数据信息
第二步: 服务端 --> 客户端 接收到传输数据信息
第三步: 客户端 --> 服务端 发送请求传输数据信息
第四步: 服务端 --> 客户端 发送确认信息
第五步: 客户端 --> 服务端 用户携带数据通过网络进行传输
第六步: 服务端 --> 客户端 发送数据存储完毕确认信息

2.rsync相关参数

-a -r -l -L -p -t -g -o -D -v -z -P
--exclude
--exclude-from
--delete
--password-file
bwlimit

3.rsync的企业应用

• rsync守护进程模块的建立
  /etc/rsyncd.conf
  systemctl restart rsyncd
• 守护进程排除数据
  --exclude=
  --exclude-form
  exclude
  exclude form

3.守护进程备份模块创建子目录

rsync -avz rsync_backup@172.16.1.41::backup/oldboy

4.守护进程访问策略

a.只有白名单:只有白名单可以访问
b.只有黑名单:只阻止黑名单,其他默认访问
c.白名单黑名单都有:在白/黑名单外默认可访问

5.守护进程列表显示

list=false
隐患,会在其他客户端显示详细的模块信息

6.守护进程无差异化数据传输

--delete

作业问题:

一: 如何真正保持文件属主和属组信息不变?
1.uid gid = root
2.注释掉fake sepr = yes
3.确认备份服务端有相应用户信息(uid gid 保持一致)

二: 如何对外网用户限速
--bwlimit=KBPS
rsync -avzP --bwlimit=10 /opt/1G rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
sending incremental file list
1G
1,048,576,000 100% 10.67MB/s 0:01:33 (xfr#1, to-chk=0/1)
sent 1,019,827 bytes received 43 bytes 10,147.96 bytes/sec(限速速率 10KB/s)
total size is 1,048,576,000 speedup is 1,028.15

三: 如何修改rsync默认湍口后,依旧可以传输数据信息
方法一: rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
rsync -avz /etc/hosts rsync_bacakup@172.16.1.41:874/as_backup --password-file=/etc/rsync.password
方法二: rsync -avz /etc/hosts rsync_backup@172.16.41::backup --password-file=/etc/rsync.bassword --port=874

网站存储服务概念说明

作用说明:
1. 实现数据共享存储
2. 实现数据统一管理
3. 实现运营成本节约

原理说明: NFS存储

NFS原理.png
1. 服务端设置好共享目录
2. 客户端进行挂载
3. 数据存储客户端 --> 服务端共享目录

存储服务实现方式:

• 中小企业:
  NFS: 网络文件系统 NFS客户端(本地磁盘不保存数据) -->NFS服务端 利用挂载
  FTP: 文件传输协议 FTP客户端(本地磁盘保存数据) -->FTP服务端 而且配置复杂
  samba: 文件共享存储 配置复杂
• 大型企业: 分布式储存
  Moosefs(mfs) , GllusterFS , FastDFS(关注它)
  用户 10G --- 网站服务 -存储服务管理主机-(类似于raid卡) 管理存储服务拆分为多个文件快速存储(类似于磁盘)

网站存储服务部署过程

预备知识: 了解rpc服务作用--远程过程调用程序==中介(NFS客户端和NFS服务端通讯)

rpc原理.png
rpc原理.png
rpc原理.png

服务端部署过程:

• 第一个里程: 检查服务软件是否安装/安装服务软件程序
  rpm -qa |grep -E "rpm|nfs" ---默认没有安装
  yum -y install rpcbind nfs-utils
• 第二个里程: 编写nfs配置文件
  vim /etc/exports(存储目录 白名单信息权限参数信息)
  /data 172.16.1.0/24(rw,sync)
• 第三个里程: 创建存储目录
  mkdir /data
  chown -R nfsnobody.nfsnobody /data
• 第四个里程: 启动服务程序
  systemctl start rpcbind.service
  systemctl enable rpcbind.service
  systemctl start nfs
  systemctl enable nfs

客户端部署过程:

• 第一个里程: 安装软件程序
  yum install -y nfs-utils
• 第二个里程: 检查是否有可以共享存储数据目录
  showmount -e 172.16.1.31
• 第三个里程: 进行远程挂载操作
  mount -t nfs 172.16.1.31:/data /mnt
  [root@backup backup]# df -h
  文件系统 容量 已用 可用 已用% 挂载点
  172.16.1.31:/data 99G 2.9G 96G 3% /mnt

作业:
1. 扩展研究FTP服务部署搭建过程(linux windows-serve_U)
2. 扩展研究samba服务部署搭建过程
3. 如何保持存储属主和属组身份信息不变 参看nfs配置参数
4. 如何事项客户端挂载信息开机自动挂载 至少两种方法