rsync实现文件备份同步

1． 关闭防火墙和selinux

systemctl stop firewalld.service #停止firewall  

systemctl disable firewalld.service #禁止firewall开机启动

vi /etc/selinux/config  

SELINUX=disabled  

setenforce 0

 

2.安装rsync服务

wget https://rsync.samba.org/ftp/rsync/src/rsync-3.1.2.tar.gz

cd rsync-*.*.*  

./configure --prefix=/usr/local/rsync 

make && make install

 

3.配置rsync服务

Vim /etc/rsyncd.conf

#pid文件的存放位置  

pid file = /var/run/rsync.pid  

#日志文件位置，启动rsync后自动产生这个文件，无需提前创建  

log file = /var/log/rsync.log  

#支持max connections参数的锁文件  

lock file=/var/run/rsync.lock  

#用户认证配置文件，里面保存用户名称和密码  

secrets file = /etc/rsync.pw  

#rsync启动时欢迎信息页面文件位置  

motd file = /etc/rsyncd.motd  

transfer logging = yes  

log format = %t %a %m %f %b  

syslog facility = local3  

#自定义名称  

[data]  

#设置需要同步的目录  

path = /data/test/  

#模块名称与[data]自定义名称相同  

comment = data  

exclude = blank.png ; spinner.gif ; downsimple.png ; rails.png ; WEB-INF/  

#默认端口  

port = 873  

#设置rsync运行权限为root  

uid = root  

#设置rsync运行权限为root  

gid = root  

#设置超时时间  

timeout = 600  

#最大连接数  

max connections = 200  

#默认为true，修改为no，增加对目录文件软连接的备份  

use chroot = no  

#设置rsync服务端文件为读写权限  

read only = no  

#不显示rsync服务端资源列表  

list = no  

#允许进行数据同步的客户端IP地址  

hosts allow = 192.168.1.3,192.168.1.4

#增加test1目录  

[test1]  

path = /data/test1  

list = yes  

ignore errors  

comment = ucweb-file system  

secrets file = /etc/rsync.pw  

exclude = blank.png ; spinner.gif ; downsimple.png ; rails.png ; WEB-INF/

 

4.增加必要文件，账户密码信息，传送时显示页面信息

vi /etc/rsync.pw 

root:123456 

chmod 600 /etc/rsync.pw

   

chown root:root /etc/rsync.pw

 

 

 

vi /etc/rsyncd.motd

###############################  

#               # 

#    start rsync         #

#               # 

 

5.启动服务

 /usr/local/rsync/bin/rsync --daemon --config=/etc/rsyncd.conf 

 

 

开机启动

echo '/usr/local/rsync/bin/rsync --daemon --config=/etc/rsyncd.conf'>>/etc/rc.d/rc.local

 

 

6.客户端配置

.新建客户端密码文件(客户端不带用户名)  

   

vi /etc/rsyncd.pw

123456

chmod 600 /etc/rsyncd.pw

 

//data 模块    /testbak/    备份客户端地址

rsync -vzrtopg  --progress --delete  root@192.168.5.189::data /testbak/

 

rsync -vzrtopg --progress --delete  root@192.168.5.189::data /testbak/ --password-file=/etc/rsyncd.pw

 

 

rsync参数的具体解释如下： 

-v, --verbose 详细模式输出 

-q, --quiet 精简输出模式 

-c, --checksum 打开校验开关，强制对文件传输进行校验 

-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD 

-r, --recursive 对子目录以递归模式处理 

-R, --relative 使用相对路径信息 

-b, --backup 创建备份，也就是对于目的已经存在有同样的文件名时，将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。

--backup-dir 将备份文件(如~filename)存放在在目录下。 

-suffix=SUFFIX 定义备份文件前缀 

-u, --update 仅仅进行更新，也就是跳过所有已经存在于DST，并且文件时间晚于要备份的文件。(不覆盖更新的文件) 

-l, --links 保留软链结 

-L, --copy-links 想对待常规文件一样处理软链结 

--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结 

--safe-links 忽略指向SRC路径目录树以外的链结 

-H, --hard-links 保留硬链结 

-p, --perms 保持文件权限 

-o, --owner 保持文件属主信息 

-g, --group 保持文件属组信息 

-D, --devices 保持设备文件信息 

-t, --times 保持文件时间信息 

-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间 

-n, --dry-run现实哪些文件将被传输 

-W, --whole-file 拷贝文件，不进行增量检测 

-x, --one-file-system 不要跨越文件系统边界 

-B, --block-size=SIZE 检验算法使用的块尺寸，默认是700字节 

-e, --rsh=COMMAND 指定使用rsh、ssh方式进行数据同步 

--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息 

-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件 

--existing 仅仅更新那些已经存在于DST的文件，而不备份那些新创建的文件 

--delete 删除那些DST中SRC没有的文件 

--delete-excluded 同样删除接收端那些被该选项指定排除的文件 

--delete-after 传输结束以后再删除 

--ignore-errors 及时出现IO错误也进行删除 

--max-delete=NUM 最多删除NUM个文件 

--partial 保留那些因故没有完全传输的文件，以是加快随后的再次传输 

--force 强制删除目录，即使不为空 

--numeric-ids 不将数字的用户和组ID匹配为用户名和组名 

--timeout=TIME IP超时时间，单位为秒 

-I, --ignore-times 不跳过那些有同样的时间和长度的文件 

--size-only 当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间 

--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口，默认为0 

-T --temp-dir=DIR 在DIR中创建临时文件 

--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份 

-P 等同于 --partial 

--progress 显示备份过程 

-z, --compress 对备份的文件在传输时进行压缩处理 

--exclude=PATTERN 指定排除不需要传输的文件模式 

--include=PATTERN 指定不排除而需要传输的文件模式 

--exclude-from=FILE 排除FILE中指定模式的文件 

--include-from=FILE 不排除FILE指定模式匹配的文件 

--version 打印版本信息 

--address 绑定到特定的地址 

--config=FILE 指定其他的配置文件，不使用默认的rsyncd.conf文件 

--port=PORT 指定其他的rsync服务端口 

--blocking-io 对远程shell使用阻塞IO 

-stats 给出某些文件的传输状态 

--progress 在传输时现实传输过程 

--log-format=formAT 指定日志文件格式 

--password-file=FILE 从FILE中得到密码 

--bwlimit=KBPS 限制I/O带宽，KBytes per second 

-h, --help 显示帮助信息

 

 

7.定时备份执行

新建同步脚本

mkdir –p /shell/rsync/

vi rsync.sh  

#!/bin/bash    

rsync -vzrtopg  --progress --delete  root@192.168.5.189::data /testbak/     

rsync -vzrtopg --progress --delete  root@192.168.5.189::data /testbak/ --password-file=/etc/rsyncd.pwd  

  

手动同步文件  

 

cd /shell/rsync

#./rsync.sh      

自动同步:每隔五分钟同步一次  

crontab -e  

0,5 * * * * /rsync.sh 

 

rsync服务器文件列表

rsync -vzrtopg rsync://192.168.1.111/data

本地cp

rsync -vzrtopg  /testbak/ /usr/local/src/

scp

本地->另一台服务器

rsync -vzrtopg  /testbak/ root@192.168.1.201:/data/test/

另一服务器->本地

rsync -vzrtopg  root@192.168.1.201:/data/test/ /testbak/

 

 

--process

显示步骤

--delete

删除目标路径有而原路径没有的文件

 

本地到rsync服务器

rsync -avzropg --process --delete  /testbak/  root@192.168.1.111::data

rsync服务器到本地

rsync -avzrtopg --process --delete root@192.168.1.111::data  /testbak/