rsync（Remote Sync，远程同步） 是一个开源的快速备份工具，可以在不同主机之间镜像同步整个目录树，支持增量备份，并保持链接和权限，且采用优化的同步算法，传输前执行压缩，因此非常适用于异地备份、镜像服务器等应用。
1. 安装
# Red Hat
sudo yum install rsync
# Debian/Ubuntu
sudo apt-get install rsync
sudo systemctl enable rsync.service
sudo systemctl stop rsync.service
sudo systemctl start rsync.service
sudo systemctl status rsync.service
# Arch Linux
sudo pacman -S rsync
# 二进制安装
https://download.samba.org/pub/rsync/binaries/2. 基本用法
# 从 A 服务器同步到 B 服务器，并且删除了多余的文件(假设 B 服务器 ip 是 148.135.123.140)
# 注意，--delete 参数要放在源目录和目标目录前，并且两个目录结构一定要一致！不能使用 /opt/data/backup/*
## 将 A 同步到 B（以 A 内容为准）
rsync -e "ssh -p22" -avpz --delete /opt/data/backup/ [email protected]:/opt/data/backup/
## 将 B 同步到 A（以 B 内容为准）
rsync -e "ssh -p22" -avpz --delete [email protected]:/opt/data/backup/ /opt/data/backup/
## 将 A 同步到 B（以 A 内容为准），但是不同步 B 的 /var/www/html/static/uploads 目录文件
## 注意不能使用绝对路径，改下面命令使用相对路径即可
rsync -e "ssh -p22" -avpz --exclude '/var/www/html/static/uploads/*' --delete [email protected]:/var/www/html/ /var/www/html/ # 不能使用绝对路径
rsync -e "ssh -p22" -avpz --exclude 'static/uploads/*' --delete [email protected]:/var/www/html/ /var/www/html/3. 免密传输
-
ssh 免密
标准的 ssh 免密登录，具体参考《SSH 使用密钥免密码登录服务器》
-
使用 rsync 服务方式进行同步免密
# 查看版本
root@cloudcone-140:~# rsync --version
rsync version 3.2.7 protocol version 31
# 创建配置文件
# vi /etc/rsyncd.conf
uid=root
gid=root
use chroot=no
max connections=5
port=8730
timeout=300
pid file=/var/run/rsyncd.pid
lock file=/var/run/rsync.lock
log file=/var/log/rsyncd.log
[www.196000.xyz]
comment="sync site dir"
path=/var/www/html/www.196000.xyz
ignore errors
read only=false
write only=false
auth users=root
secrets file=/etc/rsync.www.196000.xyz.passwd
# 创建密码文件
# 密码文件的权限必须是 600
echo "root:123456" > /etc/rsync.www.196000.xyz.passwd
chmod 600 /etc/rsync.www.196000.xyz.passwd
# 客户端同步
rsync -az --port=8730 --progress --delete --exclude 'docs' --exclude 'storage' --exclude '.git' --exclude '.idea' --exclude 'node_modules' --exclude='.env' --exclude='.env.example' /var/www/html/www.196000.xyz/ [email protected]::www.196000.xyz --password-file=/etc/rsync.www.196000.xyz.passwd
# 选项说明：
# -- progress 在传输时显示传输过程
# --delete 删除没有的文件
# -a 归档模式，表示以递归方式传输文件，并保持所有文件属性
# -v 详细输出模式 4. 常用选项
注意，完整请使用 rsync -h 命令查看
| 选项 | 作用 |
|---|---|
-v, --verbose |
详细模式输出 |
-q, --quiet |
精简输出模式 |
-c, --checksum |
打开校验开关，强制对文件传输进行校验 |
-a, --archive |
归档模式，表示以递归方式传输文件，并保持所有文件属性，等于 -rlptgoD （不包括 -A，-X，-U，-N，-H） |
-r, --recursive |
对子目录以递归模式处理 |
-R, --relative |
使用相对路径信息 |
-b, --backup |
创建备份，也就是对于目的已经存在有同样的文件名时，将老的文件重新命名为 ~filename。可以使用 --suffix 选项来指定不同的备份文件前缀。 |
--backup-dir |
将备份文件(如 ~filename )存放在在目录下。 |
-suffix=SUFFIX |
定义备份文件前缀 |
-u, --update |
仅仅进行更新，也就是跳过所有已经存在于 DST，并且文件时间晚于要备份的文件。(不覆盖更新的文件) |
-l, --links |
保留软链结 |
-L, --copy-links |
像对待常规文件一样处理软链接 |
--copy-unsafe-links |
仅仅拷贝指向 SRC 路径目录树以外的链接 |
--safe-links |
忽略指向 SRC 路径目录树以外的链接 |
-H, --hard-links |
保留硬链接 |
-p, --perms |
保持文件权限 |
-o, --owner |
保持文件属主信息 |
-g, --group |
保持文件属组信息 |
-D, --devices |
保持设备文件信息 |
-t, --times |
保持文件时间信息 |
-S, --sparse |
对稀疏文件进行特殊处理以节省DST的空间 |
-n, --dry-run |
显示哪些文件将被传输 |
-W, --whole-file |
拷贝文件，不进行增量检测 |
-x, --one-file-system |
不要跨越文件系统边界 |
-B, --block-size=SIZE |
检验算法使用的块尺寸，默认是 700 字节 |
-e, --rsh=COMMAND |
指定使用 rsh、ssh 方式进行数据同步 |
--rsync-path=PATH |
指定远程服务器上的 rsync 命令所在路径信息 |
-C, --cvs-exclude |
使用和 CVS 一样的方法自动忽略文件，用来排除那些不希望传输的文件 |
--existing |
仅仅更新那些已经存在于 DST 的文件，而不备份那些新创建的文件 |
--delete |
删除那些 DST 中 SRC 没有的文件 |
--delete-excluded |
同样删除接收端那些被该选项指定排除的文件 |
--delete-after |
传输结束以后再删除 |
--ignore-errors |
即使出现 IO 错误也进行删除 |
--max-delete=NUM |
最多删除 NUM 个文件 |
--partial |
保留那些因故没有完全传输的文件，以是加快随后的再次传输 |
--force |
强制删除目录，即使不为空 |
--numeric-ids |
不将数字的用户和组 ID 匹配为用户名和组名 |
--timeout=TIME |
IP 超时时间，单位为秒 |
-I, --ignore-times |
不跳过那些有同样的时间和长度的文件 |
--size-only |
当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间 |
--modify-window=NUM |
决定文件是否时间相同时使用的时间戳窗口，默认为0 |
-T --temp-dir=DIR |
在 DIR 中创建临时文件 |
--compare-dest=DIR |
同样比较 DIR 中的文件来决定是否需要备份 |
-P |
等同于 --partial |
--progress |
显示备份过程 |
-z, --compress |
对备份的文件在传输时进行压缩处理，--compress-choice=STR 选择压缩算法（也称为 --zc ） |
--exclude=PATTERN |
指定排除不需要传输的文件模式 |
--include=PATTERN |
指定不排除而需要传输的文件模式 |
--exclude-from=FILE |
排除 FILE 中指定模式的文件 |
--include-from=FILE |
不排除 FILE 指定模式匹配的文件 |
--version |
打印版本信息 |
--address |
绑定到特定的地址 |
--config=FILE |
指定其他的配置文件，不使用默认的 rsyncd.conf 文件 |
--port=PORT |
指定其他的 rsync 服务端口 |
--blocking-io |
对远程 bash 使用阻塞 IO |
-stats |
给出某些文件的传输状态 |
--progress |
在传输时显示传输过程 |
--log-format=formAT |
指定日志文件格式 |
--password-file=FILE |
从 FILE 中得到密码 |
--bwlimit=KBPS |
限制 I/O 带宽，KBytes per second |
-h, --help |
显示帮助信息 |