centos系统安装Rsync进行数据增量同步,宝塔linux环境

2020年9月3日教程大全rsync,Rsync同步参数,Rsync增量同步,宝塔面板

centos系统安装Rsync进行数据增量同步,宝塔linux环境

手把手教你在两台宝塔linux面板的服务器进行定时数据增量同步。

场景:

假设我有一台服务器A(服务端),一台服务器B(客户端),我要把A服务器的某个目录内的数据增量同步到服务器B。就可以使用Rsync来进行同步。

教程在两台服务器上都安装Rsync,A服务器发送,B服务器接收。Rsync检测到文件新增或者文件修改都自动执行同步,每次只同步更改的文件,网络资源占用小。

教程开始:

A和B两台服务器都放行873端口,Rsync会使用该端口进行通信。

先设置A服务器

1.在A服务器安装Rsync

yum -y install rsync

安装速度很快。

2.修改Rsync配置文件

安装完成后我们进入/etc/rsyncd.conf文件修改配置文件。

默认显示的是#开头的说明,我们在下面直接加上配置就行。

[cheshirex这个名字可以随便写]
    path=/www/wwwroot/cdn.cheshirex.com/这个是A服务器要同步文件的目录
    use chroot=no
    max connections=10
    read only=yes
    write only=no
    list=no
    uid=root
    gid=root
    auth users=root这个是密码文件里的用户名,教程默认root
    secrets file=/etc/rsync_server.pas这个是密码文件,下一步我们会创建
    strict modes=yes
    hosts allow=允许连接的服务器IP,这里填服务器B的IP地址,也可以填*允许所有IP连接
    #hosts deny=1.1.1.1
    ignore errors=yes
    timeout=120 #秒

按照我上面的配置文件,自己修改下,直接填入rsyncd.conf。如下图:

3.手动创建密码文件

在/etc目录创建文件rsync_server.pas文件里填用户名:密码,如下图:

4.修改rsync_server.pas文件权限

将权限改为600,用户组root

5.启动A服务器的Rsync服务

/usr/bin/rsync --daemon --config=/etc/rsyncd.conf

A服务器上我们就配置完成了。

 

B服务器设置

1.同A一样,先安装Rsync,这里就不写安装步骤了

2.在/etc目录创建密码文件rsync_client.pas内容里只填密码!如下图:

3.修改rsync_client.pas文件权限和用户组。

权限600,用户组root。跟A服务器的一样。

4.在B服务器宝塔面板上添加计划任务。

rsync -avztopg --delete rsync://root@这里填A服务器IP/cheshirex  /www/wwwroot/cdn.cheshirex.com --password-file=/etc/rsync_client.pas

执行周期自己选择多久一次,根据实际需求自己选择。

首次添加定时任务后,因为文件较多。可以手动点一下执行同步。不影响以后的定时同步。

同步结果都可以查看任务日志。

任务参数说明:

-avztopg和–delete
这两个都是同步参数,文末会附上更多的参数说明。a、v、z、topg这是4个参数。

root@这个填A服务器IP/cheshirex
这里是服务器rsync链接用户、A服务器IP地址、A服务器配置文件名

/www/wwwroot/cdn.cheshirex.com
这是B服务器的目录,文件会同步到这个目录

rsync_client.pas
这是B服务器的密码配置文件

同步效果查看:

A服务器修改文件README.md名字为test.md,会自动删除B服务器的README.md,然后把A服务器的test.md同步过去。

如果提示错误:

rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1659) [generator=3.1.3]

代表目录内有文件无法同步,可能是A服务器的文件无法读取,也可能是B服务器的文件无法修改。

比如宝塔网站目录默认创建的.user.ini这个文件就无法更改。不过不影响其他文件的同步。

附加内容(Rsync同步参数):

-q,--quiet:suppress non-error messages 静默模式
-v,--verbose:increase verbosity
-a,--archive:archive mode; equals -rlptgoD (no -H,-A,-X) 归档模式,相当于-rlptgoD,不包括(no -H,-A,-X);最常用的参数
-H,--hard-links:preserve hard links 保留硬链接
-A,--acls:preserve ACLs (implies --perms) 保留ACL权限
-X,--xattrs:preserve extended attributes 保留扩展属性
-c, --checksum:skip based on checksum, not mod-time & size
-r,--recursive:recurse into directories 递归
-l,--links:copy symlinks as symlinks 保留软链接,而不跟踪原文件
-p,--perms:preserve permissions 保留权限
-t,--times:preserve modification times 保留mtime
-g,--group:preserve group 保留属组
-o,--owner:preserve owner (super-user only) 保留属主
-D:same as --devices,--specials 保留设备文件和特殊文件
--devices:preserve device files (super-user only)
--specials:preserve special files

-z,--compress:compress file data during the transfer 输过程中压缩文件数据
-n, --dry-run:perform a trial run with no changes made 干跑测试
-u,--update:skip files that are newer on the receiver 增量同步,跳过比本地较新的文件
--delete:delete extraneous files from destination dirs 删除目标目录多余文件
--progress:show progress during transfer 显示传输进度

以上参数,自己考虑是否使用。

2022年6月6日,增加一个限速参数:

--bwlimit=500

这里的值就是限速大小,500KB/s。直接在其他参数后面空格加上此限速参数即可。

示例:

rsync -avztopg --delete --bwlimit=500 rsync://root@*******

Posted by 柴郡猫