Linux文件同步工具-rsync

rsync

rsync用来同步数据的，常常用做拷贝数据，可以远程同步（类似于scp），也可以本地同步(类似于cp)，不同于scp和cp的是rsync还支持增量拷贝

man rsync

Local:  rsync [OPTION...] SRC... [DEST]
Access via remote shell:
         Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]（把远程机器上的数据拷贝到本地上来）
         Push: rsync [OPTION...] SRC... [USER@]HOST:DEST（把本地数据推送到远程去）

Access via rsync daemon:
         Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
               rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
         Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
               rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
Local:
# rsync -av /root/111/  /tmp/222/
Access via remote shell方式的例子（sshd通讯的方式连接192.168.11.190远程机器ip）
# rsync -av 192.168.11.190:/tmp/1.txt /tmp/     (远程/tmp/1.txt拷贝到本机/tmp/下)
# rsync -av /tmp/123.txt 192.168.11.190:/tmp/   （本地数据推送到远程上去）
Access via rsync daemon方式的例子（通过监听端口让客户端去连它）
#rsync -av 192.168.11.190::aminglinux/123/1.txt /tmp/（从服务端拉到本地）
#rsync -av /tmp/1.txt 192.168.11.190::aminglinux/123/（从本地推到服务端）
aminglinux是模块名字
由此语法可知，rsync有三种工作方式：
(1).本地文件系统上实现同步。命令行语法格式为上述"Local"段的格式。
(2).本地主机使用远程shell和远程主机通信。命令行语法格式为上述"Access via remote shell"段的格式。
(3).本地主机通过网络套接字连接远程主机上的rsync daemon。命令行语法格式为上述"Access via rsync daemon"段的格式。

rsync常用选项

-a 包含-rtplgoD
 -r 同步目录时要加上，类似cp时的-r选项
 -v 同步时显示一些信息，让我们知道同步的过程
 -l 保留软连接
 -L 加上该选项后，同步软链接时会把源文件给同步
 -p 保持文件的权限属性
 -o 保持文件的属主
 -g 保持文件的属组
 -D 保持设备文件信息
 -t 保持文件的时间属性
 --delete 删除DEST(目标)中SRC（源）没有的文件
 --exclude 过滤指定文件，如--exclude “logs”会把文件名包含logs的文件或者目录过滤掉，不同步
 -P 显示同步过程，比如速率，比-v更加详细
 -u 加上该选项后，如果DEST中的文件比SRC新，则不同步
 -z 传输时压缩

rsync同步之ssh隧道方式

演示远程同步，需要两台机器
一台 192.168.1.110  （源机器）
一台 192.168.1.109  （远程机器）
# rsync -avPz 111/  192.168.1.109:/tmp/111/   （把本地111目录下的文件同步到远程机器上111目录）
# rsync -avPz 192.168.1.109:/tmp/111/   ./111    现在删除源机器上的111，想从远程机器上同步到源机器
完整的写法：
# rsync -avPz   111/  root@192.168.1.109:/tmp/111/      
# rsync -avPz   root@192.168.1.109:/tmp/111/   ./111    
用户名@在这里可以省略，因为它可以自动识别当前终端的用户，如果是当前登录的是root用户就是root用户，如果是当前登录的是user1那就是user1

指定端口同步（遇到对方端口不是22的情况）
# rsync -avPz -e "ssh -p 10022" 192.168.1.109:/tmp/111/ ./111   ssh除了22端口还有个端口是10022

rsync后台服务方式同步

1写配置文件

rsync服务的方式同步，它采用的是C/S架构：
后台服务的方式，需要写一个配置文件，把配置文件放在etc下，通过一个命令把它启动，它会监听一个端口，然后在客户端跟服务端进行通信

1写配置文件
vim /etc/rsyncd.conf   
这个配置文件的名字可以自定义，但是启动的时候一定要指定这个配置文件，如果把配置文件放在etc下，并且命令为rsync.conf它会自动的加载配置文件，不用我们去指定
port=8730     默认是8730可以省略，但是指定其他端口一定要写上
log file=/var/log/rsync.log   日志文件
pid file=/var/run/rsync.pid   每个进程都有一个pid
[test]        模块名，之前那个格式里的模块名从那里来的，就是从这里定义的
path=/tmp/rsync  
use chroot=yes
max connections=4   最大连接数
read only=yes   只读
list=yes      
uid=root    以那个用户的身份去同步
gid=root
auth users=aming   以那个帐号同步
secrets file=/etc/rs.passwd    存密码的文件
hosts allow=192.168.1.109    允许那些机器可以连你

2rsyncd.conf配置文件详解

 port：指定在哪个端口启动rsyncd服务，默认是873端口。
 log file：指定日志文件。
 pid file：指定pid文件，这个文件的作用涉及服务的启动、停止等进程管理操作。
 address：指定启动rsyncd服务的IP。假如你的机器有多个IP，就可以指定由其中一个启动rsyncd服务，如果不指定该参数，默认是在全部IP上启动。
 []：指定模块名，里面内容自定义。
 path：指定数据存放的路径。
 use chroot true|false：表示在传输文件前首先chroot到path参数所指定的目录下。这样做的原因是实现额外的安全防护，但缺点是需要以roots权限，并且不能备份指向外部的符号连接所指向的目录文件。默认情况下chroot值为true，如果你的数据当中有软连接文件，建议你设置成false。
 max connections：指定最大的连接数，默认是0，即没有限制。
 read only ture|false：如果为true，则不能上传到该模块指定的路径下。
 list：表示当用户查询该服务器上的可用模块时，该模块是否被列出，设定为true则列出，false则隐藏。
 uid/gid：指定传输文件时以哪个用户/组的身份传输。
 auth users：指定传输时要使用的用户名。
 secrets file：指定密码文件，该参数连同上面的参数如果不指定，则不使用密码验证。注意该密码文件的权限一定要是600。格式：用户名:密码
 hosts allow：表示被允许连接该模块的主机，可以是IP或者网段，如果是多个，中间用空格隔开。 
 当设置了auth users和secrets file后，客户端连服务端也需要用用户名密码了，若想在命令行中带上密码，可以设定一个密码文件
 rsync -avL test@192.168.133.130::test/test1/  /tmp/test8/ --password-file=/etc/pass 
 其中/etc/pass内容就是一个密码，权限要改为600

3启动

# rsync --daemon
# ps aux|grep rsync
# netstat -lnp
# cat /var/log/rsync.log  查看一下日志
修改/etc/rsync.conf配置文件不用重启，即时生效