1. rsync工具介绍

rsync是数据备份工具(字面意思可以理解为远程同步),不仅可以远程同步数据,而且可以本地同步数据(类似与cp),但不同于cp或scp的一点是,它不会覆盖以前的数据(如果数据已经存在),而是先判断已经存在的数据和新数据的差异,只有数据不同时才会把不相同的部分覆盖。


安装rsync命令:#yum install -y rsync


讲解rsync的用法

举例将/etc/passwd同步到/tmp/目录下,并改名为1.txt,操作如下:

# rsync -av /etc/passwd /tmp/1.txt

sending incremental file list

passwd


sent 1460 bytes  received 31 bytes  2982.00 bytes/sec

total size is 1386  speedup is 0.93

如果是远程复制,数据备份的形式就是这样的形式——IP:path,比如172.16.111.110:/root/,具体用法如下:


# rsync -av /tmp/1.txt 172.16.111.110:/tmp/2.txt 

The authenticity of host '172.16.111.110 (172.16.111.110)' can't be established.

ECDSA key fingerprint is 09:6d:70:42:42:9a:12:69:51:9b:ad:e5:73:98:b9:c0.

Are you sure you want to continue connecting (yes/no)? yes

Warning: Permanently added '172.16.111.110' (ECDSA) to the list of known hosts.

root@172.16.111.110's password: 

sending incremental file list

1.txt


sent 1459 bytes  received 31 bytes  270.91 bytes/sec

total size is 1386  speedup is 0.93

rsync的命令格式


 rsync [OPTION] … SRC   DEST

 rsync [OPTION] … SRC   [user@]host:DEST

 rsync [OPTION] … [user@]host:SRC   DEST

 rsync [OPTION] … SRC   [user@]host::DEST

 rsync [OPTION] … [user@]host::SRC   DEST

解释:在前面的例子中,第一个例子为第一种格式,第二个例子为第二种格式,但不同的是并没有加用户名user@host,如果不加默认指的是root。第三种格式是用远程目录同步数据到本地。第四种和第五种格式使用了两个冒号,这种格式和其他格式的验证方式不同。



2. rsync常用选项

rsync常用选项


-a 这是归档模式,表示以递归方式传输文件,并保持所有属性,它等同于-rlptgoD,-a选项后面可以跟一个--no-OPTION,表示关闭-rlptgoD中的某一个,比如-a--no-l等同于-rlptgoD。

-r 表示以递归模式处理子目录。它主要是针对目录来说的,如果单独传一个文件不需要加-r选项,但是传输目录时必须加。

-v 表示打印一些信息,如文件列表,文件数量等

-l 表示保留软链接

-L 表示像对待常规文件一样处理软链接,如果SRC文件中有软链接时,则加上该选项后,将会把软链接指向的目标文件一起复制到DEST。

-p 表示保持文件权限

-o 表示保持文件属主信息

-g 表示保持文件属组信息

-D 表示保持设备文件信息

-t 表示保持文件时间信息

--delete 表示删除DEST中SRC中没有的文件

--exclude=PATTERN 表示指定排除SRC中不需要传输的文件,等号后面跟文件名,可以用通配符如*.txt

--progress 在同步的过程中可以看到同步的过程状态,比如统计要同步的文件数量、同步的文件传输速度等。

-u 表示把dest中比src还新的文件排除掉,不会覆盖

-z 加上该选项,将会在传输过程中压缩


但是常用的选项是-a,-v,-z,--delete和--exclude。


建立目录和文件

# mkdir rsync

# cd rsync

# touch 1 2 3 /root/123.txt

# ln -s /root/123.txt ./123.txt

# ls -l

总用量 0

-rw-r--r--. 1 root root  0 12月  5 20:57 1

lrwxrwxrwx. 1 root root 13 12月  5 20:57 123.txt -> /root/123.txt

-rw-r--r--. 1 root root  0 12月  5 20:57 2

-rw-r--r--. 1 root root  0 12月  5 20:57 3

-av 把root下的rsync目录同步到tmp下并且改名rsync_dest,示例如下:


# rsync -av /root/rsync/ /tmp/rsync_dest/

sending incremental file list

123.txt -> /root/123.txt


sent 89 bytes  received 15 bytes  208.00 bytes/sec

total size is 13  speedup is 0.12

加上-L选项后,同步软连接文件时会把源文件同步,示例如下:


# rsync -avL /root/rsync/ /tmp/rsync_dest/

sending incremental file list

123.txt


sent 103 bytes  received 31 bytes  268.00 bytes/sec

total size is 0  speedup is 0.00

-delete 同步时删除目标目录rsync_dest中源目录rsync没有的文件,示例如下:


# rsync -avL -delete /root/rsync/ /tmp/rsync_dest/

sending incremental file list


sent 64 bytes  received 12 bytes  152.00 bytes/sec

total size is 0  speedup is 0.00

--exclude 同步时过滤掉文件名或目录名为.txt,不同步(支持写多个exclude,但不支持同一个exclude有多个条件),示例如下:


# rsync -avL --exclude "*.txt" /root/rsync/ /tmp/rsync_dest/

sending incremental file list

created directory /tmp/rsync_dest

./

1

2

3


sent 172 bytes  received 72 bytes  488.00 bytes/sec

total size is 0  speedup is 0.00


过滤掉带1开头,示例如下:

# rsync -avL --exclude "*.txt" --exclude "1" /root/rsync/ /tmp/rsync_dest/

sending incremental file list

created directory /tmp/rsync_dest

./

2

3


sent 127 bytes  received 53 bytes  360.00 bytes/sec

total size is 0  speedup is 0.00


-P 选项是显示同步过程,比如速率,示例如下:

# rsync -avP /root/rsync/ /tmp/rsync_dest/

sending incremental file list

created directory /tmp/rsync_dest

./

1

           0 100%    0.00kB/s    0:00:00 (xfer#1, to-check=3/5)

123.txt -> /root/123.txt

2

           0 100%    0.00kB/s    0:00:00 (xfer#2, to-check=1/5)

3

           0 100%    0.00kB/s    0:00:00 (xfer#3, to-check=0/5)


sent 209 bytes  received 75 bytes  568.00 bytes/sec

total size is 13  speedup is 0.05


-u 选项如果目标文件中的文件比源文件新,则不同步,示例如下:

# rsync -avPu /root/rsync/ /tmp/rsync_dest/  //加-u保留之前文件内容

sending incremental file list

./


sent 89 bytes  received 15 bytes  208.00 bytes/sec

total size is 13  speedup is 0.12

# cat 1   查看文件没有被覆盖

afdgagadsga

dagdkdgja

agdaga

adgaga


3. rsync通过ssh同步

ssh同步到另外一台主机

示例如下:

# rsync -av /etc/passwd 172.16.111.110:/tmp/aming.txt   把文件拷贝过去

root@172.16.111.110's password: 

sending incremental file list

passwd


sent 1460 bytes  received 31 bytes  271.09 bytes/sec

total size is 1386  speedup is 0.93

# rsync -avP  172.16.111.110:/tmp/aming.txt /tmp/123.txt  把文件拷贝过来

root@172.16.111.110's password: 

receiving incremental file list

aming.txt

        1386 100%    1.32MB/s    0:00:00 (xfer#1, to-check=0/1)


sent 30 bytes  received 1468 bytes  332.89 bytes/sec

total size is 1386  speedup is 0.93


假设对方机器端口不是22的话,那应该如何,示例如下:

# rsync -avP -e "ssh -p 22 " /etc/passwd 172.16.111.110:/tmp/aming.txt

root@172.16.111.110's password: 

sending incremental file list

passwd

        1386 100%    0.00kB/s    0:00:00 (xfer#1, to-check=0/1)


sent 1460 bytes  received 31 bytes  331.33 bytes/sec

total size is 1386  speedup is 0.93


# ssh -p 22 172.16.111.110   通过输入端口远程连接对方机器

root@172.16.111.110's password: 

Last failed login: Tue Dec  5 19:45:42 CST 2017 from 172.16.111.100 on ssh:notty

There were 2 failed login attempts since the last successful login.

Last login: Tue Dec  5 19:34:02 2017 from 172.16.111.1

# 登出

Connection to 172.16.111.110 closed.