;
一、rsync简介
1.1 rsync介绍
① rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。并且可以不进行改变原有数据的属性信息,实现数据的备份迁移特性。
② rsync软件支持跨平台,适用于unix/ linux/windows等多种操作系统平台
③ rsync是一个快速和非常方便的文件复制工具。它能本地复制,远程复制,或者远程守护进程方式复制,它提供了大量的参数来控制其行为的各个方面,并且允许非常灵活的方式来实现文件的传输复制
④ 以其delta-transfer算法闻名。
⑤ rsync监听端口:873
⑥ rsync运行模式:C/S
1.2 rsync同步方式
- 全量备份:原有的数据全部传送,把原来的文件和新的文件一起统一传送,全量复制,效率低
- 增量备份:在传输数据之前通过一些算法通过你有的数据和我有的数据进行对比,把不一样的数据通过网络传输增量复制,效率高
二、rsync特性
- 可以镜像保存整个目录和文件系统
- 可以很容易做到保持原文件的权限、时间、软硬连接等
- 无须特殊权限即可安装
快速
第一次同步时rsync会复制全部内容,但在下一次只传输修改过的文件rsync在传输数据的过程中可以实行压缩及解压缩操作,因此可以使用更少的宽带
安全
可以使用scp、ssh等方式来传输文件也可通过直接socket连接支持匿名传输,以方便进行网站镜像
三、rsync与cp、scp对比
- cp命令是一种典型的将文件完整的拷贝到一个位置。而rsync是,第一次拷贝,在目标位置没有的时候,rsync是全量拷贝过去,但是第二次拷贝的时候,只会对差异项进行同步拷贝。所有如果对同一个文件进行二次备份的话,rsync速度会相较于cp而言更快。
- cp只支持本地,而rsync支持远程
- scp是基于cp原理,也是属于完整性拷贝文件。假设rsync和scp拷贝的文件都是第一,目标地址都没有要同步的文件,此时,这两者的差异在于,第一个,这个要传输的文件大不大,第二个要看在传输的过程中,用的带宽大不大。如果文件不大的情况下,scp是把数据从磁盘中的块存储提取出来,封装一下,网络传过去,此时scp更快,如果是更大的文件,比如说40G,带宽只支持100M的带宽,scp想要传输,需要拆分数据,一段一段传输。而rsync会根据一个逻辑意义上的空间,把数据划分出来,把数据先压缩再传输,所以这种方式而言,带宽校,文件大,这个时候先压缩再传输会比较快。此时适合用rsync远程同步。
四、rsync命令
常用的是-avz
常用选项 | 解释 |
-v,–verbose | 详细模式输出 |
-q,–quiet | 精简输出模式 |
-c,–checksum | 打开校验开关,强制对文件传输进行校验 |
-a,–archive | 归档模式,表示以递归方式传输文件,并保持所有文件树形 |
-z | 在传输文件时进行压缩 |
-r,–recursive | 对子目录以递归模式处理,包含目录及子目录中的所有文件 |
-H,–hard-links | 保留硬链接 |
-l, --links | 保留软链接 |
–delete | 删除目标位置有而原始位置没有的文件(一致性) |
–delete-after | 传输结束以后再删除 |
-A | 保留ACL属性信息 |
五、rsync本地复制实例
以下两者区别是什么?
- rsync -avz abc/ /opt/ :只会拷贝abc目录下面的文件,而不会拷贝abc这个目录
- rsync -avz /abc /opt/:会连着目录一起拷贝到/opt下
#如果是rsync -avz abc/ /opt/会是什么情况
cd /opt
mkdir /abc
cd /abc/
touch 1.txt 2.txt
cd /
rsync -avz abc/ /opt/
cd /opt/
ls
#如果是rsync -avz /abc /opt/会是什么情况
cd /opt/
rm -rf *
rsync -avz /abc /opt/
ls
123456789101112131415
#如果是rsync -avz abc/ /opt/会是什么情况
#如果是rsync -avz /abc /opt/会是什么情况
六、配置源的两种表示方法
- 格式一:
#用户名@主机地址: :共享模块名
rsync -avz backuper@192.168.4.200: :wwwroot /root
#backuper指的是我在同步的时候用的哪个用户身份
#wwwroot代表的是模块,模块下面会写同步的默认路径和一些特性,所以我们只需要写模块就好了
#/root指的是本地节点
123456
- 格式二:
#rsync:/用户名@主机地址/共享模块名
rsync -avz rsync: //backuper@192.168.4.200/wwwroot /root
URL:具体的位置点,例如:http://www.baidu.com./class1/men/id01.html
URI:标识的是拥有同一类特性或类型的一个集合 ,例如http://www.baidu.com./class1/men
123456
七、Rsync 同步源
- 在远程同步任务中,
负责发起 rsync 同步操作的客户机称为客户端
,而负责**
响应来自客户端的 rsync 同步操作的服务器称为备份源
**,也称之为同步源
- 在下行同步(下载)中,同步源负责提供文档的原始位置,发起端应对该位置有读取权限
- 在上行同步(上传)中,同步源负责提供文档的目标位置,发起端应对该位置具有写入权限
八、配置 Rsync 下行同步
8.1配置环境
主机 | 操作系统 | IP 地址 | 主要软件 |
Master | CentOS7 | 192.168.59.111 | rsync |
Slave | CentOS7 | 192.168.59.112 | rsync / inotify-tools-3.14.tar.gz |
8.2将 Master 服务器数据备份到 Slave 服务器
master(192.168.59.111):
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
#关闭防火墙及安装机制
yum install -y httpd rsync
#rsync系统一般已默认安装,安装httpd是为了生成/var/www/html目录(后续会用到作为共享目录)
vim /etc/rsyncd.conf
#编辑rsync配置文件
uid = root
gid = root
use chroot = yes
address = 192.168.59.111
port 873
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
hosts allow = 192.168.59.0/24
[wwwroot]
path = /var/www/html
comment = Document Root of www.yxp.com
read only = yes
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z
auth users = backuper
secrets file = /etc/rsyncd_users.db
----详解----
uid = root #用户id,表示共享权限能执行的身份
gid = root #组id
use chroot = yes #开启,禁锢在源目录,表示允许在访问我备份的目录或文件的时候,使用的角色是root,同时你访问本地目录时拥有的也是root权限
address = 192.168.59.111 #监听地址
port 873 #默认端口号为873
log file = /var/log/rsyncd.log #日志文件存放位置
pid file = /var/run/rsyncd.pid #存放进程id的文件位置
hosts allow = 192.168.59.0/24 #允许访问的主机网段,有点类似于黑白名单
[wwwroot] #共享模块的名称,rsync默认调用该模块,默认我调用的路径是该模块指定的路径
path = /var/www/html #源目录路径
comment = Document Root of www.yxp.com #
read only = yes #是否为只读
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z #同步时不再压缩的文件类型,因为同步时,-avz已经进行压缩
auth users = backuper #授权用户,使用wwwroot模块的用户是哪个用户,多个账户以空格隔开
secrets file = /etc/rsyncd_users.db #存放账号信息的数据文件,一行一个
----
vim /etc/rsyncd_users.db
backuper:123123
#编辑用户账号文件,固定格式为[名称:密码],一行一个
chmod 600 /etc/rsyncd_users.db
#官方要求,最好只是赋权600!
rsync --daemon
#开启服务
netstat -natp | grep rsync
#检测端口号,确认服务是否成功开启