一、rsync简介
①rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。并且可以不进行改变原有数据的属性信息,实现数据的备份迁移特性。 ②rsync软件适用于unix/linux/windows等多种操作系统平台 ③rsync是一个快速和非常方便的文件复制工具。它能本地复制,远程复制,或者远程守护进程方式复制,它提供了大量的参数来控制其行为的各个方面,并且允许非常灵活的方式来实现文件的传输复制 ④以其delta-transfer算法闻名。 ⑤rsync监听端口:873 ⑥rsync运行模式:c/s
同步方式
全量备份 原有的数据全部传送 把原来的文件和新的文件一起统一传送全量复制,效率低。
增量备份
在传输数据之前通过一些算法通过你有的数据和我有的数据进行对比,把不一样的数据通过网络传输增量复制,效率高。
rsync命令
rsync [选项] 原始位置 目标位置
常用选项 说明
-r 递归模式,包含目录及子目录中的所有文件
-l 对于符号链接文件仍然复制为符号链接文件
-V 显示同步过程的详细信息
-z 在传输文件时进行压缩
-a 归档模式,递归并保留对象属性,等同于-rlptgoD
-p 保留文件的权限标记
-t 保留文件的时间标记
-g 保留文件的属组标记(仅超级用户使用)
-o 保留文件的属主标记(仅超级用户使用)
-H 保留硬链接文件
-A 保留ACL属性信息
-D 保留设备文件及其他特殊文件
--delete 删除目标位置有而原始位置没有的文件
--checksum 根据对象的校验和来决定是否跳过文件
配置源rsync的两种表示方法
格式一
用户名@主机地址: :共享模块名.
rsync -avz backuper@192.168.153.200::wwwroot /root
格式二
rsyne://用户名@主机地址/共享模块名
rsync -avz rsync:/ /backuper@192.168.153.200:/wwwroot /root
二、rsync远程同步实验
rsync 192.168.153.200 rsync源服务器 client 192.168.153.215 rsync客户端服务器
下载安装rsync
rpm -q rsync
yum -y install rsync
修改/etc/rsyncd.conf配置文件
uid = nobody
gid = nobody
use chroot = yes
address = 192.168.153.200
port 873
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
hosts allow = 192.168.80.0/24
以上是全局配置,以下是模块配
[wwwroot]
path = /var/www/html
comment = Document Root of www.ljm.com
read only = yes
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z
auth users = backuper
secrets file = /etc/user.db
小结
第一部分定义共享模块全局模块配置
第二部分:共享模块(可以为多个) 可以对应不同的“源目录” 和授权账号信息
第三部分,此配置文件是为rsync --daemon模式设置的
为备份账户创建数据文件
vim /etc/user.db
backuper:123
chmod 600 /etc/user.db
创建目录,增加权限
mkdir -p /var/www/html
chmod +r /var/www/html/
启动 rsync 服务程序
rsync --daemon
netstat -natp | grep rsync
关闭rsync服务
kill $(cat /var/run/rsyncd.pid)
rm -rf /var/run/rsyncd.pid
测试
交互型:
服务端:
echo "hello word" >> /var/www/html/1.txt
客户端:
mkdir /abc
rsync -avz backuper@192.168.153.200::wwwroot /abc/
无交互型:
echo "abc123" > /etc/server.pass
chmod 600 /etc/server.pass
删除创建的1.txt文件
rsync -avz --password-file=/etc/server.pass backuper@192.168.153.200::wwwroot /abc/
rsync实时同步
定期同步的不足: 执行备份的时间固定,延迟明显、实时性差 当同步源长期不变化时,密集的定期任务是不必要的 需要人为触发,shell脚本或者crontab 实时同步的优点: 一旦同步源出现变化,立即启动备份 只要同步源无变化,则不执行备份
三、rsync结合inotify实时同步
可以监控文件系统的变动情况,并做出通知响应
/etc/sysctl.conf (内核参数配置文件)
inotifywait:
inotifywatch:
max_queue_events
max_user_instances
max_user_watches
持续监控并实时输出监控结果的命令-inotifywait
语法格式: inotifywait [参数]
常见参数 说明
-m 持续进行监控
-r 递归监控所有子对象
-q 简化输出信息
-e 指定要监控哪些事件类型
搭建实验rsync+inotify
服务端:修改rsync配置文件
vim /etc/rsyncd.conf
uid,gid修改为root
uid = root
gid = root
[wwwroot]
read only = no
kill 'cat /var/run/rsyncd.pid'
netstat -natp | grep rsync
rsync --daemon
netstat -natp | grep rsync
客户端:修改inotify内核参数
vim /etc/sysctl.conf
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576
当要监控的目录、文件数据量较多或者变化频繁时,建议加大参数值
sysctl -p
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576
客户端安装 inotify-tools
yum -y install gcc gcc-c++
tar zxvf inotify-tools-3.14.tar.gz -C /opt
cd /opt/inotify-tools-3.14/
./configure
make && make install
|