1.什么是rsync?
Rsync是一款开源的、快速的,多功能的,可实现全量及增量的本地或者远程数据同步备份的优秀工具。windows和linux都可以。
官网:http:www.samba.org/ftp/rsync/rsync.html
2.rsync简介
类似scp,但是优于它,增量,scp是全量的,但是rsync又不是加密的。也可以在本地不同目录间进行拷贝,全量和增量都可以。当然,也可以进行删除文件和目录。
所以rsync=scp\cp\rm 优于他们
在同步数据的时候,有自己独特的算法,仅同步大小或者最后修改时间发生变化的文件或者目录,也可以根据权限、内容变化等特点进行同步,所以是增量同步。rsync效率很高。
3.RSYNC的工作场景:
两个服务器之间的备份:
1)定时同步:定时同步不能频繁,因为定时同步消耗cpu,文件需要不断的对比,如果频繁,存在风险,
2.)实时同步:区别于定时同步,对相关的目录进行监控,有变化就进行同步,不对老的目录或者文件进行检查同步。
有两种:rsync+inotify rsync+sersync (inotify和sersync都是监控目录的变化)
在技术上,后端存储和数据库都是实时同步的,而存储一般用到的技术就是rsync。
4.方案选择:
在跨机房选择备份的时候,方案二优于方案一,方案一占用带宽较大。
5.RSYNC三种工作方式:
1)单个主机本地之间的数据传输:类似CP
rsync -azv /etc/hosts /tmp/ :类似CP,表示拷贝,如果命令执行两边,对比发现,第二次没有执行,因为没有变化不在拷贝
rsync -r --delete /temo/ /data/ 表示将/temo/目录下面的所以内容拷贝到/data/下面,/data/中的内容全部删除,简而言之:/temo/==/data/
2)借助如SSH等工具(类似SCP),两个或者多个主机之间
推:rsync -avz -e 'ssh -P 52113' /etc/hosts olbdoy1@10.0.0.8:~
拉:rsync -avz -e 'ssh -P 52113' oldboy1@10.0.0.9:~/hosts /home/oldboys1/
参数说明:-v 进度说明 -a 归档模式,递归,保持属性等 -z 压缩传输 -e 指定 哪个协议通道
3)进程模式传输(socket)守护进程(重点)
1.查看是否有此软件:
which rsync | rpm -qa rsync
[root@djw ~]# which rsync
/usr/bin/rsync
[root@djw ~]# rpm -qa rsync
rsync-3.0.6-12.el6.x86_64
2.查看版本(3.0.6)相比2版本,最大的改变是一边对比一边同步
3.rsync的配置文件,默认是不存在的:/etc/rsyncd.conf (服务端)
#this is rsync server dangjingwei
uid = rsync
gid = rsync
#安全无需考虑,所以是no
use chroot = no
#有多少个客户端可以同时连接
max connections = 200
timeout = 300
#将进程号放到文件中,找到文件中的进程号后,直接命令杀除,不需要再进行查找进程号后杀除
pid file = /var/run/rsyncd.pid
#类似一把锁,网络传输也有先后顺序
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
[oldboy]
#共享的目录
path=/oldboy/
ignore errors
#可读可写
read only = false
list = false
hosts allow = 192.168.0.0/24
hosts deny = 0.0.0.0/32
#虚拟用户和密码
auth users = rsync_backup :#设置允许连接服务器的账户,此账户可以是系统中不存在的用户
secrets file = /etc/rsync.password: #密码验证文件名,该文件权限要求为只读,建议为600,仅在设置auth users后有效
4.启动:rsync --daemon(已守护进程的方式启动)
5.进行查看 netstat -lntup |greo 873
6.那么启动rsync的用户就要对相应的同步目录具有权限,则:mkdir -p /oldboy/ chown -R rsync.rsync /oldboy
7.如果再授权的时候没有此用户,则需要创建: useradd rsync -s /sbin/nologin
8.将虚拟用户放入:echo "rsync_backup:123456">/etc/rsync.password
9.权限变成只读:chomd 600 /etc/rsync.password
10.客户端配置
1)有rsync :rpm -qa rsync
2)虚拟用户密码 echo"123456">/etc/rsync.password
3)权限为600:chmod 600 /etc/rsync.password
11.操作
无论是推还是拉,都是在客户端进行的:
拉到客户端:
1)rsync -avz rsync_backup@192.168.0.104::oldboy /dangjingwei/data1 --password-file=/etc/rsync.password
2)rsync -avz rsync://rsync_backp@192.168.0.104/oldboy /dangjingwei/data1 --password-file=/etc/rsync.password
推到服务端:
1)rsync -avz /data1 rysnc_backup@192.168.0.104::oldboy --password -file=/etc/rsync.password
2) rsync -avz /data1 rsync://rsync_backup@192.168.0.104::oldboy --password-file=/etc/rsync.password