rsync+inotify同步(下行+实时)介绍及部署

文章目录

一、rsync介绍

  • rsync是linux系统下的数据镜像备份工具。
  • 使用快速增量备份工具Remote Sync可以远程同步,支持本地复制,或者与其他SSH、rsync主机同步。

二、配置rsync源步骤

  • 建立rsyncd.conf配置文件、独立的账号文件
  • 启用rsync的 --daemon模式

rsyncd.conf配置文件

  • 认证配置auth users、secrets file,不加则为匿名

独立的账号文件

  • 独立的账号数据,不依赖系统账号
  • 用户名:密码
  • 每行一个用户记录

启用rsync服务

  • 通过 --daemon独自提供服务,rsync --daemon
  • 执行kill $(cat /var/run/rsyncd.pid)关闭服务

配置源的两种格式:

用户名@主机地址::共享模块名

rsync://用户名@主机地址/共享模块名

三、rsync命令

命令格式:

rsync 【选项】原始位置 目标位置

常用选项:
rsync+inotify同步(下行+实时)介绍及部署

四、inotify介绍

  • Inotify 是一个 Linux 内核特性,它监控文件系统,并且及时向专门的应用程序发出相关的事件警告,比如删除、读、写和卸载操作等。
  • 还可以跟踪活动的源头和目标等细节。

1、可通过inotify命令+选项 来实现监控变化

inotifywait:用于持续监控,实时输出结果

inotifywatch:用于短期监控,任务完成后再输出结果

例如:inotifywait -mrq -e modify,create,move,delete /var/www/html

常用选项:
rsync+inotify同步(下行+实时)介绍及部署

2、也可通过调整inotify内核参数

max_queue_events    	#监控事件队列大小
max_user_instances  	#最多监控实例数
max_user_watches    	#每个实例最多监控文件数 

五、配置rsync下行同步

实验所需:

  • 一台master主机 一台slave主机
  • master作为备份源 安装rsync软件包
  • slave作为被下行同步主机 安装rsync和inotify软件包

master主机配置

yum -y install httpd rsync 

vim /etc/rsyncd.conf 

uid = nobody
gid = nobody
use chroot = yes                                                
address = 192.168.100.133
port 873                                                                
log file = /var/log/rsyncd.log                  
pid file = /var/run/rsyncd.pid                  
hosts allow = 192.168.100.0/24
[wwwroot]                                                               
path = /var/www/html                                    
comment = Document Root of www.wwh.com
read only = yes                                                  
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z        
auth users = wwh                                               
secrets file = /etc/rsyncd_users.db             

rsync+inotify同步(下行+实时)介绍及部署
创建编辑账号信息数据文件

vim /etc/rsyncd_users.db
wwh:000000

chmod 600 /etc/rsyncd_users.db

rsync --daemon
netstat -natp | grep rsync

cd /var/www/html
touch xxx.html ccc.html

rsync+inotify同步(下行+实时)介绍及部署
rsync+inotify同步(下行+实时)介绍及部署

slave配置

yum -y install rsync

cd /opt
mkdir test
chmod 777 test

rsync+inotify同步(下行+实时)介绍及部署

vim /etc/server.pass
000000

chmod 600 /etc/server.pass 

rsync -az --delete --password-file=/etc/server.pass wwh@192.168.100.133::wwwroot /opt/test

ls /opt/test

rsync+inotify同步(下行+实时)介绍及部署

六、配置rsync+inotify

master配置

vim /etc/rsyncd.conf
read only = no   #将只读模式关闭

kill `cat /var/run/rsyncd.pid`  #采用杀死进程号的方式关闭服务

rsync --daemon      #启动进程
netstat -natp | grep rsync
 
chmod 777 /var/www/html

rsync+inotify同步(下行+实时)介绍及部署
slave配置

fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

sysctl -p


ps:查看这些系统参数命令为:cat /proc/sys/fs/inotify/参数项

rsync+inotify同步(下行+实时)介绍及部署

编译安装inotify

yum -y install gcc gcc-c++ 

#解压目录内安装包(可去官网下载)
tar zxvf inotify-tools-3.14.tar.gz -C /opt

cd /opt/inotify-tools-3.14/

./configure
make && make install

rsync+inotify同步(下行+实时)介绍及部署
编辑自动监控脚本

vim /opt/inotify.sh
#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e create,delete,move,modify,attrib /opt/test/"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /opt/test/ kiki@192.168.100.133::wwwroot"
 
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
    if [ $(pgrep rsync | wc -l) -le 0 ] ; then
        $RSYNC_CMD
	fi
done

rsync+inotify同步(下行+实时)介绍及部署

运行脚本
cd /opt/
chmod +x inotify.sh 
./inotify.sh &

模拟创建和删除事件
cd /opt/test
touch zzz.html
rm -rf xxx.html

然乎再master节点的 共享模块目录 进行查看同步情况即可

上一篇:golang备份和恢复


下一篇:rsync+inotify实现服务器的实时同步