天天看点

rsync与inotify实现数据实时同步

Rsync与Inotify

单一的rsync只可以进行数据同步,单一的inotify只可以实时监控文件,两者结合使用刚好满足数据实时同步的需求,下面就用一个数据发布服务器和两个web服务器实例解析rsync+inotify实现实时同步。

数据发布服务器 192.168.1.5 (rsync+inotify)

web服务器 192.168.1.6 192.168.1.7 (rsync)

首先在web服务器上部署rsync

192.168.1.6配置

[root@localhost~]# yum install -y rsync

[root@localhost~]# mkdir -p /var/www/001

[root@localhost~]# chmod 660 /var/www/001

[root@localhost~]# chown nobody.nobody /var/www/001

[root@localhost~]# vim /etc/rsync.conf

transfer logging = yes

log file = /var/log/rsyncd.log

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsync.lock

uid = nobody

gid = nobody

user chroot = no

ignore errors

read only = no

[web1]

comment = Web comment

path = /var/www/001

auth users = tom

secrets file = /etc/rsyncd.passwd

hosts allow=192.168.1.5

hosts deny=*

list = false

[root@localhost~]# echo "tom:123456" > /etc/rsyncd.passwd

[root@localhost~]# chmod 600 /etc/rsyncd.passwd

[root@localhost~]# rsync --daemon

[root@localhost~]# echo "rsync --daemon" >> /etc/rc.local

[root@localhost~]# iptables -I INPUT -p tcp --dport 873 -j ACCEPT

[root@localhost~]# service iptables save

192.168.1.7配置

[root@localhost~]# mkdir -p /var/www/002

[root@localhost~]# chmod 660 /var/www/002

[root@localhost~]# chown nobody.nobody /var/www/002

[web2]

path = /var/www/002

接着在数据发布服务器下载inotify-tool,安装rsync和inotify (192.168.1.5)

[root@localhost~]# yum install -y automake libtool

[root@localhost~]# cd /home/soft/inotify-tools-master

[root@localhost inotify-tools-master~]# ./configure

[root@localhost inotify-tools-master~]# make && make install

[root@localhost~]# echo "123456" > /root/rsync.pass

[root@localhost~]# chmod 600 /root/rsync.pass

[root@localhost~]# vim rsync_notify.sh

#!/bin/bash

export PATH=/bin:/usr/bin:/usr/local/bin

SRC=/home/webdata/

DEST1=web1

DEST2=web2

Client1=192.168.1.6

Client2=192.168.1.7

User=tom

Passfile=/root/rsync.pass

[ ! -e $Passfile ] && exit 2

inotifywait -mrq --timefmt '%Y-%m-%d %H:%M' --format '%T %w%f %e' --event modify,create,delete,attrib $SRC|while read line

do

echo "$line" > /var/log/inotify_web 2>&1

/usr/bin/rsync -avz --delete --progress --password-file=$Passfile $SRC ${User}@$Client1::$DEST1 >> /var/log/sync_web1 2>&1

/usr/bin/rsync -avz --delete --progress --password-file=$Passfile $SRC ${User}@$Client2::$DEST2 >> /var/log/sync_web2 2>&1

done &

[root@localhost~]# chmod a+x rsync_notify.sh

[root@localhost~]# ./rsync_notify.sh

[root@localhost~]# echo "/root/rsync_notify.sh" /etc/rc.local

inotifywait用法

inotifywait [-hcmrq] [-e ] [-t ] [--format ] [--timefmt ] [ ... ]

参数:

-h,–help

输出帮助信息

@

排除不需要监视的文件,可以是相对路径,也可以是绝对路径。

–fromfile 

从文件读取需要监视的文件或排除的文件,一个文件一行,排除的文件以@开头。

-m, –monitor

接收到一个事情而不退出,无限期地执行。默认的行为是接收到一个事情后立即退出。

-d, –daemon

跟–monitor一样,除了是在后台运行,需要指定–outfile把事情输出到一个文件。也意味着使用了–syslog。

-o, –outfile 

输出事情到一个文件而不是标准输出。

-s, –syslog

输出错误信息到系统日志

-r, –recursive

监视一个目录下的所有子目录。

-q, –quiet

指定一次,不会输出详细信息,指定二次,除了致命错误,不会输出任何信息。

–exclude 

正则匹配需要排除的文件,大小写敏感。

–excludei 

正则匹配需要排除的文件,忽略大小写。

-t , –timeout 

设置超时时间,如果为0,则无限期地执行下去。

-e , –event 

指定监视的事件。

-c, –csv

输出csv格式。

–timefmt 

指定时间格式,用于–format选项中的%T格式。

–format 

指定输出格式。

%w 表示发生事件的目录

%f 表示发生事件的文件

%e 表示发生的事件

%Xe 事件以“X”分隔

%T 使用由–timefmt定义的时间格式

本文转自super李导51CTO博客,原文链接:http://blog.51cto.com/superleedo/1889742 ,如需转载请自行联系原作者