天天看点

rsync+inotify实现文件的实时同步

 环境描述:现有两台服务器,要实现mp3文件的实时同步。可以使用rsync来做同步,但不能实现实时,为了实现实时同步,我们使用inotify来监控需要同步的目录发生的改变,inotify只是内核中的一个监控文件变化的模块,提供了监控文件变化的API,而要连接这个API,需要安装inotify-tools工具。可以实现文件的新增,删除,修改,改变属性等,功能很强大。现在需要一台服务器做为内容发布端,来把改变的文件,通过rsync实时的同步到内容服务器。

==========================================

内容服务器:1.1.1.1(Ubuntu 12.04 x86-64)

发布服务器:1.1.1.2(Ubuntu 12.04 x86-64)

安装rsync

# sudo apt-get install rsync

提供rsync配置文件

# mkdir /etc/rsyncd/

# vim /etc/rsyncd/rsyncd.conf

# Section 1: Global settings 

port = 873 

uid = root 

gid = root 

use chroot = yes 

read only = no 

max connections = 7 

pid file = /var/run/rsyncd.pid 

log file = /var/log/rsyncd.log 

hosts allow = * 

transfer logging = yes 

log format = %t %a %m %f %b 

syslog facility = local3 

timeout = 300 

# Section 2: Directory to be synced 

[mp3] 

path = /data/mp3 

list = false 

ignore errors = yes 

auth users = syncuser 

secrets file = /etc/rsyncd/rsyncd.pass 

提供secrets file所指定的口令文件/etc/rsyncd/rsyncd.pass,其内容类似如下:

syncuser:IamOK

其中冒号前的是用户名,冒号后的是对应用户的密码。此文件不能为其他任意用户可访问,因此可用如下命令修改:

# chmod 600  /etc/rsyncd/rsyncd.pass

启动rsync服务

# /usr/bin/rsync --daemon --config=/etc/rsyncd/rsyncd.conf

验证服务是否开户

root@node1:/etc/rsyncd# netstat -nutlp | grep :873

tcp        0      0 0.0.0.0:873             0.0.0.0:*               LISTEN      2357/rsync

加入开机启动

# echo "/usr/bin/rsync --daemon --config=/etc/rsyncd/rsyncd.conf" >>/etc/rc.local

安装rsync及inotify-tools

# sudo apt-get install rsync inotify-tools

# vim /etc/rsyncd/rsyncd.pass

IamOK

建立自动同步的脚本,使用inotifywait监控目录,当监控目录改变的时候,调用rsync同步改变的文件

# vim /var/tmp/auto_sync.sh

#!/bin/bash 

DESTHOST=1.1.1.1 

DESTHOSTDIR=/data/mp3/ 

SRCDIR=/data/mp3/ 

inotifywait -mr --timefmt '%d/%m/%y %H:%M' --format '%T %w %f' -e close_write,modify,delete,create,attrib $SRCDIR |  while read DATE TIME DIR FILE; do 

       FILECHANGE=${DIR}${FILE} 

       rsync -avz --password-file=/etc/rsyncd/rsyncd.pass $FILECHANGE syncuser@${DESTHOST}::mp3 &>/dev/null && \ 

       echo "At ${TIME} on ${DATE}, file $FILECHANGE was backed up via rsync" >> /var/log/mp3sync.log 

done 

# chmod u+x /var/tmp/auto_sync.sh

# /var/tmp/auto_sync.sh &

开机自动运行

# echo '/var/tmp/auto_sync.sh &' >> /etc/rc.local

总结:以上可以实现文件的实时同步,如果两端本来文件不一致,建议先使用rsync做一次完全的同步,因为本文章所写的方法,只对改变的文件进行同步,而不会去扫描整个目录。

如果要监控多个同一台机器上的多个目录的改变,inotifywait也是支持的,多个目录之间,用空格隔开即可。同步的时候,也是可以同步到多台服务器的,<b>本文转自 gm100861 51CTO博客,原文链接:http://blog.51cto.com/gm100861/916246</b>