inotify+rsync实时同步文件
点击访问原文
您还可以加入全栈技术交流群(QQ群号:254842154)
对于一个系统管理员来说,如何较实时地在多台服务器之间同步文件,是一个很重要的任务。之前我有一篇文章介绍了如何定时同步服务器文件,但是无法做到实时。今天给大家介绍一个inotify+rsync的实时同步方案,可以应用于文件备份,多台负载服务器代码同步等场景。
前提条件
inotify是linux内核从2.6.13引入的文件系统变化通知机制。因此,需要检查你的服务器版本是否支持inotify机制
grep INOTIFY_USER /boot/config-$(uname -r)
假如输出
CONFIG_INOTIFY_USER=y
则代表支持。
安装inofity-tools工具包
yum install inotify-tools
应用场景
多台负载服务器的代码通常需要实时地保持一致,传统的做法是使用crontab定时任务同步,这种方法不够实时而且效率低下。
今天以inotify+rsync为搭配介绍新的代码同步方案。
假设现在有三台服务器A,B,C,三台服务器是负载服务器,站点所在目录结构一致。现在要实现只发布代码到A服务器,自动同步代码到B和C服务器。首选需要让A服务器可以通过公钥方式登录到B和C,执行以下三步:
①在服务器A生成一对公钥和秘钥。使用 ssh-keygen -t rsa生成,一路回车即可;
②进入秘钥文件夹查看文件。其中id_rsa.pub是公钥,id_rsa是私钥;
cd ~/.ssh
③打开id_rsa.pub文件,并把它的内容拷贝到服务器B和C的 /root/.ssh/authorized_keys
文件中,假如 /root/.ssh
目录下没有 authorized_keys
文件,则新建一个文件。
现在,在A服务器就可以直接通过ssh命令实现无密码登录了
//指定端口号,把ip_address替换成你ip地址
ssh root@ip_address -p 27631
//默认端口号
ssh root@ip_address
编写脚本:
#!/bin/sh
#var
src="/var/www/html/t/"
des_ip="ip_address1 ip_address2"
#function
inotify_fun ()
{
/usr/bin/inotifywait -mrq --timefmt '%Y%m%d-%H:%M' --format '%T %e %w%f' \
-e attrib,close_write,delete,create,modify,move $1|while read time file
do
for ip in $des_ip
do
echo $des_ip
echo "`date +%Y%m%d-%T`: rsync -avzq --delete --progress $1 root@$ip:$1"
rsync -avzrtopgq --delete --progress $1 root@$ip:$1
#echo
done
done
}
#main
for a in $src
do
inotify_fun $a
done
des_ip
中的 ip_address1
和 ip_address2
替换成实际的ip地址,多个ip地址用空格隔开。src
是需要实时同步的目录,源服务器和目标服务器的目录结构一致。保存脚本文件为rsync.sh,然后用定时任务运行它一次,运行成功后取消该定时任务(我暂时不知道如何运行脚本一次,只能用这个土方法了。。。哪位大神知道麻烦告知一声)。
inotifywait的e参数表示要监听哪些事件:
access 访问,读取文件。
modify 修改,文件内容被修改。
attrib 属性,文件元数据被修改。
move 移动,对文件进行移动操作。
create 创建,生成新文件
open 打开,对文件进行打开操作。
close 关闭,对文件进行关闭操作。
delete 删除,文件被删除。
查看任务是否在运行
ps -ef |grep inotify
假如修改了脚本文件,需要关闭inotify之后再重新运行定时任务再取消。
sudo pkill inotifywait