分类: LINUX
2011-07-12 15:00:48
先说下应用环境,我们前端用的lvs负载均衡,后端也有用NFS,但NFS有局限性,因为NFS服务端死机了,整个后端就完了,如果用rsync+inotify,文件就有了份热备,不管死哪台,都有副本,后端继续工作,除非后端都死了,但这种方式更适合单项推送,像论坛这种互动性环境就不适合了,你不可能用这来双向同步,这种触发式同步大大的减小了服务器IO负载,同时在配置方面也比任务计划同步机制也简单了许多.
Server-A:192.168.1.201
Server-B:192.168.1.203
1.生成SSH KEY 让server-A SSH server-B不需要密码
Server-A# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa): 直接回车
Enter passphrase (empty for no passphrase): 直接回车
Enter same passphrase again: 直接回车
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
a8:97:9a:69:8f:34:b0:26:d9:89:f5:f8:04:f9:a9:66
这个命令生成一个密钥对:id_rsa(私钥文件)和id_rsa.pub(公钥文件),默认被保存在/root/.ssh/目录下.
2.公钥添加到远程主机的authorized_keys文件中,将文件上传到远程主机中.
Server-A# scp /root/.ssh/id_rsa.pub
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.1.203' (RSA) to the list of known hosts.
password: 输入服务器密码
id_rsa.pub 100% 393 0.4KB/s 00:00
3.SSH到登陆到远程主机,将公钥追加到authorized_keys文件中.
Server-B# mkdir .ssh
Server-B# cat /root/id_rsa.pub >> /root/.ssh/authorized_keys
Server-B# service sshd restart
===========================================================================================
Server-A:
# wget
# wget
# tar zxvf rsync-3.0.6pre1.tar.gz
# cd rsync-3.0.6pre1
# ./configure --prefix=/usr && make && make install
# tar zxvf inotify-tools-3.13.tar.gz
# cd inotify-tools-3.13
# ./configure && make && make install
===========================================================================================
Server-B:
# wget
# tar zxvf rsync-3.0.6pre1.tar.gz
# cd rsync-3.0.6pre1
# ./configure --prefix=/usr && make && make install
===========================================================================================
写个inotif_rsync.sh脚本
vim inotif_rsync.sh
#!/bin/sh
src=/var/www
des=/root
ip=192.168.1.203
/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' \
-e modify,delete,create,attrib \
${src} \
| while read file
do
rsync -avz --delete --progress ${src} } &&
echo "${file} was rsynced"
echo "---------------------------------------------------------"
done
赋予可执行权限: # chmod 755 inotif_rsync.sh
执行此脚本: # ./ inotif_rsync.sh & 同时可以添加到/etc/rc.local里面,让它开机启动.
注: 这个脚本是要把A服务器目录src(/var/www)文件同步到B服务器des(/root)下,具体目录路径可根据自己情况设定.
===========================================================================================
脚本相关注解:
-m 是保持一直监听
-r 是递归查看目录
-q 是打印出事件~
-e create,move,delete,modify
监听 创建 移动 删除 写入 事件
rsync -aHqzt $SRC $DST
-a 存档模式
-H 保存硬连接
-q 制止非错误信息
-z 压缩文件数据在传输
-t 维护修改时间
-delete 删除于多余文件
当要排出同步某个目录时,为rsync添加--exculde=PATTERN参数,注意,路径是相对路径。详细查看man rsync
当要排除都某个目录的事件监控的处理时,为inotifywait添加--exclude或--excludei参数。详细查看man inotifywait
另:
/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' \
-e modify,delete,create,attrib \
${src} \
上面的命令返回的值类似于:
10/03/09 15:31 /wwwpic/1
这3个返回值做为参数传给read,关于此处,有人是这样写的:
inotifywait -mrq -e create,move,delete,modify $SRC | while read D E F;do
细化了返回值。
说明:当文件系统发现指定目录下有如上的条件的时候就触发相应的指令,是一种主动告之的而非我用循环比较目录下的文件的异动,该程序
在运行时,更改目录内的文件时系统内核会发送一个信号,这个信号会触发运行rsync命令,这时会同步源目录和目标目录。
--timefmt:指定输出时的输出格式
--format: '%T %w%f'指定输出的格式
二.关于inotify介绍
Inotify 是文件系统事件监控机制,作为 dnotify 的有效替代。dnotify 是较早内核支持的文件监控机制。Inotify 是一种强大的、细粒度的
、异步的机制,它满足各种各样的文件监控需要,不仅限于安全和性能。
inotify 可以监视的文件系统事件包括:
IN_ACCESS,即文件被访问
IN_MODIFY,文件被 write
IN_ATTRIB,文件属性被修改,如 chmod、chown、touch 等
IN_CLOSE_WRITE,可写文件被 close
IN_CLOSE_NOWRITE,不可写文件被 close
IN_OPEN,文件被 open
IN_MOVED_FROM,文件被移走,如 mv
IN_MOVED_TO,文件被移来,如 mv、cp
IN_CREATE,创建新文件
IN_DELETE,文件被删除,如 rm
IN_DELETE_SELF,自删除,即一个可执行文件在执行时删除自己
IN_MOVE_SELF,自移动,即一个可执行文件在执行时移动自己
IN_UNMOUNT,宿主文件系统被 umount
IN_CLOSE,文件被关闭,等同于(IN_CLOSE_WRITE | IN_CLOSE_NOWRITE)
IN_MOVE,文件被移动,等同于(IN_MOVED_FROM | IN_MOVED_TO)
注:上面所说的文件也包括目录。