文档章节

rsync配置 文件同步

五味格子
 五味格子
发布于 2015/08/14 09:32
字数 1018
阅读 70
收藏 0

客户端拉取服务端更新

服务端配置

vim /etc/rsyncd.conf

secrets file = /etc/rsyncd.secrets
#motd file = /etc/rsyncd.motd
read only = yes 
list = yes 
uid = nobody
gid = nobody
hosts allow = 10.51.99.247     #哪些电脑可以访问rsync服务
#hosts deny = 192.168.100.0/24   #哪些电脑不可以访问rsync服务
max connections = 2 
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
 
[data]
comment = loeye'dir from 10.51.79.40
path = /mnt/wwwroot/data
auth users = root


vim /etc/rsyncd.secrets

root:123456

chmod -R 600  /etc/rsyncd.secrets

rsync --daemon --config=/etc/rsyncd.conf

echo "/usr/bin/rsync --daemon --config=/etc/rsyncd.conf" >>/etc/rc.d/rc.local


客户端配置


vim /etc/rsyncd.secrets

123456

vim /mnt/rsyncd.sh

#!/bin/sh           
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  root@10.51.79.40::data /mnt/data/ --password-file=/etc/rsyncd.secrets


crontab -e   

*/5 * * * * sh  /mnt/rsyncd.sh 


服务端推送更新

服务端配置


vim /etc/rsyncd.secrets

123456

以计划任务更新(可选)

vim /mnt/ rsyncd.sh

#!/bin/sh                                                                                                                                          
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"} /mnt/data/  root@10.51.99.247 ::data  --password-file=/etc/rsyncd.secrets

crontab -e

*/5 * * * * sh  /mnt/rsyncd.sh


以Inotify-tools 实时更新(可选)

1、查看服务器内核是否支持inotify

ll /proc/sys/fs/inotify   #列出文件目录,出现下面的内容,说明服务器内核支持inotify

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_queued_events

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_user_instances

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_user_watches

备注:Linux下支持inotify的内核最小为2.6.13,可以输入命令:uname -a查看内核

CentOS 5.X 内核为2.6.18,默认已经支持inotify

2、安装inotify-tools

wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz

 https://codeload.github.com/rvoicilas/inotify-tools/tar.gz/v3.14  (备用)

tar zxvf  inotify-tools-3.14.tar.gz

cd inotify-tools-3.14/

./configure --prefix=/usr/local/inotify

make

make install

3、设置系统环境变量,添加软连接

echo "PATH=/usr/local/inotify/bin:$PATH" >>/etc/profile.d/inotify.sh

source /etc/profile.d/inotify.sh  #使设置立即生效

echo "/usr/local/inotify/lib" >/etc/ld.so.conf.d/inotify.conf

ln -s /usr/local/inotify/include  /usr/include/inotify

4、修改inotify默认参数(inotify默认内核参数值太小)

查看系统默认参数值

sysctl -a | grep max_queued_events

结果是:fs.inotify.max_queued_events = 16384

sysctl -a | grep max_user_watches

结果是:fs.inotify.max_user_watches = 8192

sysctl -a | grep max_user_instances

结果是:fs.inotify.max_user_instances = 128

修改参数:

sysctl -w fs.inotify.max_queued_events="99999999"

sysctl -w fs.inotify.max_user_watches="99999999"

sysctl -w fs.inotify.max_user_instances="65535"

vi /etc/sysctl.conf #添加以下代码

fs.inotify.max_queued_events=99999999

fs.inotify.max_user_watches=99999999

fs.inotify.max_user_instances=65535

参数说明:

max_queued_events:

inotify队列最大长度,如果值太小,会出现"** Event Queue Overflow **"错误,导致监控文件不准确

max_user_watches:

要同步的文件包含多少目录,可以用:find /home/www.osyunwei.com -type d | wc -l 统计,必须保证max_user_watches值大于统计结果(这里/home/www.osyunwei.com为同步文件目录)

max_user_instances:

每个用户创建inotify实例最大值

5、创建脚本,实时触发rsync进行同步

vim /usr/local/inotify/rsync.sh   #编辑,添加以下代码

======================================

#!/bin/sh
srcdir=/mnt/data/
dstdir=data
rsyncuser=root
rsyncpassdir=/etc/rsyncd.secrets
dstip="192.1681.127 192.168.1.128"
for ip in $dstip
do
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  $srcdir $rsyncuser@$ip::$dstdir --password-file=$rsyncpassdir >> /dev/null 2>&1
done
/usr/local/inotify/bin/inotifywait -mrq --exclude='^.*/(cache|runtime|\.svn|download|(index\.php$)|(.*\.(swp|swx)$))' --timefmt '%d/%m/%y %H:%M' --format '%T %w %f %e' --event close_write,modify,delete,create,attrib,move $srcdir |  while read file
do
for ip in $dstip
do
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  $srcdir $rsyncuser@$ip::$dstdir --password-file=$rsyncpassdir >> /dev/null 2>&1 
echo "  ${file} was rsynced" >> /tmp/rsync.log 2>&1
done
done

======================================

chmod u+x  /usr/local/inotify/rsync.sh    #添加脚本执行权限

脚本参数说明:

srcdir=/mnd/data/  #源服务器同步目录

dstdir=data    #目标服务器rsync同步目录模块名称

rsyncuser=root  #目标服务器rsync同步用户名

rsyncpassdir=/etc/rsyncd.secrets #目标服务器rsync同步用户的密码在源服务器的存放路径

dstip="192.168.1.127 192.168.1.128"  #目标服务器ip,多个ip用空格分开

/tmp/rsync.log  #脚本运行日志记录

6、设置脚本开机自动执行

vim /etc/rc.d/rc.local  #编辑,在最后添加一行

/usr/local/inotify/rsync.sh & #设置开机自动在后台运行脚本

7、启动脚本

/usr/local/inotify/rsync.sh &


客户端配置

vim /etc/rsyncd.conf

secrets file = /etc/rsyncd.secrets
#motd file = /etc/rsyncd.motd
read only = no 
#list = yes 
uid = root
gid = root
hosts allow = 10.51.79.40     #哪些电脑可以访问rsync服务
#hosts deny = 192.168.100.0/24   #哪些电脑不可以访问rsync服务
max connections = 2 
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
 
[data]
comment = loeye'dir from 10.51.79.40
path = /mnt/wwwroot/data
auth users = root


vim /etc/rsyncd.secrets

root:123456


chmod -R 600  /etc/rsyncd.secrets

rsync --daemon --config=/etc/rsyncd.conf

echo "/usr/bin/rsync --daemon --config=/etc/rsyncd.conf" >>/etc/rc.local


© 著作权归作者所有

共有 人打赏支持
五味格子

五味格子

粉丝 69
博文 246
码字总数 188782
作品 0
成都
程序员
私信 提问
Rsync 实现文件定时同步

rsync的规划: Rsync配置前首先规划好,同步的方向性。方向性分为推和拉的方式,规划推、拉是为了可以在防火墙设置端口是谁主动连接。例如:一般为从APP服务器生成的静态页面使用推的方式将文...

stone_
2015/07/09
480
0
烂泥:Linux系统与windows系统文件同步

本文由秀依林枫提供友情赞助,首发于烂泥行天下。 上篇文章中,我们介绍了有关Linux系统之间的文件同步,这篇文章我们来介绍下,有关Linux系统与windows系统,以及windows系统与windows系统之...

烂泥行天下
2015/01/20
0
0
rsync+inotify实时同步

rsync+inotify实时同步 一、rsync与inotify介绍: 1、rsync (remote sync)是一款非常好的数据同步工具,能够通过对比同步双方的数据变动,实现增量同步,还可以通过LAN/WAN实现远程多台主机...

听雨x
2017/11/30
0
0
Rsync+Inotify-client 实现实时同步

在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用.但在大数据时代,rsync的不足之处也暴露出来. 首先.rsync本身实现不了实时备份.靠系统的crontab实现的话也受...

乜波
2014/07/16
0
0
Rsync+inotify实现文件实时同步

数据备份、文件备份是运维、DBA等岗位最熟悉不过的话题,这里不介绍数据库的备份,简单介绍一下文件同步工具,这样的工具有很多,Windows环境下有Goodsync、FreeFileSync等,Linux下rsync、u...

tianya1993
2017/09/17
0
0

没有更多内容

加载失败,请刷新页面

加载更多

IOC的学习(1)

1.IOC理论概要 java中,一个对象A怎么才能调用对象B? 当一个对象的构建,需要多个其他对象时,对象和对象有复杂的构建关系。spring帮助我们维系对象的依赖关系,降低系统的实现成本,前提是...

杨健-YJ
22分钟前
1
0
Spring 的 getBean 方法源码解析

文本将从以下几个方面介绍 相关文章 FactoryBean 接口 BeanFactory 接口 BeanFactory 接口 和 FactoryBean 接口的区别 getBean 方法的源码解析 Spring 循环依赖的解决方式 相关文章 Spring 中...

TSMYK
25分钟前
0
0
李鸿章六百多字参倒豪门重臣,晚清第一奏折,藏尽顶级权谋话术!

道光二十七年(1847年),二十四岁的李鸿章高中进士,列二甲第十三名。 在此期间,有桩轶事挺有意思。 会试时,李鸿章的房师为当时的名士孙锵鸣。发榜后,孙锵鸣见自己这一房只考中了李鸿章、...

乔老哥
31分钟前
1
0
PTA-基础编程题目集-7-14 求整数段和

给定两个整数A和B,输出从A到B的所有整数以及这些数的和。 输入格式: 输入在一行中给出2个整数A和B,其中−100≤A≤B≤100,其间以空格分隔。 输出格式: 首先顺序输出从A到B的所有整数,每...

niithub
31分钟前
4
0
Spring Qualifier的使用

摘要 spring 的 qualifier 平常使用一般直接是使用id 来限定,不过spring给我们提供了更强大的功能。 使用方法 直接使用 直接在@Qualifier中限定bean的id 在bean上使用@Qualifier来指定后续使...

52iSilence7
33分钟前
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部