文档章节

rsync配置 文件同步

五味格子
 五味格子
发布于 2015/08/14 09:32
字数 1018
阅读 78
收藏 0

客户端拉取服务端更新

服务端配置

vim /etc/rsyncd.conf

secrets file = /etc/rsyncd.secrets
#motd file = /etc/rsyncd.motd
read only = yes 
list = yes 
uid = nobody
gid = nobody
hosts allow = 10.51.99.247     #哪些电脑可以访问rsync服务
#hosts deny = 192.168.100.0/24   #哪些电脑不可以访问rsync服务
max connections = 2 
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
 
[data]
comment = loeye'dir from 10.51.79.40
path = /mnt/wwwroot/data
auth users = root


vim /etc/rsyncd.secrets

root:123456

chmod -R 600  /etc/rsyncd.secrets

rsync --daemon --config=/etc/rsyncd.conf

echo "/usr/bin/rsync --daemon --config=/etc/rsyncd.conf" >>/etc/rc.d/rc.local


客户端配置


vim /etc/rsyncd.secrets

123456

vim /mnt/rsyncd.sh

#!/bin/sh           
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  root@10.51.79.40::data /mnt/data/ --password-file=/etc/rsyncd.secrets


crontab -e   

*/5 * * * * sh  /mnt/rsyncd.sh 


服务端推送更新

服务端配置


vim /etc/rsyncd.secrets

123456

以计划任务更新(可选)

vim /mnt/ rsyncd.sh

#!/bin/sh                                                                                                                                          
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"} /mnt/data/  root@10.51.99.247 ::data  --password-file=/etc/rsyncd.secrets

crontab -e

*/5 * * * * sh  /mnt/rsyncd.sh


以Inotify-tools 实时更新(可选)

1、查看服务器内核是否支持inotify

ll /proc/sys/fs/inotify   #列出文件目录,出现下面的内容,说明服务器内核支持inotify

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_queued_events

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_user_instances

-rw-r--r-- 1 root root 0 Mar  7 02:17 max_user_watches

备注:Linux下支持inotify的内核最小为2.6.13,可以输入命令:uname -a查看内核

CentOS 5.X 内核为2.6.18,默认已经支持inotify

2、安装inotify-tools

wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz

 https://codeload.github.com/rvoicilas/inotify-tools/tar.gz/v3.14  (备用)

tar zxvf  inotify-tools-3.14.tar.gz

cd inotify-tools-3.14/

./configure --prefix=/usr/local/inotify

make

make install

3、设置系统环境变量,添加软连接

echo "PATH=/usr/local/inotify/bin:$PATH" >>/etc/profile.d/inotify.sh

source /etc/profile.d/inotify.sh  #使设置立即生效

echo "/usr/local/inotify/lib" >/etc/ld.so.conf.d/inotify.conf

ln -s /usr/local/inotify/include  /usr/include/inotify

4、修改inotify默认参数(inotify默认内核参数值太小)

查看系统默认参数值

sysctl -a | grep max_queued_events

结果是:fs.inotify.max_queued_events = 16384

sysctl -a | grep max_user_watches

结果是:fs.inotify.max_user_watches = 8192

sysctl -a | grep max_user_instances

结果是:fs.inotify.max_user_instances = 128

修改参数:

sysctl -w fs.inotify.max_queued_events="99999999"

sysctl -w fs.inotify.max_user_watches="99999999"

sysctl -w fs.inotify.max_user_instances="65535"

vi /etc/sysctl.conf #添加以下代码

fs.inotify.max_queued_events=99999999

fs.inotify.max_user_watches=99999999

fs.inotify.max_user_instances=65535

参数说明:

max_queued_events:

inotify队列最大长度,如果值太小,会出现"** Event Queue Overflow **"错误,导致监控文件不准确

max_user_watches:

要同步的文件包含多少目录,可以用:find /home/www.osyunwei.com -type d | wc -l 统计,必须保证max_user_watches值大于统计结果(这里/home/www.osyunwei.com为同步文件目录)

max_user_instances:

每个用户创建inotify实例最大值

5、创建脚本,实时触发rsync进行同步

vim /usr/local/inotify/rsync.sh   #编辑,添加以下代码

======================================

#!/bin/sh
srcdir=/mnt/data/
dstdir=data
rsyncuser=root
rsyncpassdir=/etc/rsyncd.secrets
dstip="192.1681.127 192.168.1.128"
for ip in $dstip
do
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  $srcdir $rsyncuser@$ip::$dstdir --password-file=$rsyncpassdir >> /dev/null 2>&1
done
/usr/local/inotify/bin/inotifywait -mrq --exclude='^.*/(cache|runtime|\.svn|download|(index\.php$)|(.*\.(swp|swx)$))' --timefmt '%d/%m/%y %H:%M' --format '%T %w %f %e' --event close_write,modify,delete,create,attrib,move $srcdir |  while read file
do
for ip in $dstip
do
rsync -vaAXHzu --progress --delete --exclude={"cache","runtime","*svn"}  $srcdir $rsyncuser@$ip::$dstdir --password-file=$rsyncpassdir >> /dev/null 2>&1 
echo "  ${file} was rsynced" >> /tmp/rsync.log 2>&1
done
done

======================================

chmod u+x  /usr/local/inotify/rsync.sh    #添加脚本执行权限

脚本参数说明:

srcdir=/mnd/data/  #源服务器同步目录

dstdir=data    #目标服务器rsync同步目录模块名称

rsyncuser=root  #目标服务器rsync同步用户名

rsyncpassdir=/etc/rsyncd.secrets #目标服务器rsync同步用户的密码在源服务器的存放路径

dstip="192.168.1.127 192.168.1.128"  #目标服务器ip,多个ip用空格分开

/tmp/rsync.log  #脚本运行日志记录

6、设置脚本开机自动执行

vim /etc/rc.d/rc.local  #编辑,在最后添加一行

/usr/local/inotify/rsync.sh & #设置开机自动在后台运行脚本

7、启动脚本

/usr/local/inotify/rsync.sh &


客户端配置

vim /etc/rsyncd.conf

secrets file = /etc/rsyncd.secrets
#motd file = /etc/rsyncd.motd
read only = no 
#list = yes 
uid = root
gid = root
hosts allow = 10.51.79.40     #哪些电脑可以访问rsync服务
#hosts deny = 192.168.100.0/24   #哪些电脑不可以访问rsync服务
max connections = 2 
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
 
[data]
comment = loeye'dir from 10.51.79.40
path = /mnt/wwwroot/data
auth users = root


vim /etc/rsyncd.secrets

root:123456


chmod -R 600  /etc/rsyncd.secrets

rsync --daemon --config=/etc/rsyncd.conf

echo "/usr/bin/rsync --daemon --config=/etc/rsyncd.conf" >>/etc/rc.local


© 著作权归作者所有

共有 人打赏支持
五味格子

五味格子

粉丝 69
博文 246
码字总数 188782
作品 0
成都
程序员
私信 提问
Rsync 实现文件定时同步

rsync的规划: Rsync配置前首先规划好,同步的方向性。方向性分为推和拉的方式,规划推、拉是为了可以在防火墙设置端口是谁主动连接。例如:一般为从APP服务器生成的静态页面使用推的方式将文...

stone_
2015/07/09
480
0
烂泥:Linux系统与windows系统文件同步

本文由秀依林枫提供友情赞助,首发于烂泥行天下。 上篇文章中,我们介绍了有关Linux系统之间的文件同步,这篇文章我们来介绍下,有关Linux系统与windows系统,以及windows系统与windows系统之...

烂泥行天下
2015/01/20
0
0
rsync+inotify实时同步

rsync+inotify实时同步 一、rsync与inotify介绍: 1、rsync (remote sync)是一款非常好的数据同步工具,能够通过对比同步双方的数据变动,实现增量同步,还可以通过LAN/WAN实现远程多台主机...

听雨x
2017/11/30
0
0
Rsync+Inotify-client 实现实时同步

在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用.但在大数据时代,rsync的不足之处也暴露出来. 首先.rsync本身实现不了实时备份.靠系统的crontab实现的话也受...

乜波
2014/07/16
0
0
Rsync+inotify实现文件实时同步

数据备份、文件备份是运维、DBA等岗位最熟悉不过的话题,这里不介绍数据库的备份,简单介绍一下文件同步工具,这样的工具有很多,Windows环境下有Goodsync、FreeFileSync等,Linux下rsync、u...

tianya1993
2017/09/17
0
0

没有更多内容

加载失败,请刷新页面

加载更多

泛型就这么简单

前言 从今天开始进入Java基础的复习,可能一个星期会有一篇的<十道简单算法>,我写博文的未必都是正确的~如果有写错的地方请大家多多包涵并指正~ 今天要复习的是泛型,泛型在Java中也是个很...

群星纪元
38分钟前
3
0
大数据提醒你:中国这些古建筑,可能是下一个巴黎圣母院!

大家晚上好,我是今天的提笔人嗅嗅。 巴黎圣母院失火事件让我的心情很沉重,一句无关痛痒的安慰“巴黎不哭”,已经不能表达我对这场文化之殇的惋惜之痛,人类伟大的建筑在一瞬间被毁灭。 世界...

forespider
49分钟前
0
0
mysql函数substring_index的用法

substring_index 按索引字符位进行截取字符串 substring_index(“待截取的字符串”,“截取数据依据的字符”,截取字符的位置N) 第三个参数可正,可负。正数表示索引字符前面的字符串,负数...

echojson
49分钟前
2
0
好程序员web前端分享用CSS和JS打造一个简单的图片编辑器

好程序员web前端分享用CSS和JS打造一个简单的图片编辑器,本文主要是利用CSS的 filter和简单的Jquery代码来实现一个简单的图片编辑器,包括对图片的透明度,黑白,图片亮度等调节。 CSS filt...

好程序员IT
59分钟前
2
0
浅析spring mvc的细节

spring mvc 整体结构 系统监听到请求 -> 通知tomcat -> 根据web.xml 通知相应的拦截器(spring mvc 通常指DispatcherServlet) --> 检查url是否有相匹配的请求实现 --> 拿到请求实现bean的适配...

最爱肉肉
今天
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部