lsyncd实时同步搭建指南

lsyncd实时同步搭建指南

 

需要被同步服务器:

1、安装lsyncd

#yum install -y lsyncd


2、配置文件 lsyncd.conf

settings {
logfile ="/var/log/lsyncd.log",
statusFile ="/var/run/lsyncd.status",
inotifyMode = "CloseWrite",
maxProcesses = 2,
nodaemon =false
}

-- III. 远程目录同步,rsync模式 + rsyncd daemon
sync {
default.rsync,
source = "/opt/app_test", ---需要被同步目录
target = "tomcat@10.28.11.156::PensionService", ---同步目标服务器
delete="running",
exclude = { ".*", ".tmp","log" },
delay = 0,
init = false,
rsync = {
binary = "/usr/bin/rsync",
archive = true,
compress = true,
verbose = true,
password_file = "/etc/rsyncd.passwd",
_extra = {"--bwlimit=200"}
}
}


-- V. 远程目录同步,rsync模式 + rsyncssh,效果与上面相同
sync {
default.rsyncssh,
source = "/opt/app_test3",
host = "10.28.11.156",
targetdir = "/opt/app_test3",
excludeFrom = "/etc/rsync_exclude.lst",
-- maxDelays = 5,
delay = 0,
-- init = false,
rsync = {
binary = "/usr/bin/rsync",
archive = true,
compress = true,
verbose = true,
_extra = {"--bwlimit=2000"},
},
ssh = {
port = 22080
}
}

启动lsyncd服务:

#service lsyncd start


同步目标目标服务器:

需要配置Rsync服务:

#yum install -y xinetd

修改:/etc/xinetd.d/rsync

service rsync
{
disable = no ##---yes 改 no
flags = IPv6
socket_type = stream
wait = no
user = root
server = /usr/bin/rsync
server_args = --daemon
log_on_failure += USERID
}


rsync配置文件:/etc/rsyncd.conf

uid=root
gid=root
use chroot=no
pid file=/var/run/rsync.pid
max connections=10
lock file=/var/run/rsync.lock
log file=/var/log/rsync.log
motd file=/etc/rsyncd.motd
secrets file=/etc/rsyncd.secrets
hosts allow=10.28.11.156 127.0.0.1 10.28.11.117
auth users=tomcat

[PensionService]
path=/opt/app_test
comment=app_test file
read only=false
list=false

备注:tomcat用户需要对/opt/app_test 目录写权限

/etc/rsyncd.secrets
tomcat:4zbSsBORKZPPo

#chmod 600 /etc/rsyncd.secrets

启动rsync

#service xinetd start


备注: 当使用最后一种模式同步文件时,两台服务器需要免密码登陆设置。

 


lsyncd.conf配置选项说明

settings

里面是全局设置,--开头表示注释,下面是几个常用选项说明:

logfile 定义日志文件
stausFile 定义状态文件
nodaemon=true 表示不启用守护模式,默认
statusInterval 将lsyncd的状态写入上面的statusFile的间隔,默认10秒
inotifyMode 指定inotify监控的事件,默认是CloseWrite,还可以是Modify或CloseWrite or Modify
maxProcesses 同步进程的最大个数。假如同时有20个文件需要同步,而maxProcesses = 8,则最大能看到有8个rysnc进程
maxDelays 累计到多少所监控的事件激活一次同步,即使后面的delay延迟时间还未到

sync

里面是定义同步参数,可以继续使用maxDelays来重写settings的全局变量。一般第一个参数指定lsyncd以什么模式运行:rsync、rsyncssh、direct三种模式:

default.rsync :本地目录间同步,使用rsync,也可以达到使用ssh形式的远程rsync效果,或daemon方式连接远程rsyncd进程;
default.direct :本地目录间同步,使用cp、rm等命令完成差异文件备份;
default.rsyncssh :同步到远程主机目录,rsync的ssh模式,需要使用key来认证
source 同步的源目录,使用绝对路径。
target 定义目的地址.对应不同的模式有几种写法:
/tmp/dest :本地目录同步,可用于direct和rsync模式
172.29.88.223:/tmp/dest :同步到远程服务器目录,可用于rsync和rsyncssh模式,拼接的命令类似于/usr/bin/rsync -ltsd --delete --include-from=- --exclude=* SOURCE TARGET,剩下的就是rsync的内容了,比如指定username,免密码同步
172.29.88.223::module :同步到远程服务器目录,用于rsync模式

三种模式的示例会在后面给出。
init 这是一个优化选项,当init = false,只同步进程启动以后发生改动事件的文件,原有的目录即使有差异也不会同步。默认是true
delay 累计事件,等待rsync同步延时时间,默认15秒(最大累计到1000个不可合并的事件)。也就是15s内监控目录下发生的改动,会累积到一次rsync同步,避免过于频繁的同步。(可合并的意思是,15s内两次修改了同一文件,最后只同步最新的文件)
excludeFrom 排除选项,后面指定排除的列表文件,如excludeFrom = "/etc/lsyncd.exclude",如果是简单的排除,可以使用exclude = LIST。

这里的排除规则写法与原生rsync有点不同,更为简单:
监控路径里的任何部分匹配到一个文本,都会被排除,例如/bin/foo/bar可以匹配规则foo
如果规则以斜线/开头,则从头开始要匹配全部
如果规则以/结尾,则要匹配监控路径的末尾
?匹配任何字符,但不包括/
*匹配0或多个字符,但不包括/
**匹配0或多个字符,可以是/
delete 为了保持target与souce完全同步,Lsyncd默认会delete = true来允许同步删除。它除了false,还有startup、running值,请参考 Lsyncd 2.1.x ‖ Layer 4 Config ‖ Default Behavior。

rsync

(提示一下,delete和exclude本来都是rsync的选项,上面是配置在sync中的,我想这样做的原因是为了减少rsync的开销)

bwlimit 限速,单位kb/s,与rsync相同(这么重要的选项在文档里竟然没有标出)
compress 压缩传输默认为true。在带宽与cpu负载之间权衡,本地目录同步可以考虑把它设为false
perms 默认保留文件权限。

其它rsync的选项
其它还有rsyncssh模式独有的配置项,如host、targetdir、rsync_path、password_file,见后文示例。rsyncOps={"-avz","--delete"}这样的写法在2.1.*版本已经不支持。
lsyncd.conf可以有多个sync,各自的source,各自的target,各自的模式,互不影响。

2.3 启动lsyncd
使用命令加载配置文件,启动守护进程,自动同步目录操作。

lsyncd -log Exec /usr/local/lsyncd-2.1.5/etc/lsyncd.conf

posted @ 2019-09-16 17:23  rain88  阅读(948)  评论(0编辑  收藏  举报