Простая односторонняя синхронизация файлов в Linux Ubuntu 12.04. lsyncd.

среда, 07 января 2015

20:25

Простая односторонняя синхронизация файлов в Linux Ubuntu 12.04. lsyncd.

localroot

Задача:
Настроить простую синхронизацию файлов в каталоге с удалённой машиной. Без переформатирования ФС. Без примененя монстрообразных систем синхронизации наподобие Lustre, DRBD и т.п.

Решение:
читать дальше

sudo apt-get install lsyncd
sudo mcedit /etc/lsyncd/lsyncd.conf.lua
=-=-=-=-=
settings = {
   logfile    = "/var/log/lsyncd.log",
   statusFile = "/var/run/lsyncd.status",
   nodaemon   = false,
}

sync {
    default.rsync,
    source  = "/mnt/data/PHOTOS",
    target  = "/mnt/data_sync/PHOTOS",
    rsyncOps = { "-aAHx", "--sparse", "--delete", "--numeric-ids" }
}
=-=-=-=-=

sudo mcedit /etc/logrotate.d/lsyncd
=-=-=-=-=
/var/log/lsyncd.log {
       daily
       rotate 3
       delaycompress
       compress
       notifempty
       missingok
}
=-=-=-=-=

sudo mcedit /etc/init.d/lsyncd
=-=-=-=-=
do_start()
{
	start-stop-daemon --start --quiet -N 19 -I idle --pidfile $PIDFILE --exec $DAEMON \
        --test > /dev/null \
		|| return 1
	start-stop-daemon --start --quiet -N 19 -I idle --make-pidfile --pidfile $PIDFILE \
        --exec $DAEMON -- \
		$DAEMON_ARGS \
		|| return 2
}
=-=-=-=-=

sudo service lsyncd start

Преимущества:
1. Простота настройки.
2. rsync умеет синхронизировать жесткие ссылки (hard links) и sparse файлы.
3. Синхронизация атрибутов файлов включаяя owner, mode, acl.

Недостатки:
1. Односторонняя синхронизация.
2. xattrs не пролазят через самбу.

Пояснения:
В репозиториях Ubuntu 12.04 lsyncd версии 2.0.4, конфиги от 2.1.х отличаются.
В файле /etc/init.d/lsyncd уменьшил приоритет демона lsyncd чтобы при первоначальной синхронизации не мешал работать. Это не обязательно.
При оперативной синхронизации демоном жесткие ссылки синхронизируются как файлы, потому как rsync не предоставляется возсожность синхронизировать каталог полностью. Но зато при перезапуске демона и полной пересинхронизиции файлов через rsync жёсткие ссылки восстанавливаются. Не критично.
Папка /mnt/data_sync монтируется через cifs. Если есть необходимость синхронизировать файлы с различными владельцами, важно, чтобы на удалённой системе пользователем smb выступал root. Так же на локальной системе lsyncd должен быть запущен от rootа. Только в таком случае samba позволяет корректно передавать владельца и права на файлы, включая ACL.
Можно без самбы через ssh, но мне кажется шифрование в локалке излишне.
читать дальшеКонфиг самбы на удалённой машине:

[data_sync]
        path = /mnt/data
        browseable = no
        guest ok = no
        write list = root
        create mask = 0644
        directory mask = 0755

Для удобства монтирую через autofs. Конфиги autofs на локальной машине:

/etc/auto.master
=-=-=-=-=
/- /etc/autofs.data_sync --timeout=300
=-=-=-=-=

/etc/autofs.data_sync
=-=-=-=-=
/mnt/data_sync            -fstype=cifs,rw,credentials=/etc/autofs.backup.cred ://192.168.1.99/data_sync
=-=-=-=-=