scripts/debian/sync-dd

   1 #! /bin/bash
   2
   3 # Copyright (C) 2011,2013, Joerg Jaspert <joerg@debian.org>
   4 # Copyright (C) 2012, Ansgar Burchardt <ansgar@debian.org>
   5 #
   6 # This program is free software; you can redistribute it and/or
   7 # modify it under the terms of the GNU General Public License as
   8 # published by the Free Software Foundation; version 2.
   9 #
  10 # This program is distributed in the hope that it will be useful, but
  11 # WITHOUT ANY WARRANTY; without even the implied warranty of
  12 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13 # General Public License for more details.
  14 #
  15 # You should have received a copy of the GNU General Public License
  16 # along with this program; if not, write to the Free Software
  17 # Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  18
  19 set -e
  20 set -u
  21 set -E
  22
  23 export LANG=C
  24 export LC_ALL=C
  25
  26 export SCRIPTVARS=/srv/ftp-master.debian.org/dak/config/debian/vars
  27 . $SCRIPTVARS
  28
  29 usage() {
  30   echo "usage: $0 <lock> <host1> <host2> sync|pool"
  31   echo
  32   echo "sync dd-accessible copy of the archive"
  33   echo
  34   echo "arguments:"
  35   echo "  lock:      file used for locking"
  36   echo "  host1:     hostname for syncing /srv/ftp-master.debian.org"
  37   echo "  host2:     hostname for syncing /srv/ftp.debian.org"
  38   echo "  sync|pool: sync excludes ftp/, pool syncs ftp/ too"
  39   exit ${1:-0}
  40 }
  41
  42 if [ $# -ne 4 ]; then
  43   usage 1
  44 fi
  45
  46 lockfile="${lockdir}/${1}"
  47 host1="${2}"
  48 host2="${3}"
  49 mode="${4}"
  50
  51 # extra options for rsync of /srv/ftp-master.debian.org
  52 extra1=""
  53
  54 case "${mode}" in
  55     pool|sync)
  56         ;;
  57     *)
  58         echo "Unknown mode ${mode}." >&2
  59         exit 1
  60         ;;
  61 esac
  62
  63 cleanup() {
  64   rm -f "${lockfile}"
  65 }
  66 trap cleanup EXIT TERM HUP INT QUIT
  67
  68 # Also, NEVER use --delete-excluded!
  69 if lockfile -r3 "${lockfile}"; then
  70     rsync -aH -B8192 \
  71         ${extra1} \
  72         --exclude "/.nobackup" \
  73         --exclude "/backup/*.xz" \
  74         --exclude "/backup/dump*" \
  75         --exclude "/build-queues/" \
  76         --exclude "/database/*.db" \
  77         --exclude ".da-backup.trace" \
  78         --exclude "/ftp" \
  79         --exclude "lost+found" \
  80         --exclude "/lock/" \
  81         --exclude "/mirror" \
  82         --exclude "/morgue/" \
  83         --exclude "/queue/bts_version_track/" \
  84         --exclude "/queue/unchecked/" \
  85         --exclude "/s3kr1t" \
  86         --exclude "/scripts/s3kr1t" \
  87         --exclude "/tmp/" \
  88         --delete --delete-after \
  89         --timeout 3600 \
  90         -e 'ssh -o ConnectTimeout=30 -o SetupTimeout=30' \
  91         /srv/ftp-master.debian.org/ "${host1}:/srv/ftp-master.debian.org/"
  92    # command for the remote side:
  93    # command="rsync --server -lHogDtpre.iLsf -B8192 --timeout=3600 --delete-after . /srv/ftp-master.debian.org/"
  94
  95    rsync -aH -B8192 \
  96        --exclude "/.nobackup" \
  97        --exclude mirror \
  98        --exclude rsync/ \
  99        --exclude lost+found \
 100        --exclude .da-backup.trace \
 101        --exclude web-users/ \
 102        --delete --delete-after \
 103        --timeout 3600 \
 104        -e 'ssh -o ConnectTimeout=30 -o SetupTimeout=30' \
 105        /srv/ftp.debian.org/ "${host2}:/srv/ftp.debian.org/"
 106    # command for the remote side:
 107    # command="rsync --server -lHogDtpre.iLsf -B8192 --timeout=3600 --delete-after . /srv/ftp.debian.org/"
 108 else
 109     echo "Couldn't get the lock, not syncing"
 110     exit 0
 111 fi