config/debian/cron.dinstall

   1 #!/bin/bash
   2 # No way I try to deal with a crippled sh just for POSIX foo.
   3
   4 # Copyright (C) 2009 Joerg Jaspert <joerg@debian.org>
   5 #
   6 # This program is free software; you can redistribute it and/or
   7 # modify it under the terms of the GNU General Public License as
   8 # published by the Free Software Foundation; version 2.
   9 #
  10 # This program is distributed in the hope that it will be useful, but
  11 # WITHOUT ANY WARRANTY; without even the implied warranty of
  12 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13 # General Public License for more details.
  14 #
  15 # You should have received a copy of the GNU General Public License
  16 # along with this program; if not, write to the Free Software
  17 # Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  18
  19 # exit on errors
  20 set -e
  21 # make sure to only use defined variables
  22 set -u
  23
  24 # import the general variable set.
  25 export SCRIPTVARS=/srv/ftp.debian.org/dak/config/debian/vars
  26 . $SCRIPTVARS
  27
  28 ########################################################################
  29 # Functions                                                            #
  30 ########################################################################
  31 # common functions are "outsourced"
  32 . "${configdir}/common"
  33
  34 # Timestamp. Used for dinstall stat graphs
  35 function ts() {
  36         TS=$(($TS+1));
  37         echo "Archive maintenance timestamp $TS ($1): $(date +%H:%M:%S)"
  38 }
  39
  40 # Cleanup actions
  41 function cleanup() {
  42         rm -f ${LOCK_DAILY}
  43         rm -f ${LOCK_ACCEPTED}
  44 }
  45
  46 # If we error out this one is called, *FOLLOWED* by cleanup above
  47 function onerror() {
  48     ERRDATE=$(date "+%Y.%m.%d-%H:%M:%S")
  49     cat "$LOGFILE" | mail -s "ATTENTION ATTENTION! dinstall error at ${ERRDATE} (Be quiet, Brain, or I'll stab you with a Q-tip)" cron@ftp-master.debian.org
  50 }
  51
  52 ########################################################################
  53 # the actual dinstall functions follow                                 #
  54 ########################################################################
  55
  56 # Setup the notice file to tell bad mirrors they used the wrong time
  57 function notice() {
  58     rm -f "$NOTICE"
  59     cat > "$NOTICE" <<EOF
  60 Packages are currently being installed and indices rebuilt.
  61 Maintenance is automatic, starting at 01|07|13|19:52 UTC,
  62 and ending about an hour later.  This file is then removed.
  63
  64 You should not mirror the archive during this period.
  65 EOF
  66 }
  67
  68 # pushing merkels QA user, part one
  69 function merkel1() {
  70     log "Telling merkels QA user that we start dinstall"
  71     ssh -2 -i ~dak/.ssh/push_merkel_qa  -o BatchMode=yes -o SetupTimeOut=90 -o ConnectTimeout=90 qa@merkel.debian.org sleep 1
  72 }
  73
  74 # Create the postgres dump files
  75 function pgdump_pre() {
  76     log "Creating pre-daily-cron-job backup of projectb database..."
  77     pg_dump projectb > $base/backup/dump_pre_$(date +%Y.%m.%d-%H:%M:%S)
  78 }
  79
  80 function pgdump_post() {
  81     log "Creating post-daily-cron-job backup of projectb database..."
  82     cd $base/backup
  83     POSTDUMP=$(date +%Y.%m.%d-%H:%M:%S)
  84     pg_dump projectb > $base/backup/dump_$POSTDUMP
  85     pg_dumpall --globals-only > $base/backup/dumpall_$POSTDUMP
  86     ln -sf $base/backup/dump_$POSTDUMP current
  87     ln -sf $base/backup/dumpall_$POSTDUMP currentall
  88 }
  89
  90 # Load the dak-dev projectb
  91 function pgdakdev() {
  92     cd $base/backup
  93     echo "drop database projectb" | psql -p 5433 template1
  94         cat currentall | psql -p 5433 template1
  95     createdb -p 5433 -T template0 projectb
  96     fgrep -v '\connect' current | psql -p 5433 projectb
  97 }
  98
  99 # Updating various files
 100 function updates() {
 101     log "Updating Bugs docu, Mirror list and mailing-lists.txt"
 102     cd $configdir
 103     $scriptsdir/update-bugdoctxt
 104     $scriptsdir/update-mirrorlists
 105     $scriptsdir/update-mailingliststxt
 106     $scriptsdir/update-pseudopackages.sh
 107 }
 108
 109 # Process (oldstable)-proposed-updates "NEW" queue
 110 function punew_do() {
 111     cd "${queuedir}/${1}"
 112     date -u -R >> REPORT
 113     dak process-new -a -C COMMENTS >> REPORT || true
 114     echo >> REPORT
 115 }
 116 function punew() {
 117     log "Doing automated p-u-new processing"
 118     punew_do "$1"
 119 }
 120 function opunew() {
 121     log "Doing automated o-p-u-new processing"
 122     punew_do "$1"
 123 }
 124
 125 # The first i18n one, syncing new descriptions
 126 function i18n1() {
 127     log "Synchronizing i18n package descriptions"
 128     # First sync their newest data
 129     cd ${scriptdir}/i18nsync
 130     rsync -aq --delete --delete-after ddtp-sync:/does/not/matter . || true
 131
 132     # Now check if we still know about the packages for which they created the files
 133     # is the timestamp signed by us?
 134     if $(gpgv --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg timestamp.gpg timestamp); then
 135         # now read it. As its signed by us we are sure the content is what we expect, no need
 136         # to do more here. And we only test -d a directory on it anyway.
 137         TSTAMP=$(cat timestamp)
 138         # do we have the dir still?
 139         if [ -d ${scriptdir}/i18n/${TSTAMP} ]; then
 140             # Lets check!
 141             if ${scriptsdir}/ddtp-i18n-check.sh . ${scriptdir}/i18n/${TSTAMP}; then
 142                 # Yay, worked, lets copy around
 143                 for dir in squeeze sid; do
 144                     if [ -d dists/${dir}/ ]; then
 145                         cd dists/${dir}/main/i18n
 146                         rsync -aq --delete --delete-after  . ${ftpdir}/dists/${dir}/main/i18n/.
 147                     fi
 148                     cd ${scriptdir}/i18nsync
 149                 done
 150             else
 151                 echo "ARRRR, bad guys, wrong files, ARRR"
 152                 echo "Arf, Arf, Arf, bad guys, wrong files, arf, arf, arf" | mail -s "Don't you kids take anything. I'm watching you. I've got eye implants in the back of my head." debian-l10n-devel@lists.alioth.debian.org
 153             fi
 154         else
 155             echo "ARRRR, missing the timestamp ${TSTAMP} directory, not updating i18n, ARRR"
 156             echo "Arf, Arf, Arf, missing the timestamp ${TSTAMP} directory, not updating i18n, arf, arf, arf" | mail -s "Lisa, if you don't like your job you don't strike. You just go in every day and do it really half-assed. That's the American way." debian-l10n-devel@lists.alioth.debian.org
 157         fi
 158     else
 159         echo "ARRRRRRR, could not verify our timestamp signature, ARRR. Don't mess with our files, i18n guys, ARRRRR."
 160         echo "Arf, Arf, Arf, could not verify our timestamp signature, arf. Don't mess with our files, i18n guys, arf, arf, arf" | mail -s "You can't keep blaming yourself. Just blame yourself once, and move on." debian-l10n-devel@lists.alioth.debian.org
 161     fi
 162 }
 163
 164 # Process the accepted queue
 165 function accepted() {
 166     log "Processing queue/accepted"
 167     rm -f "$accepted/REPORT"
 168     dak process-accepted -pa -d "$accepted" > "$accepted/REPORT"
 169     cat "$accepted/REPORT" | mail -s "Install for $(date +"%D - %R")" ftpmaster@ftp-master.debian.org
 170     chgrp debadmin "$accepted/REPORT"
 171     chmod 664 "$accepted/REPORT"
 172 }
 173
 174 function cruft() {
 175     log "Checking for cruft in overrides"
 176     dak check-overrides
 177
 178     log "Fixing symlinks in $ftpdir"
 179     symlinks -d -r $ftpdir
 180 }
 181
 182 function msfl() {
 183     log "Generating suite file lists for apt-ftparchive"
 184     dak make-suite-file-list
 185 }
 186
 187 function fingerprints() {
 188     log "Updating fingerprints"
 189     dak import-keyring -L /srv/keyring.debian.org/keyrings/debian-keyring.gpg
 190 }
 191
 192 function overrides() {
 193     log "Writing overrides into text files"
 194     cd $overridedir
 195     dak make-overrides
 196
 197     # FIXME
 198     rm -f override.sid.all3
 199     for i in main contrib non-free main.debian-installer; do cat override.sid.$i >> override.sid.all3; done
 200 }
 201
 202 function mpfm() {
 203     log "Generating package / file mapping"
 204     dak make-pkg-file-mapping | bzip2 -9 > $base/ftp/indices/package-file.map.bz2
 205 }
 206
 207 function packages() {
 208     log "Generating Packages and Sources files"
 209     cd $configdir
 210     apt-ftparchive generate apt.conf
 211 }
 212
 213 function pdiff() {
 214     log "Generating pdiff files"
 215     dak generate-index-diffs
 216 }
 217
 218 function release() {
 219     log "Generating Release files"
 220     dak generate-releases
 221 }
 222
 223 function dakcleanup() {
 224     log "Cleanup old packages/files"
 225     dak clean-suites -m 10000
 226     dak clean-queues
 227 }
 228
 229 function buildd() {
 230     # Needs to be rebuilt, as files have moved.  Due to unaccepts, we need to
 231     # update this before wanna-build is updated.
 232     log "Regenerating wanna-build/buildd information"
 233     psql projectb -A -t -q -c "SELECT filename FROM queue_build WHERE suite = 5 AND queue = 0 AND in_queue = true AND filename ~ 'd(sc|eb)$'" > $dbdir/dists/unstable_accepted.list
 234     symlinks -d /srv/incoming.debian.org/buildd > /dev/null
 235     apt-ftparchive generate apt.conf.buildd
 236 }
 237
 238 function scripts() {
 239     log "Running various scripts from $scriptsdir"
 240     cd $scriptsdir
 241     ./mkmaintainers
 242     ./copyoverrides
 243     ./mklslar
 244     ./mkfilesindices
 245     ./mkchecksums
 246 }
 247
 248 function mirror() {
 249     echo "Regenerating \"public\" mirror/ hardlink fun"
 250     cd ${mirrordir}
 251     rsync -aH --link-dest ${ftpdir} --delete --delete-after --ignore-errors ${ftpdir}/. .
 252 }
 253
 254 function wb() {
 255     log "Trigger daily wanna-build run"
 256     ssh -o BatchMode=yes -o SetupTimeOut=90 -o ConnectTimeout=90 wbadm@buildd /org/wanna-build/trigger.daily || echo "W-B trigger.daily failed" | mail -s "W-B Daily trigger failed" ftpmaster@ftp-master.debian.org
 257 }
 258
 259 function expire() {
 260     log "Expiring old database dumps..."
 261     cd $base/backup
 262     $scriptsdir/expire_dumps -d . -p -f "dump_*"
 263 }
 264
 265 function reports() {
 266     # Send a report on NEW/BYHAND packages
 267     log "Nagging ftpteam about NEW/BYHAND packages"
 268     dak queue-report | mail -e -s "NEW and BYHAND on $(date +%D)" ftpmaster@ftp-master.debian.org
 269     # and one on crufty packages
 270     log "Sending information about crufty packages"
 271     dak cruft-report > $webdir/cruft-report-daily.txt
 272     dak cruft-report -s experimental >> $webdir/cruft-report-daily.txt
 273     cat $webdir/cruft-report-daily.txt | mail -e -s "Debian archive cruft report for $(date +%D)" ftpmaster@ftp-master.debian.org
 274 }
 275
 276 function dm() {
 277     log "Updating DM html page"
 278     $scriptsdir/dm-monitor >$webdir/dm-uploaders.html
 279 }
 280
 281 function bts() {
 282     log "Categorizing uncategorized bugs filed against ftp.debian.org"
 283     dak bts-categorize
 284 }
 285
 286 function merkel2() {
 287     # Push dak@merkel so it syncs the projectb there. Returns immediately, the sync runs detached
 288     log "Trigger merkels projectb sync"
 289     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_merkel_projectb dak@merkel.debian.org sleep 1
 290 }
 291
 292 function merkel3() {
 293     # Push dak@merkel to tell it to sync the dd accessible parts. Returns immediately, the sync runs detached
 294     log "Trigger merkels dd accessible parts sync"
 295     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_merkel_ddaccess dak@merkel.debian.org sleep 1
 296 }
 297
 298 function runparts() {
 299     log "Using run-parts to run scripts in $base/scripts/distmnt"
 300     run-parts --report $base/scripts/distmnt
 301 }
 302
 303 function i18n2() {
 304     log "Exporting package data foo for i18n project"
 305     STAMP=$(date "+%Y%m%d%H%M")
 306     mkdir -p ${scriptdir}/i18n/${STAMP}
 307     cd ${scriptdir}/i18n/${STAMP}
 308     dak control-suite -l stable > lenny
 309     dak control-suite -l testing > squeeze
 310     dak control-suite -l unstable > sid
 311     echo "${STAMP}" > timestamp
 312     gpg --secret-keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/secring.gpg --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg --no-options --batch --no-tty --armour --default-key 6070D3A1 --detach-sign -o timestamp.gpg timestamp
 313     rm -f md5sum
 314     md5sum * > md5sum
 315     cd ${webdir}/
 316     ln -sfT ${scriptdir}/i18n/${STAMP} i18n
 317
 318     cd ${scriptdir}
 319     find ./i18n -mindepth 1 -maxdepth 1 -mtime +2 -not -name "${STAMP}" -type d -print0 | xargs --no-run-if-empty -0 rm -rf
 320 }
 321
 322 function stats() {
 323     log "Updating stats data"
 324     cd $configdir
 325     $scriptsdir/update-ftpstats $base/log/* > $base/misc/ftpstats.data
 326     R --slave --vanilla < $base/misc/ftpstats.R
 327 }
 328
 329 function aptftpcleanup() {
 330     log "Clean up apt-ftparchive's databases"
 331     cd $configdir
 332     apt-ftparchive -q clean apt.conf
 333 }
 334
 335 function compress() {
 336     log "Compress old psql backups"
 337     cd $base/backup/
 338     find -maxdepth 1 -mindepth 1 -type f -name 'dump_pre_*' -mtime +2 -print0 | xargs -0 --no-run-if-empty rm
 339
 340     find -maxdepth 1 -mindepth 1 -type f -name 'dump_*' \! -name '*.bz2' \! -name '*.gz' -mmin 720 |
 341     while read dumpname; do
 342         echo "Compressing $dumpname"
 343         bzip2 -9v "$dumpname"
 344     done
 345     find -maxdepth 1 -mindepth 1 -type f -name "dumpall_*" \! -name '*.bz2' \! -name '*.gz' -mmin 720 |
 346     while read dumpname; do
 347         echo "Compressing $dumpname"
 348         bzip2 -9v "$dumpname"
 349     done
 350     finddup -l -d $base/backup
 351 }
 352
 353 function logstats() {
 354     $masterdir/tools/logs.py "$1"
 355 }
 356
 357 # save timestamp when we start
 358 function savetimestamp() {
 359         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 360         echo ${NOW} > "${dbdir}/dinstallstart"
 361 }
 362
 363 function maillogfile() {
 364     cat "$LOGFILE" | mail -s "Log for dinstall run of ${NOW}" cron@ftp-master.debian.org
 365 }
 366
 367 function renamelogfile() {
 368     if [ -f "${dbdir}/dinstallstart" ]; then
 369         NOW=$(cat "${dbdir}/dinstallstart")
 370         maillogfile
 371     mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 372         logstats "$logdir/dinstall_${NOW}.log"
 373         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 374     else
 375         error "Problem, I don't know when dinstall started, unable to do log statistics."
 376         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 377         maillogfile
 378         mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 379         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 380     fi
 381 }
 382
 383 function testingsourcelist() {
 384     dak ls -s testing -f heidi -r .| egrep 'source$' > ${webdir}/testing.list
 385 }
 386 ########################################################################
 387 ########################################################################
 388
 389 # Function to save which stage we are in, so we can restart an interrupted
 390 # dinstall. Or even run actions in parallel, if we dare to, by simply
 391 # backgrounding the call to this function. But that should only really be
 392 # done for things we dont care much about.
 393 #
 394 # This should be called with the first argument being an array, with the
 395 # members
 396 #  - FUNC - the function name to call
 397 #  - ARGS - Possible arguments to hand to the function. Can be the empty string
 398 #  - TS   - The timestamp name. Can be the empty string
 399 #  - ERR  - if this is the string false, then the call will be surrounded by
 400 #           set +e ... set -e calls, so errors in the function do not exit
 401 #           dinstall. Can be the empty string, meaning true.
 402 #
 403 # MAKE SURE TO KEEP THIS THE LAST FUNCTION, AFTER ALL THE VARIOUS ONES
 404 # ADDED FOR DINSTALL FEATURES!
 405 function stage() {
 406     ARGS='GO[@]'
 407     local "${!ARGS}"
 408
 409     if [ -f "${stagedir}/${FUNC}" ]; then
 410         stamptime=$(/usr/bin/stat -c %Z "${stagedir}/${FUNC}")
 411         unixtime=$(date +%s)
 412         difference=$(( $unixtime - $stamptime ))
 413         if [ ${difference} -ge 14400 ]; then
 414             log_error "Did already run ${FUNC}, stagefile exists, but that was ${difference} seconds ago. Please check."
 415         else
 416             log "Did already run ${FUNC}, not calling again..."
 417         fi
 418         return
 419     fi
 420
 421     debug "Now calling function ${FUNC}. Arguments: ${ARGS}. Timestamp: ${TS}"
 422
 423     # Make sure we are always at the same place. If a function wants to be elsewhere,
 424     # it has to cd first!
 425     cd ${configdir}
 426
 427     if [ -f "${LOCK_STOP}" ]; then
 428         log "${LOCK_STOP} exists, exiting immediately"
 429         exit 42
 430     fi
 431
 432     if [ "${ERR}" = "false" ]; then
 433         set +e
 434     fi
 435     ${FUNC} ${ARGS}
 436
 437     # No matter what happened in the function, we make sure we have set -e default state back
 438     set -e
 439
 440     # Make sure we are always at the same place.
 441     cd ${configdir}
 442
 443     touch "${stagedir}/${FUNC}"
 444
 445     if [ -n "${TIME}" ]; then
 446         ts "${TIME}"
 447     fi
 448
 449     if [ -f "${LOCK_STOP}" ]; then
 450         log "${LOCK_STOP} exists, exiting immediately"
 451         exit 42
 452     fi
 453 }
 454
 455 ########################################################################
 456
 457 # We need logs.
 458 LOGFILE="$logdir/dinstall.log"
 459
 460 exec >> "$LOGFILE" 2>&1
 461
 462 # usually we are not using debug logs. Set to 1 if you want them.
 463 DEBUG=0
 464
 465 # our name
 466 PROGRAM="dinstall"
 467
 468 # where do we want mails to go? For example log entries made with error()
 469 if [ "x$(hostname -s)x" != "xriesx" ]; then
 470     # Not our ftpmaster host
 471     MAILTO=${MAILTO:-"root"}
 472 else
 473     # Yay, ftpmaster
 474     MAILTO=${MAILTO:-"ftpmaster@debian.org"}
 475 fi
 476
 477 # How many logfiles to keep
 478 LOGROTATE=${LOGROTATE:-400}
 479
 480 # Marker for dinstall start
 481 DINSTALLSTART="${lockdir}/dinstallstart"
 482 # Marker for dinstall end
 483 DINSTALLEND="${lockdir}/dinstallend"
 484
 485 # Timestamps start at -1. so first gets 0
 486 TS=-1
 487 touch "${DINSTALLSTART}"
 488 ts "startup"
 489
 490 # Tell everyone we are doing some work
 491 NOTICE="$ftpdir/Archive_Maintenance_In_Progress"
 492
 493 # lock cron.unchecked (it immediately exits when this exists)
 494 LOCK_DAILY="$lockdir/daily.lock"
 495
 496 # Lock process-new and cron.unchecked from doing work
 497 LOCK_ACCEPTED="$lockdir/unchecked.lock"
 498
 499 # This file is simply used to indicate to britney whether or not
 500 # the Packages file updates completed sucessfully.  It's not a lock
 501 # from our point of view
 502 LOCK_BRITNEY="$lockdir/britney.lock"
 503
 504 # If this file exists we exit immediately after the currently running
 505 # function is done
 506 LOCK_STOP="$lockdir/archive.stop"
 507
 508 lockfile -l 3600 "${LOCK_DAILY}"
 509 trap onerror ERR
 510 trap cleanup EXIT TERM HUP INT QUIT
 511
 512 touch "${LOCK_BRITNEY}"
 513
 514 GO=(
 515     FUNC="savetimestamp"
 516     TIME=""
 517     ARGS=""
 518     ERR="false"
 519 )
 520 stage $GO
 521
 522 GO=(
 523     FUNC="notice"
 524     TIME=""
 525     ARGS=""
 526     ERR="false"
 527 )
 528 stage $GO
 529
 530 GO=(
 531     FUNC="merkel1"
 532     TIME="init"
 533     ARGS=""
 534     ERR="false"
 535 )
 536 stage $GO
 537
 538 GO=(
 539     FUNC="pgdump_pre"
 540     TIME="pg_dump1"
 541     ARGS=""
 542     ERR=""
 543 )
 544 stage $GO
 545
 546 GO=(
 547     FUNC="updates"
 548     TIME="External Updates"
 549     ARGS=""
 550     ERR="false"
 551 )
 552 stage $GO
 553
 554 GO=(
 555     FUNC="punew"
 556     TIME="p-u-new"
 557     ARGS="p-u-new"
 558     ERR=""
 559 )
 560 stage $GO
 561
 562 GO=(
 563     FUNC="opunew"
 564     TIME="o-p-u-new"
 565     ARGS="o-p-u-new"
 566     ERR=""
 567 )
 568 stage $GO
 569
 570 GO=(
 571     FUNC="i18n1"
 572     TIME="i18n 1"
 573     ARGS=""
 574     ERR="false"
 575 )
 576 stage $GO
 577
 578 lockfile "$LOCK_ACCEPTED"
 579
 580 GO=(
 581     FUNC="accepted"
 582     TIME="accepted"
 583     ARGS=""
 584     ERR=""
 585 )
 586 stage $GO
 587
 588 GO=(
 589     FUNC="cruft"
 590     TIME="cruft"
 591     ARGS=""
 592     ERR=""
 593 )
 594 stage $GO
 595
 596 rm -f "$LOCK_ACCEPTED"
 597
 598 GO=(
 599     FUNC="msfl"
 600     TIME="make-suite-file-list"
 601     ARGS=""
 602     ERR=""
 603 )
 604 stage $GO
 605
 606 GO=(
 607     FUNC="fingerprints"
 608     TIME="import-keyring"
 609     ARGS=""
 610     ERR="false"
 611 )
 612 stage $GO
 613
 614 GO=(
 615     FUNC="overrides"
 616     TIME="overrides"
 617     ARGS=""
 618     ERR=""
 619 )
 620 stage $GO
 621
 622 GO=(
 623     FUNC="mpfm"
 624     TIME="pkg-file-mapping"
 625     ARGS=""
 626     ERR="false"
 627 )
 628 stage $GO
 629
 630 GO=(
 631     FUNC="packages"
 632     TIME="apt-ftparchive"
 633     ARGS=""
 634     ERR=""
 635 )
 636 stage $GO
 637
 638 GO=(
 639     FUNC="pdiff"
 640     TIME="pdiff"
 641     ARGS=""
 642     ERR=""
 643 )
 644 stage $GO
 645
 646 GO=(
 647     FUNC="release"
 648     TIME="release files"
 649     ARGS=""
 650     ERR=""
 651 )
 652 stage $GO
 653
 654 GO=(
 655     FUNC="dakcleanup"
 656     TIME="cleanup"
 657     ARGS=""
 658     ERR=""
 659 )
 660 stage $GO
 661
 662 GO=(
 663     FUNC="buildd"
 664     TIME="buildd"
 665     ARGS=""
 666     ERR=""
 667 )
 668 stage $GO
 669
 670 GO=(
 671     FUNC="scripts"
 672     TIME="scripts"
 673     ARGS=""
 674     ERR=""
 675 )
 676 stage $GO
 677
 678 GO=(
 679     FUNC="mirror"
 680     TIME="mirror hardlinks"
 681     ARGS=""
 682     ERR=""
 683 )
 684 stage $GO
 685
 686 GO=(
 687     FUNC="wb"
 688     TIME="w-b"
 689     ARGS=""
 690     ERR=""
 691 )
 692 stage $GO
 693
 694 rm -f "${NOTICE}"
 695 rm -f "${LOCK_DAILY}"
 696
 697 ts "locked part finished"
 698
 699 GO=(
 700     FUNC="pgdump_post"
 701     TIME="pg_dump2"
 702     ARGS=""
 703     ERR=""
 704 )
 705 stage $GO
 706
 707 GO=(
 708     FUNC="expire"
 709     TIME="expire_dumps"
 710     ARGS=""
 711     ERR=""
 712 )
 713 stage $GO
 714
 715 GO=(
 716     FUNC="reports"
 717     TIME="reports"
 718     ARGS=""
 719     ERR=""
 720 )
 721 stage $GO
 722
 723 GO=(
 724     FUNC="dm"
 725     TIME=""
 726     ARGS=""
 727     ERR=""
 728 )
 729 stage $GO
 730
 731 GO=(
 732     FUNC="bts"
 733     TIME=""
 734     ARGS=""
 735     ERR="false"
 736 )
 737 stage $GO
 738
 739 GO=(
 740     FUNC="merkel2"
 741     TIME="merkel projectb push"
 742     ARGS=""
 743     ERR="false"
 744 )
 745 stage $GO
 746
 747 GO=(
 748     FUNC="runparts"
 749     TIME="run-parts"
 750     ARGS=""
 751     ERR="false"
 752 )
 753 stage $GO
 754
 755 GO=(
 756     FUNC="i18n2"
 757     TIME="i18n 2"
 758     ARGS=""
 759     ERR="false"
 760 )
 761 stage $GO
 762
 763 GO=(
 764     FUNC="stats"
 765     TIME="stats"
 766     ARGS=""
 767     ERR="false"
 768 )
 769 stage $GO
 770
 771 GO=(
 772     FUNC="testingsourcelist"
 773     TIME=""
 774     ARGS=""
 775     ERR="false"
 776 )
 777 stage $GO
 778
 779 rm -f ${LOCK_BRITNEY}
 780
 781 GO=(
 782     FUNC="pgdakdev"
 783     TIME="dak-dev db"
 784     ARGS=""
 785     ERR="false"
 786 )
 787 stage $GO
 788
 789 GO=(
 790     FUNC="aptftpcleanup"
 791     TIME="apt-ftparchive cleanup"
 792     ARGS=""
 793     ERR=""
 794 )
 795 stage $GO
 796
 797 GO=(
 798     FUNC="merkel3"
 799     TIME="merkel ddaccessible sync"
 800     ARGS=""
 801     ERR="false"
 802 )
 803 stage $GO
 804
 805 GO=(
 806     FUNC="compress"
 807     TIME="compress"
 808     ARGS=""
 809     ERR=""
 810 )
 811 stage $GO
 812
 813 log "Daily cron scripts successful, all done"
 814
 815 exec > "$logdir/afterdinstall.log" 2>&1
 816
 817 GO=(
 818     FUNC="renamelogfile"
 819     TIME=""
 820     ARGS=""
 821     ERR="false"
 822 )
 823 stage $GO
 824
 825
 826 # Now, at the very (successful) end of dinstall, make sure we remove
 827 # our stage files, so the next dinstall run will do it all again.
 828 rm -f ${stagedir}/*
 829 touch "${DINSTALLEND}"