config/debian/cron.dinstall

   1 #!/bin/bash
   2 # No way I try to deal with a crippled sh just for POSIX foo.
   3
   4 # Copyright (C) 2009 Joerg Jaspert <joerg@debian.org>
   5 #
   6 # This program is free software; you can redistribute it and/or
   7 # modify it under the terms of the GNU General Public License as
   8 # published by the Free Software Foundation; version 2.
   9 #
  10 # This program is distributed in the hope that it will be useful, but
  11 # WITHOUT ANY WARRANTY; without even the implied warranty of
  12 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13 # General Public License for more details.
  14 #
  15 # You should have received a copy of the GNU General Public License
  16 # along with this program; if not, write to the Free Software
  17 # Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  18
  19 # exit on errors
  20 set -e
  21 # make sure to only use defined variables
  22 set -u
  23
  24 # import the general variable set.
  25 export SCRIPTVARS=/srv/ftp.debian.org/dak/config/debian/vars
  26 . $SCRIPTVARS
  27
  28 ########################################################################
  29 # Functions                                                            #
  30 ########################################################################
  31 # common functions are "outsourced"
  32 . "${configdir}/common"
  33
  34 # Timestamp. Used for dinstall stat graphs
  35 function ts() {
  36         TS=$(($TS+1));
  37         echo "Archive maintenance timestamp $TS ($1): $(date +%H:%M:%S)"
  38 }
  39
  40 # Cleanup actions
  41 function cleanup() {
  42         rm -f ${LOCK_DAILY}
  43         rm -f ${LOCK_ACCEPTED}
  44 }
  45
  46 # If we error out this one is called, *FOLLOWED* by cleanup above
  47 function onerror() {
  48     ERRDATE=$(date "+%Y.%m.%d-%H:%M:%S")
  49     cat "$LOGFILE" | mail -s "ATTENTION ATTENTION! dinstall error at ${ERRDATE} (Be quiet, Brain, or I'll stab you with a Q-tip)" cron@ftp-master.debian.org
  50 }
  51
  52 ########################################################################
  53 # the actual dinstall functions follow                                 #
  54 ########################################################################
  55
  56 # Setup the notice file to tell bad mirrors they used the wrong time
  57 function notice() {
  58     rm -f "$NOTICE"
  59     cat > "$NOTICE" <<EOF
  60 Packages are currently being installed and indices rebuilt.
  61 Maintenance is automatic, starting at 01|07|13|19:52 UTC,
  62 and ending about an hour later.  This file is then removed.
  63
  64 You should not mirror the archive during this period.
  65 EOF
  66 }
  67
  68 # pushing merkels QA user, part one
  69 function merkel1() {
  70     log "Telling merkels QA user that we start dinstall"
  71     ssh -2 -i ~dak/.ssh/push_merkel_qa  -o BatchMode=yes -o SetupTimeOut=90 -o ConnectTimeout=90 qa@merkel.debian.org sleep 1
  72 }
  73
  74 # Create the postgres dump files
  75 function pgdump_pre() {
  76     log "Creating pre-daily-cron-job backup of projectb database..."
  77     pg_dump projectb > $base/backup/dump_$(date +%Y.%m.%d-%H:%M:%S)
  78 }
  79
  80 function pgdump_post() {
  81     log "Creating post-daily-cron-job backup of projectb database..."
  82     cd $base/backup
  83     POSTDUMP=$(date +%Y.%m.%d-%H:%M:%S)
  84     pg_dump projectb > $base/backup/dump_$POSTDUMP
  85     pg_dumpall --globals-only > $base/backup/dumpall_$POSTDUMP
  86     ln -sf $base/backup/dump_$POSTDUMP current
  87     ln -sf $base/backup/dumpall_$POSTDUMP currentall
  88 }
  89
  90 # Load the dak-dev projectb
  91 function pgdakdev() {
  92     cd $base/backup
  93     echo "drop database projectb" | psql -p 5433 template1
  94         cat currentall | psql -p 5433 template1
  95     createdb -p 5433 -T template0 projectb
  96     fgrep -v '\connect' current | psql -p 5433 projectb
  97 }
  98
  99 # Updating various files
 100 function updates() {
 101     log "Updating Bugs docu, Mirror list and mailing-lists.txt"
 102     cd $configdir
 103     $scriptsdir/update-bugdoctxt
 104     $scriptsdir/update-mirrorlists
 105     $scriptsdir/update-mailingliststxt
 106     $scriptsdir/update-pseudopackages.sh
 107 }
 108
 109 # Process (oldstable)-proposed-updates "NEW" queue
 110 function punew_do() {
 111     cd "${queuedir}/${1}"
 112     date -u -R >> REPORT
 113     dak process-new -a -C COMMENTS >> REPORT || true
 114     echo >> REPORT
 115 }
 116 function punew() {
 117     log "Doing automated p-u-new processing"
 118     punew_do "$1"
 119 }
 120 function opunew() {
 121     log "Doing automated o-p-u-new processing"
 122     punew_do "$1"
 123 }
 124
 125 # The first i18n one, syncing new descriptions
 126 function i18n1() {
 127     log "Synchronizing i18n package descriptions"
 128     # First sync their newest data
 129     cd ${scriptdir}/i18nsync
 130     rsync -aq --delete --delete-after ddtp-sync:/does/not/matter . || true
 131
 132     # Now check if we still know about the packages for which they created the files
 133     # is the timestamp signed by us?
 134     if $(gpgv --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg timestamp.gpg timestamp); then
 135         # now read it. As its signed by us we are sure the content is what we expect, no need
 136         # to do more here. And we only test -d a directory on it anyway.
 137         TSTAMP=$(cat timestamp)
 138         # do we have the dir still?
 139         if [ -d ${scriptdir}/i18n/${TSTAMP} ]; then
 140             # Lets check!
 141             if ${scriptsdir}/ddtp-i18n-check.sh . ${scriptdir}/i18n/${TSTAMP}; then
 142                 # Yay, worked, lets copy around
 143                 for dir in squeeze sid; do
 144                     if [ -d dists/${dir}/ ]; then
 145                         cd dists/${dir}/main/i18n
 146                         rsync -aq --delete --delete-after  . ${ftpdir}/dists/${dir}/main/i18n/.
 147                     fi
 148                     cd ${scriptdir}/i18nsync
 149                 done
 150             else
 151                 echo "ARRRR, bad guys, wrong files, ARRR"
 152                 echo "Arf, Arf, Arf, bad guys, wrong files, arf, arf, arf" | mail -s "Don't you kids take anything. I'm watching you. I've got eye implants in the back of my head." debian-l10n-devel@lists.alioth.debian.org
 153             fi
 154         else
 155             echo "ARRRR, missing the timestamp ${TSTAMP} directory, not updating i18n, ARRR"
 156             echo "Arf, Arf, Arf, missing the timestamp ${TSTAMP} directory, not updating i18n, arf, arf, arf" | mail -s "Lisa, if you don't like your job you don't strike. You just go in every day and do it really half-assed. That's the American way." debian-l10n-devel@lists.alioth.debian.org
 157         fi
 158     else
 159         echo "ARRRRRRR, could not verify our timestamp signature, ARRR. Don't mess with our files, i18n guys, ARRRRR."
 160         echo "Arf, Arf, Arf, could not verify our timestamp signature, arf. Don't mess with our files, i18n guys, arf, arf, arf" | mail -s "You can't keep blaming yourself. Just blame yourself once, and move on." debian-l10n-devel@lists.alioth.debian.org
 161     fi
 162 }
 163
 164 # Process the accepted queue
 165 function accepted() {
 166     log "Processing queue/accepted"
 167     rm -f "$accepted/REPORT"
 168     dak process-accepted -pa -d "$accepted" > "$accepted/REPORT"
 169     cat "$accepted/REPORT" | mail -s "Install for $(date +"%D - %R")" ftpmaster@ftp-master.debian.org
 170     chgrp debadmin "$accepted/REPORT"
 171     chmod 664 "$accepted/REPORT"
 172 }
 173
 174 function cruft() {
 175     log "Checking for cruft in overrides"
 176     dak check-overrides
 177
 178     log "Fixing symlinks in $ftpdir"
 179     symlinks -d -r $ftpdir
 180 }
 181
 182 function msfl() {
 183     log "Generating suite file lists for apt-ftparchive"
 184     dak make-suite-file-list
 185 }
 186
 187 function fingerprints() {
 188     log "Updating fingerprints"
 189     dak import-keyring -L /srv/keyring.debian.org/keyrings/debian-keyring.gpg
 190 }
 191
 192 function overrides() {
 193     log "Writing overrides into text files"
 194     cd $overridedir
 195     dak make-overrides
 196
 197     # FIXME
 198     rm -f override.sid.all3
 199     for i in main contrib non-free main.debian-installer; do cat override.sid.$i >> override.sid.all3; done
 200 }
 201
 202 function mpfm() {
 203     log "Generating package / file mapping"
 204     dak make-pkg-file-mapping | bzip2 -9 > $base/ftp/indices/package-file.map.bz2
 205 }
 206
 207 function packages() {
 208     log "Generating Packages and Sources files"
 209     cd $configdir
 210     apt-ftparchive generate apt.conf
 211 }
 212
 213 function pdiff() {
 214     log "Generating pdiff files"
 215     dak generate-index-diffs
 216 }
 217
 218 function release() {
 219     log "Generating Release files"
 220     dak generate-releases
 221 }
 222
 223 function dakcleanup() {
 224     log "Cleanup old packages/files"
 225     dak clean-suites -m 10000
 226     dak clean-queues
 227 }
 228
 229 function buildd() {
 230     # Needs to be rebuilt, as files have moved.  Due to unaccepts, we need to
 231     # update this before wanna-build is updated.
 232     log "Regenerating wanna-build/buildd information"
 233     psql projectb -A -t -q -c "SELECT filename FROM queue_build WHERE suite = 5 AND queue = 0 AND in_queue = true AND filename ~ 'd(sc|eb)$'" > $dbdir/dists/unstable_accepted.list
 234     symlinks -d /srv/incoming.debian.org/buildd > /dev/null
 235     apt-ftparchive generate apt.conf.buildd
 236 }
 237
 238 function scripts() {
 239     log "Running various scripts from $scriptsdir"
 240     cd $scriptsdir
 241     ./mkmaintainers
 242     ./copyoverrides
 243     ./mklslar
 244     ./mkfilesindices
 245     ./mkchecksums
 246 }
 247
 248 function mirror() {
 249     echo "Regenerating \"public\" mirror/ hardlink fun"
 250     cd ${mirrordir}
 251     rsync -aH --link-dest ${ftpdir} --delete --delete-after --ignore-errors ${ftpdir}/. .
 252 }
 253
 254 function wb() {
 255     log "Trigger daily wanna-build run"
 256     ssh -o BatchMode=yes -o SetupTimeOut=90 -o ConnectTimeout=90 wbadm@buildd /org/wanna-build/trigger.daily || echo "W-B trigger.daily failed" | mail -s "W-B Daily trigger failed" ftpmaster@ftp-master.debian.org
 257 }
 258
 259 function expire() {
 260     log "Expiring old database dumps..."
 261     cd $base/backup
 262     $scriptsdir/expire_dumps -d . -p -f "dump_*"
 263 }
 264
 265 function reports() {
 266     # Send a report on NEW/BYHAND packages
 267     log "Nagging ftpteam about NEW/BYHAND packages"
 268     dak queue-report | mail -e -s "NEW and BYHAND on $(date +%D)" ftpmaster@ftp-master.debian.org
 269     # and one on crufty packages
 270     log "Sending information about crufty packages"
 271     dak cruft-report > $webdir/cruft-report-daily.txt
 272     dak cruft-report -s experimental >> $webdir/cruft-report-daily.txt
 273     cat $webdir/cruft-report-daily.txt | mail -e -s "Debian archive cruft report for $(date +%D)" ftpmaster@ftp-master.debian.org
 274 }
 275
 276 function dm() {
 277     log "Updating DM html page"
 278     $scriptsdir/dm-monitor >$webdir/dm-uploaders.html
 279 }
 280
 281 function bts() {
 282     log "Categorizing uncategorized bugs filed against ftp.debian.org"
 283     dak bts-categorize
 284 }
 285
 286 function merkel2() {
 287     # Push dak@merkel so it syncs the projectb there. Returns immediately, the sync runs detached
 288     log "Trigger merkels projectb sync"
 289     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_merkel_projectb dak@merkel.debian.org sleep 1
 290 }
 291
 292 function runparts() {
 293     log "Using run-parts to run scripts in $base/scripts/distmnt"
 294     run-parts --report $base/scripts/distmnt
 295 }
 296
 297 function i18n2() {
 298     log "Exporting package data foo for i18n project"
 299     STAMP=$(date "+%Y%m%d%H%M")
 300     mkdir -p ${scriptdir}/i18n/${STAMP}
 301     cd ${scriptdir}/i18n/${STAMP}
 302     dak control-suite -l stable > lenny
 303     dak control-suite -l testing > squeeze
 304     dak control-suite -l unstable > sid
 305     echo "${STAMP}" > timestamp
 306     gpg --secret-keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/secring.gpg --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg --no-options --batch --no-tty --armour --default-key 6070D3A1 --detach-sign -o timestamp.gpg timestamp
 307     rm -f md5sum
 308     md5sum * > md5sum
 309     cd ${webdir}/
 310     ln -sfT ${scriptdir}/i18n/${STAMP} i18n
 311
 312     cd ${scriptdir}
 313     find ./i18n -mindepth 1 -maxdepth 1 -mtime +2 -not -name "${STAMP}" -type d -print0 | xargs --no-run-if-empty -0 rm -rf
 314 }
 315
 316 function stats() {
 317     log "Updating stats data"
 318     cd $configdir
 319     $scriptsdir/update-ftpstats $base/log/* > $base/misc/ftpstats.data
 320     R --slave --vanilla < $base/misc/ftpstats.R
 321 }
 322
 323 function aptftpcleanup() {
 324     log "Clean up apt-ftparchive's databases"
 325     cd $configdir
 326     apt-ftparchive -q clean apt.conf
 327 }
 328
 329 function compress() {
 330     log "Compress old psql backups"
 331     cd $base/backup/
 332     find -maxdepth 1 -mindepth 1 -type f -name 'dump_*' \! -name '*.bz2' \! -name '*.gz' -mtime +1 |
 333     while read dumpname; do
 334         echo "Compressing $dumpname"
 335         bzip2 -9v "$dumpname"
 336     done
 337 }
 338
 339 function logstats() {
 340     $masterdir/tools/logs.py "$1"
 341 }
 342
 343 # save timestamp when we start
 344 function savetimestamp() {
 345         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 346         echo ${NOW} > "${dbdir}/dinstallstart"
 347 }
 348
 349 function maillogfile() {
 350     cat "$LOGFILE" | mail -s "Log for dinstall run of ${NOW}" cron@ftp-master.debian.org
 351 }
 352
 353 function renamelogfile() {
 354     if [ -f "${dbdir}/dinstallstart" ]; then
 355         NOW=$(cat "${dbdir}/dinstallstart")
 356         maillogfile
 357     mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 358         logstats "$logdir/dinstall_${NOW}.log"
 359         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 360     else
 361         error "Problem, I don't know when dinstall started, unable to do log statistics."
 362         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 363         maillogfile
 364         mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 365         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 366     fi
 367 }
 368
 369 function testingsourcelist() {
 370     dak ls -s testing -f heidi -r .| egrep 'source$' > ${webdir}/testing.list
 371 }
 372 ########################################################################
 373 ########################################################################
 374
 375 # Function to save which stage we are in, so we can restart an interrupted
 376 # dinstall. Or even run actions in parallel, if we dare to, by simply
 377 # backgrounding the call to this function. But that should only really be
 378 # done for things we dont care much about.
 379 #
 380 # This should be called with the first argument being an array, with the
 381 # members
 382 #  - FUNC - the function name to call
 383 #  - ARGS - Possible arguments to hand to the function. Can be the empty string
 384 #  - TS   - The timestamp name. Can be the empty string
 385 #  - ERR  - if this is the string false, then the call will be surrounded by
 386 #           set +e ... set -e calls, so errors in the function do not exit
 387 #           dinstall. Can be the empty string, meaning true.
 388 #
 389 # MAKE SURE TO KEEP THIS THE LAST FUNCTION, AFTER ALL THE VARIOUS ONES
 390 # ADDED FOR DINSTALL FEATURES!
 391 function stage() {
 392     ARGS='GO[@]'
 393     local "${!ARGS}"
 394
 395     if [ -f "${stagedir}/${FUNC}" ]; then
 396         stamptime=$(/usr/bin/stat -c %Z "${stagedir}/${FUNC}")
 397         unixtime=$(date +%s)
 398         difference=$(( $unixtime - $stamptime ))
 399         if [ ${difference} -ge 14400 ]; then
 400             log_error "Did already run ${FUNC}, stagefile exists, but that was ${difference} seconds ago. Please check."
 401         else
 402             log "Did already run ${FUNC}, not calling again..."
 403         fi
 404         return
 405     fi
 406
 407     debug "Now calling function ${FUNC}. Arguments: ${ARGS}. Timestamp: ${TS}"
 408
 409     # Make sure we are always at the same place. If a function wants to be elsewhere,
 410     # it has to cd first!
 411     cd ${configdir}
 412
 413     if [ -f "${LOCK_STOP}" ]; then
 414         log "${LOCK_STOP} exists, exiting immediately"
 415         exit 42
 416     fi
 417
 418     if [ "${ERR}" = "false" ]; then
 419         set +e
 420     fi
 421     ${FUNC} ${ARGS}
 422
 423     # No matter what happened in the function, we make sure we have set -e default state back
 424     set -e
 425
 426     # Make sure we are always at the same place.
 427     cd ${configdir}
 428
 429     touch "${stagedir}/${FUNC}"
 430
 431     if [ -n "${TIME}" ]; then
 432         ts "${TIME}"
 433     fi
 434
 435     if [ -f "${LOCK_STOP}" ]; then
 436         log "${LOCK_STOP} exists, exiting immediately"
 437         exit 42
 438     fi
 439 }
 440
 441 ########################################################################
 442
 443 # We need logs.
 444 LOGFILE="$logdir/dinstall.log"
 445
 446 exec >> "$LOGFILE" 2>&1
 447
 448 # usually we are not using debug logs. Set to 1 if you want them.
 449 DEBUG=0
 450
 451 # our name
 452 PROGRAM="dinstall"
 453
 454 # where do we want mails to go? For example log entries made with error()
 455 if [ "x$(hostname -s)x" != "xriesx" ]; then
 456     # Not our ftpmaster host
 457     MAILTO=${MAILTO:-"root"}
 458 else
 459     # Yay, ftpmaster
 460     MAILTO=${MAILTO:-"ftpmaster@debian.org"}
 461 fi
 462
 463 # How many logfiles to keep
 464 LOGROTATE=${LOGROTATE:-400}
 465
 466 # Marker for dinstall start
 467 DINSTALLSTART="${lockdir}/dinstallstart"
 468 # Marker for dinstall end
 469 DINSTALLEND="${lockdir}/dinstallend"
 470
 471 # Timestamps start at -1. so first gets 0
 472 TS=-1
 473 touch "${DINSTALLSTART}"
 474 ts "startup"
 475
 476 # Tell everyone we are doing some work
 477 NOTICE="$ftpdir/Archive_Maintenance_In_Progress"
 478
 479 # lock cron.unchecked (it immediately exits when this exists)
 480 LOCK_DAILY="$lockdir/daily.lock"
 481
 482 # Lock process-new and cron.unchecked from doing work
 483 LOCK_ACCEPTED="$lockdir/unchecked.lock"
 484
 485 # This file is simply used to indicate to britney whether or not
 486 # the Packages file updates completed sucessfully.  It's not a lock
 487 # from our point of view
 488 LOCK_BRITNEY="$lockdir/britney.lock"
 489
 490 # If this file exists we exit immediately after the currently running
 491 # function is done
 492 LOCK_STOP="$lockdir/archive.stop"
 493
 494 lockfile -l 3600 "${LOCK_DAILY}"
 495 trap onerror ERR
 496 trap cleanup EXIT TERM HUP INT QUIT
 497
 498 touch "${LOCK_BRITNEY}"
 499
 500 GO=(
 501     FUNC="savetimestamp"
 502     TIME=""
 503     ARGS=""
 504     ERR="false"
 505 )
 506 stage $GO
 507
 508 GO=(
 509     FUNC="notice"
 510     TIME=""
 511     ARGS=""
 512     ERR="false"
 513 )
 514 stage $GO
 515
 516 GO=(
 517     FUNC="merkel1"
 518     TIME="init"
 519     ARGS=""
 520     ERR="false"
 521 )
 522 stage $GO
 523
 524 GO=(
 525     FUNC="pgdump_pre"
 526     TIME="pg_dump1"
 527     ARGS=""
 528     ERR=""
 529 )
 530 stage $GO
 531
 532 GO=(
 533     FUNC="updates"
 534     TIME="External Updates"
 535     ARGS=""
 536     ERR="false"
 537 )
 538 stage $GO
 539
 540 GO=(
 541     FUNC="punew"
 542     TIME="p-u-new"
 543     ARGS="p-u-new"
 544     ERR=""
 545 )
 546 stage $GO
 547
 548 GO=(
 549     FUNC="opunew"
 550     TIME="o-p-u-new"
 551     ARGS="o-p-u-new"
 552     ERR=""
 553 )
 554 stage $GO
 555
 556 GO=(
 557     FUNC="i18n1"
 558     TIME="i18n 1"
 559     ARGS=""
 560     ERR="false"
 561 )
 562 stage $GO
 563
 564 lockfile "$LOCK_ACCEPTED"
 565
 566 GO=(
 567     FUNC="accepted"
 568     TIME="accepted"
 569     ARGS=""
 570     ERR=""
 571 )
 572 stage $GO
 573
 574 GO=(
 575     FUNC="cruft"
 576     TIME="cruft"
 577     ARGS=""
 578     ERR=""
 579 )
 580 stage $GO
 581
 582 rm -f "$LOCK_ACCEPTED"
 583
 584 GO=(
 585     FUNC="msfl"
 586     TIME="make-suite-file-list"
 587     ARGS=""
 588     ERR=""
 589 )
 590 stage $GO
 591
 592 GO=(
 593     FUNC="fingerprints"
 594     TIME="import-keyring"
 595     ARGS=""
 596     ERR="false"
 597 )
 598 stage $GO
 599
 600 GO=(
 601     FUNC="overrides"
 602     TIME="overrides"
 603     ARGS=""
 604     ERR=""
 605 )
 606 stage $GO
 607
 608 GO=(
 609     FUNC="mpfm"
 610     TIME="pkg-file-mapping"
 611     ARGS=""
 612     ERR="false"
 613 )
 614 stage $GO
 615
 616 GO=(
 617     FUNC="packages"
 618     TIME="apt-ftparchive"
 619     ARGS=""
 620     ERR=""
 621 )
 622 stage $GO
 623
 624 GO=(
 625     FUNC="pdiff"
 626     TIME="pdiff"
 627     ARGS=""
 628     ERR=""
 629 )
 630 stage $GO
 631
 632 GO=(
 633     FUNC="release"
 634     TIME="release files"
 635     ARGS=""
 636     ERR=""
 637 )
 638 stage $GO
 639
 640 GO=(
 641     FUNC="dakcleanup"
 642     TIME="cleanup"
 643     ARGS=""
 644     ERR=""
 645 )
 646 stage $GO
 647
 648 GO=(
 649     FUNC="buildd"
 650     TIME="buildd"
 651     ARGS=""
 652     ERR=""
 653 )
 654 stage $GO
 655
 656 GO=(
 657     FUNC="scripts"
 658     TIME="scripts"
 659     ARGS=""
 660     ERR=""
 661 )
 662 stage $GO
 663
 664 GO=(
 665     FUNC="mirror"
 666     TIME="mirror hardlinks"
 667     ARGS=""
 668     ERR=""
 669 )
 670 stage $GO
 671
 672 GO=(
 673     FUNC="wb"
 674     TIME="w-b"
 675     ARGS=""
 676     ERR=""
 677 )
 678 stage $GO
 679
 680 rm -f "${NOTICE}"
 681 rm -f "${LOCK_DAILY}"
 682
 683 ts "locked part finished"
 684
 685 GO=(
 686     FUNC="pgdump_post"
 687     TIME="pg_dump2"
 688     ARGS=""
 689     ERR=""
 690 )
 691 stage $GO
 692
 693 GO=(
 694     FUNC="pgdakdev"
 695     TIME="dak-dev db"
 696     ARGS=""
 697     ERR="false"
 698 )
 699 stage $GO
 700
 701 GO=(
 702     FUNC="expire"
 703     TIME="expire_dumps"
 704     ARGS=""
 705     ERR=""
 706 )
 707 stage $GO
 708
 709 GO=(
 710     FUNC="reports"
 711     TIME="reports"
 712     ARGS=""
 713     ERR=""
 714 )
 715 stage $GO
 716
 717 GO=(
 718     FUNC="dm"
 719     TIME=""
 720     ARGS=""
 721     ERR=""
 722 )
 723 stage $GO
 724
 725 GO=(
 726     FUNC="bts"
 727     TIME=""
 728     ARGS=""
 729     ERR="false"
 730 )
 731 stage $GO
 732
 733 GO=(
 734     FUNC="merkel2"
 735     TIME="merkel projectb push"
 736     ARGS=""
 737     ERR="false"
 738 )
 739 stage $GO
 740
 741 GO=(
 742     FUNC="runparts"
 743     TIME="run-parts"
 744     ARGS=""
 745     ERR="false"
 746 )
 747 stage $GO
 748
 749 GO=(
 750     FUNC="i18n2"
 751     TIME="i18n 2"
 752     ARGS=""
 753     ERR="false"
 754 )
 755 stage $GO
 756
 757 GO=(
 758     FUNC="stats"
 759     TIME="stats"
 760     ARGS=""
 761     ERR="false"
 762 )
 763 stage $GO
 764
 765 GO=(
 766     FUNC="testingsourcelist"
 767     TIME=""
 768     ARGS=""
 769     ERR="false"
 770 )
 771
 772 rm -f ${LOCK_BRITNEY}
 773
 774 GO=(
 775     FUNC="aptftpcleanup"
 776     TIME="apt-ftparchive cleanup"
 777     ARGS=""
 778     ERR=""
 779 )
 780 stage $GO
 781
 782 GO=(
 783     FUNC="compress"
 784     TIME="compress"
 785     ARGS=""
 786     ERR=""
 787 )
 788 stage $GO
 789
 790 log "Daily cron scripts successful, all done"
 791
 792 exec > "$logdir/afterdinstall.log" 2>&1
 793
 794 GO=(
 795     FUNC="renamelogfile"
 796     TIME=""
 797     ARGS=""
 798     ERR="false"
 799 )
 800 stage $GO
 801
 802
 803 # Now, at the very (successful) end of dinstall, make sure we remove
 804 # our stage files, so the next dinstall run will do it all again.
 805 rm -f ${stagedir}/*
 806 touch "${DINSTALLEND}"