config/debian/dinstall.functions

   1 # Timestamp. Used for dinstall stat graphs
   2 function ts() {
   3         echo "Archive maintenance timestamp ($1): $(date +%H:%M:%S)"
   4 }
   5
   6 # Cleanup actions
   7 function cleanup() {
   8         rm -f ${LOCK_DAILY}
   9         rm -f ${LOCK_ACCEPTED}
  10 }
  11
  12 # If we error out this one is called, *FOLLOWED* by cleanup above
  13 function onerror() {
  14     ERRDATE=$(date "+%Y.%m.%d-%H:%M:%S")
  15
  16     subject="ATTENTION ATTENTION!"
  17     if [ "${error}" = "false" ]; then
  18         subject="${subject} (continued)"
  19     else
  20         subject="${subject} (interrupted)"
  21     fi
  22     subject="${subject} dinstall error at ${ERRDATE} in ${STAGEFILE} - (Be quiet, Brain, or I'll stab you with a Q-tip)"
  23
  24     cat "${STAGEFILE}.log" | mail -s "${subject}" -a "X-Debian: DAK" cron@ftp-master.debian.org
  25 }
  26
  27 ########################################################################
  28 # the actual dinstall functions follow                                 #
  29 ########################################################################
  30
  31 # pushing merkels QA user, part one
  32 function merkel1() {
  33     log "Telling merkels QA user that we start dinstall"
  34     ssh -2 -i ~dak/.ssh/push_merkel_qa  -o BatchMode=yes -o SetupTimeOut=90 -o ConnectTimeout=90 qa@merkel.debian.org sleep 1
  35 }
  36
  37 # Create the postgres dump files
  38 function pgdump_pre() {
  39     log "Creating pre-daily-cron-job backup of projectb database..."
  40     pg_dump projectb > $base/backup/dump_pre_$(date +%Y.%m.%d-%H:%M:%S)
  41 }
  42
  43 function pgdump_post() {
  44     log "Creating post-daily-cron-job backup of projectb database..."
  45     cd $base/backup
  46     POSTDUMP=$(date +%Y.%m.%d-%H:%M:%S)
  47     pg_dump projectb > $base/backup/dump_$POSTDUMP
  48     pg_dumpall --globals-only > $base/backup/dumpall_$POSTDUMP
  49     ln -sf $base/backup/dump_$POSTDUMP current
  50     ln -sf $base/backup/dumpall_$POSTDUMP currentall
  51 }
  52
  53 # Load the dak-dev projectb
  54 function pgdakdev() {
  55     cd $base/backup
  56     echo "drop database projectb" | psql -p 5433 template1
  57         cat currentall | psql -p 5433 template1
  58     createdb -p 5433 -T template0 projectb
  59     fgrep -v '\connect' current | psql -p 5433 projectb
  60 }
  61
  62 # Updating various files
  63 function updates() {
  64     log "Updating Bugs docu, Mirror list and mailing-lists.txt"
  65     cd $configdir
  66     $scriptsdir/update-bugdoctxt
  67     $scriptsdir/update-mirrorlists
  68     $scriptsdir/update-mailingliststxt
  69     $scriptsdir/update-pseudopackages.sh
  70 }
  71
  72 # Process (oldstable)-proposed-updates "NEW" queue
  73 function punew_do() {
  74     cd "${queuedir}/${1}"
  75     date -u -R >> REPORT
  76     dak process-new -a -C COMMENTS >> REPORT || true
  77     echo >> REPORT
  78 }
  79 function punew() {
  80     log "Doing automated p-u-new processing"
  81     punew_do "$1"
  82 }
  83 function opunew() {
  84     log "Doing automated o-p-u-new processing"
  85     punew_do "$1"
  86 }
  87
  88 # The first i18n one, syncing new descriptions
  89 function i18n1() {
  90     log "Synchronizing i18n package descriptions"
  91     # First sync their newest data
  92     cd ${scriptdir}/i18nsync
  93     rsync -aq --delete --delete-after ddtp-sync:/does/not/matter . || true
  94
  95     # Now check if we still know about the packages for which they created the files
  96     # is the timestamp signed by us?
  97     if $(gpgv --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg timestamp.gpg timestamp); then
  98         # now read it. As its signed by us we are sure the content is what we expect, no need
  99         # to do more here. And we only test -d a directory on it anyway.
 100         TSTAMP=$(cat timestamp)
 101         # do we have the dir still?
 102         if [ -d ${scriptdir}/i18n/${TSTAMP} ]; then
 103             # Lets check!
 104             if ${scriptsdir}/ddtp-i18n-check.sh . ${scriptdir}/i18n/${TSTAMP}; then
 105                 # Yay, worked, lets copy around
 106                 for dir in squeeze sid; do
 107                     if [ -d dists/${dir}/ ]; then
 108                         cd dists/${dir}/main/i18n
 109                         rsync -aq --delete --delete-after  . ${ftpdir}/dists/${dir}/main/i18n/.
 110                     fi
 111                     cd ${scriptdir}/i18nsync
 112                 done
 113             else
 114                 echo "ARRRR, bad guys, wrong files, ARRR"
 115                 echo "Arf, Arf, Arf, bad guys, wrong files, arf, arf, arf" | mail -s "Don't you kids take anything. I'm watching you. I've got eye implants in the back of my head." debian-l10n-devel@lists.alioth.debian.org
 116             fi
 117         else
 118             echo "ARRRR, missing the timestamp ${TSTAMP} directory, not updating i18n, ARRR"
 119             echo "Arf, Arf, Arf, missing the timestamp ${TSTAMP} directory, not updating i18n, arf, arf, arf" | mail -s "Lisa, if you don't like your job you don't strike. You just go in every day and do it really half-assed. That's the American way." debian-l10n-devel@lists.alioth.debian.org
 120         fi
 121     else
 122         echo "ARRRRRRR, could not verify our timestamp signature, ARRR. Don't mess with our files, i18n guys, ARRRRR."
 123         echo "Arf, Arf, Arf, could not verify our timestamp signature, arf. Don't mess with our files, i18n guys, arf, arf, arf" | mail -s "You can't keep blaming yourself. Just blame yourself once, and move on." debian-l10n-devel@lists.alioth.debian.org
 124     fi
 125 }
 126
 127 function cruft() {
 128     log "Checking for cruft in overrides"
 129     dak check-overrides
 130 }
 131
 132 function msfl() {
 133     log "Generating suite file lists for apt-ftparchive"
 134     dak make-suite-file-list
 135 }
 136
 137 function filelist() {
 138     log "Generating file lists for apt-ftparchive"
 139     dak generate-filelist
 140 }
 141
 142 function fingerprints() {
 143     log "Not updating fingerprints - scripts needs checking"
 144
 145     log "Updating fingerprints"
 146     dak import-keyring -L /srv/keyring.debian.org/keyrings/debian-keyring.gpg
 147
 148     OUTFILE=$(mktemp)
 149     dak import-keyring --generate-users "%s" /srv/keyring.debian.org/keyrings/debian-maintainers.gpg >"${OUTFILE}"
 150
 151     if [ -s "${OUTFILE}" ]; then
 152         /usr/sbin/sendmail -odq -oi -t -f envelope@ftp-master.debian.org <<EOF
 153 From: Debian FTP Masters <ftpmaster@ftp-master.debian.org>
 154 To: <debian-project@lists.debian.org>
 155 Subject: Debian Maintainers Keyring changes
 156 Content-Type: text/plain; charset=utf-8
 157 MIME-Version: 1.0
 158
 159 The following changes to the debian-maintainers keyring have just been activated:
 160
 161 $(cat $OUTFILE)
 162
 163 Debian distribution maintenance software,
 164 on behalf of the Keyring maintainers
 165
 166 EOF
 167     fi
 168     rm -f "$OUTFILE"
 169 }
 170
 171 function overrides() {
 172     log "Writing overrides into text files"
 173     cd $overridedir
 174     dak make-overrides
 175
 176     # FIXME
 177     rm -f override.sid.all3
 178     for i in main contrib non-free main.debian-installer; do cat override.sid.$i >> override.sid.all3; done
 179 }
 180
 181 function mpfm() {
 182     log "Generating package / file mapping"
 183     dak make-pkg-file-mapping | bzip2 -9 > $base/ftp/indices/package-file.map.bz2
 184 }
 185
 186 function packages() {
 187     log "Generating Packages and Sources files"
 188     cd $configdir
 189     GZIP='--rsyncable' ; export GZIP
 190     apt-ftparchive generate apt.conf
 191 }
 192
 193 function pdiff() {
 194     log "Generating pdiff files"
 195     dak generate-index-diffs
 196 }
 197
 198 function release() {
 199     log "Generating Release files"
 200     dak generate-releases
 201 }
 202
 203 function dakcleanup() {
 204     log "Cleanup old packages/files"
 205     # TODO: Fix up clean-suites
 206     #dak clean-suites -m 10000
 207     dak clean-queues
 208 }
 209
 210 function buildd_dir() {
 211     # Rebuilt the buildd dir to avoid long times of 403
 212     log "Regenerating the buildd incoming dir"
 213     STAMP=$(date "+%Y%m%d%H%M")
 214     make_buildd_dir
 215 }
 216
 217 function mklslar() {
 218     cd $ftpdir
 219
 220     FILENAME=ls-lR
 221
 222     log "Removing any core files ..."
 223     find -type f -name core -print0 | xargs -0r rm -v
 224
 225     log "Checking permissions on files in the FTP tree ..."
 226     find -type f \( \! -perm -444 -o -perm +002 \) -ls
 227     find -type d \( \! -perm -555 -o -perm +002 \) -ls
 228
 229     log "Checking symlinks ..."
 230     symlinks -rd .
 231
 232     log "Creating recursive directory listing ... "
 233     rm -f .${FILENAME}.new
 234     TZ=UTC ls -lR > .${FILENAME}.new
 235
 236     if [ -r ${FILENAME}.gz ] ; then
 237         mv -f ${FILENAME}.gz ${FILENAME}.old.gz
 238         mv -f .${FILENAME}.new ${FILENAME}
 239         rm -f ${FILENAME}.patch.gz
 240         zcat ${FILENAME}.old.gz | diff -u - ${FILENAME} | gzip --rsyncable -9cfn - >${FILENAME}.patch.gz
 241         rm -f ${FILENAME}.old.gz
 242     else
 243         mv -f .${FILENAME}.new ${FILENAME}
 244     fi
 245
 246     gzip --rsyncable -9cfN ${FILENAME} >${FILENAME}.gz
 247     rm -f ${FILENAME}
 248 }
 249
 250 function mkmaintainers() {
 251     log 'Creating Maintainers index ... '
 252
 253     cd $indices
 254     dak make-maintainers ${scriptdir}/masterfiles/pseudo-packages.maintainers | \
 255         sed -e "s/~[^  ]*\([   ]\)/\1/"  | \
 256         awk '{printf "%-20s ", $1; for (i=2; i<=NF; i++) printf "%s ", $i; printf "\n";}' > .new-maintainers
 257
 258     if ! cmp -s .new-maintainers Maintainers || [ ! -f Maintainers ]; then
 259             log "installing Maintainers ... "
 260             mv -f .new-maintainers Maintainers
 261             gzip --rsyncable -9v <Maintainers >.new-maintainers.gz
 262             mv -f .new-maintainers.gz Maintainers.gz
 263     else
 264         rm -f .new-maintainers
 265     fi
 266 }
 267
 268 function copyoverrides() {
 269     log 'Copying override files into public view ...'
 270
 271     for ofile in $copyoverrides ; do
 272             cd $overridedir
 273             chmod g+w override.$f
 274
 275             cd $indices
 276
 277             newofile=override.$ofile.gz
 278             rm -f .newover-$ofile.gz
 279             pc="`gzip 2>&1 -9nv <$overridedir/override.$ofile >.newover-$ofile.gz`"
 280         if ! cmp -s .newover-$ofile.gz $newofile || [ ! -f $newofile ]; then
 281                     log "   installing new $newofile $pc"
 282                     mv -f .newover-$ofile.gz $newofile
 283                     chmod g+w $newofile
 284         else
 285                     rm -f .newover-$ofile.gz
 286             fi
 287     done
 288 }
 289
 290 function mkfilesindices() {
 291     umask 002
 292     cd $base/ftp/indices/files/components
 293
 294     ARCHLIST=$(tempfile)
 295
 296     log "Querying projectb..."
 297     echo 'SELECT l.path, f.filename, a.arch_string FROM location l JOIN files f ON (f.location = l.id) LEFT OUTER JOIN (binaries b JOIN architecture a ON (b.architecture = a.id)) ON (f.id = b.file)' | psql projectb -At | sed 's/|//;s,^/srv/ftp.debian.org/ftp,.,' | sort >$ARCHLIST
 298
 299     includedirs () {
 300         perl -ne 'print; while (m,/[^/]+$,) { $_=$`; print $_ . "\n" unless $d{$_}++; }'
 301     }
 302     poolfirst () {
 303         perl -e '@nonpool=(); while (<>) { if (m,^\./pool/,) { print; } else { push @nonpool, $_; } } print for (@nonpool);'
 304     }
 305
 306     log "Generating sources list"
 307     (
 308         sed -n 's/|$//p' $ARCHLIST
 309         cd $base/ftp
 310         find ./dists -maxdepth 1 \! -type d
 311         find ./dists \! -type d | grep "/source/"
 312     ) | sort -u | gzip --rsyncable -9 > source.list.gz
 313
 314     log "Generating arch lists"
 315
 316     ARCHES=$( (<$ARCHLIST sed -n 's/^.*|//p'; echo amd64) | grep . | grep -v all | sort -u)
 317     for a in $ARCHES; do
 318         (sed -n "s/|$a$//p" $ARCHLIST
 319             sed -n 's/|all$//p' $ARCHLIST
 320
 321             cd $base/ftp
 322             find ./dists -maxdepth 1 \! -type d
 323             find ./dists \! -type d | grep -E "(proposed-updates.*_$a.changes$|/main/disks-$a/|/main/installer-$a/|/Contents-$a|/binary-$a/)"
 324         ) | sort -u | gzip --rsyncable -9 > arch-$a.list.gz
 325     done
 326
 327     log "Generating suite lists"
 328
 329     suite_list () {
 330         printf 'SELECT DISTINCT l.path, f.filename FROM (SELECT sa.source AS source FROM src_associations sa WHERE sa.suite = %d UNION SELECT b.source AS source FROM bin_associations ba JOIN binaries b ON (ba.bin = b.id) WHERE ba.suite = %d) s JOIN dsc_files df ON (s.source = df.source) JOIN files f ON (df.file = f.id) JOIN location l ON (f.location = l.id)\n' $1 $1 | psql -F' ' -A -t projectb
 331
 332         printf 'SELECT l.path, f.filename FROM bin_associations ba JOIN binaries b ON (ba.bin = b.id) JOIN files f ON (b.file = f.id) JOIN location l ON (f.location = l.id) WHERE ba.suite = %d\n' $1 | psql -F' ' -A -t projectb
 333     }
 334
 335     printf 'SELECT id, suite_name FROM suite\n' | psql -F' ' -At projectb |
 336     while read id suite; do
 337         [ -e $base/ftp/dists/$suite ] || continue
 338         (
 339             (cd $base/ftp
 340                 distname=$(cd dists; readlink $suite || echo $suite)
 341                 find ./dists/$distname \! -type d
 342                 for distdir in ./dists/*; do
 343                     [ "$(readlink $distdir)" != "$distname" ] || echo $distdir
 344                 done
 345             )
 346             suite_list $id | tr -d ' ' | sed 's,^/srv/ftp.debian.org/ftp,.,'
 347         ) | sort -u | gzip --rsyncable -9 > suite-${suite}.list.gz
 348     done
 349
 350     log "Finding everything on the ftp site to generate sundries"
 351     (cd $base/ftp; find . \! -type d \! -name 'Archive_Maintenance_In_Progress' | sort) >$ARCHLIST
 352
 353     rm -f sundries.list
 354     zcat *.list.gz | cat - *.list | sort -u |
 355     diff - $ARCHLIST | sed -n 's/^> //p' > sundries.list
 356
 357     log "Generating files list"
 358
 359     for a in $ARCHES; do
 360         (echo ./project/trace; zcat arch-$a.list.gz source.list.gz) |
 361         cat - sundries.list dists.list project.list docs.list indices.list |
 362         sort -u | poolfirst > ../arch-$a.files
 363     done
 364
 365     (cd $base/ftp/
 366             for dist in sid squeeze; do
 367                     find ./dists/$dist/main/i18n/ \! -type d | sort -u | gzip --rsyncable -9 > $base/ftp/indices/files/components/translation-$dist.list.gz
 368             done
 369     )
 370
 371     (cat ../arch-i386.files ../arch-amd64.files; zcat suite-oldstable.list.gz suite-proposed-updates.list.gz ; zcat translation-sid.list.gz ; zcat translation-squeeze.list.gz) |
 372     sort -u | poolfirst > ../typical.files
 373
 374     rm -f $ARCHLIST
 375     log "Done!"
 376 }
 377
 378 function mkchecksums() {
 379     dsynclist=$dbdir/dsync.list
 380     md5list=$indices/md5sums
 381
 382     log -n "Creating md5 / dsync index file ... "
 383
 384     cd "$ftpdir"
 385     ${bindir}/dsync-flist -q generate $dsynclist --exclude $dsynclist --md5
 386     ${bindir}/dsync-flist -q md5sums $dsynclist | gzip -9n --rsyncable > ${md5list}.gz
 387     ${bindir}/dsync-flist -q link-dups $dsynclist || true
 388 }
 389
 390 function mirror() {
 391     log "Regenerating \"public\" mirror/ hardlink fun"
 392     cd ${mirrordir}
 393     rsync -aH --link-dest ${ftpdir} --delete --delete-after --ignore-errors ${ftpdir}/. .
 394 }
 395
 396 function wb() {
 397     log "Trigger daily wanna-build run"
 398     wbtrigger "daily"
 399 }
 400
 401 function expire() {
 402     log "Expiring old database dumps..."
 403     cd $base/backup
 404     $scriptsdir/expire_dumps -d . -p -f "dump_*"
 405 }
 406
 407 function transitionsclean() {
 408     log "Removing out of date transitions..."
 409     cd $base
 410     dak transitions -c -a
 411 }
 412
 413 function reports() {
 414     # Send a report on NEW/BYHAND packages
 415     log "Nagging ftpteam about NEW/BYHAND packages"
 416     dak queue-report | mail -e -s "NEW and BYHAND on $(date +%D)" ftpmaster@ftp-master.debian.org
 417     # and one on crufty packages
 418     log "Sending information about crufty packages"
 419     dak cruft-report > $webdir/cruft-report-daily.txt
 420     dak cruft-report -s experimental >> $webdir/cruft-report-daily.txt
 421     cat $webdir/cruft-report-daily.txt | mail -e -s "Debian archive cruft report for $(date +%D)" ftpmaster@ftp-master.debian.org
 422 }
 423
 424 function dm() {
 425     log "Updating DM html page"
 426     $scriptsdir/dm-monitor >$webdir/dm-uploaders.html
 427 }
 428
 429 function bts() {
 430     log "Categorizing uncategorized bugs filed against ftp.debian.org"
 431     dak bts-categorize
 432 }
 433
 434 function merkel2() {
 435     # Push dak@merkel so it syncs the projectb there. Returns immediately, the sync runs detached
 436     log "Trigger merkel/flotows projectb sync"
 437     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_merkel_projectb dak@merkel.debian.org sleep 1
 438     # Also trigger flotow, the ftpmaster test box
 439     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_flotow_projectb dak@flotow.debconf.org sleep 1
 440 }
 441
 442 function merkel3() {
 443     # Push dak@merkel to tell it to sync the dd accessible parts. Returns immediately, the sync runs detached
 444     log "Trigger merkels dd accessible parts sync"
 445     ssh -2 -o BatchMode=yes -o SetupTimeOut=30 -o ConnectTimeout=30 -i ~/.ssh/push_merkel_ddaccess dak@merkel.debian.org sleep 1
 446 }
 447
 448 function mirrorpush() {
 449     log "Starting the mirrorpush"
 450     date -u > /srv/ftp.debian.org/web/mirrorstart
 451     echo "Using dak v1" >> /srv/ftp.debian.org/web/mirrorstart
 452     echo "Running on host $(hostname -f)" >> /srv/ftp.debian.org/web/mirrorstart
 453     sudo -H -u archvsync /home/archvsync/runmirrors > ~dak/runmirrors.log 2>&1 &
 454 }
 455
 456 function i18n2() {
 457     log "Exporting package data foo for i18n project"
 458     STAMP=$(date "+%Y%m%d%H%M")
 459     mkdir -p ${scriptdir}/i18n/${STAMP}
 460     cd ${scriptdir}/i18n/${STAMP}
 461     dak control-suite -l stable > lenny
 462     dak control-suite -l testing > squeeze
 463     dak control-suite -l unstable > sid
 464     echo "${STAMP}" > timestamp
 465     gpg --secret-keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/secring.gpg --keyring /srv/ftp.debian.org/s3kr1t/dot-gnupg/pubring.gpg --no-options --batch --no-tty --armour --default-key 55BE302B --detach-sign -o timestamp.gpg timestamp
 466     rm -f md5sum
 467     md5sum * > md5sum
 468     cd ${webdir}/
 469     ln -sfT ${scriptdir}/i18n/${STAMP} i18n
 470
 471     cd ${scriptdir}
 472     find ./i18n -mindepth 1 -maxdepth 1 -mtime +2 -not -name "${STAMP}" -type d -print0 | xargs --no-run-if-empty -0 rm -rf
 473 }
 474
 475 function stats() {
 476     log "Updating stats data"
 477     cd $configdir
 478     $scriptsdir/update-ftpstats $base/log/* > $base/misc/ftpstats.data
 479     R --slave --vanilla < $base/misc/ftpstats.R
 480     dak stats arch-space > $webdir/arch-space
 481     dak stats pkg-nums > $webdir/pkg-nums
 482 }
 483
 484 function aptftpcleanup() {
 485     log "Clean up apt-ftparchive's databases"
 486     cd $configdir
 487     apt-ftparchive -q clean apt.conf
 488 }
 489
 490 function compress() {
 491     log "Compress old psql backups"
 492     cd $base/backup/
 493     find -maxdepth 1 -mindepth 1 -type f -name 'dump_pre_*' -mtime +2 -print0 | xargs -0 --no-run-if-empty rm
 494
 495     find -maxdepth 1 -mindepth 1 -type f -name 'dump_*' \! -name '*.bz2' \! -name '*.gz' -mmin +720 |
 496     while read dumpname; do
 497         echo "Compressing $dumpname"
 498         bzip2 -9fv "$dumpname"
 499     done
 500     find -maxdepth 1 -mindepth 1 -type f -name "dumpall_*" \! -name '*.bz2' \! -name '*.gz' -mmin +720 |
 501     while read dumpname; do
 502         echo "Compressing $dumpname"
 503         bzip2 -9fv "$dumpname"
 504     done
 505     finddup -l -d $base/backup
 506 }
 507
 508 function logstats() {
 509     $masterdir/tools/logs.py "$1"
 510 }
 511
 512 # save timestamp when we start
 513 function savetimestamp() {
 514         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 515         echo ${NOW} > "${dbdir}/dinstallstart"
 516 }
 517
 518 function maillogfile() {
 519     cat "$LOGFILE" | mail -s "Log for dinstall run of ${NOW}" cron@ftp-master.debian.org
 520 }
 521
 522 function renamelogfile() {
 523     if [ -f "${dbdir}/dinstallstart" ]; then
 524         NOW=$(cat "${dbdir}/dinstallstart")
 525 #        maillogfile
 526         mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 527         logstats "$logdir/dinstall_${NOW}.log"
 528         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 529     else
 530         error "Problem, I don't know when dinstall started, unable to do log statistics."
 531         NOW=`date "+%Y.%m.%d-%H:%M:%S"`
 532 #        maillogfile
 533         mv "$LOGFILE" "$logdir/dinstall_${NOW}.log"
 534         bzip2 -9 "$logdir/dinstall_${NOW}.log"
 535     fi
 536 }
 537
 538 function testingsourcelist() {
 539     dak ls -s testing -f heidi -r .| egrep 'source$' > ${webdir}/testing.list
 540 }
 541
 542 # do a last run of process-unchecked before dinstall is on.
 543 function process_unchecked() {
 544     log "Processing the unchecked queue"
 545     UNCHECKED_WITHOUT_LOCK="-p"
 546     do_unchecked
 547     sync_debbugs
 548 }