ChangeLog

   1 2008-05-04  Joerg Jaspert  <joerg@debian.org>
   2
   3         * dak/examine_package.py: remove daklib.queue import, never used
   4
   5         * dak/check_proposed_updates.py: Import stuff from daklib as
   6         "import daklib.foo as foo"
   7         * dak/clean_proposed_updates.py: likewise
   8         * dak/clean_queues.py: likewise
   9         * dak/clean_suites.py: likewise
  10         * dak/compare_suites.py: likewise
  11         * dak/cruft_report.py: likewise
  12         * dak/examine_package.py: likewise
  13         * dak/find_null_maintainers.py: likewise
  14         * dak/generate_index_diffs.py: likewise
  15         * dak/generate_releases.py: likewise
  16         * dak/import_archive.py: likewise
  17
  18         * dak/check_archive.py (check_files_not_symlinks): Remove
  19         long-time unused and commented code. Import stuff from daklib as
  20         "import daklib.foo as foo"
  21
  22 2008-05-04  Thomas Viehmann  <tv@beamnet.de>
  23
  24         * dak/process_unchecked.py (check_signed_by_key): cater for uid_email
  25         None in sponsor notification
  26
  27 2008-05-03  Joerg Jaspert  <joerg@debian.org>
  28
  29         * dak/examine_package.py: clean up pychecker warnings (merged with
  30         Thomas changes to the NEW display)
  31
  32 2008-05-03  Mark Hymers <mhy@debian.org>
  33
  34         * dak/check_archive.py: clean up pychecker warnings
  35         * dak/check_overrides.py: likewise
  36         * dak/check_proposed_updates.py: likewise
  37         * dak/clean_proposed_updates.py: likewise
  38         * dak/clean_queues.py: likewise
  39         * dak/control_overrides.py: likewise
  40         * dak/control_suite.py: likewise
  41         * dak/decode_dot_dak.py: likewise
  42         * dak/examine_package.py: likewise
  43         * dak/process_new.py: likewise
  44         * dak/process_unchecked.py: likewise
  45         * dak/queue_report.py: likewise
  46         * dak/reject_proposed_updates.py: likewise
  47         * dak/security_install.py: likewise
  48         * dak/show_new.py: likewise
  49         * dak/stats.py: likewise
  50         * dak/symlink_dists.py: likewise
  51         * dak/transitions.py: likewise
  52 >>>>>>> sec-merge:ChangeLog
  53
  54 2008-05-03  Joerg Jaspert  <joerg@debian.org>
  55
  56         * config/debian/cron.daily: Rename to
  57         * config/debian/cron.dinstall: this, as its not really something run
  58         daily for some time now. And while dinstall is an OLD name, its
  59         recognized pretty well within Debian
  60         Also add some more timing information
  61         Do not allow automated [o-]p-u-new processing to break dinstall
  62
  63 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
  64
  65         * web/,web/style.css: add web dir and current style.css
  66
  67         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
  68         based on mock-up by M. Ferrari.
  69         remove Checksums-* from examine-package output
  70
  71 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
  72
  73         * dak/process_unchecked.py (check_hashes): Reject on error while
  74         parsing Checksums-*.
  75
  76 2008-05-02  Joerg Jaspert  <joerg@debian.org>
  77
  78         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
  79         added wiki.debian.org (currently pointing to debian-www), closes #194206
  80         added security-tracker, closes #436152
  81         added release.debian.org, closes #451005
  82
  83         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
  84         still wants it - its in revision control...)
  85
  86         * config/debian/cron.daily: Modify call to update-ftpstats to only
  87         use files log/2*, instead of log/*, so it ignores the new cron/
  88         subdir. Makes sure it can't get confused, and is also safe for
  89         nearly thousand years. If this code is really in use in year 3000,
  90         im sure people can adjust it! :)
  91
  92         * config/debian/vars: Add logdir as a place for cronjob log output
  93
  94         * config/debian/cron.daily: Use a logfile and be more verbose of
  95         whats going on.
  96           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
  97         cron.weekly, ...
  98         * config/debian/cron.weekly: likewise,
  99           ... and activate those calls again. Once a week, as an
 100         additional safety bet to be sure the stuff does get run is ok,
 101         even if we have autovacuum by default.
 102
 103 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
 104
 105         * dak/process_unchecked.py (check_hashes): fix typo in
 106           checksum reject message.
 107
 108 2008-05-02  Joerg Jaspert  <joerg@debian.org>
 109
 110         * config/debian/extensions.py: used reindent.py from the python
 111         2.x source examples to get all dak code use the same indentation
 112         style, no longer a mix of 4 spaces / 1 tab.
 113         * dak/check_archive.py: likewise
 114         * dak/check_overrides.py: likewise
 115         * dak/check_proposed_updates.py: likewise
 116         * dak/clean_proposed_updates.py: likewise
 117         * dak/clean_queues.py: likewise
 118         * dak/clean_suites.py: likewise
 119         * dak/compare_suites.py: likewise
 120         * dak/control_overrides.py: likewise
 121         * dak/control_suite.py: likewise
 122         * dak/cruft_report.py: likewise
 123         * dak/dak.py: likewise
 124         * dak/decode_dot_dak.py: likewise
 125         * dak/examine_package.py: likewise
 126         * dak/find_null_maintainers.py: likewise
 127         * dak/generate_index_diffs.py: likewise
 128         * dak/generate_releases.py: likewise
 129         * dak/import_archive.py: likewise
 130         * dak/import_keyring.py: likewise
 131         * dak/import_ldap_fingerprints.py: likewise
 132         * dak/import_users_from_passwd.py: likewise
 133         * dak/init_db.py: likewise
 134         * dak/init_dirs.py: likewise
 135         * dak/ls.py: likewise
 136         * dak/make_maintainers.py: likewise
 137         * dak/make_overrides.py: likewise
 138         * dak/make_suite_file_list.py: likewise
 139         * dak/mirror_split.py: likewise
 140         * dak/new_security_install.py: likewise
 141         * dak/override.py: likewise
 142         * dak/poolize.py: likewise
 143         * dak/process_accepted.py: likewise
 144         * dak/process_new.py: likewise
 145         * dak/process_unchecked.py: likewise
 146         * dak/queue_report.py: likewise
 147         * dak/reject_proposed_updates.py: likewise
 148         * dak/rm.py: likewise
 149         * dak/security_install.py: likewise
 150         * dak/show_new.py: likewise
 151         * dak/split_done.py: likewise
 152         * dak/stats.py: likewise
 153         * dak/symlink_dists.py: likewise
 154         * dak/test/001/test.py: likewise
 155         * dak/test/002/test.py: likewise
 156         * dak/transitions.py: likewise
 157         * daklib/extensions.py: likewise
 158         * daklib/logging.py: likewise
 159         * daklib/queue.py: likewise
 160         * daklib/utils.py: likewise
 161         * scripts/debian/insert_missing_changedby.py: likewise
 162
 163         * dak/process_new.py (recheck): Make the path check more robust,
 164         so we no longer have to keep process_new seperate trees between
 165         security and normal archive.
 166
 167 2008-04-27  Joerg Jaspert  <joerg@debian.org>
 168
 169         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
 170         configured path does not exist or is not writeable by us. Use a
 171         tmp path if so, so we do not lose the urgencies in such cases.
 172
 173         * config/debian/dak.conf: Changed path for UrgencyLog
 174         Same for the ReleaseTransitions file
 175
 176         * config/debian/cron.daily: Notify qa user on merkel of dinstall
 177         start, Remove the britney call
 178
 179 2008-04-26  Joerg Jaspert  <joerg@debian.org>
 180
 181         * dak/process_new.py: Call end() whenever we try to leave by
 182         pressing Q
 183
 184         * config/debian/cron.daily: Also report NBS in experimental
 185
 186 2008-04-25  Joerg Jaspert  <joerg@debian.org>
 187
 188         * dak/cruft_report.py (main): Make it possible to look at
 189         experimental too, especially NBS
 190
 191         * dak/split_done.py (main): Only move files into their subdirs if
 192         they are older than 30 days. That enables us to run this script as
 193         part of a cronjob.
 194
 195         * config/debian/cron.weekly: Run dak split-done
 196
 197 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
 198
 199         * dak/process_unchecked.py: add changes["sponsoremail"]
 200           for sponsored uploads if desired
 201         * daklib/queue.py: add changes["sponsoremail"] to
 202           Subst["__MAINTAINER_TO__"] if present
 203         * daklib/utils.py: add functions
 204           is_email_alias to check which accounts allow email forwarding,
 205           which_alias_file to find the alias file, and
 206           gpg_get_key_addresses to find uid addresses for a given
 207             fingerprint
 208
 209 2008-04-22  Joerg Jaspert  <joerg@debian.org>
 210
 211         * setup/init_pool.sql: added a function/aggregate for the release
 212         team to base some script on it.
 213
 214         * config/debian/cron.daily: push katie@merkel to immediately start
 215         the sync of projectb there.
 216
 217 2008-04-21  Joerg Jaspert  <joerg@debian.org>
 218
 219         * scripts/debian/expire_dumps: New script, expires old database
 220         dumps, using a scheme to keep more of the recent dumps.
 221
 222         * config/debian/cron.daily: Use the new script. Also - compress
 223         all files older than 7 days, instead of 30.
 224
 225         * dak/process_accepted.py (install): Do not break if a
 226         source/maintainer combination is already in src_uploaders, "just"
 227         warn us.
 228
 229 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
 230
 231         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
 232         Format lines (ie. those having extra text appended).
 233
 234 2008-04-19  Joerg Jaspert  <joerg@debian.org>
 235
 236         * dak/process_unchecked.py (check_files): Sanity check the
 237         provides field, which closes #472783
 238
 239 2008-04-18  Joerg Jaspert  <joerg@debian.org>
 240
 241         * config/debian/dak.conf: Add mapping stable-proposed-updates
 242           -> proposed-updates.
 243
 244         * dak/transitions.py (load_transitions): Additionally check for
 245         invalid package list indentation
 246
 247 2008-04-17  Joerg Jaspert  <joerg@debian.org>
 248
 249         * config/debian/dak.conf: Add TempPath statement for the Release
 250         Transitions script
 251
 252         * dak/transitions.py (temp_transitions_file): Use the TempPath
 253         (write_transitions_from_file): Check if the file we should get our
 254         transitions from is in our TempPath, error out if it isnt
 255         (main): Check for TempPath existance
 256
 257 2008-04-12  James Troup  <troup@debian.org>
 258
 259         * dak/clean_proposed_updates.py: add support for -s/--suite and
 260         -n/--no-action.
 261
 262 2008-04-11  Anthony Towns  <ajt@debian.org>
 263
 264         * dak/utils.py: build_file_list() extra parameters so it can
 265         build a file list for checksums-foo fields. Don't use float() to
 266         compare formats, because Format: 1.10 should compare greater than
 267         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
 268
 269         * dak/process_unchecked.py: check_md5sum becomes check_hashes
 270         and check_hash. If changes format is 1.8 or later, also check
 271         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
 272         and reject on presence/absence of un/expected checksums-* fields.
 273
 274 2008-04-07  Joerg Jaspert  <joerg@debian.org>
 275
 276         * daklib/utils.py (build_file_list): Check for dpkg .changes
 277         adjusted to reject newer (and right now broken) 1.8 version, until
 278         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
 279
 280 2008-03-22  Joerg Jaspert  <joerg@debian.org>
 281
 282         * dak/transitions.py (load_transitions): Check if all our keys are
 283         defined, if there are only keys defined we want and also the types
 284         of the various keys.
 285
 286 2008-03-22  Anthony Towns  <ajt@debian.org>
 287
 288         * dak/edit_transitions.py: Add --import option.
 289         Add --use-sudo option. Use fcntl locking for writing.
 290         Move writing into a function (write_transitions).
 291         Reinvoke self using sudo and --import if necessary.
 292         Move temporary file creation into a function, use mkstemp.
 293         Rename to "dak transitions".
 294
 295 2008-03-21  Joerg Jaspert  <joerg@debian.org>
 296
 297         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
 298         edited file back in place
 299         (check_transitions): Use proper locking and also use sudo to copy
 300         the new file in place
 301
 302 2008-03-21  Anthony Towns <ajt@debian.org>
 303
 304         * config/debian/extensions.py: Add infrastructure for replacing
 305         functions in dak modules; add upload blocking for dpkg.
 306
 307 2008-03-12  Joerg Jaspert  <joerg@debian.org>
 308
 309         * dak/edit_transitions.py: Done a number of cleanups to make code
 310         working. Also changed the way prompting/answering goes, to not
 311         have to import daklib/queue.
 312         (edit_transitions): When done with a successful edit - also print
 313         a final overview about defined transitions
 314
 315 2008-03-11  Joerg Jaspert  <joerg@debian.org>
 316
 317         * dak/process_unchecked.py: Import syck module directly, not "from
 318         syck import *"
 319         (check_transition): Do the check for sourceful upload in here
 320         Also adjust the syck loading commands, rename new_vers to
 321         expected, curvers to current, to make it more clear what they mean.
 322
 323         * daklib/database.py (get_suite_version): Renamed from
 324         get_testing_version. Also changed the cache variables name
 325
 326         * The above changes are based on modifications from Anthony.
 327
 328         * dak/dak.py (init): Renamed check -> edit transitions
 329
 330         * dak/edit_transitions.py: Renamed from check_transitions.py
 331         (main): Also rename new_vers/curvers to expected/current
 332         Basically a nice rewrite, so it now does checks and edit,
 333         depending on how you call it. Check also removes old transitions,
 334         if user wants it.
 335
 336 2008-03-02  Joerg Jaspert  <joerg@debian.org>
 337
 338         * debian/control (Suggests): Add python-syck to Depends:
 339
 340         * dak/dak.py (init): Tell it about check_transitions
 341
 342         * dak/check_transitions.py (usage): Added, checks the transitions
 343         file (if any)
 344
 345         * daklib/database.py (get_testing_version): Added. Returns the
 346         version for the source in testing, if any
 347
 348         * dak/process_unchecked.py (check_transition): Added. Checks if a
 349         release team member defined a transition, and rejects based on
 350         that data.
 351         (process_it): Use it.
 352         (check_transition): Warn on broken transitions file and return,
 353         not doing anything.
 354         (check_transition): Moved out of here, into daklib/queue
 355         (process_it): Call check_transitions only if
 356         changes[architecture] has source included.
 357         (check_transition): Now call the database.get_testing_version
 358
 359 2008-02-09  Christoph Berg <myon@debian.org>
 360
 361         * daklib/queue.py (get_type): fubar does not exist in global
 362         namespace.
 363
 364         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
 365         to source table, and move src_uploaders after source so the REFERNCES
 366         clause works.
 367         * dak/process_accepted.py (install): Fill the changedby column from
 368         the information found in the .changes. This will allow to identify
 369         NMUs and sponsored uploads more precisely in tools querying projectb.
 370         * scripts/debian/insert_missing_changedby.py: Script to import yet
 371         missing fields from filippo's uploads-history DB.
 372
 373 2008-02-06  Joerg Jaspert  <joerg@debian.org>
 374
 375         * daklib/utils.py (check_signature): Make variable key available,
 376         so we can access it.
 377
 378 2008-01-07  Joerg Jaspert  <joerg@debian.org>
 379
 380         * dak/examine_package.py (check_deb): Remove linda call. It
 381         provides no added benefit to lintian anymore.
 382
 383 2008-01-07  Joerg Jaspert  <joerg@debian.org>
 384
 385         * dak/examine_package.py (check_deb): Remove linda call. It
 386         provides no added benefit to lintian anymore.
 387
 388 2008-01-06  Joerg Jaspert  <joerg@debian.org>
 389
 390         * dak/examine_package.py (do_lintian): lintian now supports html
 391         coloring, so use it.
 392         (do_command): Dont escape html chars if param escaped = 1
 393
 394 2008-01-06  Joerg Jaspert  <joerg@debian.org>
 395
 396         * dak/examine_package.py (do_lintian): lintian now supports html
 397         coloring, so use it.
 398         (do_command): Dont escape html chars if param escaped = 1
 399
 400 2007-12-31  Anthony Towns  <ajt@debian.org>
 401
 402         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
 403         when processing result of check_dsc_against_db so we don't promote
 404         warnings to rejections.
 405
 406 2007-12-31  Anthony Towns  <ajt@debian.org>
 407
 408         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
 409         when processing result of check_dsc_against_db so we don't promote
 410         warnings to rejections.
 411
 412 2007-12-30  Joerg Jaspert  <joerg@debian.org>
 413
 414         * dak/dak.py (init): add show-new. This is based on a patch
 415         submitted by Thomas Viehmann in Bug #408318, but large parts of
 416         handling it are rewritten and show-new is done by me.
 417
 418         * dak/queue_report.py (table_row): Add link to generated html page
 419         for NEW package.
 420
 421         * dak/show_new.py: new file, generates html overview for NEW
 422         packages, similar to what we see with examine-package.
 423
 424         * config/debian/cron.hourly: Add show-new call
 425
 426         * config/debian/dak.conf: Add HTMLPath for Show-New
 427
 428         * dak/examine_package.py (print_copyright): ignore stderr when
 429         finding copyright file.
 430         (main): add html option
 431         (html_escape): new function
 432         (escape_if_needed): ditto
 433         (headline): ditto
 434         (colour_output): ditto
 435         (print_escaped_text): ditto
 436         (print_formatted_text): ditto
 437         - use those functions everywhere where we generate output, as they
 438         easily know if we want html or not and just DTRT
 439         (do_lintian): new function
 440         (check_deb): use it
 441         (output_deb_info): Use print_escaped_text, not print_formatted_text.
 442         Also import daklib.queue, determine_new now lives there
 443
 444         Also add a variable to see if we want html output. Default is
 445         disabled, show_new enables it for its use.
 446         Most of html, besides header/footer are in examine_package instead
 447         of show_new, as it makes it a whole lot easier to deal with it at
 448         the point the info is generated.
 449
 450
 451         * dak/process_new.py (determine_new): Moved out of here.
 452         (check_valid): Moved out of here.
 453         (get_type): Moved out of here.
 454
 455         * daklib/queue.py (determine_new): Moved here.
 456         (check_valid): Moved here.
 457         (get_type): Moved here.
 458
 459         * dak/init_db.py (do_section): Remove non-US code
 460
 461         * dak/make_overrides.py (main): ditto
 462
 463         * dak/process_new.py (determine_new): ditto
 464
 465         * daklib/queue.py (Upload.in_override_p),
 466         (Upload.check_override): ditto
 467
 468         * daklib/utils.py (extract_component_from_section):,
 469         (poolify): ditto
 470
 471         * dak/import_archive.py (update_section): ditto
 472
 473         * dak/symlink_dists.py (fix_component_section): ditto
 474
 475         * scripts/debian/mkmaintainers: ditto
 476
 477         * scripts/debian/update-mirrorlists (masterlist): ditto
 478
 479         * config/debian-non-US/*: Remove subdir
 480
 481         * scripts/debian/update-readmenonus: Removed.
 482
 483
 484 2007-12-30  Joerg Jaspert  <joerg@debian.org>
 485
 486         * dak/dak.py (init): add show-new. This is based on a patch
 487         submitted by Thomas Viehmann in Bug #408318, but large parts of
 488         handling it are rewritten and show-new is done by me.
 489
 490         * dak/queue_report.py (table_row): Add link to generated html page
 491         for NEW package.
 492
 493         * dak/show_new.py: new file, generates html overview for NEW
 494         packages, similar to what we see with examine-package.
 495
 496         * config/debian/cron.hourly: Add show-new call
 497
 498         * config/debian/dak.conf: Add HTMLPath for Show-New
 499
 500         * dak/examine_package.py (print_copyright): ignore stderr when
 501         finding copyright file.
 502         (main): add html option
 503         (html_escape): new function
 504         (escape_if_needed): ditto
 505         (headline): ditto
 506         (colour_output): ditto
 507         (print_escaped_text): ditto
 508         (print_formatted_text): ditto
 509         - use those functions everywhere where we generate output, as they
 510         easily know if we want html or not and just DTRT
 511         (do_lintian): new function
 512         (check_deb): use it
 513         (output_deb_info): Use print_escaped_text, not print_formatted_text.
 514         Also import daklib.queue, determine_new now lives there
 515
 516         Also add a variable to see if we want html output. Default is
 517         disabled, show_new enables it for its use.
 518         Most of html, besides header/footer are in examine_package instead
 519         of show_new, as it makes it a whole lot easier to deal with it at
 520         the point the info is generated.
 521
 522
 523         * dak/process_new.py (determine_new): Moved out of here.
 524         (check_valid): Moved out of here.
 525         (get_type): Moved out of here.
 526
 527         * daklib/queue.py (determine_new): Moved here.
 528         (check_valid): Moved here.
 529         (get_type): Moved here.
 530
 531         * dak/init_db.py (do_section): Remove non-US code
 532
 533         * dak/make_overrides.py (main): ditto
 534
 535         * dak/process_new.py (determine_new): ditto
 536
 537         * daklib/queue.py (Upload.in_override_p),
 538         (Upload.check_override): ditto
 539
 540         * daklib/utils.py (extract_component_from_section):,
 541         (poolify): ditto
 542
 543         * dak/import_archive.py (update_section): ditto
 544
 545         * dak/symlink_dists.py (fix_component_section): ditto
 546
 547         * scripts/debian/mkmaintainers: ditto
 548
 549         * scripts/debian/update-mirrorlists (masterlist): ditto
 550
 551         * config/debian-non-US/*: Remove subdir
 552
 553         * scripts/debian/update-readmenonus: Removed.
 554
 555
 556 2007-12-28  Anthony Towns  <ajt@debian.org>
 557
 558         * daklib/utils.py (check_signature): add NOTATION_DATA and
 559         NOTATION_NAME to known keywords.
 560
 561         * daklib/queue.py (Upload.check_source_against_db):
 562
 563         * dak/make_suite_file_list.py: add -f/--force option.
 564
 565         * dak/generate_releases.py: add -a/--apt-conf=FILE and
 566         -f/--force-touch options.  Pull version info from the database.
 567         Make suite description optional.
 568
 569         * config/debian/dak.conf: update
 570         Reject-Proposed-Updates::MoreInfoURL.  Comment out
 571         Suite::Stable::Version and ::Description.
 572
 573         * config/debian/apt.conf: Add hurd-i386 to unstable
 574         debian-installer stanza.
 575
 576 2007-12-28  Joerg Jaspert  <joerg@debian.org>
 577
 578         * KEYEXPIRED is actually a known keyword. We do check it earlier
 579         on and reject in case the sig is bad (or unknown)
 580
 581 2007-12-28  Anthony Towns  <ajt@debian.org>
 582
 583         * daklib/utils.py (check_signature): add NOTATION_DATA and
 584         NOTATION_NAME to known keywords.
 585
 586         * daklib/queue.py (Upload.check_source_against_db):
 587
 588         * dak/make_suite_file_list.py: add -f/--force option.
 589
 590         * dak/generate_releases.py: add -a/--apt-conf=FILE and
 591         -f/--force-touch options.  Pull version info from the database.
 592         Make suite description optional.
 593
 594         * config/debian/dak.conf: update
 595         Reject-Proposed-Updates::MoreInfoURL.  Comment out
 596         Suite::Stable::Version and ::Description.
 597
 598         * config/debian/apt.conf: Add hurd-i386 to unstable
 599         debian-installer stanza.
 600
 601 2007-12-28  Joerg Jaspert  <joerg@debian.org>
 602
 603         * KEYEXPIRED is actually a known keyword. We do check it earlier
 604         on and reject in case the sig is bad (or unknown)
 605
 606 2007-12-24  Joerg Jaspert  <joerg@debian.org>
 607
 608         * Also run lintian on the .dsc file to check the source itself.
 609
 610         * Fix the direct usage of ar | tar etc to get the copyright file
 611         and use dpkg-deb, which is made for this and makes us able to
 612         process data.tar.bz2 (or whatever format it will be in the
 613         future).
 614
 615 2007-12-24  Joerg Jaspert  <joerg@debian.org>
 616
 617         * Also run lintian on the .dsc file to check the source itself.
 618
 619         * Fix the direct usage of ar | tar etc to get the copyright file
 620         and use dpkg-deb, which is made for this and makes us able to
 621         process data.tar.bz2 (or whatever format it will be in the
 622         future).
 623
 624 2007-12-21  Joerg Jaspert  <joerg@debian.org>
 625
 626         * Remove the (now useless) check for a pre-depends on dpkg for
 627           binaries that contain bzip2 compressed data tarballs.
 628
 629 2007-12-21  Joerg Jaspert  <joerg@debian.org>
 630
 631         * Remove the (now useless) check for a pre-depends on dpkg for
 632           binaries that contain bzip2 compressed data tarballs.
 633
 634 2007-08-28  Anthony Towns  <ajt@debian.org>
 635
 636         * process_unchecked.py: Add support for automatic BYHAND
 637         processing.
 638         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
 639         processing of tag-overrides.
 640         * examine_package.py: Summarise duplicate copyright file entries
 641         (same md5sum) with a reference to the previous instance, rather
 642         than repeating them.
 643         * process_new.py: When rejecting from the p-u-new or o-p-u-new
 644         holding queues, don't worry if dak has its own reasons for
 645         rejecting the package as well as the SRMs.
 646
 647 2007-08-28  Anthony Towns  <ajt@debian.org>
 648
 649         * process_unchecked.py: Add support for automatic BYHAND
 650         processing.
 651         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
 652         processing of tag-overrides.
 653         * examine_package.py: Summarise duplicate copyright file entries
 654         (same md5sum) with a reference to the previous instance, rather
 655         than repeating them.
 656         * process_new.py: When rejecting from the p-u-new or o-p-u-new
 657         holding queues, don't worry if dak has its own reasons for
 658         rejecting the package as well as the SRMs.
 659
 660 2007-06-19  Anthony Towns  <ajt@debian.org>
 661
 662         * Add nm.debian.org pseudopackage
 663
 664 2007-06-19  Anthony Towns  <ajt@debian.org>
 665
 666         * Add nm.debian.org pseudopackage
 667
 668 2007-06-18  Anthony Towns  <ajt@debian.org>
 669
 670         * daklib/logging.py: Set umask to not exclude group-writability
 671         so we don't get reminded at the start of each month. Thanks to
 672         Random J.
 673         * dak/override.py: More changes from Herr von Wifflepuck: warn
 674         if section of source is different to binary section; restore
 675         functionality on source-only overrides; croak if trying to set
 676         priority of a source override; never set priority of source
 677         overrides; correct typo in logging (s/priority/section/ at
 678         one place)
 679
 680         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
 681         * config/debian/cron.daily: auotmatically accept/reject
 682         oldstable-proposed-updates based on COMMENTS directory
 683
 684 2007-06-18  Anthony Towns  <ajt@debian.org>
 685
 686         * config/debian/apt.conf, config/debian/apt.conf.stable,
 687         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
 688         (sarge), support for oldstable-proposed-updates, dropping m68k
 689         from etch, creating etch-m68k suite, creating lenny.
 690
 691         * config/debian/vars: update for lenny
 692
 693         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
 694         drop upload limitations, add release postgres user
 695
 696         * dak/process_new.py: support for automatically accepting and rejecting
 697         packages from proposed-updates holding queues via COMMENTS directory
 698         * cron.daily: automatically process COMMENTS-based approvals
 699         and rejections for proposed-updates holding queues
 700
 701         * dak/process_unchecked.py: add support for oldproposedupdates
 702         holding queue
 703
 704         * dak/control_suite.py: allow control-suite to work with etch-m68k
 705
 706         * dak/generate_releases.py: unlink old Release files before updating
 707         them if nlinks > 1 (ie, if two files used to be the same, maybe they
 708         shouldn't be when generate-releases is run)
 709
 710         * dak/generate_releases.py: add a couple of commented lines to make
 711         it easier to deal with point releases
 712
 713         * dak/make_overrides.py: generate overrides for !contrib udebs
 714
 715         * docs/README.stable-point-release: update docs for doing a
 716         point release
 717
 718 2007-06-18  Anthony Towns  <ajt@debian.org>
 719
 720         * daklib/logging.py: Set umask to not exclude group-writability
 721         so we don't get reminded at the start of each month. Thanks to
 722         Random J.
 723         * dak/override.py: More changes from Herr von Wifflepuck: warn
 724         if section of source is different to binary section; restore
 725         functionality on source-only overrides; croak if trying to set
 726         priority of a source override; never set priority of source
 727         overrides; correct typo in logging (s/priority/section/ at
 728         one place)
 729
 730         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
 731         * config/debian/cron.daily: auotmatically accept/reject
 732         oldstable-proposed-updates based on COMMENTS directory
 733
 734 2007-06-18  Anthony Towns  <ajt@debian.org>
 735
 736         * config/debian/apt.conf, config/debian/apt.conf.stable,
 737         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
 738         (sarge), support for oldstable-proposed-updates, dropping m68k
 739         from etch, creating etch-m68k suite, creating lenny.
 740
 741         * config/debian/vars: update for lenny
 742
 743         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
 744         drop upload limitations, add release postgres user
 745
 746         * dak/process_new.py: support for automatically accepting and rejecting
 747         packages from proposed-updates holding queues via COMMENTS directory
 748         * cron.daily: automatically process COMMENTS-based approvals
 749         and rejections for proposed-updates holding queues
 750
 751         * dak/process_unchecked.py: add support for oldproposedupdates
 752         holding queue
 753
 754         * dak/control_suite.py: allow control-suite to work with etch-m68k
 755
 756         * dak/generate_releases.py: unlink old Release files before updating
 757         them if nlinks > 1 (ie, if two files used to be the same, maybe they
 758         shouldn't be when generate-releases is run)
 759
 760         * dak/generate_releases.py: add a couple of commented lines to make
 761         it easier to deal with point releases
 762
 763         * dak/make_overrides.py: generate overrides for !contrib udebs
 764
 765         * docs/README.stable-point-release: update docs for doing a
 766         point release
 767
 768 2007-03-05  Anthony Towns  <ajt@debian.org>
 769
 770         * config/debian/dak.conf: update for 3.1r5.
 771         * scripts/debian/ssh-move: add ssh-move script from debbugs
 772         * config/debian/cron.unchecked: push version info to debbugs using
 773         ssh-move.
 774
 775 2007-03-05  Anthony Towns  <ajt@debian.org>
 776
 777         * config/debian/dak.conf: update for 3.1r5.
 778         * scripts/debian/ssh-move: add ssh-move script from debbugs
 779         * config/debian/cron.unchecked: push version info to debbugs using
 780         ssh-move.
 781
 782 2007-02-14  James Troup  <troup@ries.debian.org>
 783
 784         * docs/README.config: remove Dinstall::GroupOverrideFilename.
 785         * config/debian/dak.conf: likewise.
 786         * config/debian-non-US/dak.conf: likewise.
 787         * config/debian-security/dak.conf: likewise.
 788
 789         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
 790         experimental differently, just close the bugs and let version
 791         tracking sort it out.
 792          (nmu_p): remove entire class - now unused.
 793          (Upload.__init__): don't use nmu_p.
 794
 795 2007-02-14  James Troup  <troup@ries.debian.org>
 796
 797         * docs/README.config: remove Dinstall::GroupOverrideFilename.
 798         * config/debian/dak.conf: likewise.
 799         * config/debian-non-US/dak.conf: likewise.
 800         * config/debian-security/dak.conf: likewise.
 801
 802         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
 803         experimental differently, just close the bugs and let version
 804         tracking sort it out.
 805          (nmu_p): remove entire class - now unused.
 806          (Upload.__init__): don't use nmu_p.
 807
 808 2007-02-08  Anthony Towns  <ajt@debian.org>
 809
 810         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
 811         signing key.  Drop maximum index diffs down to 14.
 812
 813         * config/debian/apt.conf: add udeb support for non-free (testing,
 814         unstable) and experimental.
 815         * config/debian/dak.conf: likewise.
 816
 817         * dak/generate_releases.py (main): handle udebs in any component.
 818
 819         * daklib/queue.py (Upload.build_summaries): handle files without a
 820         'type' gracefully.
 821
 822         * dak/generate_releases.py (print_sha256_files): new function.
 823         (main): use it.
 824
 825         * dak/process_accepted.py (stable_install): fix name of template
 826         mail.
 827
 828         * dak/process_unchecked.py (is_stableupdate): fix invocation of
 829         database.get_suite_id().
 830
 831         * templates/process-new.bxa_notification: Update on request
 832         of/after discussion with BIS staff.
 833
 834         * scripts/debian/mkfilesindices: also handle proposed-updates.
 835
 836 2007-02-08  Ryan Murray  <rmurray@debian.org>
 837
 838         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
 839         group name for chgrp of mail archives.
 840
 841         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
 842         orig.tar.gz's by picking the first one by file id.
 843
 844         * dak/override.py (main): limit to binary overrides only for now.
 845         (usage): update to match.
 846
 847         * config/debian/cron.daily: track when we have the accepted lock
 848         and clean it up on exit if we have it.  Take/check the
 849         cron.unchecked lock just before traping to cleanup on exit.
 850         Remove potato override handling.  Remove any dangling symlinks in
 851         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
 852
 853         * config/debian/apt.conf: change default compression scheme for
 854         both Sources and Packages to gzip and bzip2 rather than
 855         uncompressed and gzip (Packages) and gzip (Sources).  Use old
 856         defaults for proposed-updates.
 857
 858         * dak/control_overrides.py (main): refuse to operate on
 859         untouchable suites.
 860
 861         * config/debian/pseudo-packages.maintainers: drop install,
 862         installation, boot-floppy, slink-cd, potato-cd and
 863         nonus.debian.org.  Update base.
 864         * config/debian/pseudo-packages.description: likewise.
 865
 866         * daklib/utils.py (re_srchasver): new regex.
 867         (parse_changes): use regex to split 'Source (Version)' style
 868         Source fields into 'source' and 'source-version'.
 869
 870         * config/debian/cron.daily: use $base instead of hardcoding path
 871         name.
 872
 873         * scripts/debian/mkfilesindices: source 'vars' file and use it's
 874         variables instead of hardcoding path names.
 875
 876         * config/debian/apt.conf: switch from /org to /srv.
 877         * config/debian/apt.conf.buildd: likewise.
 878         * config/debian/apt.conf.stable: likewise.
 879         * config/debian/cron.daily: likewise.
 880         * config/debian/cron.hourly: likewise.
 881         * config/debian/cron.monthly: likewise.
 882         * config/debian/cron.unchecked: likewise.
 883         * config/debian/cron.weekly: likewise.
 884         * config/debian/dak.conf: likewise.
 885         * config/debian/vars: likewise.
 886         * scripts/debian/mkfilesindices: likewise.
 887
 888 2007-02-08  James Troup  <james@nocrew.org>
 889
 890         * dak/process_unchecked.py (check_signed_by_key): new function to
 891         ensure .changes files are signed by an authorized uploader.
 892         (process_it): use it.
 893
 894         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
 895         to configure per suite/component/architecture binary upload
 896         restrictions.
 897
 898 2007-02-08  Anthony Towns  <ajt@debian.org>
 899
 900         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
 901         signing key.  Drop maximum index diffs down to 14.
 902
 903         * config/debian/apt.conf: add udeb support for non-free (testing,
 904         unstable) and experimental.
 905         * config/debian/dak.conf: likewise.
 906
 907         * dak/generate_releases.py (main): handle udebs in any component.
 908
 909         * daklib/queue.py (Upload.build_summaries): handle files without a
 910         'type' gracefully.
 911
 912         * dak/generate_releases.py (print_sha256_files): new function.
 913         (main): use it.
 914
 915         * dak/process_accepted.py (stable_install): fix name of template
 916         mail.
 917
 918         * dak/process_unchecked.py (is_stableupdate): fix invocation of
 919         database.get_suite_id().
 920
 921         * templates/process-new.bxa_notification: Update on request
 922         of/after discussion with BIS staff.
 923
 924         * scripts/debian/mkfilesindices: also handle proposed-updates.
 925
 926 2007-02-08  Ryan Murray  <rmurray@debian.org>
 927
 928         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
 929         group name for chgrp of mail archives.
 930
 931         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
 932         orig.tar.gz's by picking the first one by file id.
 933
 934         * dak/override.py (main): limit to binary overrides only for now.
 935         (usage): update to match.
 936
 937         * config/debian/cron.daily: track when we have the accepted lock
 938         and clean it up on exit if we have it.  Take/check the
 939         cron.unchecked lock just before traping to cleanup on exit.
 940         Remove potato override handling.  Remove any dangling symlinks in
 941         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
 942
 943         * config/debian/apt.conf: change default compression scheme for
 944         both Sources and Packages to gzip and bzip2 rather than
 945         uncompressed and gzip (Packages) and gzip (Sources).  Use old
 946         defaults for proposed-updates.
 947
 948         * dak/control_overrides.py (main): refuse to operate on
 949         untouchable suites.
 950
 951         * config/debian/pseudo-packages.maintainers: drop install,
 952         installation, boot-floppy, slink-cd, potato-cd and
 953         nonus.debian.org.  Update base.
 954         * config/debian/pseudo-packages.description: likewise.
 955
 956         * daklib/utils.py (re_srchasver): new regex.
 957         (parse_changes): use regex to split 'Source (Version)' style
 958         Source fields into 'source' and 'source-version'.
 959
 960         * config/debian/cron.daily: use $base instead of hardcoding path
 961         name.
 962
 963         * scripts/debian/mkfilesindices: source 'vars' file and use it's
 964         variables instead of hardcoding path names.
 965
 966         * config/debian/apt.conf: switch from /org to /srv.
 967         * config/debian/apt.conf.buildd: likewise.
 968         * config/debian/apt.conf.stable: likewise.
 969         * config/debian/cron.daily: likewise.
 970         * config/debian/cron.hourly: likewise.
 971         * config/debian/cron.monthly: likewise.
 972         * config/debian/cron.unchecked: likewise.
 973         * config/debian/cron.weekly: likewise.
 974         * config/debian/dak.conf: likewise.
 975         * config/debian/vars: likewise.
 976         * scripts/debian/mkfilesindices: likewise.
 977
 978 2007-02-08  James Troup  <james@nocrew.org>
 979
 980         * dak/process_unchecked.py (check_signed_by_key): new function to
 981         ensure .changes files are signed by an authorized uploader.
 982         (process_it): use it.
 983
 984         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
 985         to configure per suite/component/architecture binary upload
 986         restrictions.
 987
 988 2006-10-09  James Troup  <james.troup@canonical.com>
 989
 990         * dak/process_unchecked.py (check_timestamps): change match to
 991         search as recent versions of python-apt prefix the string with 'E: '.
 992
 993 2006-10-09  James Troup  <james.troup@canonical.com>
 994
 995         * dak/process_unchecked.py (check_timestamps): change match to
 996         search as recent versions of python-apt prefix the string with 'E: '.
 997
 998 2006-06-26  Ryan Murray  <rmurray@debian.org>
 999
1000         * dak/process_unchecked.py (check_files): strip optional source version
1001         from Source: field in changes file, and ensure what is left is a valid
1002         package name.
1003
1004 2006-06-26  Ryan Murray  <rmurray@debian.org>
1005
1006         * dak/process_unchecked.py (check_files): strip optional source version
1007         from Source: field in changes file, and ensure what is left is a valid
1008         package name.
1009
1010 2006-06-23  Ryan Murray  <rmurray@debian.org>
1011
1012         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1013         queue for source.
1014
1015 2006-06-23  Ryan Murray  <rmurray@debian.org>
1016
1017         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1018         queue for source.
1019
1020 2006-06-18  Ryan Murray  <rmurray@debian.org>
1021
1022         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1023         the log, too.
1024
1025         * dak/process_unchecked.py (check_files): only check embargoed and
1026         unembargoed queues if the keys are set.
1027
1028         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1029         and bzip2 for etch.
1030
1031 2006-06-18  Ryan Murray  <rmurray@debian.org>
1032
1033         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1034         the log, too.
1035
1036         * dak/process_unchecked.py (check_files): only check embargoed and
1037         unembargoed queues if the keys are set.
1038
1039         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1040         and bzip2 for etch.
1041
1042 2006-06-16  James Troup  <james@nocrew.org>
1043
1044         * dak/dak.py (init): add new-security-install.
1045
1046         * dak/new_security_install.py: cleanups and adapt for new naming
1047         scheme and other changes.
1048
1049 2006-06-16  Anthony Towns  <ajt@debian.org>
1050
1051         * dak/new_security_install.py: initial version imported from
1052         klecker.
1053
1054 2006-06-16  James Troup  <james@nocrew.org>
1055
1056         [Merged changes from klecker - original author unknown.]
1057
1058         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1059
1060         * dak/security_install.py (do_upload): fix check for oldstable and
1061         upload file list handling.
1062
1063         * dak/process_unchecked.py (check_files): update "check for
1064         source" code to also look in Embargoed and Unembargoed queues.
1065         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1066
1067         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1068
1069         * config/debian-security/vars (disembargo): add.
1070
1071         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1072         update.
1073         (Process-Unchecked::AcceptedLockFile): add.
1074         (Suite::Testing): clean up Version and Description.
1075         (SuiteMappings): add silent map from etch-secure to testing.
1076
1077         * config/debian-security/cron.unchecked: add support for
1078         disembargoed queues.
1079
1080         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1081         files too.
1082
1083         * config/debian-security/apt.conf: add amd64 to architectures for
1084         testing-security.
1085
1086 2006-06-11  James Troup  <troup@spohr.debian.org>
1087
1088         * config/debian/cron.daily: invoke process-accepted not
1089         process-unchecked.
1090
1091         * config/debian/vars (scriptsdir): new variable.
1092         * config/debian/cron.daily: use it.
1093
1094         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1095         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1096         make-maintainers' invocation to look in $configdir for
1097         pseudo-packages.maintainers.
1098
1099         * daklib/queue.py (Upload.do_reject): use correct name for
1100         rejection template.
1101
1102 2006-06-11  James Troup  <james@nocrew.org>
1103
1104         * dak/override.py (main): temporarily add content of old X-Katie
1105         header back as the PTS apparently filters on it.
1106         * dak/process_accepted.py (main): likewise.
1107         * dak/process_new.py (main): likewise.
1108         * dak/process_unchecked.py (main): likewise.
1109         * dak/reject_proposed_updates.py (main): likewise.
1110         * dak/rm.py (main): likewise.
1111         * daklib/queue.py (Upload.do_reject): likewise.
1112
1113         * config/debian/cron.unchecked: set -u to error out on undefined
1114         variables.  Preset LOCKDAILY to "" accordingly.
1115         * config/debian/cron.hourly: likewise.
1116         * config/debian/cron.monthly: likewise.
1117         * config/debian/cron.weekly: likewise.
1118
1119         * config/debian/vars (configdir): add new variable pointing to
1120         this directory.
1121
1122         * config/debian/cron.daily: use $configdir inplace of $masterdir
1123         when that's what we mean, and don't cd into $masterdir just to run
1124         dak scripts as we don't need to do that anymore.
1125         * config/debian/cron.hourly: likewise.
1126         * config/debian/cron.unchecked: likewise.
1127         * config/debian/cron.weekly: likewise.
1128
1129         * config/debian/dak.conf
1130         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1131         user back to list of known users as it's non-trivial to entirely
1132         change the owner of a database with postgresql 7.4.
1133
1134         * daklib/queue.py (Upload.source_exists): use string object
1135         methods rather than string module.
1136         (Upload.get_anyversion): likewise.
1137
1138         * daklib/utils.py (validate_changes_file_arg): update filename
1139         slicing to cope with new .dak filenames.
1140
1141         * dak/ls.py (main): add back 'heidi' as a valid argument for
1142         -f/--format as people are using it in scripts and breaking that
1143         without warning seems rude.
1144
1145 2006-05-21  James Troup  <james@nocrew.org>
1146
1147         * dak/rm.py (main): use string .isdigit() rather than
1148         utils.str_isnum().
1149         * dak/process_new.py (edit_overrides): likewise.
1150
1151         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1152         string import.
1153
1154 2006-05-21  James Troup  <james@nocrew.org>
1155
1156         * dak/check_archive.py (check_indices_files_exist): use list
1157         comprehension instead of map().  No longer need to import
1158         deprecated string module as a side-effect.
1159         * dak/check_overrides.py (process): likewise.
1160         (main): likewise.
1161         * dak/cruft_report.py (do_obsolete_source): likewise.
1162         (main): likewise.
1163         * dak/ls.py (main): likewise.
1164         * dak/make_suite_file_list.py (write_filelists): likewise.
1165         * dak/process_accepted.py (stable_install): likewise.
1166         * dak/rm.py (main): likewise.
1167         * dak/stats.py (number_of_packages): likewise.
1168         * daklib/logging.py (Logger.log): likewise.
1169         * daklib/queue.py (Upload.source_exists): likewise.
1170         (Upload.cross_suite_version_check): likewise.
1171         * daklib/utils.py (parse_args): likewise.
1172
1173 2006-05-21  James Troup  <james@nocrew.org>
1174
1175         * daklib/utils.py (process_gpgv_output): new function, split out
1176         of check_signature().
1177         (check_signature): adapt accordingly.
1178         (retrieve_key): new function that will try to retrieve the key
1179         that signed a given file from a keyserver.
1180         (check_signature): add 'autofetch' argument that if not set
1181         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1182         If 'autofetch' is true, invoke retrieve_key().
1183
1184         * docs/README.config: document Dinstall::KeyAutoFetch and
1185         Dinstall:KeyServer.
1186
1187 2006-05-20  James Troup  <james@nocrew.org>
1188
1189         * dak/find_null_maintainers.py (main):
1190         s/createtimestamp/createTimestamp/ to make things work with modern
1191         slapd.
1192
1193         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1194         Stable::Version and Stable::Description for 3.1r2.
1195
1196         * config/debian-non-US/dak.conf: sync with klecker - update
1197         version number of 3.0 and MoreInfoURL.
1198
1199         * docs/README.stable-point-release: Add notes about updating
1200         dak.conf and Reject-Proposed-Updates section in particular.
1201         s/woody/stable/.  Also need to update README.html.
1202
1203         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1204
1205         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1206
1207 2006-05-20  Ryan Murray  <rmurray@debian.org>
1208
1209         * scripts/debian/update-ftpstats: new script to update daily
1210         architecture size graph data.
1211
1212         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1213         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1214         there.
1215
1216         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1217         before we finish.  Don't push to merkel.
1218
1219         * dak/process_unchecked.py (check_changes): Also look in
1220         ProposedUpdates queue dir.
1221         (check_files): likewise.
1222
1223 2006-05-20  Anthony Towns  <ajt@debian.org>
1224
1225         * scripts/debian/mkfilesindices: new script to generate file
1226         indices used for partial mirroring.
1227
1228         * config/debian/cron.daily: add progress timestamps.
1229
1230         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1231         amd64 to testing, unstable and experimental.  Drop sh from
1232         experimental.  Move Experimental to dists/experimental.  Add
1233         Dir::ProposedUpdates.  Add Architectures::amd64.
1234
1235         * config/debian/apt.conf: add amd64 to testing, unstable and
1236         experimental.  Drop uncompressed Packages files from testing. Drop
1237         sh from experimental.  Move experimental to dists/experimental/.
1238
1239         * config/debian/vars (archs): add amd64.
1240
1241         * dak/process_unchecked.py (action): Add support for
1242         proposed-updates approval queue.
1243         (is_stableupdate): new function - checks if the upload is targeted
1244         at proposed-updates.
1245         (do_stableupdate): likewise - moves upload to proposed-updates
1246         holding area.
1247
1248         * dak/process_new.py (do_new): warn if original or new target
1249         suite are invalid.
1250
1251         * dak/generate_releases.py (print_md5sha_files): less whitespace
1252         between the hash and size.
1253
1254         * dak/generate_index_diffs.py (genchanges): don't say we're not
1255         doing anything.  Better formatting of other messages.
1256         (main): don't skip experimental and remove some 'doing stuff'
1257         prints.
1258
1259 2006-05-18  James Troup  <james@nocrew.org>
1260
1261         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1262         query.
1263
1264         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1265         docstrings, untabify, don't shadow builtins, lowercase non-global
1266         variable names, spaces after commas.  Also bail if given any
1267         arguments since we don't accept any.
1268         * dak/init_db.py: likewise.  Also split large main() into
1269         subfunctions and rename get() to sql_get().
1270
1271         * dak/init_db.py (main): check returned value from
1272         database.get_archive_id().
1273
1274         * dak/dak.py: renamed from shell.py.  Update to support new source
1275         layout.  Created init() and usage() functions.  Various
1276         pylint-inspired cleanups.  Use daklib utils.warn() and
1277         utils.fubar().  Change 'functionality' variable to only have
1278         (command, description) and always invoke main() when running the
1279         module.  Also support -h.
1280
1281 2006-05-17  James Troup  <james@nocrew.org>
1282
1283         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1284         imports of and calls to daklib modules.  Change script name
1285         everywhere, i.e. in output, mails, comments and configuration tree
1286         + filenames.  Also update references to other renamed scripts,
1287         classes and templates.  Use '.dak' instead of '.katie' for the
1288         queue info storage files.
1289         (Renamed from tea)
1290         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1291         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1292         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1293         * dak/clean_queues.py: likewise.  (Renamed from shania)
1294         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1295         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1296         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1297         * dak/control_suite.py: likewise.  (Renamed from heidi)
1298         * dak/cruft_report.py: likewise.  (Renamed from rene)
1299         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1300         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1301         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1302         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1303         * dak/import_archive.py: likewise.  (Renamed from neve)
1304         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1305         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1306         * dak/init_db.py: likewise. (Renamed from alyson)
1307         * dak/init_dirs.py: likewise. (Renamed from rose)
1308         * dak/ls.py: likewise. (Renamed from madison)
1309         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1310         * dak/make_overrides.py: likewise.  (Renamed from denise)
1311         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1312         * dak/mirror_split.py: likewise.  (Renamed from billie)
1313         * dak/override.py: likewise.  (Renamed from alicia)
1314         * dak/poolize.py: likewise.  (Renamed from catherine)
1315         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1316         * dak/process_new.py: likewise.  (Renamed from lisa)
1317         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1318         * dak/queue_report.py: likewise.  (Renamed from helena)
1319         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1320         * dak/rm.py: likewise.  (Renamed from melanie)
1321         * dak/security_install.py: likewise.  (Renamed from amber)
1322         * dak/split_done.py: likewise.  (Renamed from nina)
1323         * dak/stats.py: likewise.  (Renamed from saffron)
1324         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1325         * daklib/database.py: likewise.  (Renamed from db_access)
1326         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1327         * daklib/utils.py: likewise.
1328
1329         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1330         doesn't need to notify anyone" string.
1331         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1332
1333         * dak/process_accepted.py (init): drop -V/--version argument.
1334         * dak/process_new.py (init): likewise.
1335         * dak/process_unchecked.py (init): likewise.
1336         * dak/reject_proposed_updates.py (init): likewise
1337
1338         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1339
1340         * dak/stats.py: in usage() output change STAT to MODE.
1341
1342 2006-05-15  James Troup  <james@nocrew.org>
1343
1344         * dak/queue_report.py: remove unused encodings imports.
1345
1346         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1347         imports.  Initalize 'Cnf' as a global.
1348         (BillieDB._internal_recurse): fix 'util.' typo.
1349
1350         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1351         commented out time check for LDAP search.
1352
1353 2005-12-16  Ryan Murray  <rmurray@debian.org>
1354
1355         * halle: add support for udebs
1356         * kelly: stable_install: add support for binNMU versions
1357
1358 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1359
1360         * katie.py: Move accept() autobuilding support into separate function
1361         (queue_build), and generalise to build different queues
1362
1363         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1364
1365         * jennifer: Initial support for enabling embargo handling with the
1366         Dinstall::SecurityQueueHandling option.
1367         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1368         functions.
1369
1370         * katie.conf-security: Include embargo options
1371         * katie.conf-security: Add Lock dir
1372         * init_pool.sql-security: Create disembargo table
1373         * init_pool.sql-security: Add constraints for disembargo table
1374
1375 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1376
1377         * Merge of changes from klecker, by various people
1378
1379         * amber: special casing for not passing on amd64 and oldstable updates
1380         * amber: security mirror triggering
1381         * templates/amber.advisory: updated advisory structure
1382         * apt.conf.buildd-security: update for sarge's release
1383         * apt.conf-security: update for sarge's release
1384         * cron.buildd-security: generalise suite support, update for sarge's release
1385         * cron.daily-security: update for sarge's release, add udeb support
1386         * vars-security: update for sarge's release
1387         * katie.conf-security: update for sarge's release, add amd64 support,
1388         update signing key
1389
1390         * docs/README.names, docs/README.quotes: include the additions
1391
1392 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1393
1394         * Changed accepted_autobuild to queue_build everywhere.
1395         * Add a queue table.
1396         * Add a "queue" field in the queue_build table (currently always 0)
1397
1398         * jennifer: Restructure to make it easier to support special
1399         purpose queues between unchecked and accepted.
1400
1401 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1402
1403         * Finishing merge of changes from spohr, by various people still
1404
1405         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1406         works
1407         * jennifer: Re-enable .deb ar format checking
1408         * katie.py: Convert to +bX binNMU special casing
1409         * rhona: Add some debug output when deleting binaries
1410         * cron.daily: Add emilie
1411         * cron.unchecked: Add lock files
1412
1413 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1414
1415         * Merge of changes from spohr, by various people.
1416
1417         * tiffani: new script to do patches to Packages, Sources and Contents
1418         files for quicker downloads.
1419         * ziyi: update to authenticate tiffani generated files
1420
1421         * dak: new script to provide a single binary with less arbitrary names
1422         for access to dak functionality.
1423
1424         * cindy: script implemented
1425
1426         * saffron: cope with suites that don't have a Priority specified
1427         * heidi: use get_suite_id()
1428         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1429         * denise: remove override munging for testing (now done by cindy)
1430         * helena: expanded help, added new, sort and age options, and fancy headers
1431         * jennifer: require description, add a reject for missing dsc file
1432         * jennifer: change lock file
1433         * kelly: propogation support
1434         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1435         * madison: don't say "dep-retry"
1436         * melanie: bug fix in output (missing %)
1437         * natalie: cope with maintainer_override == None; add type_id for overrides
1438         * nina: use mtime, not ctime
1439
1440         * katie.py: propogation bug fixes
1441         * logging.py: add debugging support, use | as the logfile separator
1442
1443         * katie.conf: updated signing key (4F368D5D)
1444         * katie.conf: changed lockfile to dinstall.lock
1445         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1446         * katie.conf: added tiffani, cindy support
1447         * katie.conf: updated to match 3.0r6 release
1448         * katie.conf: updated to match sarge's release
1449
1450         * apt.conf: update for sarge's release
1451         * apt.conf.stable: update for sarge's release
1452         * apt.conf: bump daily max Contents change to 25MB from 12MB
1453
1454         * cron.daily: add accepted lock and invoke cindy
1455         * cron.daily: add daily.lock
1456         * cron.daily: invoke tiffani
1457         * cron.daily: rebuild accepted buildd stuff
1458         * cron.daily: save rene-daily output on the web site
1459         * cron.daily: disable billie
1460         * cron.daily: add stats pr0n
1461
1462         * cron.hourly: invoke helena
1463
1464         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1465         * vars: add lockdir, add etch to copyoverrides
1466         * Makefile: add -Ipostgresql/server to CXXFLAGS
1467
1468         * docs/: added README.quotes
1469         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1470         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1471
1472         * TODO: correct spelling of "conflicts"
1473
1474 2005-05-28  James Troup  <james@nocrew.org>
1475
1476         * helena (process_changes_files): use MTIME rather than CTIME (the
1477         C's not for 'creation', stupid).
1478         * lisa (sort_changes): likewise.
1479
1480         * jennifer (check_distributions): use has_key rather than an 'in'
1481         test which doesn't work with python2.1.  [Probably by AJ]
1482
1483 2005-03-19  James Troup  <james@nocrew.org>
1484
1485         * rene (main): use Suite::<suite>::UdebComponents to determine
1486         what components have udebs rather than assuming only 'main' does.
1487
1488 2005-03-18  James Troup  <james@nocrew.org>
1489
1490         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1491         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1492         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1493         <andrew@ubuntu.com>.
1494
1495 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1496
1497         * helena: add -n/--new HTML output option and improved sorting
1498         options.
1499
1500 2005-03-06  Ryan Murray  <rmurray@debian.org>
1501
1502         * shania(main): use Cnf::Dir::Reject instead of REJECT
1503
1504 2005-02-08  James Troup  <james@nocrew.org>
1505
1506         * rene (main): add partial NBS support by checking that binary
1507         packages are built by their real parent and not some random
1508         stranger.
1509         (do_partial_nbs): likewise.
1510
1511 2005-01-18  James Troup  <james@nocrew.org>
1512
1513         * katie.py (Katie.build_summaries): avoid leaking file handle when
1514         extracting package description.
1515         (Katie.force_reject): remember and close each file descriptor we
1516         use.
1517         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1518         s/reason_file/reason_fd/ because it's a file descriptor.
1519         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1520         invoking apt_pkg.md5sum().
1521
1522         * jennifer (check_deb_ar): new function: sanity check the ar
1523         contents of a .deb.
1524         (check_files): use it.
1525         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1526         found.
1527         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1528
1529 2005-01-14  Anthony Towns  <ajt@debian.org>
1530
1531         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1532
1533         * propup stuff (thanks to Andreas Barth)
1534         * katie.conf: add stable MustBeOlderThan testing, add -security
1535           propup
1536         * jennifer: set distribution-version in .katie if propup may be needed
1537         * katie.py: add propogation to cross_suite_version_check
1538
1539 2004-11-27  James Troup  <james@nocrew.org>
1540
1541         * nina: new script to split monolithic queue/done into date-based
1542         hierarchy.
1543
1544         * rene (usage): document -s/--suite.
1545         (add_nbs): use .setdefault().
1546         (do_anais): likewise.
1547         (do_nbs): don't set a string to "" and then += it.
1548         (do_obsolete_source): new function - looks for obsolete source
1549         packages (i.e source packages whose binary packages are ALL a)
1550         claimed by someone else and b) newer when built from the other
1551         source package).
1552         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1553         and 'full' check modes.  Check for obsolete source packages.
1554         linux-wlan-ng has been fixed - remove hideous bodge.
1555
1556         * jennifer (check_distributions): support 'reject' suite map type.
1557
1558         * utils.py (validate_changes_file_arg): s/file/filename/.
1559         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1560         and return the .changes filename regardless.
1561         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1562         (re_no_revision): don't escape '-', it's not a special character.
1563         s/\*/+/ as there must be at least one non-dash character after the
1564         dash in a revision.  Thanks to Christian Reis for noticing both of
1565         these.
1566
1567         * ashley (main): pass require_changes=-1 to
1568         utils.validate_changes_file_arg().
1569
1570         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1571         Team <debian-kernel@lists.debian.org>'.
1572
1573         * katie.py (Katie.in_override_p): fix .startswith() usage.
1574
1575         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1576         (Lauren::MoreInfoURL): update to 3.0r3.
1577         (Suite::Stable::Version): likewise.
1578         (Suite::Stable::Description): likewise.
1579
1580         * cron.daily: disable automatic task override generation.
1581
1582         * cindy (process): restrict "find all packages" queries by
1583         component.  Respect Options["No-Action"].
1584         (main): add -n/--no-action support.  Only run on unstable.  Rename
1585         type to otype (pychecker).
1586
1587 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1588
1589         * katie.conf (Billie::BasicTrees): add all architectures.
1590         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1591         'everything'.
1592
1593         * cron.daily: Update a 'current' symlink when creating the
1594         post-daily-cron-job database backup to aid mirroring to merkel.
1595         Run billie.
1596
1597         * billie (BillieTarget.poolish_match): handle .udeb too.
1598
1599 2004-10-13  Ryan Murray  <rmurray@debian.org>
1600
1601         * amber (do_upload): Sort changes files in "katie" order so that
1602           source always arrives before binary-only rebuilds
1603
1604 2004-10-05  James Troup  <james@nocrew.org>
1605
1606         * jennifer (check_dsc): correct reject message on invalid
1607         Maintainer field.
1608
1609 2004-09-20  James Troup  <james@nocrew.org>
1610
1611         * alicia: remove unused 'pwd' import.
1612
1613         * tea (check_override): underline suite name in output properly.
1614
1615         * rene (main): read a compressed Packages file.
1616         * tea (validate_packages): likewise.
1617
1618         * katie.py (re_fdnic): add 'r' prefix.
1619         (re_bin_only_nmu_of_mu): likewise.
1620         (re_bin_only_nmu_of_nmu): likewise.
1621
1622         * madison (main): retrieve component information too and display
1623         it if it's not 'main'.
1624         * melanie (reverse_depends_check): likewise.
1625
1626         * utils.py (pp_dep): renamed...
1627         (pp_deps): ... to this.
1628         * jeri (check_dep): update calls to utils.pp_deps().
1629         * melanie (reverse_depends_check): likewise.
1630
1631         * jennifer (check_changes): move initalization of email variables
1632         from here...
1633         (process_it): ...to here as we no longer always run
1634         check_changes().  Don't bother to initialize
1635         changes["architecture"].
1636
1637         * denise (list): renamed to...
1638         (do_list): ...this to avoid name clash with builtin 'list'.
1639         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1640         for dictionaries.
1641         (main): Likewise for name clash avoidance and also
1642         s/override_type/suffix/.  Adjust call to do_list().
1643
1644 2004-09-01  Ryan Murray  <rmurray@debian.org>
1645
1646         * tea (check_files): check the pool/ directory instead of dists/
1647
1648 2004-08-04  James Troup  <james@nocrew.org>
1649
1650         * jenna (cleanup): use .setdefault() for dictionaries.
1651         (write_filelists): likewise.
1652
1653         (write_filelists): Use utils.split_args() not split() to split
1654         command line arguments.
1655         (stable_dislocation_p): likewise.
1656
1657         (write_filelists): Add support for mapping side of suite-based
1658         "Arch: all mapping".
1659         (do_da_do_da): ensure that if we're not doing all suites that we
1660         process enough to be able correct map arch: all packages.
1661
1662         * utils.py (cant_open_exc): correct exception string,
1663         s/read/open/, s/.$//.
1664
1665         * templates/amber.advisory: update to match reality a little
1666         better.
1667
1668         * melanie (reverse_depends_check): read Packages.gz rather than
1669         Packages.
1670
1671         * jennifer (check_files): check for unknown component before
1672         checking for NEWness.
1673
1674         * katie.py (Katie.in_override_p): use .startswith in favour of a
1675         slice.
1676
1677         * docs/melanie.1.sgml: document -R/--rdep-check.
1678
1679 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1680
1681         * billie (main): Make the verbatim lists include all the README
1682           elements.
1683         * docs/README.names: Add billie in (correcting oversight)
1684
1685 2004-07-01  James Troup  <james@nocrew.org>
1686
1687         * emilie (main): handle woody's case-sensitive python-ldap,
1688         s/keyfingerprint/keyFingerPrint/.
1689
1690 2004-06-25  James Troup  <james@nocrew.org>
1691
1692         * debian/control (Depends): add dpkg-dev since jennifer uses
1693         dpkg-source.
1694
1695 2004-06-24  James Troup  <james@nocrew.org>
1696
1697         * melanie (main): s/file/temp_file/ and close file handle before
1698         removing the temporary file.
1699         (main): don't warn about needing a --carbon-copy if in no-action
1700         mode.
1701
1702         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1703         (main): likewise.
1704
1705         * test/006/test.py (main): check bracketed email-only form.
1706
1707         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1708         email-only, strip the brackets so we don't end up with
1709         <<james@nocrew.org>>.
1710
1711 2004-06-20  James Troup  <james@nocrew.org>
1712
1713         * jennifer (process_it): only run check_changes() if
1714         check_signature() returns something.  (Likewise)
1715
1716         * utils.py (changes_compare): if there's no changes["version"] use
1717         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1718
1719 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1720
1721         * jeri (pp_dep): moved from here to ...
1722         * utils.py (pp_dep): here.
1723
1724         * melanie (main): add reverse dependency checking.
1725
1726 2004-06-17  James Troup  <james@nocrew.org>
1727
1728         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1729         * tea (check_dscs): likewise.
1730
1731         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1732         change from boolean to a variable with 3 possible values, 0 and 1
1733         as before, -1 means don't require a signature.  Makes
1734         parse_changes() useful for parsing arbitary RFC822-style files,
1735         e.g. 'Release' files.
1736         (check_signature): add support for detached signatures by passing
1737         the files the signature is for as an optional third argument.
1738         s/filename/sig_filename/g.  Add a fourth optional argument to
1739         choose the keyring(s) to use.  Don't os.path.basename() the
1740         sig_filename before checking it for taint.
1741         (re_taint_free): allow '/'.
1742
1743 2004-06-11  James Troup  <james@nocrew.org>
1744
1745         * tea (check_files): make override.unreadable optional.
1746         (validate_sources): close the Sources file handle.
1747
1748         * docs/README.first: clarify that 'alyson' and running
1749         add_constraints.sql by hand is something you only want to do if
1750         you're not running 'neve'.
1751
1752         * docs/README.config (Location::$LOCATION::Suites): document.
1753
1754         * db_access.py (do_query): also print out the result of the query.
1755
1756 2004-06-10  James Troup  <james@nocrew.org>
1757
1758         * katie.py (Katie.cross_suite_version_check): post-woody versions
1759         of python-apt's apt_pkg.VersionCompare() function apparently
1760         returns variable integers for less than or greater than results -
1761         update our result checking to match.
1762         * jenna (resolve_arch_all_vs_any): likewise.
1763         * charisma (main): likewise.
1764
1765 2004-06-09  James Troup  <james@nocrew.org>
1766
1767         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1768         valid_dsc_p and don't run check_source() if check_dsc() failed.
1769         (check_dsc): on fatal failures return 0 so check_source() isn't
1770         run (since it makes fatal assumptions about the presence of
1771         mandatory .dsc fields).
1772         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1773
1774 2004-05-07  James Troup  <james@nocrew.org>
1775
1776         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1777         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1778
1779         * katie.conf (Dir::Override): remove duplicate definition.
1780
1781         * neve (get_or_set_files_id): add an always-NULL last_used column
1782         to output.
1783
1784 2004-04-27  James Troup  <james@nocrew.org>
1785
1786         * apt.conf-security (tree "dists/stable/updates"): add
1787         ExtraOverride - noticed by Joey Hess (#246050).
1788         (tree "dists/testing/updates"): likewise.
1789
1790 2004-04-20  James Troup  <james@nocrew.org>
1791
1792         * jennifer (check_files): check for existing .changes or .katie
1793         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1794         directories.
1795
1796 2004-04-19  James Troup  <james@nocrew.org>
1797
1798         * jennifer (check_source): handle failure to remove the temporary
1799          directory (used for source tree extraction) better, specifically:
1800          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1801          and try again and if that works, REJECT the package.
1802
1803 2004-04-17  James Troup  <james@nocrew.org>
1804
1805         * docs/madison.1.sgml: document -b/--binary-type,
1806         -g/--greaterorequal and -G/--greaterthan.
1807
1808         * madison (usage): -b/--binary-type only takes a single argument.
1809         Document -g/--greaterorequal and -G/--greaterthan.
1810         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1811
1812 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1813
1814         * billie: Cleaned up a load of comments, added /README.non-US to
1815           the verbatim matches list.
1816
1817 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1818
1819         * utils.py (size_type): Make it use real binary megabytes and
1820           kilobytes, instead of the marketing terms used before.
1821
1822 2004-04-07  James Troup  <james@nocrew.org>
1823
1824         * katie.py (Katie.check_dsc_against_db): in the case we're
1825         ignoring an identical-to-existing orig.tar.gz remember the path to
1826         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1827         location.path too to be able to do so.
1828
1829 2004-04-03  James Troup  <james@nocrew.org>
1830
1831         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1832         needed for new utils.rfc2047_encode() function.
1833
1834         * utils.py (re_parse_maintainer): allow whitespace inside the
1835         email address.
1836         (Error): new exception base class.
1837         (ParseMaintError): new exception class.
1838         (force_to_utf8): new function.
1839         (rfc2047_encode): likewise.
1840         (fix_maintainer): rework.  use force_to_utf8() to force name and
1841         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1842         return an rfc2047 value.  Validate the address to catch missing
1843         email addresses and (some) broken ones.
1844
1845         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1846         by adopting foo2047 return value.
1847         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1848         mandatory changes fields.  Promote changes and maintainer822 to
1849         mandatory fields.
1850         (Katie.update_subst): default maintainer2047 rather than
1851         maintainer822.  User foo2047 rather than foo822 when setting
1852         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1853
1854         * jennifer (check_changes): set default changes["maintainer2047"]
1855         and changes["changedby2047"] values rather than their 822
1856         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1857         to new utils.fix_maintainer() - reject on exception and adopt
1858         foo2047 return value.
1859         (check_dsc): if a mandatory field is missing don't do any further
1860         checks and as a result reduce paranoia about dsc[var] existence.
1861         Validate the maintainer field by calling new
1862         utils.fix_maintainer().
1863
1864         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1865         changes fields.  Promote maintainer822 to a mandatory changes
1866         field.  add "pool name" to files fields.
1867
1868         * test/006/test.py: new file - tests for new
1869         utils.fix_maintainer().
1870
1871 2004-04-01  James Troup  <james@nocrew.org>
1872
1873         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1874
1875         * jennifer (get_changelog_versions): create a symlink mirror of
1876         the source files in the temporary directory.
1877         (check_source): if check_dsc_against_db() couldn't find the
1878         orig.tar.gz bail out.
1879
1880         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1881         part of the upload store the path to it in pkg.orig_tar_gz and if
1882         it can't be found set pkg.orig_tar_gz to -1.
1883
1884         Explicitly return the second value as None in the (usual) case
1885         where we don't have to reprocess.  Remove obsolete diagnostic
1886         logs.
1887
1888         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1889
1890         * utils.py (temp_filename): new helper function that wraps around
1891         tempfile.mktemp().
1892
1893         * katie.py (Katie.do_reject): use it and don't import tempfile.
1894         * lisa (prod_maintainer): likewise.
1895         (edit_note): likewise.
1896         (edit_new): likewise.
1897         * lauren (reject): likewise.
1898         * melanie (main): likewise.
1899         * neve (do_sources): likewise.
1900         * rene (main): likewise.
1901         * tea (validate_sources): likewise.
1902
1903 2004-03-31  James Troup  <james@nocrew.org>
1904
1905         * tea (validate_sources): remove unused 's' temporary variable.
1906
1907 2004-03-15  James Troup  <james@nocrew.org>
1908
1909         * jennifer (check_dsc): check changes["architecture"] for
1910         source before we do anything else.
1911
1912 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1913
1914         * billie: Added
1915         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1916
1917 2004-03-12  James Troup  <james@nocrew.org>
1918
1919         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1920
1921         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1922
1923         * katie.py (Katie.accept): add support for DebBugs Version
1924         Tracking by writing out .versions (generated in jennifer's
1925         get_changelog_versions()) and .debinfo (mapping of binary ->
1926         source) files.
1927
1928         * ashley (main): add dsc["bts changelog"].
1929
1930         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1931
1932         * jennifer (check_diff): obsoleted by check_source(), removed.
1933         (check_source): new function: create a temporary directory and
1934         move into it and call get_changelog_versions().
1935         (get_changelog_versions): new function: extract the source package
1936         and optionally parse debian/changelog to obtain the version
1937         history for the BTS.
1938         (process_it): call check_source() rather than check_diff().
1939
1940 2004-03-08  James Troup  <james@nocrew.org>
1941
1942         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1943         listbar" rather than "if listbar.count(varfoo)"' change on
1944         2004-02-24.
1945
1946 2004-03-05  James Troup  <james@nocrew.org>
1947
1948         * alicia (main): don't warn about not closing bugs - we don't
1949         manage overrides through the BTS.
1950
1951 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1952
1953         * docs/README.config: lots of updates and corrections.
1954         * docs/README.first: likewise.
1955
1956         * docs/README.config: drop unused Dir::Queue::Root.
1957         * katie.conf-non-US: likewise.
1958         * katie.conf: likewise.
1959         * katie.conf-security: likewise.
1960
1961 2004-02-27  James Troup  <james@nocrew.org>
1962
1963         * rose (process_tree): use 'if var in [ list ]' rather than long
1964         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1965         Michlmayr.
1966
1967         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1968         suggested by Martin Michlmayr.
1969         * catherine (poolize): likewise.
1970         * charisma (main): likewise.
1971         * halle (check_changes): likewise.
1972         * heidi (main): likewise.
1973         (process_file): likewise.
1974         * kelly (install): likewise.
1975         (stable_install): likewise.
1976         * utils.py (fix_maintainer): likewise.
1977
1978         * apt.conf: add support for debian-installer in testing-proposed-updates.
1979         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1980         add - set to main.
1981
1982         * mkmaintainers: add "-T15" option to wget of non-US packages file
1983         so that we don't hang cron.daily if non-US is down.
1984
1985         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1986
1987         * templates/jennifer.bug-close: add Source and Source-Version
1988         pseudo-headers that may be used for BTS Version Tracking someday
1989         [ajt@].
1990
1991         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1992         (main): likewise.
1993
1994         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1995
1996 2004-02-25  James Troup  <james@nocrew.org>
1997
1998         * katie.conf (SuiteMappings): don't map testing-security to
1999         proposed-updates.
2000
2001 2004-02-24  James Troup  <james@nocrew.org>
2002
2003         * katie.py (Katie.__init__): remove unused 'values' field.
2004
2005         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2006         rather than 's.count(c) > 0'.
2007
2008         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2009         rather than "if listbar.count(varfoo)".
2010         * halle (check_joey): likewise.
2011         * jeri (check_joey): likewise.
2012         * lisa (edit_index): likewise.
2013         * jenna (stable_dislocation_p): likewise.
2014
2015         * jennifer (main): remove unused global 'nmu'.
2016
2017 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2018
2019         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2020           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2021           the dak tools close bugs.
2022
2023 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2024
2025         * katie.conf (Alicia): Added an Alicia section with email address
2026         * templates/alicia.bug-close: Added
2027         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2028         * alicia (main): Added a -d/--done argument
2029
2030 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2031
2032         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2033
2034 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2035
2036         * lisa (prod_maintainer): Added function to prod the maintainer without
2037           accepting or rejecting the package
2038         * templates/lisa.prod: Added this template for the prodding mail
2039
2040         * .cvsignore: Added neve-files which turns up in new installations
2041
2042 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2043
2044         * alicia (usage): Fixed usage message to offer section and priority
2045           as seperately optional arguments.
2046         * alicia (main): Added a % (arg) interpolation needed when only
2047           one of section or priority is provided and it cannot be found.
2048
2049 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2050
2051         * alicia: Added
2052         * docs/alicia.1.sgml: Added
2053         * docs/Makefile: Added alicia to the list of manpages to build
2054         * docs/README.names: Noted what alicia does
2055         * docs/README.first: Noted where alicia is useful
2056
2057 2004-01-21  James Troup  <james@nocrew.org>
2058
2059         * madison (main): add -b/--binary-type.
2060         (usage): likewise.
2061
2062         * denise (main): generate debian-installer overrides for testing
2063         too.
2064         * apt.conf: add support for debian-installer in testing.
2065         * katie.conf (Suite::Testing::UdebComponents): set to main.
2066
2067         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2068         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2069         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2070
2071         * utils.py (parse_changes): don't process data not inside the
2072         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2073         pointing this out.
2074         * test/005/test.py (main): new test to test for above.
2075
2076 2004-01-04  James Troup  <james@nocrew.org>
2077
2078         * jenna (write_filelists): correct typo, s/Components/Component/
2079         for Options.
2080
2081 2004-01-04  Ryan Murray  <rmurray@debian.org>
2082
2083         * cron.buildd: move update of overrides and Packages file...
2084         * cron.unchecked: to here.
2085         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2086         * katie.conf-security: likewise
2087
2088 2003-11-20  James Troup  <james@nocrew.org>
2089
2090         * jenna (main): don't use utils.try_with_debug(), it produces way
2091         too much output.
2092
2093         * halle (check_changes): don't error out if a .changes refers to a
2094         non-existent package, just warn and skip the file.
2095
2096         * docs/README.stable-point-release: mention halle and .changes
2097         obsoleted by removal through melanie.  Update for 3.0r2.
2098
2099         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2100         (Suite::Stable::Description): update for 3.0r2.
2101         (Lauren::MoreInfoURL): likewise.
2102         * katie.conf-non-US (Suite::Stable::Version): likewise.
2103         (Suite::Stable::Description): likewise.
2104         (Lauren::MoreInfoURL): likewise.
2105
2106         * apt.conf.stable (Default): don't define MaxContentsChange.
2107         * apt.conf.stable-non-US (Default): likewise.
2108
2109         * lauren (reject): hack to work around partial replacement of an
2110         upload, i.e. one or more binaries superseded by another source
2111         package.
2112
2113 2003-11-17  James Troup  <james@nocrew.org>
2114
2115         * pseudo-packages.maintainers: point installation-reports at
2116         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2117         request.
2118
2119         * utils.py (parse_changes): calculate the number of lines once
2120         with len() rather than max().
2121
2122         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2123         files, since check_dsc_against_db() deletes the .orig.tar.gz
2124         entry.
2125
2126 2003-11-13  Ryan Murray  <rmurray@debian.org>
2127
2128         * apt.conf: specify a src override file for debian-installer
2129
2130 2003-11-10  James Troup  <james@nocrew.org>
2131
2132         * fernanda.py (strip_pgp_signature): new function - strips PGP
2133         signature from a file and returns the modified contents of the
2134         file in a string.
2135         (display_changes): use it.
2136         (read_dsc): likewise.
2137
2138 2003-11-09  Ryan Murray  <rmurray@debian.org>
2139
2140         * cron.buildd: export accepted_autobuild table for unstable, and use
2141         it to generate the incoming Packages/Sources rather than having apt
2142         walk the directory.
2143         * apt.conf.buildd: use exported table from cron.buildd to generate
2144         Packages/Sources
2145
2146 2003-11-07  James Troup  <james@nocrew.org>
2147
2148         * kelly: import errno.
2149
2150         * katie.py (Katie.build_summaries): sort override disparities.
2151
2152         * kelly (install): set dsc_component based on the .dsc's component
2153         not a random binaries.
2154
2155 2003-10-29  James Troup  <james@nocrew.org>
2156
2157         * katie.py (Katie.build_summaries): don't assume changes["source"]
2158         exists since it might not.
2159
2160 2003-10-20  James Troup  <james@nocrew.org>
2161
2162         * pseudo-packages.maintainers: update security.d.o to use
2163         team@s.d.o at joy@'s request.
2164
2165 2003-10-17  James Troup  <james@nocrew.org>
2166
2167         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2168
2169 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2170
2171         * tea (chk_bd_process_dir): use .endswith rather than slice.
2172
2173 2003-10-14  James Troup  <james@nocrew.org>
2174
2175         * tea (check_build_depends): new function.
2176         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2177         in the archive.
2178         (main): update for new function.
2179         (usage): likewise.
2180
2181         * katie.py (Katie.do_reject): sanitize variable names,
2182         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2183         os.close() to outside if clause.
2184
2185         * jennifer (check_dsc): check build-depends and
2186         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2187         Fold the ARRAY check into the same code block and tidy up it's
2188         rejection message.
2189         (check_changes): ensure that the Files field is non-empty.
2190         Suggested by Santiago Vila <sanvila@unex.es>
2191         (check_changes): normalize reject messages.
2192         (check_dsc): instead of doing most of the checks inside a for loop
2193         and an if, find the dsc_filename in a short loop over files first
2194         and then do all the checks.  Add check for more than one .dsc in a
2195         .changes which we can't handle.  Normalize reject messages.
2196
2197 2003-10-13  James Troup  <james@nocrew.org>
2198
2199         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2200         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2201
2202         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2203         variables while iterating over 'files'.  Don't regenerate it when
2204         checking for source if source is mentioned.
2205
2206         Reject source only uploads if the config variable
2207         Dinstall::Reject::NoSourceOnly is set.
2208
2209 2003-10-03  James Troup  <james@nocrew.org>
2210
2211         * rene (main): add nasty hardcoded reference to debian-installer
2212         so we detect NBS .udebs.
2213
2214 2003-09-29  James Troup  <james@nocrew.org>
2215
2216         * apt.conf (old-proposed-updates): remove.
2217         * apt.conf-non-US (old-proposed-updates): likewise.
2218
2219 2003-09-24  James Troup  <james@nocrew.org>
2220
2221         * tea (check_files_not_symlinks): new function, ensure files
2222         mentioned in the database aren't symlinks.  Includes code to
2223         update any files that are like this to their real filenames +
2224         location; commented out by though.
2225         (usage): update for new function.
2226         (main): likewise.
2227
2228 2003-09-24  Anthony Towns  <ajt@debian.org>
2229
2230         * vars: external-overrides variable added
2231         * cron.daily: Update testing/unstable Task: overrides from joeyh
2232         managed external source.
2233
2234 2003-09-22  James Troup  <james@nocrew.org>
2235
2236         * kelly (install): if we can't move the .changes into queue/done,
2237         fail don't warn and carry on.  The old behaviour pre-dates NI and
2238         doesn't make much sense now since jennifer checks both
2239         queue/accepted and queue/done for any .changes files it's
2240         processing.
2241
2242         * utils.py (move): don't throw exceptions on existing files or
2243         can't overwrite, instead just fubar out.
2244
2245         * jennifer (check_dsc): also check Build-Depends-Indep for
2246         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2247
2248 2003-09-18  James Troup  <james@nocrew.org>
2249
2250         * katie.py (Katie.close_bugs): only log the bugs we've closed
2251         once.
2252
2253         * kelly (main): log as 'kelly', not 'katie'.
2254
2255 2003-09-16  James Troup  <james@nocrew.org>
2256
2257         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2258
2259         * jennifer (check_changes): normalize reject message for "changes
2260         file already exists" to be %s: <foo>.
2261         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2262         produced by broken dpkg-source in 1.10.11.  Tone down and
2263         normalize rejection message for incompatible 'Format' version
2264         numbers.
2265         (check_diff): likewise tone down and normalize.
2266
2267 2003-09-07  James Troup  <james@nocrew.org>
2268
2269         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2270         don't bomb out on bogus empty lines.
2271         (build_file_list): check for changes["files"] earlier.  use Dict
2272         to create files[name] dictionary.
2273         (send_mail): don't bother validating arguments.
2274         (check_signature): minor improvements to some of the rejection
2275         messages including listing the key id of the key that wasn't found
2276         in the keyring.
2277         (wrap): new function.
2278
2279         * tea: add new check 'validate-indices' that ensures all files
2280         mentioned in indices (Packages, Sources) files do in fact exist.
2281
2282         * catherine (poolize): use a local re_isadeb which handles legacy
2283         (i.e. no architecture) style .deb filenames.
2284
2285         * rosamund: new script.
2286
2287         * rhona (check_binaries): when checking for binary packages not in
2288         a suite, don't bother selecting files that already have a
2289         last_used date.
2290         (check_sources): likewise.
2291
2292         * rhona: change all SQL EXISTS sub-query clauses to use the
2293         postgres suggested convention of "SELECT 1 FROM".
2294         * andrea (main): likewise.
2295         * tea (check_override): likewise.
2296         * catherine (main): likewise.
2297
2298         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2299         entries and in other suites MustBeNewerThan's.
2300         (SuiteMappings): likewise
2301         * katie.conf-non-US: likewise.
2302         * katie.conf-security: likewise.
2303
2304         * apt.conf-security: remove oldstable.
2305         * apt.conf.stable: likewise.
2306         * apt.conf.stable-non-US: likewise.
2307         * cron.buildd-security: likewise.
2308         * cron.daily-security: likewise.
2309         * vars-security (suites): likewise.
2310         * wanna-build/trigger.daily: likewise.
2311
2312         * claire.py (clean_symlink): move...
2313         * utils.py (clean_symlink): here.
2314
2315         * claire.py (find_dislocated_stable): update accordingly.
2316
2317 2003-08-16  Anthony Towns  <ajt@debian.org>
2318
2319         * katie.py (source_exists): expand the list of distributions
2320         the source may exist in to include any suite that's mapped to
2321         the destination suite (even transitively (a->b->c)). This should
2322         unbreak binary uploads to *-proposed-updates.
2323
2324 2003-08-09  Randall Donald  <rdonald@debian.org>
2325
2326         * lisa (recheck): change changes["distribution"].keys() to
2327         Katie.pkg.changes...
2328
2329 2003-08-08  Randall Donald  <rdonald@debian.org>
2330
2331         * katie.py: only tag bugs as fixed-in-experimental for
2332         experimental uploads
2333
2334 2003-07-26  Anthony Towns  <ajt@debian.org>
2335
2336         * katie.py (source_exists): add an extra parameter to limit the
2337         distribution(s) the source must exist in.
2338         * kelly, lisa, jennifer: update to use the new source_exists
2339
2340 2003-07-15  Anthony Towns  <ajt@debian.org>
2341
2342         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2343         checksums for debian-installer stuff even when it's just a symlink to
2344         another suite
2345
2346         * apt.conf: add the FakeDI line
2347
2348 2003-06-09  James Troup  <james@nocrew.org>
2349
2350         * kelly (check): make sure the 'file' we're looking for in 'files'
2351         hasn't been deleted by katie.check_dsc_against_db().
2352
2353 2003-05-07  James Troup  <james@nocrew.org>
2354
2355         * helena (time_pp): fix s/years/year/ typo.
2356
2357 2003-04-29  James Troup  <james@nocrew.org>
2358
2359         * madison (usage): document -c/--component.
2360
2361         * madison (usage): Fix s/seperated/separated/.
2362         * melanie (usage): likewise.
2363         * jenna (usage): likewise.
2364
2365 2003-04-24  James Troup  <james@nocrew.org>
2366
2367         * cron.daily-non-US: if there's nothing for kelly to install, say
2368         so.
2369
2370         * jennifer (check_timestamps): print sys.exc_value as well as
2371         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2372         failed' with 'deb contents' to make it clearer what timestamp(s)
2373         are being checked.
2374
2375 2003-04-15  James Troup  <james@nocrew.org>
2376
2377         * cron.daily-non-US: only run kelly if there are some .changes
2378         files in accepted.
2379
2380         * rene: add -m/--mode argument which can be either daily (default)
2381         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2382         Various changes to make this possible including a poor attempt at
2383         splitting main() up a little.  De-hardcode suite numbers from SQL
2384         queries and return quietly from do_nviu() if experimental doesn't
2385         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2386         is.
2387
2388         * debian/control (Depends): remove python-zlib as it's obsolete.
2389
2390         * charisma (main): don't slice the \n off strings when we're
2391         strip()-ing it anyway.
2392         * heidi (set_suite): likewise.
2393         (process_file): likewise.
2394         * natalie (process_file): likewise.
2395
2396 2003-04-08  James Troup  <james@nocrew.org>
2397
2398         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2399         slow queries by using one LIKE '%foo%' and then matching against
2400         '%s' or '/%s$' in python.  Also only join location when we need it
2401         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2402         query, so 6s for each sourceful package.
2403
2404         * cron.daily: invoke rene and send the report to ftpmaster.
2405         * cron.daily-non-US: likewise.
2406
2407 2003-03-14  James Troup  <james@nocrew.org>
2408
2409         * utils.py (send_mail): default filename to blank.
2410         * amber (make_advisory): adapt.
2411         * jennifer (acknowledge_new): likewise.
2412         * katie.py (Katie.close_bugs): likewise.
2413         (Katie.announce): likewise.
2414         (Katie.accept): likewise.
2415         (Katie.check_override): likewise.
2416         (Katie.do_reject): likewise.
2417         * kelly (do_reject): likewise.
2418         (stable_install): likewise.
2419         * lisa (do_bxa_notification): likewise.
2420         * lauren (reject): likewise.
2421         * melanie (main): likewise.
2422
2423         * rene (add_nbs): check any NBS packages against unstable to see
2424         if they haven't been removed already.
2425
2426         * templates/katie.rejected: remove paragraph about rejected files
2427         since they're o-rwx due to c-i-m and the uploader can't do
2428         anything about them and shania will take care of them anyway.
2429
2430         * madison (usage): update usage example to use comma seperation.
2431         * melanie (usage): likewise.
2432
2433         * utils.py (split_args): new function; splits command line
2434         arguments either by space or comma (whichever is used).  Also has
2435         optional-but-default DWIM spurious space detection to avoid
2436         'command -a i386, m68k' problems.
2437         (parse_args): use it.
2438         * melanie (main): likewise.
2439
2440         * melanie (main): force the admin to tell someone if we're not
2441         doing a rene-led removal (or closing a bug, which counts as
2442         telling someone).
2443
2444 2003-03-05  James Troup  <james@nocrew.org>
2445
2446         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2447         and python sections.
2448         * katie.conf-security (Section): likewise.
2449
2450         * add_constraints.sql: add uid and uid_id_seq to grants.
2451
2452         * lisa (determine_new): also warn about adding overrides to
2453         oldstable.
2454
2455         * madison (main): make the -S/--source-and-binary query obey
2456         -s/--suite restrictions.
2457
2458 2003-03-03  James Troup  <james@nocrew.org>
2459
2460         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2461         exists, warn the user that our output might seem strange.  (People
2462         get confused by multiple versions in a suite which happens
2463         post-kelly but pre-jenna.)
2464
2465 2003-02-21  James Troup  <james@nocrew.org>
2466
2467         * kelly (main): we don't need to worry about StableRejector.
2468
2469         * melanie (main): sort versions with apt_pkg.VersionCompare()
2470         prior to output.
2471
2472         * lauren: new script to manually reject packages from
2473         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2474
2475 2003-02-20  James Troup  <james@nocrew.org>
2476
2477         * kelly (init): remove unused -m/--manual-reject argument.
2478
2479         * katie.py (Katie.force_reject): renamed from force_move to make
2480         it more explicit what this function does.
2481         (Katie.do_reject): update to match.
2482
2483         * utils.py (prefix_multi_line_string): add an optional argument
2484         include_blank_lines which defaults to 0.  If non-zero, blank lines
2485         will be includes in the output.
2486
2487         * katie.py (Katie.do_reject): don't add leading space to each line
2488         of the reject message.  Include blank lines when showing the
2489         message to the user.
2490
2491 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2492
2493         * utils.py (fix_maintainer): replace pointless re.sub() with
2494         simple string format.
2495
2496 2003-02-11  James Troup  <james@nocrew.org>
2497
2498         * lisa (edit_overrides): only strip-to-one-char and upper-case
2499         non-numeric answers.  Fixes editing of items with indices >= 10;
2500         noticed by Randall.
2501         (edit_overrides): correct order of arguments to "not a valid
2502         index" error message.
2503
2504         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2505         remove_duplicate_versions(); thanks to aj for the initial
2506         diagnosis.
2507         (remove_duplicate_versions): correct how we return
2508         dominant_versions.
2509         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2510         a tuple rather than just a tuple.
2511
2512 2003-02-10  James Troup  <james@nocrew.org>
2513
2514         * emilie: new script - sync fingerprint and uid tables with a
2515         debian.org LDAP DB.
2516
2517         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2518         in 'fingerprint'.
2519
2520         * db_access.py (get_or_set_uid_id): new function.
2521
2522         * jennifer (main): update locking to a) not used FCNTL (deprecated
2523         in python >= 2.2) and b) acknowledge upstream's broken
2524         implementation of lockf (see Debian bug #74777), c) try to acquire
2525         the lock non-blocking.
2526         * kelly (main): likewise.
2527
2528         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2529
2530         * madison (main): only append the package to new_packages if it's
2531         not already in there; fixes -S/--source-and-binary for cases where
2532         the source builds a binary package of the same name.
2533
2534 2003-02-10  Anthony Towns  <ajt@debian.org>
2535
2536         * madison (main): use explicit JOIN syntax for
2537         -S/--source-and-binary queries to reduce the query's runtime from
2538         >10 seconds to negligible.
2539
2540 2003-02-08  James Troup  <james@nocrew.org>
2541
2542         * rene (main): in the NVIU output, append items to lists, not
2543         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2544         should be removed.
2545
2546 2003-02-07  James Troup  <james@nocrew.org>
2547
2548         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2549         Sources [aj].
2550
2551         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2552         O. Benham/Adam Heath/.
2553
2554         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2555         (Suite::Stable::Description): update for 3.0r1a.
2556         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2557
2558         * utils.py (gpgv_get_status_output): rename from
2559         get_status_output().
2560
2561         * neve (check_signature): use gpgv_get_status_output and Dict from
2562         utils().  Add missing newline to error message about duplicate tokens.
2563
2564         * saffron (per_arch_space_use): also print space used by source.
2565         (output_format): correct string.join() invocation.
2566
2567         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2568
2569 2003-02-04  James Troup  <james@nocrew.org>
2570
2571         * cron.buildd: correct generation of Packages/Sources and grep out
2572         non-US/non-free as well as non-free.
2573
2574 2003-02-03  Ryan Murray  <rmurray@debian.org>
2575
2576         * cron.buildd: generate quinn-diff output with full Packages/Sources
2577           files to get out-of-date vs. uncompiled right.
2578         * apt.conf.buildd: no longer generate uncompressed files, as they
2579           are generated in cron.buildd instead
2580         * add -i option to quinn-diff to ignore binary-all packages
2581         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2582           aren't in the packages file, the arch that uploaded them will build
2583           them anyways...
2584
2585 2003-01-30  James Troup  <james@nocrew.org>
2586
2587         * rene (main): only print suggested melanie command when there's
2588         some NBS to remove.
2589
2590 2003-01-30  Ryan Murray  <rmurray@debian.org>
2591
2592         * cron.buildd: fix incorrectly inverted lockfile check
2593
2594 2003-01-29  Ryan Murray  <rmurray@debian.org>
2595
2596         * cron.buildd: generate override.sid.all3.src
2597         * apt.conf.buildd: use generated override.sid.all3.src
2598
2599 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2600
2601         * utils.py (get_status_output): moved from jennifer.
2602         (Dict): likewise.
2603         (check_signature): likewise.
2604
2605         * jennifer (get_status_output): moved to utils.py.
2606         (Dict): likewise.
2607         (check_signature): likewise.
2608
2609         * utils.py (check_signature): add an argument to specifiy which
2610         function to call when an error was found.
2611         (check_signature): document this function better.
2612
2613         * jennifer (check_files): pass the reject function as an argument
2614         to utils.check_signature.
2615         (process_it): likewise.
2616
2617 2003-01-20  James Troup  <james@nocrew.org>
2618
2619         * rene (main): lots of changes to improve the output and make it
2620         more useful.
2621
2622         * katie.py (Katie.check_override): make the override messages
2623         clearer (hopefully).
2624
2625 2002-12-26  James Troup  <james@nocrew.org>
2626
2627         * ziyi (usage): document the ability to pass suite(s) as
2628         argument(s).
2629         (main): read apt.conf after checking for -h/--help.
2630
2631         * tea (main): take the check to run as an argument.
2632
2633         * saffron.R: R script to graph daily install runs.
2634
2635         * saffron: new script; various stats functions.
2636
2637         * rhona (main): connect to the database after checking for -h/--help.
2638
2639         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2640
2641         * melanie (main): sort versions with utils.arch_compare_sw().
2642
2643         * madison (usage): alphabetize order of options.
2644         * melanie (usage): likewise.
2645
2646         * kelly (usage): fix usage short description (we aren't dinstall).
2647
2648         * julia (usage): fix usage description and alphabetize order of
2649         options.
2650
2651         * jeri (usage): fix usage short description.
2652
2653         * jennifer (main): move --help and --version checks from here...
2654         (init): to here so that they work with an empty katie.conf.
2655         * kelly: likewise.
2656
2657         * alyson (usage): new function.
2658         (main): use it.
2659         * andrea: likewise.
2660         * ashley: likewise.
2661         * cindy: likewise.
2662         * denise: likewise.
2663         * helena: likewise.
2664         * neve: likewise.
2665         * rene: likewise.
2666         * rose: likewise.
2667         * tea: likewise.
2668
2669         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2670         entry that caused tasks to be omitted from 3.0r1.
2671
2672 2002-12-10  James Troup  <james@nocrew.org>
2673
2674         * jennifer (check_files): sanity check the Depends field to ensure
2675         it's non-empty if present since apt chokes on an empty one.
2676         Thanks to Ryan Murray for the idea.
2677
2678 2002-12-08  James Troup  <james@nocrew.org>
2679
2680         * katie.conf-security (Helena::Directories): new; include accepted
2681         in addition to byhand and new.
2682
2683         * helena (process_changes_files): use utils.arch_compare_sw().
2684         Justify things based on the longest [package, version,
2685         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2686         the commas in architecture and version lists for the same reason.
2687         (main): make directories we process configurable through
2688         Helena::Directories in the config file; if that doesn't exist
2689         default to the old hardcoded values (byhand & new).
2690
2691         * utils.py (arch_compare_sw): moved here from madison.
2692         * madison (main): adjust to compensate.
2693
2694 2002-12-06  James Troup  <james@nocrew.org>
2695
2696         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2697         right filename.
2698
2699 2002-12-05  James Troup  <james@nocrew.org>
2700
2701         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2702
2703 2002-11-28  Randall Donald  <rdonald@debian.org>
2704
2705         * fernanda.py (read_control): fix typo of 'Architecture'.
2706
2707 2002-11-26  James Troup  <james@nocrew.org>
2708
2709         * lisa (check_pkg): call less with '-R' so we see the colour from
2710         Randall's fernanda changes.
2711
2712         * neve (process_sources): if Directory points to a legacy location
2713         but the .dsc isn't there; assume it's broken and look in the pool.
2714         (update_section): new, borroed from alyson.
2715         (do_da_do_da): use it.
2716         (process_packages): add suite_it to the cache key used for
2717         arch_all_cache since otherwise we only add a package to the first
2718         suite it's in and ignore any subsequent ones.
2719
2720         * katie.conf-non-US (Location): fixed to reflect reality (all
2721         suites, except old-proposed-updates (which is legacy-mixed)) are
2722         pool.
2723
2724         * utils.py (try_with_debug): wrapper for print_exc().
2725         * jenna (main): use it.
2726         * neve (main): likewise.
2727
2728 2002-11-25  Randall Donald  <rdonald@debian.org>
2729
2730         * fernanda.py (main): added -R to less command line for raw control
2731         character support to print colours
2732         (check_deb): Instead of running dpkg -I on deb file, call
2733         output_deb_info, the new colourized control reporter.
2734         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2735         of printing out each .dsc line.
2736         (output_deb_info): new function. Outputs each key/value pair from
2737         read_control except in special cases where we highlight section,
2738         maintainer, architecture, depends and recommends.
2739         (create_depends_string): new function. Takes Depends tree and looks
2740         up it's compontent via projectb db, colourizes and constructs a
2741         depends string in original order.
2742         (read_dsc): new function. reads and parses .dsc info via
2743         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2744         colourized.
2745         (read_control): new function. reads and parses control info via
2746         apt_pkg. Depends and Recommends are split in to list structures,
2747         Section and Architecture are colourized. Maintainer is colourized
2748         if it has a localhost.localdomain address.
2749         (split_depends): new function. Creates a list of lists of
2750         dictionaries of depends (package,version relation). Top list is
2751         colected from comma delimited items. Sub lists are | delimited.
2752         (get_comma_list): new function. splits string input among commas
2753         (get_or_list): new function. splits string input among | delimiters
2754         (get_depends_parts): new function. Creates dictionary of package name
2755         and version relation from dependancy string.
2756         Colours for section and depends are per component. Unfound depends
2757         are in bold. Lookups using version info is not supported yet.
2758
2759 2002-11-22  James Troup  <james@nocrew.org>
2760
2761         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2762         'udmsearch'.
2763
2764         * amber (make_advisory): string.atol() is deprecated and hasn't
2765         been ported to string methods.  Use long() instead.
2766
2767         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2768         creating the database since we'll fail badly if it's created with
2769         e.g. UNICODE encoding.
2770
2771         * rose (main): AptCnf is a global.
2772
2773         * neve (get_location_path): new function determines the location
2774         from the the first (left-most) directory of a Filename/Directory.
2775         (process_sources): don't need 'location' anymore.  Use
2776         utils.warn().  Use the Directory: field for each package to find
2777         the .dsc.  Use get_location_path() to determine the location for
2778         each .dsc.
2779         (process_packages): do't need 'location' anymore.  Use
2780         utils.warn().  Use get_location_path().
2781         (do_sources): don't need 'location', drop 'prefix' in favour of
2782         being told the full path to the Sources file, like
2783         process_packages().
2784         (do_da_do_da): main() renamed, so that main can call us in a
2785         try/except.  Adapt for the changes in do_sources() and
2786         process_packages() above.  Assume Sources and Packages file are in
2787         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2788
2789         * katie.conf-security (Location): fixed to reflect reality (all
2790         suites are pool, not legacy).
2791
2792         * utils.py (print_exc): more useful (i.e. much more verbose)
2793         traceback; a recipe from the Python cookbook.
2794         * jenna (main): use it.
2795         * neve (main): likewise.
2796
2797 2002-11-19  James Troup  <james@nocrew.org>
2798
2799         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2800         handling which was FUBAR for multi-suite uploads.  Now we just
2801         make a dictionary of destinations to copy to and iterate over
2802         those.
2803
2804         * fernanda.py (check_deb): run linda as well as lintian.
2805
2806 2002-10-21  James Troup  <james@nocrew.org>
2807
2808         * melanie (main): change X-Melanie to X-Katie and prefix it with
2809         'melanie '.
2810
2811         * lisa (main): prefix X-Katie with 'lisa '.
2812
2813         * jennifer (clean_holding): fix typo in string method changes;
2814         s/file.find(file/file.find(/.
2815
2816         * cron.daily: invoke helena and send the report to ftpmaster.
2817         * cron.daily-non-US: likewise.
2818
2819 2002-10-16  James Troup  <james@nocrew.org>
2820
2821         * kelly (check): call reject() with a blank prefix when parsing
2822         the return of check_dsc_against_db() since it does its own
2823         prefix-ing.
2824
2825         * rose: new script; only handles directory creation initally.
2826
2827         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2828         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2829
2830 2002-10-06  James Troup  <james@nocrew.org>
2831
2832         * rene (main): remove bogus argument handling.
2833
2834         * kelly: katie, renamed.
2835         * cron.daily: adapt for katie being renamed to kelly.
2836         * cron.daily-non-US: likewise.
2837         * amber (main): likewise.
2838
2839         * Changes for python 2.1.
2840
2841         * kelly: time.strftime no longer requires a second argument of
2842         "time.localtime(time.time())".
2843         * logging.py: likewise.
2844         * rhona: likewise.
2845         * shania (init): likewise.
2846
2847         * amber: use augmented assignment.
2848         * catherine (poolize): likewise.
2849         * claire.py (fix_component_section): likewise.
2850         * halle (check_changes): likewise.
2851         * helena: likewise.
2852         * jenna: likewise.
2853         * jennifer: likewise.
2854         * jeri: likewise.
2855         * katie.py: likewise.
2856         * kelly: likewise.
2857         * lisa: likewise.
2858         * madison (main): likewise.
2859         * melanie: likewise.
2860         * natalie: likewise.
2861         * neve: likewise.
2862         * rhona: likewise.
2863         * tea: likewise.
2864         * utils.py: likewise.
2865         * ziyi: likewise.
2866
2867         * amber: use .endswith.
2868         * fernanda.py: likewise.
2869         * halle (main): likewise.
2870         * jennifer: likewise.
2871         * jeri: likewise.
2872         * katie.py: likewise.
2873         * kelly: likewise.
2874         * lisa: likewise.
2875         * neve: likewise.
2876         * shania (main): likewise.
2877         * utils.py: likewise.
2878
2879         * alyson: use string methods.
2880         * amber: likewise.
2881         * andrea: likewise.
2882         * ashley: likewise.
2883         * catherine: likewise.
2884         * charisma: likewise.
2885         * claire.py: likewise.
2886         * db_access.py: likewise.
2887         * denise: likewise.
2888         * halle: likewise.
2889         * heidi: likewise.
2890         * helena: likewise.
2891         * jenna: likewise.
2892         * jennifer: likewise.
2893         * jeri: likewise.
2894         * julia: likewise.
2895         * katie.py: likewise.
2896         * kelly: likewise.
2897         * lisa: likewise.
2898         * logging.py: likewise.
2899         * madison: likewise.
2900         * melanie: likewise.
2901         * natalie: likewise.
2902         * neve: likewise.
2903         * rene: likewise.
2904         * tea: likewise.
2905         * utils.py: likewise.
2906         * ziyi: likewise.
2907
2908 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2909
2910         * utils.py (parse_changes): use <string>.startswith() rather than
2911         string.find().
2912
2913 2002-08-27  Anthony Towns  <ajt@debian.org>
2914
2915         * katie.py (in_override_p): when searching for a source override,
2916         and the dsc query misses, search for both udeb and deb overrides
2917         as well. Should fix the UNACCEPT issues with udebs.
2918
2919 2002-08-24  James Troup  <james@nocrew.org>
2920
2921         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2922         source+binary package finding code which was causing severe
2923         performance degradation with postgres 7.2.
2924
2925 2002-08-14  James Troup  <james@nocrew.org>
2926
2927         * julia (main): use the pwd.getpwall() to get system user info
2928         rather than trying to read a password file.  Add a -n/--no-action
2929         option.
2930
2931         * cron.hourly: julia no longer takes any arguments.
2932         * cron.hourly-non-US: likewise.
2933
2934 2002-08-07  James Troup  <james@nocrew.org>
2935
2936         * katie (install): handle multi-suite uploads when CopyChanges
2937         and/or CopyKatie are in use, ensuring we only copy stuff once.
2938
2939 2002-08-01  Ryan Murray  <rmurray@debian.org>
2940
2941         * wanna-build/trigger.daily: initial commit, with locking
2942         * cron.buildd: add locking against daily run
2943
2944 2002-07-30  James Troup  <james@nocrew.org>
2945
2946         * melanie (main): readd creation of suite_ids_list so melanie is
2947         remotely useful again.
2948
2949         * katie.conf: adopt for woody release; diable
2950         StableDislocationSupport, add oldstable, adjust other suites and
2951         mappings, fix up location.
2952         * katie.conf-non-US: likewise.
2953         * katie.conf-security: likewise.
2954
2955         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2956         stable.
2957         * apt.conf.stable-non-US: likewise.
2958
2959         * apt.conf-security: adapt for woody release; adding oldstable,
2960         oldstable, adjust stable and testing.
2961         * cron.daily-security: likewise.
2962         * cron.buildd-security: likewise.
2963
2964         * apt.conf: adapt for woody release; rename woody-proposed-updates
2965         to testing-proposed-updates and proposed-updates to
2966         old-proposed-updates.
2967         * apt.conf-non-US: likewise.
2968
2969         * vars-non-US (copyoverrides): add sarge.
2970         * vars (copyoverrides): likewise.
2971
2972         * vars-security (suites): add oldstable.
2973
2974 2002-07-22  Ryan Murray  <rmurray@debian.org>
2975
2976         * apt.conf.security-buildd: use suite codenames instead of
2977           distnames.
2978
2979 2002-07-16  James Troup  <james@nocrew.org>
2980
2981         * denise (main): fix filenames for testing override files.
2982
2983 2002-07-14  James Troup  <james@nocrew.org>
2984
2985         * jennifer (process_it): call check_md5sums later so we can check
2986         files in the .dsc too
2987         (check_md5sums): check files in the .dsc too.  Check both md5sum
2988         and size.
2989
2990         * melanie (main): use parse_args() and join_with_commas_and() from
2991         utils.  If there's nothing to do, say so and exit, don't ask for
2992         confirmation etc.
2993
2994         * amber (join_with_commas_and): moved from here to ...
2995         * utils.py (join_with_commas_and): here.
2996
2997 2002-07-13  James Troup  <james@nocrew.org>
2998
2999         * madison (main): use parse_args() from utils.  Support
3000         -c/--component.
3001
3002         * jenna (parse_args): moved from here to ...
3003         * utils.py (parse_args): here.
3004
3005         * katie.conf (Architectures): minor corrections to the description
3006         for arm, mips and mipsel.
3007         * katie.conf-non-US (Architectures): likewise.
3008         * katie.conf-security (Architectures): likewise.
3009
3010         * cron.daily-security: use natalie's new -a/--add functionality to
3011         flesh out the security overrides.
3012
3013 2002-07-12  James Troup  <james@nocrew.org>
3014
3015         * cron.buildd (ARCHS): add arm.
3016
3017         * katie.conf: 2.2r7 was released.
3018         * katie.conf-non-US: likewise.
3019
3020         * utils.py (parse_changes): handle a multi-line field with no
3021         starting line.
3022
3023 2002-06-25  James Troup  <james@nocrew.org>
3024
3025         * templates/amber.advisory (To): add missing email address since
3026         __WHOAMI__ is only a name.
3027
3028         * katie.conf-security (Melane::LogFile): correct to go somewhere
3029         katie has write access to.
3030         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3031         Testing.
3032
3033         * natalie: add support for -a/-add which adds packages only
3034         (ignoring changes and deletions).
3035
3036         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3037         use FindB, not get.
3038
3039 2002-06-22  James Troup  <james@nocrew.org>
3040
3041         * jennifer (check_files): validate the package name and version
3042         field.  If 'Package', 'Version' or 'Architecture' are missing,
3043         don't try any further checks.
3044         (check_dsc): likewise.
3045
3046         * utils.py (re_taint_free): add '~' as a valid character.
3047
3048 2002-06-20  Anthony Towns  <ajt@debian.org>
3049
3050         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3051
3052 2002-06-09  James Troup  <james@nocrew.org>
3053
3054         * jennifer (check_files): reduce useless code.
3055
3056         * cron.daily-security: run symlinks -dr on $ftpdir.
3057
3058         * vars-security (ftpdir): add.
3059
3060 2002-06-08  James Troup  <james@nocrew.org>
3061
3062         * neve (update_override_type): transaction is handled higher up in
3063         main().
3064         (update_priority): likewise.
3065         (process_sources): remove code that makes testing a duplicate of
3066         stable.
3067         (process_packages): likewise.
3068
3069         * templates/amber.advisory: add missing mail headers.
3070
3071         * cron.daily-security: also call apt-ftparchive clean for
3072         apt.conf.buildd-security.
3073         * cron.weekly: likewise.
3074
3075         * amber (do_upload): write out a list of source packages (and
3076         their version) uploaded for testing.
3077         (make_advisory): add more Subst mappings for the mail headers.
3078         (spawn): check for suspicious characters in the command and abort
3079         if their found.
3080
3081 2002-06-07  James Troup  <james@nocrew.org>
3082
3083         * ziyi (main): remove the 'nonus'/'security' hacks and use
3084         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3085         the lower level Release files, even if they don't exist.  fubar
3086         out if we can't open a lower level Release file for writing.
3087
3088         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3089         ziyi.
3090         * katie.conf-security (Dinstall): likewise.
3091
3092         * amber (do_upload): renamed from get_file_list().  Determine the
3093         upload host from the original component.
3094         (init): Add a -n/--no-action option.  Fix how we get changes_files
3095         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3096         sys.argv).  Add an Options global.
3097         (make_advisory): support -n/--no-action.
3098         (spawn): likewise.
3099         (main): likewise.
3100         (usage): document -n/--no-action.
3101
3102         * cron.buildd-security: fix path to Packages-arch-specific in
3103         quinn-diff invocation.
3104
3105         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3106         to proper suite names (i.e. stable, testing) rather than codenames
3107         (potato, woody).
3108         (Dinstall::DefaultSuite): likewise.
3109         (Suite): likewise.
3110         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3111         * vars-security (suites): likewise.
3112         * apt.conf-security: likewise.
3113
3114         * katie.conf-security (Component): add "updates/" prefix.
3115         (Suite::*::Components): likewise.
3116         (ComponentMappings): new; map all {ftp-master,non-US} components
3117         -> updates/<foo>.
3118
3119         * katie.conf-security (Natalie): removed; the options have
3120         defaults and ComponentPosition is used by alyson which doesn't
3121         work on security.d.o.
3122         (Amber): replace UploadHost and UploadDir with ComponentMappings
3123         which is a mapping of components -> URI.
3124         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3125         (SuiteMappings): use "silent-map" in preference to "map".
3126
3127         * cron.unchecked-security: fix call to cron.buildd-security.
3128
3129         * cron.daily-security: map local suite (stable) -> override suite
3130         (potato) when fixing overrides.  Correct component in natalie call
3131         to take into account "updates/" prefix.  Fix cut'n'waste in
3132         override.$dist.all3 generation, the old files weren't being
3133         removed, so they were endlessly growing.
3134
3135         * neve (main): don't use .Find for the CodeName since we require
3136         it.  Location::*::Suites is a ValueList.
3137         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3138         out on expired keys, just warn.
3139         (update_override_type): new function; lifted from alyson.
3140         (update_priority): likewise.
3141         (main): use update_{override_type,priority}().
3142
3143         * jennifer (check_distributions): remove redunant test for
3144         SuiteMappings; ValueList("does-not-exist") returns [] which is
3145         fine.  Add support for a "silent-map" type which doesn't warn
3146         about the mapping to the user.
3147         (check_files): add support for ComponentMappings, similar to
3148         SuiteMappings, but there's no type, just a source and a
3149         destination and the original component is stored in "original
3150         component".
3151         * katie.py (Katie.dump_vars): add "original component" as an
3152         optionsal files[file] dump variable.
3153
3154         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3155         query.  Add support for section-less legacy locations like current
3156         security.debian.org through YetAnotherConfigBoolean
3157         'LegacyStableHasNoSections'.
3158         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3159
3160         * utils.py (real_arch): moved here from ziyi.
3161         * ziyi (real_arch): moved to utils.py.
3162         * ziyi (main): likewise.
3163
3164         * claire.py (find_dislocated_stable): use real_arch() with
3165         filter() to strip out source and all.
3166         * neve (main): likewise.
3167         * rene (main): likewise.
3168         * jeri (parse_packages): likewise.
3169
3170 2002-06-06  James Troup  <james@nocrew.org>
3171
3172         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3173         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3174         doing.
3175
3176 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3177
3178         * jeri (check_joey): check if the line contains two elements
3179         before accessing the second.  Also, strip trailing spaces as well
3180         as the newline.
3181         * halle (check_joey): likewise.
3182
3183 2002-06-05  James Troup  <james@nocrew.org>
3184
3185         * cron.unchecked-security: new file; like cron.unchecked but if
3186         there's nothing to do exit so we don't call cron.buildd-security.
3187
3188         * apt.conf.buildd-security: new file.
3189
3190         * vars (archs): alphabetize.
3191         * vars-non-US (archs): likewise.
3192
3193         * vars-security: add unchecked.
3194
3195         * madison (main): reduce rather bizarrely verbose and purposeless
3196         code to print arches to a simple string.join.
3197
3198         * katie.conf (Suites::Unstable): add UdebComponents, a new
3199         valuelist of suites, used by jenna to flesh out the list of
3200         <suite>_main-debian-installer-binary-<arch>.list files generated.
3201         (Dinstall): add StableDislocationSupport, a new boolean used by
3202         jenna to enable or disable stable dislocation support
3203         (i.e. claire), as true.
3204
3205         * katie.conf (Dinstall): add StableDislocationSupport, a new
3206         boolean used by jenna to enable or disable stable dislocation
3207         support (i.e. claire), as true.
3208         * katie.conf-non-US: likewise.
3209         * katie.conf-security: likewise.
3210
3211         * cron.daily-security: generate .all3 overrides for the buildd
3212         support.  Freshen a local copy of Packages-arch-specific from
3213         buildd.debian.org.
3214
3215         * claire.py (find_dislocated_stable): disable the support for
3216         files in legacy-mixed locations since none of the Debian archives
3217         have any anymore.
3218
3219         * helena: new script; produces a report on NEW and BYHAND
3220         packages.
3221
3222         * jenna: rewritten from scratch to fix speed problems.  Run time
3223         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3224         minutes, 105 seconds are the monster query and 70 odd seconds is
3225         claire.
3226
3227         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3228         irrelevant.
3229
3230 2002-06-05  Ryan Murray  <rmurray@debian.org>
3231
3232         * cron.buildd-security: new file.
3233
3234 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3235
3236         * denise (list): take a file argument and use it.
3237         (main): don't abuse sys.stdout, just write to the file.
3238
3239         * claire.py (usage): Fix misspelling.
3240         (clean_symlink): Simplify.
3241         (find_dislocated_stable): Avoid unnecessary work.
3242
3243 2002-05-29  James Troup  <james@nocrew.org>
3244
3245         * cameron: removed; apt-ftparchive can simply walk the directory.
3246
3247 2002-05-26  Anthony Towns  <ajt@debian.org>
3248
3249         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3250         for the autobuilders.
3251
3252 2002-05-24  Ryan Murray  <rmurray@debian.org>
3253
3254         * cron.buildd: update override files before running apt-ftparchive
3255
3256 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3257
3258         * amber (main): remove extra space in prompt.
3259
3260         * utils.py (validate_changes_file_arg): use original filename in
3261         error messages.
3262
3263         * jeri (check_joey): close file after use.
3264         (parse_packages): likewise.
3265         (main): setup debug option properly.
3266
3267         * melanie (main): remove unused packages variable and simplify the
3268         code to build up con_packages by using repr().
3269
3270 2002-05-23  James Troup  <james@nocrew.org>
3271
3272         * lisa (recheck): when we reject, also return 0 so the package is
3273         skipped.
3274         (sg_compare): fix note sorting.
3275         (recheck): remove the .katie file after rejection.
3276
3277         * katie.py (Katie.accept): accepted auto-build support take 3;
3278         this time adding support for security.  Security needs a) non-pool
3279         files copied rather than symlinked since accepted is readable only
3280         by katie/security and www-data needs to be able to see the files,
3281         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3282         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3283         SecurityAcceptedAutoBuild is a new boolean which controls whether
3284         or not normal or security style is used.  The unstable_accepted
3285         table was renamed to accepted_autobuild and a suite column added.
3286         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3287         didn't have it's last_used/in_accepted flags correctly updated.
3288         * katie (install): likewise.
3289         * rhona (clean_accepted_autobuild): likewise.
3290
3291 2002-05-22  James Troup  <james@nocrew.org>
3292
3293         * lisa (sort_changes): new function; sorts changes properly.
3294         Finally.
3295         (sg_compare): new function; helper for sort_changes().  Sorts by
3296         have note and time of oldest upload.
3297         (indiv_sg_compare): new function; helper for sort_changes().
3298         Sorts by source version, have source and filename.
3299         (main): use sort_changes().
3300         (changes_compare): obsoleted; removed.
3301
3302 2002-05-20  James Troup  <james@nocrew.org>
3303
3304         * rhona (clean_accepted_autobuild): don't die if a file we're
3305         trying to remove doesn't exist.  Makes rhona more friendly to
3306         katie/katie.py crashes/bugs without any undue cost.
3307
3308 2002-05-19  James Troup  <james@nocrew.org>
3309
3310         * lisa (main): if sorting a large number of changes give some
3311         feedback.
3312         (recheck): new function, run the same checks (modulo NEW,
3313         obviously) as katie does, if they fail do the standard
3314         reject/skip/quit dance.
3315         (do_pkg): use it.
3316
3317         * katie (install): don't try to unlink the symlink in the
3318         AcceptedAutoBuild support if the destination is not a symlink (or
3319         doesn't exist).  Avoids unnecessary bombs on previous partial
3320         accepts and will still bomb hard if the file exists and isn't a
3321         symlink.
3322
3323         * utils.py: blah, commands _is_ used when the mail stuff isn't
3324         commented out like it is in my test environment.
3325
3326         * lisa (changes_compare): "has note" overrides everything else.
3327         Use .katie files rather than running parse_changes, faster and
3328         allows "has note" to work.  Correct version compare, it was
3329         reversed.  Ctime check should only kick in if the source packages
3330         are not the same.
3331         (print_new): print out and return any note.  Rename 'ret_code' to
3332         'broken'.
3333         (edit_new): renamed from spawn_editor.  Don't leak file
3334         descriptors.  Clean up error message if editor fails.
3335         (edit_note): new function, allows one to edit notes.
3336         (do_new): add note support, editing and removing.
3337         (init): kill -s/--sort; with notes we always want to use our
3338         sorting method.
3339         (usage): likewise.
3340
3341         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3342         changes field.
3343
3344         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3345         it default to 0.  Adapt tests to assume it's boolean.
3346         * fernanda.py (check_changes): adjust call appropriately.
3347         * halle (check_changes): likewise.
3348         * jennifer (check_changes): likewise.
3349         * jeri (check_changes): likewise.
3350         * shania (flush_orphans): likewise.
3351
3352         * jennifer (check_dsc): pass is_a_dsc by name when calling
3353         build_file_list() for clarity.
3354         * shania (flush_orphans): likewise.
3355         * tea (check_missing_tar_gz_in_dsc): likewise.
3356
3357         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3358         calling parse_changes() for clarity.
3359         * tea (check_dscs): likewise.
3360
3361         * utils.py (parse_changes): make dsc_whitespace_rules default to
3362         not true.
3363         * halle (check_changes): adjust call appropriately.
3364         * jennifer (check_changes): likewise.
3365         * jeri (check_changes): likewise.
3366         * lisa (changes_compare): likewise.
3367         * utils.py (changes_compare): likewise.
3368         * melanie (main): likewise.
3369         * shania (flush_orphans): likewise.
3370         * fernanda.py (check_changes): likewise.
3371
3372 2002-05-18  James Troup  <james@nocrew.org>
3373
3374         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3375         it's not useful and by and large a duplication of information
3376         available in readable format in other files.
3377
3378 2002-05-16  Ryan Murray  <rmurray@debian.org>
3379
3380         * melanie: Dir::TemplatesDir -> Dir::Templates
3381
3382 2002-05-15  Ryan Murray  <rmurray@debian.org>
3383
3384         * cameron: correct the use of os.path.join
3385
3386 2002-05-15  Anthony Towns  <ajt@debian.org>
3387
3388         * ziyi: Update to match the new format for Architectures/Components
3389         in katie.conf.
3390
3391 2002-05-14  James Troup  <james@nocrew.org>
3392
3393         * amber: new script; 'installer' wrapper script for the security
3394         team.
3395
3396         * katie.py (Katie.announce): remove unused 'dsc' local
3397         variable. (pychecker)
3398
3399         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3400
3401         * neve: don't import sys, we don't use it. (pychecker)
3402         (check_signature): fix return type mismatch. (pychecker)
3403
3404         * utils.py: don't import commands, we don't use it.  (pychecker)
3405
3406         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3407
3408         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3409         obsoleted by the change to "othercomponents" handling in jennifer
3410         detailed below.
3411         (Katie.cross_suite_version_check): new function; implements
3412         cross-suite version checking rules specified in the conf file
3413         while also enforcing the standard "must be newer than target
3414         suite" rule.
3415         (Katie.check_binary_against_db): renamed, since it's invoked once
3416         per-binary, "binaries" was inaccurate.  Use
3417         cross_suite_version_check() and don't bother with the "oldfiles"
3418         rubbish as jennifer works out "othercomponents" herself now.
3419         (Katie.check_source_against_db): use cross_suite_version_check().
3420
3421         * katie (check): the version and file overwrite checks
3422         (check_{binary,source,dsc}_against_db) are not per-suite.
3423
3424         * jennifer (check_files): less duplication of
3425         'control.Find("Architecture", "")' by putting it in a local
3426         variable.
3427         (check_files): call check_binary_against_db higher up since it's
3428         not a per-suite check.
3429         (check_files): get "othercomponents" directly rather than having
3430         check_binary_against_db do it for us.
3431
3432         * heidi (main): 'if x:', not 'if x != []:'.
3433         * katie.py (Katie.in_override_p): likewise.
3434         (Katie.check_dsc_against_db): likewise.
3435         * natalie (main): likewise.
3436         * rene (main): likewise.
3437         * ziyi (real_arch): likewise.
3438
3439         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3440         and OverrideType are now value lists, not lists.
3441         * andrea (main): likewise.
3442         * cindy (main): likewise.
3443         * claire.py (find_dislocated_stable): likewise.
3444         * denise (main): likewise.
3445         * jenna (main): likewise.
3446         * jennifer (check_distributions): likewise.
3447         (check_files): likewise.
3448         (check_urgency): likewise (Urgency::Valid).
3449         * jeri (parse_packages): likewise.
3450         * neve (main): likewise (and Location::%s::Suites).
3451         * rene (main): likewise.
3452
3453 2002-05-13  James Troup  <james@nocrew.org>
3454
3455         * katie.py (Katie.check_source_against_db): correct case of reject
3456         message to be consistent with binary checks.
3457
3458         * jennifer (get_status_output): don't leak 2 file descriptors per
3459         invocation.
3460         (check_signature): add missing '\n' to "duplicate status token"
3461         error message.
3462
3463 2002-05-09  James Troup  <james@nocrew.org>
3464
3465         * utils.py (validate_changes_file_arg): new function; validates an
3466         argument which should be a .changes file.
3467         * ashley (main): use it.
3468         * lisa (main): likewise.
3469
3470         * katie.py (Katie.check_dsc_against_db): since there can be more
3471         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3472         entry still exists in files.
3473
3474         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3475         files, since check_dsc_against_db() deletes the .orig.tar.gz
3476         entry.
3477
3478         * cameron: cleanups.
3479
3480         * utils.py (changes_compare): change sort order so that source
3481         name and source version trump 'have source'; this should fix
3482         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3483         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3484         by Ryan.
3485
3486         * lisa (main): allow the arguments to be .katie files too.
3487
3488 2002-05-07  Ryan Murray  <rmurray@debian.org>
3489
3490         * cron.buildd: add s390 to arch list again
3491
3492 2002-05-05  Ryan Murray  <rmurray@debian.org>
3493
3494         * cron.buildd: new script, update w-b database from unstable_accepted
3495         table
3496         * cameron: new script, take list in unstable_accepted and write out
3497         a file list for apt-ftparchive
3498         * apt.conf.buildd: new apt configuration for Packages/Sources for
3499         unstable_accepted
3500         * vars: add s390 to arch list.
3501
3502 2002-05-03  James Troup  <james@nocrew.org>
3503
3504         * neve (main): don't hard code the calling user as that doesn't
3505         work with modern postgres installs.  Fix psql invocation for
3506         init_pool.sql (database name required).  Dont' hard code the
3507         database name.
3508         (process_sources): add support for fingerprint and install_date.
3509         (process_packages): add support for fingerprint.
3510         (do_sources): pass in the directory, fingerprint support needs it.
3511         (get_status_output): borrowed from jennifer.
3512         (reject): likewise.
3513         (check_signature): likewise.
3514
3515         * katie (install): only try to log urgencies if Urgency_Logger is
3516         defined.
3517         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3518         defined; only close Urgency_Logger if it's defined.
3519
3520         * catherine (poolize): adapt for Dir rationalization.
3521         * claire.py (find_dislocated_stable): likewise.
3522         * denise (main): likewise.
3523         * halle (check_joey): likewise.
3524         * jenna: likewise.
3525         * jennifer: likewise.
3526         * jeri: likewise.
3527         * katie.py: likewise.
3528         * katie: likewise.
3529         * lisa (do_bxa_notification): likewise.
3530         * logging.py (Logger.__init__): likewise
3531         * rene (main): likewise.
3532         * rhona (clean): likewise.
3533         * shania (init): likewise.
3534         * tea: likewise.
3535         * ziyi: likewise.
3536
3537         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3538         FindB, not FindI.
3539
3540         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3541         boolean, use FindB, not get.
3542
3543         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3544         .orig.tar.gz's which are an exact (size/md5sum) match.
3545
3546         * ashley (main): really allow *.katie files as arguments too;
3547         noticed by aj.
3548
3549         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3550
3551 2002-05-03  Anthony Towns  <ajt@debian.org>
3552
3553         * ziyi: support for security.
3554
3555 2002-05-02  James Troup  <james@nocrew.org>
3556
3557         * jennifer (accept): call Katie.check_override() unconditional as
3558         no-mail check moved into that function.
3559         (do_byhand): likewise.
3560
3561         * katie.py (Katie.check_override): don't do anything if we're a)
3562         not sending mail or b) the override disparity checks have been
3563         disbled via Dinstall::OverrideDisparityCheck.
3564
3565         * jennifer (check_files): don't hard code Unstable as the suite
3566         used to check for architecture validity; use
3567         Dinstall::DefaultSuite instead, if it exists.
3568         (accept): conditionalize
3569
3570         * katie.py (Katie.update_subst): support global maintainer
3571         override with Dinstall::OverrideMaintainer.
3572
3573         * jennifer (check_distributions): new function, Distribution
3574         validation and mapping.  Uses new SuiteMappings variable from
3575         config file to abstract suite mappings.
3576         (check_changes): call it.
3577
3578         * natalie: renamed; nothing imports or likely will for some time.
3579
3580         * denise (main): remove unused natalie import and init().
3581
3582         * natalie.py (init): removed.
3583         (main): initalize here instead and don't hardcode the database
3584         name.
3585
3586 2002-04-30  James Troup  <james@nocrew.org>
3587
3588         * katie.py (Katie.close_bugs): new function, split out from
3589         announce().
3590         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3591         true.
3592         (Katie.close_bugs): new function, split out
3593         (Katie.close_bugs): return immediately if there are no bugs to
3594         close.
3595
3596         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3597         * katie (do_reject): likewise.
3598         (stable_install): likewise.
3599         * katie.py (Katie.announce): likewise.
3600         (Katie.accept): likewise.
3601         (Katie.check_override): likewise.
3602         (Katie.do_reject): likewise.
3603         * lisa (do_bxa_notification): likewise.
3604         * melanie (main): likewise.
3605
3606         * utils.py (TemplateSubst): change second argument to be a
3607         filename rather than a template since every caller opened a file
3608         on the fly which was ugly and leaked file descriptor.
3609
3610 2002-04-29  James Troup  <james@nocrew.org>
3611
3612         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3613         <hertzog@debian.org> to send 'accepted' announce mails to the
3614         PTS. [#128140]
3615
3616 2002-04-24  James Troup  <james@nocrew.org>
3617
3618         * init_pool.sql (unstable_accepted): add two new fields to
3619         unstable_accepted; in_accepted is a boolean indicating whether or
3620         not the file is in accepted and last_used is a timestamp used by
3621         rhona to determine when to remove symlinks for installed packages.
3622
3623         * katie.py (Katie.accept): auto-build support take 2.  Create
3624         symlinks for all files into a seperate directory.  Add files to
3625         unstable_accepted as paths to the new directory; mark them as
3626         being in accepted for cameron.  Properly conditionalize it on a
3627         configuration variable.
3628
3629         * katie (install): likewise.  Update symlinks to point into the
3630         pool; mark the files for later deletion by rhona and mark them as
3631         not being in accepted for cameron.
3632
3633         * rhona (clean_accepted_autobuild): new function.
3634
3635 2002-04-22  James Troup  <james@nocrew.org>
3636
3637         * jennifer (check_files): handle db_access.get_location_id()
3638         returning -1 properly/better.
3639
3640         * rhona (clean_fingerprints): new function.
3641
3642 2002-04-21  James Troup  <james@nocrew.org>
3643
3644         * utils.py (touch_file): unused; remove.
3645         (plural): likewise.
3646
3647         * jennifer (check_files): close file descriptor used to get the
3648         control file.
3649         (check_md5sums): likewise.
3650         (callback): likewise.
3651
3652         * katie.py (Katie.do_reject): handle manual rejects much better;
3653         call the editor first and get confirmation from the user before
3654         proceeding.
3655
3656         * jennifer (check_signature): prefix_multi_line_string() moved to
3657         utils.
3658
3659         * utils.py (prefix_multi_line_string): moved here from jennifer.
3660
3661 2002-04-20  James Troup  <james@nocrew.org>
3662
3663         * lisa (main): handle non-existent files.
3664
3665         * ashley (main): allow *.katie files as arguments too.
3666
3667 2002-04-19  James Troup  <james@nocrew.org>
3668
3669         * katie.py (Katie.accept): add stuff to help auto-building from
3670         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3671         in the pool), create a symlink to it in the accepted directory and
3672         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3673
3674         * katie (install): undo the "auto-building from accepted" stuff
3675         (i.e. remove the .orig.tar.gz symlink and remove the files from
3676         unstable_accepted table).
3677
3678 2002-04-16  James Troup  <james@nocrew.org>
3679
3680         * jennifer (upload_too_new): fix typo which was causing all
3681         timestamp comparisons to be against the .changes file.  Also move
3682         back to the original directory so we do the comparisons against
3683         accurate timestamps.
3684
3685         * tea (check_missing_tar_gz_in_dsc): new function.
3686
3687         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3688         file mentioned in the .dsc.
3689
3690         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3691         way mails reach debian-{devel-,}changes@l.d.o.
3692
3693 2002-04-02  Ryan Murray  <rmurray@debian.org>
3694
3695         * cron.daily: run shania after rhona
3696         * cron.daily-non-US: likewise.
3697
3698 2002-04-01  James Troup  <james@nocrew.org>
3699
3700         * katie: re-add proposed-updates/stable install support.
3701
3702         * katie.py (Katie.dump_vars): add changes["changes"] as an
3703         optional field; should be mandatory later.
3704
3705 2002-03-31  James Troup  <james@nocrew.org>
3706
3707         * katie (install): support a Suite::<foo>::CopyKatie similar to
3708         CopyChanges.  Done seperately because .katie files don't need to
3709         be mirrored and will probably be copied to another directory as a
3710         result.
3711
3712         * halle (main): add missing debug to options.
3713
3714 2002-03-29  James Troup  <james@nocrew.org>
3715
3716         * madison (main): add a -r/--regex option.
3717
3718 2002-03-26  James Troup  <james@nocrew.org>
3719
3720         * lisa: don't trample on changes["distribution"]; make a copy of
3721         it as changes["suite"] instead and use that.
3722
3723 2002-03-16  Anthony Towns  <ajt@debian.org>
3724
3725         * templates/lisa.bxa_notification: Fix some grammatical errors.
3726         Encourage contact via bxa@ftp-master email address.
3727
3728 2002-03-15  James Troup  <james@nocrew.org>
3729
3730         * jennifer (check_timestamps): remove bogus raise in except.
3731
3732 2002-03-15  Anthony Towns  <ajt@debian.org>
3733
3734         * cron.monthly: rotate mail/archive/bxamail as well as
3735         mail/archive/mail. This is for a complete archive of
3736         correspondence with the BXA.
3737
3738 2002-03-14  Anthony Towns  <ajt@debian.org>
3739
3740         * crypto-in-main changes.
3741
3742         * utils.py (move, copy): add an optional perms= parameter to let you
3743         set the resulting permissions of the moved/copied file
3744         * katie.py (force_move): rejected/morgued files should be unreadable
3745         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3746         should be unreadable.
3747
3748 2002-03-07  Ryan Murray  <rmurray@debian.org>
3749
3750         * katie (install): check for existance of "files id" key as well as
3751         it being set to a valid value.
3752         * katie (install): check for existense and valid value for location
3753         id as well
3754
3755 2002-03-05  Ryan Murray  <rmurray@debian.org>
3756
3757         * katie.py (do_reject): reread the reason file after editing it.
3758
3759 2002-02-25  James Troup  <james@nocrew.org>
3760
3761         * jennifer (check_changes): don't enforce sanity in .changes file
3762         names since it doesn't seem to be possible; pcmica-cs and similar
3763         freak show packages in particular cause real problems.
3764
3765         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3766         each dsc_file since the .orig.tar.gz checking code now uses it as
3767         a boolean.  Fixes bizarro rejections which bogusly claimed
3768         .diff.gz md5sum/size was incorrect.
3769
3770 2002-02-24  James Troup  <james@nocrew.org>
3771
3772         * katie (process_it): reset reject_message.
3773
3774 2002-02-22  James Troup  <james@nocrew.org>
3775
3776         * db_access.py(set_files_id): disable use of
3777         currval('files_id_seq') because it was taking 3 seconds on auric
3778         which is insane (most calls take < 0.01) and simply call
3779         get_files_id() for the return value instead.
3780
3781         * katie.py (Katie.do_query): convenience function; unused by
3782         default, useful for profiling.
3783         * db_access.py (do_query): likewise.
3784
3785         * katie (install): fix insert SQL call when binary has no source.
3786
3787         * lisa (determine_new): auto-correct non-US/main to non-US.
3788         (determine_new): add a warning when adding things to stable.
3789         (edit_index): use our_raw_input().
3790         (edit_overrides): likewise.
3791         (do_new): likewise.  Use re.search() not re.match() since the
3792         default answer may not be the first one.
3793         (do_byhand): likewise.
3794         (do_new): Default to 'S'kip and never 'A'dd.
3795
3796         * jennifer (action): pass prompt to our_raw_input().
3797         * melanie (game_over): likewise.
3798         * katie (action): likewise.
3799
3800         * utils.py (our_raw_input): add an optional prompt argument to
3801         make the function more usable as a drop in replacement for
3802         raw_input().
3803
3804         * jennifer (check_files): correct reject() to not double prefix
3805         when using katie.py based functions.
3806         (check_dsc): likewise.
3807
3808         * katie.py (Katie.reject): prepend a new line if appropriate
3809         rathen than appending one to avoid double new lines when caller
3810         adds one of his own.
3811
3812         * lisa (determine_new): warn if the package is also in other
3813         components.
3814
3815 2002-02-20  James Troup  <james@nocrew.org>
3816
3817         * jennifer (check_files): if .changes file lists "source" in
3818         Architecture field, there must be a .dsc.
3819
3820 2002-02-15  James Troup  <james@nocrew.org>
3821
3822         * ashley (main): add some missing fields.
3823
3824         * katie.py (Katie.check_dsc_against_db): fix to take into account
3825         the fact that the .orig.tar.gz might be in byhand, accepted or
3826         new.  Also fix calling of reject().
3827         (Katie.check_binaries_against_db): fix calling of reject().
3828         (Katie.check_source_against_db): likewise.
3829         (Katie.dump_vars): add missing variables used for bug closures.
3830
3831         * lisa (changes_compare_by_time): sort by reverse time.
3832
3833         * katie.py (Katie.accept): log.
3834         (Katie.dump_vars): missing has_key test for optional changes fields.
3835
3836         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3837         (process_it): traceback goes to stderr, not stdout.
3838         (acknowledge_new): log.
3839         (do_byhand): likewise.
3840
3841         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3842
3843         * add_constraints.sql: add grants for the new fingerprint table.
3844
3845 2002-02-13  James Troup  <james@nocrew.org>
3846
3847         * katie (do_reject): basename the .changes filename before trying
3848         to use it to construct the .reason filename.
3849         (process_it): call Katie.update_subst() so do_reject() DTRT with
3850         the mail template.
3851         (do_reject): setup the mail template correctly.
3852
3853 2002-02-12  James Troup  <james@nocrew.org>
3854
3855         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3856         (check_files): don't abuse global dictionaries.
3857         (Ent): use all variables.
3858         (check_timestamps): don't abuse global dictionaries.
3859
3860         * fernanda.py: renamed to .py so lisa can import it.
3861         (check_dsc): remove unused local variables (pychecker).
3862         (display_changes): split off from check_changes.
3863
3864         * katie: rewritten; most of the functionality moves to jennifer;
3865         what's left is the code to install packages once a day from the
3866         'accepted' directory.
3867
3868         * jennifer: new program, processes packages in 'unchecked'
3869         (i.e. most of the non-install functionality of old katie).
3870
3871         * katie.py: common functions shared between the clique of
3872         jennifer, lisa and katie.
3873
3874         * lisa: new program; handles NEW and BYHAND packages.
3875
3876         * jeri (usage): new function.
3877         (main): use it.
3878         (check_package): remove unused local variable (pychecker).
3879
3880         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3881         binaries and source.  Add install_date to source.
3882
3883         * halle (usage): new function.
3884         (main): use it.  Remove unused options.
3885         (check_changes): remove unused local variable (pychecker).
3886
3887         * add_constraints.sql: add fingerprint references.
3888
3889         * db_access.py (get_or_set_fingerprint_id): new function.
3890
3891         * ashley (main): new program; dumps the contents of a .katie file
3892         to stdout.
3893
3894         * alyson (main): remove option handling since we don't actually
3895         support any.
3896         * cindy (main): likewise.
3897
3898         * remove unnecessary imports and pre-define globals (pychecker).
3899
3900 2002-02-11  Anthony Towns  <ajt@debian.org>
3901
3902         * added installation-report and upgrade-report pseudo-packages
3903
3904 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3905
3906         * katie (update_subst): use Dinstall::TrackingServer.
3907         * melanie (main): likewise.
3908
3909 2002-01-27  James Troup  <james@nocrew.org>
3910
3911         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3912         noticing, jgg@ for fix.
3913
3914 2002-01-19  James Troup  <james@nocrew.org>
3915
3916         * utils.py (extract_component_from_section): handle non-US
3917         non-main properly.
3918
3919 2002-01-12  James Troup  <james@nocrew.org>
3920
3921         * madison: add support for -S/--source-and-binary which displays
3922         information for the source package and all it's binary children.
3923
3924 2002-01-13  Anthony Towns  <ajt@debian.org>
3925
3926         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3927         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3928           and 2002 key ids.
3929         * katie.conf-non-US: Likewise.
3930         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3931           multiple keys automatically. This is probably only useful for
3932           transitioning from an expired (or revoked?) key.
3933
3934 2002-01-08  Ryan Murray  <rmurray@debian.org>
3935
3936         * debian/python-dep: new file that prints out python:Depends for
3937           substvars
3938         * debian/control: use python:Depends, build-depend on python
3939           lower Depends: on postgresql to Suggests:
3940         * debian/rules: determine python version, install to the correct
3941           versioned dir
3942
3943 2001-12-18  Anthony Towns  <ajt@debian.org>
3944
3945         * ziyi: unlink Release files before overwriting them (in case they've
3946           been merged)
3947         * ziyi: always include checksums/sizes for the uncompressed versions
3948           of Sources and Packages, even if they're not present on disk
3949
3950 2001-11-26  Ryan Murray  <rmurray@debian.org>
3951
3952         * ziyi (main): add SigningPubKey config option
3953         * katie.conf: use SigningPubKey config option
3954         * katie.conf-non-US: likewise
3955
3956 2001-11-24  James Troup  <james@nocrew.org>
3957
3958         * katie (acknowledge_new): log newness.
3959
3960 2001-11-24  Anthony Towns  <ajt@debian.org>
3961
3962         * ziyi (real_arch): bail out if some moron forgot to reset
3963         untouchable on stable.
3964         (real_arch): source Release files.
3965
3966 2001-11-19  James Troup  <james@nocrew.org>
3967
3968         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3969         utils.get_conf().
3970         * shania (main): likewise.
3971
3972         * rhona (main): add default options.
3973
3974         * db_access.py (get_archive_id): case independent.
3975
3976         * katie (action): sort files so that ordering is consistent
3977         between mails; noticed/requested by Joey.
3978
3979 2001-11-17  Ryan Murray  <rmurray@debian.org>
3980
3981         * utils.py: add get_conf function, change startup code to read all
3982           config files to the Cnf that get_conf returns
3983           use the component list from the katie conf rather than the hardcoded
3984           list.
3985         * all scripts: use new get_conf function
3986         * shania: fix try/except around changes files
3987         * jenna: only do debian-installer if it is a section in Cnf
3988
3989 2001-11-16  Ryan Murray  <rmurray@debian.org>
3990
3991         * shania (main): Initialize days to a string of a number.
3992                  (main): Initialize Cnf vars before reading in Cnf
3993
3994 2001-11-14  Ryan Murray  <rmurray@debian.org>
3995
3996         * shania (main): Initialize days to a number.
3997
3998 2001-11-04  James Troup  <james@nocrew.org>
3999
4000         * docs/Makefile: use docbook-utils' docbook2man binary.
4001
4002         * Change all "if foo == []" constructs into "if not foo".
4003
4004         * katie (check_changes): when installing into stable from
4005         proposed-updates, remove all non-stable target distributions.
4006         (check_override): don't check for override disparities on stable
4007         installs.
4008         (stable_install): update install_bytes appropriately.
4009         (reject): stable rejection support; i.e. don't remove files when
4010         rejecting files in the pool, rather remove them from the
4011         proposed-update suite instead, rhona will do the rest.
4012         (manual_reject): support for a stable specific template.
4013         (main): setup up stable rejector in subst.
4014
4015 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4016
4017         * debian/control (Build-Depends): docbook2man has been superseded
4018         by docbook-utils.
4019
4020         * neve (main): exit with a more useful error message.
4021         (update_suites): Suite::<suite>::Version, Origin and Description
4022         are not required, so don't fail if they don't exist.
4023
4024         * db_access.py (get_archive_id): return -1 on error rather than
4025         raise an exception.
4026         (get_location_id): likewise.
4027
4028         * madison (main): don't exit on the first not-found package,
4029         rather exit with an appropriate return code after processing all
4030         packages.
4031
4032 2001-11-03  James Troup  <james@nocrew.org>
4033
4034         * claire.py (find_dislocated_stable): add per-architecture
4035         symlinks for dislocated architecture: all debs.
4036
4037 2001-10-19  Anthony Towns  <ajt@debian.org>
4038
4039         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4040
4041 2001-10-10  Anthony Towns  <ajt@debian.org>
4042
4043         * claire.py (fix_component_section): do _not_ assign to None under
4044         any circumstances
4045
4046 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4047
4048         * melanie (main): don't duplicate architectures when removing from
4049         more than one suite.
4050
4051         * heidi (main, process_file, get_list): report suite name not ID.
4052
4053         * naima (nmu_p): be case insensitive.
4054
4055         * naima (action): more list handling clean ups.
4056
4057         * melanie (main): clean up lists handling to use string.join and
4058         IN's.
4059
4060         * madison (main): clean up suite and architecture argument parsing
4061         to use slices less and string.join more.
4062
4063         * utils.py (parse_changes): Use string.find() instead of slices for
4064         string comparisons thereby avoid hardcoding the length of strings.
4065         * ziyi (main): likewise.
4066
4067 2001-10-07  James Troup  <james@nocrew.org>
4068
4069         * Remove mode argument from utils.open_files() calls if it's the
4070         default, i.e. 'r'.
4071
4072 2001-09-27  James Troup  <james@nocrew.org>
4073
4074         * katie (init): new function; options clean up.
4075         (usage): add missing options, remove obsolete ones.
4076         (main): adapt for the two changes above.  If the lock file or
4077         new-ack log file don't exist, create them.  Don't try to open the
4078         new-ack log file except running in new-ack mode.
4079
4080         * alyson (main): initialize all the tables that are based on the
4081         conf file.
4082
4083         * utils.py (touch_file): like touch(1).
4084         (where_am_i): typo.
4085
4086         * catherine (usage): new.
4087         (main): use it.  options cleanup.
4088         * claire.py: likewise.
4089         * fernanda: likewise.
4090         * heidi: likewise.
4091         * jenna: likewise.
4092         * shania: likewise.
4093         * ziyi: likewise.
4094
4095         * andrea: options cleanup.
4096         * charisma: likewise.
4097         * julia: likewise.
4098         * madison: likewise.
4099         * melanie: likewise.
4100         * natalie: likewise.
4101         * rhona: likewise.
4102         * tea: likewise.
4103
4104 2001-09-26  James Troup  <james@nocrew.org>
4105
4106         * utils.py: default to sane config file locations
4107         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4108         or they can point to the real ones through use of a new Config
4109         section.  Based on an old patch by Adam Heath.
4110         (where_am_i): use the new default config stuff.
4111         (which_conf_file): likewise.
4112         (which_apt_conf_file): likewise.
4113
4114         * charisma (main): output defaults to
4115         `Package~Version\tMaintainer'; input can be of either form.  When
4116         parsing the new format do version comparisons, when parsing the
4117         old format assume anything in the extra file wins.  This fixes the
4118         problem of newer non-US packages being overwhelmed by older
4119         versions still in stable on main.
4120
4121 2001-09-17  James Troup  <james@nocrew.org>
4122
4123         * natalie.py (list): use result_join().
4124
4125         * denise (main): result_join() moved to utils.
4126
4127         * utils.py (result_join): move to utils; add an optional seperator
4128         argument.
4129
4130 2001-09-14  James Troup  <james@nocrew.org>
4131
4132         * heidi (set_suite): new function; does --set like natalie does,
4133         i.e. turns it into a sequence of --add's and --remove's
4134         internally.  This is a major win (~20 minute run time > ~20
4135         seconds) in the common, everday (i.e. testing) case.
4136         (get_id): common code used by set_suite() and process_file().
4137         (process_file): call set_suite() and get_id().
4138         (main): add logging support.
4139
4140         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4141         files.
4142
4143         * utils.py (parse_changes): use slices or simple string comparison
4144         in favour of regexes where possible.
4145
4146         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4147         fact that the string VARDATA() points to are not null terminated.
4148
4149         * denise (result_join): new function; like string.join() but
4150         handles None's.
4151         (list): use it.
4152         (main): likewise.
4153
4154         * charisma (main): python-pygresql 7.1 returns None not "".
4155
4156 2001-09-14  Ryan Murray  <rmurray@debian.org>
4157
4158         * natalie.py (list): handle python-pygresql 7.1 returning None.
4159
4160 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4161
4162         * madison (main): return 1 if no package is found.
4163
4164 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4165
4166         * madison (main): better error handling for incorrect
4167         -a/--architecture or -s/--suite arguments.
4168         (usage): new.
4169         (main): use it.
4170
4171 2001-09-05  Ryan Murray  <rmurray@debian.org>
4172
4173         * charisma, madison, katie: remove use of ROUser
4174         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4175
4176 2001-08-26  James Troup  <james@nocrew.org>
4177
4178         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4179         maintained packages at cjwatson@'s request.
4180
4181 2001-08-21  James Troup  <james@nocrew.org>
4182
4183         * madison (main): add -a/--architecture support.
4184
4185         * jenna: use logging instead of being overly verbose on stdout.
4186
4187 2001-08-11  Ryan Murray  <rmurray@debian.org>
4188
4189         * melanie: add functional help option
4190
4191 2001-08-07  Anthony Towns  <ajt@debian.org>
4192
4193         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4194
4195 2001-07-28  James Troup  <james@nocrew.org>
4196
4197         * katie (check_dsc): ensure source version is >> than existing
4198         source in target suite.
4199
4200 2001-07-25  James Troup  <james@nocrew.org>
4201
4202         * natalie.py: add logging support.
4203
4204         * utils.py (open_file): make the second argument optional and
4205         default to read-only.
4206
4207         * rene (main): work around broken source packages that duplicate
4208         arch: all packages with arch: !all packages (no longer allowed
4209         into the archive by katie).
4210
4211 2001-07-13  James Troup  <james@nocrew.org>
4212
4213         * katie (action): don't assume distribution is a dictionary.
4214         (update_subst): don't assume architecture is a dictionary and that
4215         maintainer822 is defined.
4216         (check_changes): recognise nk_format exceptions.
4217         (check_changes): reject on 'testing' only uploads.
4218         (check_files): when checking to ensure all packages are newer
4219         versions check against arch-all packages too.
4220         (check_dsc): enforce the existent of a sane set of mandatory
4221         fields.  Ensure the version number in the .dsc (modulo epoch)
4222         matches the version number in the .changes file.
4223
4224         * utils.py (changes_compare): ignore all exceptions when parsing
4225         the changes files.
4226         (build_file_list): don't UNDEF on a changes file with no format
4227         field.
4228
4229 2001-07-07  James Troup  <james@nocrew.org>
4230
4231         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4232         rather than 'changedbyname' to avoid false negatives on uploads
4233         with an email-address-only Changed-By field.
4234         (check_dsc): don't overwrite reject_message; append to it.
4235         (check_signature): likewise.
4236         (check_changes): likewise.
4237         (announce): condition logging on 'action'.
4238
4239         * logging.py: new logging module.
4240
4241         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4242         sub-tree into a separate (global) variable.
4243         (check_dsc): ensure format is 1.0 to retain backwards
4244         compatability with dpkg-source in potato.
4245         (main): only try to obtain the lock when not running in no-action
4246         mode.
4247         Use the new logging module.
4248
4249         * christina: initial version; only partially usable.
4250
4251 2001-06-28  Anthony Towns  <ajt@debian.org>
4252
4253         * apt.conf: Add ExtraOverrides to auric.
4254
4255 2001-06-25  James Troup  <james@nocrew.org>
4256
4257         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4258         they preferred the name 'Uploaders'.
4259
4260 2001-06-23  James Troup  <james@nocrew.org>
4261
4262         * katie (check_files): fix typo in uncommon rejection message,
4263         s/sourceversion/source version/.
4264
4265         * denise (main): we can't use print because stdout has been
4266         redirected.
4267
4268         * katie (source_exists): new function; moved out of check_files()
4269         and added support for binary-only NMUs of earlier sourceful NMUs.
4270
4271         * rhona (clean): find_next_free has moved.
4272
4273         * utils.py (find_next_free): new function; moved here from rhona.
4274         Change too_many to be an argument with a default value, rather
4275         than a hardcoded variable.
4276
4277         * shania: rewritten to work better; REJECTion reminder mail
4278         handling got lost though.
4279
4280 2001-06-22  James Troup  <james@nocrew.org>
4281
4282         * rhona (main): remove unused override code.
4283
4284         * fernanda (main): remove extraneous \n's from utils.warn calls.
4285         * natalie.py (list): likewise.
4286
4287         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4288         use utils.{warn,fubar} where appropriate.
4289
4290 2001-06-21  James Troup  <james@nocrew.org>
4291
4292         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4293         functionality.
4294         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4295         by the "Maintainers" field in the .dsc file and maintainer groups.
4296         (nmu_p.__init__): read in the list of group maintainer names.
4297         (announce): use nmu_p.
4298
4299 2001-06-20  James Troup  <james@nocrew.org>
4300
4301         * rene (main): hardcode the suite experimental is compared to by
4302         name rather than number.
4303
4304         * katie (check_files): differentiate between doesn't-exist and
4305         permission-denied in "can not read" rejections; requested by edd@.
4306         (check_dsc): use os.path.exists rather than os.access to allow the
4307         above check to kick in.
4308
4309         * heidi (process_file): read all input before doing anything and
4310         use transactions.
4311
4312 2001-06-15  James Troup  <james@nocrew.org>
4313
4314         * fernanda: new script; replaces old 'check' shell script
4315         nastiness.
4316
4317 2001-06-14  James Troup  <james@nocrew.org>
4318
4319         * katie: actually import traceback module to avoid amusing
4320         infinite loop.
4321
4322 2001-06-10  James Troup  <james@nocrew.org>
4323
4324         * utils.py (extract_component_from_section): fix to handle just
4325         'non-free' and 'contrib'.  Also fix to handle non-US in a
4326         completely case insensitive manner as a component.
4327
4328 2001-06-08  James Troup  <james@nocrew.org>
4329
4330         * madison (arch_compare): sort function that sorts 'source' first
4331         then alphabetically.
4332         (main): use it.
4333
4334 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4335
4336         * catherine (poolize): explicitly make poolized_size a long so it
4337         doesn't overflow when poolizing e.g. entire archives.
4338
4339 2001-06-01  James Troup  <james@nocrew.org>
4340
4341         * utils.py (send_mail): throw exceptions rather than exiting.
4342
4343         * katie (process_it): catch exceptions and ignore them.
4344
4345 2001-06-01  Michael Beattie  <mjb@debian.org>
4346
4347         * added update-mailingliststxt and update-readmenonus to update
4348         those files, respectively. modified cron.daily{,-non-US} to
4349         use them.
4350
4351 2001-05-31  Anthony Towns  <ajt@debian.org>
4352
4353         * rhona: make StayOfExecution work.
4354
4355 2001-05-31  James Troup  <james@nocrew.org>
4356
4357         * rhona (find_next_free): fixes to not overwrite files but rename
4358         them by appending .<n> instead.
4359         (clean): use find_next_free and use dated sub-directories in the
4360         morgue.
4361
4362         * utils.py (move): don't overwrite files unless forced to.
4363         (copy): likewise.
4364
4365 2001-05-24  James Troup  <james@nocrew.org>
4366
4367         * katie (check_files): determine the source version here instead
4368         of during install().
4369         (check_files): check for existent source with bin-only NMU
4370         support.
4371         (main): sort the list of changes so that the source-must-exist
4372         check Does The Right Thing(tm).
4373
4374         * utils.py (changes_compare): new function; sorts a list of
4375         changes files by 'have-source', source, version.
4376         (cc_fix_changes): helper function.
4377         (parse_changes): use compiled regexes.
4378         (fix_maintainer): likewise.
4379
4380         * rene (main): warn about packages in experimental that are
4381         superseded by newer versions in unstable.
4382
4383 2001-05-21  James Troup  <james@nocrew.org>
4384
4385         * rene (main): add support for checking for ANAIS (Architecture
4386         Not Allowed In Source) packages.
4387
4388 2001-05-17  James Troup  <james@nocrew.org>
4389
4390         * katie (check_changes): initalize `architecture' dictionary in
4391         changes global so that if we can't parse the changes file for
4392         whatever reason we don't undef later on.
4393
4394         * utils.py (parse_changes): fix handling of multi-line fields
4395         where the first line did have data.
4396
4397 2001-05-05  Anthony Towns  <ajt@debian.org>
4398
4399         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4400         (It should always have been there. Ooopsy.)
4401
4402 2001-05-03  Anthony Towns  <ajt@debian.org>
4403
4404         * jenna: Cleanup packages that move from arch:any to arch:all or
4405         vice-versa.
4406
4407 2001-04-24  Anthony Towns  <ajt@debian.org>
4408
4409         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4410         cope with debian-installer and boot-floppies' md5sum.txt.
4411
4412 2001-04-16  James Troup  <james@nocrew.org>
4413
4414         * katie (check_changes): add missing %s format string argument.
4415         (stable_install): temporary work around for morgue location to
4416         move installed changes files into.
4417         (stable_install): helps if you actually read in the template.
4418         (manual_reject): fix for editing of reject messages which was
4419         using the wrong variable name.
4420
4421         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4422
4423 2001-04-13  James Troup  <james@nocrew.org>
4424
4425         * katie (manual_reject): Cc the installer.
4426         (reject): don't.
4427         (check_changes): remove unused maintainer-determination code.
4428         (update_subst): add support for Changed-By when setting the
4429         *MAINTAINER* variables.
4430
4431         * rene (bar): new function to check for packages on architectures
4432         when they shouldn't be.
4433
4434         * natalie.py (main): use fubar() and warn() from utils.
4435
4436         * utils.py (whoami): new mini-function().
4437         * melanie (main): use it.
4438         * katie (manual_reject): likewise.
4439
4440 2001-04-03  James Troup  <james@nocrew.org>
4441
4442         * katie (action): ignore exceptions from os.path.getmtime() so we
4443         don't crash on non-existent changes files (e.g. when they are
4444         moved between the start of the install run in cron.daily and the
4445         time we get round to processing them).
4446
4447         * madison (main): also list source and accept -s/--suite.
4448
4449         * jenna (generate_src_list): missing \n in error message.
4450
4451         * katie (update_subst): add sane defaults for when changes is
4452         skeletal.
4453
4454 2001-03-29  James Troup  <james@nocrew.org>
4455
4456         * melanie (main): use fubar() and warn() from utils.  Remember who
4457         the maintainer for the removed packages are and display that info
4458         to the user.  Readd support for melanie-specific Bcc-ing that got
4459         lost in the TemplateSubst transition.
4460
4461         * utils.py (fubar): new function.
4462         (warn): like wise.
4463
4464         * db_access.py (get_maintainer): as below.
4465
4466         * charisma (get_maintainer): moved the bulk of this function to
4467         db_access so that melanie can use it too.
4468
4469         * claire.py (find_dislocated_stable): restrict the override join
4470         to those entries where the suite is stable; this avoids problems
4471         with packages which have moved to new sections (e.g. science)
4472         between stable and unstable.
4473
4474 2001-03-24  James Troup  <james@nocrew.org>
4475
4476         * catherine (poolize): new function; not really independent of
4477         main() fully, yet.
4478         (main): use it.
4479
4480         * katie (stable_install): __SUITE__ needs to be space prefixed
4481         because buildd's check for 'INSTALLED$'.
4482
4483 2001-03-22  James Troup  <james@nocrew.org>
4484
4485         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4486
4487         * jenna: rewritten; now does deletions on a per-suite level
4488         instead of a per-suite-component-architecture-type level.  This
4489         allows mutli-component packages to be auto-cleaned (and as a
4490         bonus, reduces the code size and duplication).
4491
4492 2001-03-22  Anthony Towns  <ajt@debian.org>
4493
4494         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4495         instead of just giving a gpg error.
4496
4497 2001-03-21  James Troup  <james@nocrew.org>
4498
4499         * madison (main): use apt_pkg.VersionCompare to sort versions so
4500         that output is correctly sorted for packages like debhlper.
4501         Noticed by ajt@.
4502
4503         * tea (check_source_in_one_dir): actually find problematic source
4504         packages.
4505
4506         * katie (check_dsc): remember the orig.tar.gz's location ID if
4507         it's not in a legacy suite.
4508         (check_diff): we don't use orig_tar_id.
4509         (install): add code to handle sourceful diff-only upload of
4510         packages which change components by copying the .orig.tar.gz into
4511         the new component, if it doesn't already exist there.
4512         (process_it): reset orig_tar_location (as above).
4513
4514         * melanie (main): use template substiution for the bug closing
4515         emails.
4516         (main): don't hardcode bugs.debian.org or packages.debian.org
4517         either; use configuration items.
4518
4519         * katie: likewise.
4520
4521         * natalie.py (init): use None rather than 'localhost' for the
4522         hostname given to pg.connect.
4523
4524         * utils.py (TemplateSubst): new function; lifted from
4525         userdir-ldap.
4526
4527 2001-03-21  Ryan Murray  <rmurray@debian.org>
4528
4529         * katie (announce): fix the case of non-existent
4530         Suite::$SUITE::Announce.
4531
4532 2001-03-20  Ryan Murray  <rmurray@debian.org>
4533
4534         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4535         /usr/.
4536
4537         * alyson (main): use config variable for database name.
4538         * andrea (main): likewise.
4539         * catherine (main): likewise.
4540         * charisma (main): likewise.
4541         * cindy (main): likewise.
4542         * claire.py (main): likewise.
4543         * denise (main): likewise.
4544         * heidi (main): likewise.
4545         * jenna (main): likewise.
4546         * katie (main): likewise.
4547         * madison (main): likewise.
4548         * melanie (main): likewise.
4549         * neve (main): likewise.
4550         * rhona (main): likewise.
4551         * tea (main): likewise.
4552
4553 2001-03-15  James Troup  <james@nocrew.org>
4554
4555         * rhona (check_sources): fixed evil off by one (letter) error
4556         which was causing only .dsc files to be deleted when cleaning
4557         source packages.
4558
4559         * charisma (get_maintainer_from_source): remove really stupid and
4560         gratuitous IN sub-query and replace with normal inner join.
4561         (main): connect as read-only user nobody.
4562
4563         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4564         with EXISTS.
4565         (check_files): likewise; still disabled by default though.
4566         (clean_binaries): add ' seconds' to the mysterious number in the
4567         output.
4568         (clean): likewise.
4569
4570         * tea (check_files): add missing global declaration on db_files.
4571
4572 2001-03-14  James Troup  <james@nocrew.org>
4573
4574         * rhona: rewritten large chunks. Removed a lot of the silly
4575         selecting into dictionaries and replaced it with 'where exists'
4576         based sub queries.  Added support for StayOfExecution.  Fix the
4577         problem with deleting dsc_files too early and disable cleaning of
4578         unattached files.
4579
4580 2001-03-14  Anthony Towns  <ajt@debian.org>
4581
4582         * katie (announce): also check Changed-By when trying to detect
4583         NMUs.
4584
4585 2001-03-06  Anthony Towns  <ajt@debian.org>
4586
4587         * ziyi (main): Generate Release.gpg files as well, using the key from
4588         Dinstall::SigningKey in katie.conf, if present. That key has to be
4589         passwordless, and hence kept fairly secretly.
4590
4591 2001-03-02  James Troup  <james@nocrew.org>
4592
4593         * utils.py (str_isnum): new function; checks to see if the string
4594         is a number.
4595
4596         * shania (main): fix _hideous_ bug which was causing all files > 2
4597         weeks old to be deleted from incoming, even if they were part of a
4598         valid upload.
4599
4600 2001-02-27  James Troup  <james@nocrew.org>
4601
4602         * melanie (main): accept new argument -C/--carbon-copy which
4603         allows arbitarty carbon-copying of the bug closure messages.
4604         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4605         separate variable.
4606
4607 2001-02-27  Anthony Towns  <ajt@debian.org>
4608
4609         * ziyi: new program; generates Release files.
4610
4611 2001-02-25  James Troup  <james@nocrew.org>
4612
4613         * katie (reject): add missing '\n' to error message.
4614         (manual_reject): likewise.
4615         (install): catch exceptions from moving the changes file into DONE
4616         and ignore them.
4617
4618         * tea (check_md5sums): new function.
4619
4620 2001-02-25  Michael Beattie  <mjb@debian.org>
4621
4622         * melanie: use $EDITOR if available.
4623
4624 2001-02-15  James Troup  <james@nocrew.org>
4625
4626         * utils.py (parse_changes): don't crash and burn on empty .changes
4627         files.  Symptoms noticed by mjb@.
4628
4629 2001-02-15  Adam Heath  <doogie@debian.org>
4630
4631         * denise (main): use an absolute path for the output filename.
4632
4633         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4634         compile errors with postgresql-dev >= 7.0.
4635
4636 2001-02-12  James Troup  <james@nocrew.org>
4637
4638         * rene: initial version.
4639
4640         * andrea: initial version.
4641
4642         * catherine (main): remove obsolete assignment of arguments.
4643
4644 2001-02-09  James Troup  <james@nocrew.org>
4645
4646         * catherine: first working version.
4647
4648 2001-02-06  James Troup  <james@nocrew.org>
4649
4650         * katie (check_files): validate the priority field; i.e. ensure it
4651         doesn't contain a '/' (to catch people prepending the priority
4652         with the component rather than the section).
4653         (check_override): don't warn about source packages; the only check
4654         is on section and we have no GUI tools that would use the Section
4655         field for a Sources file.
4656         (announce): use tags rather than severities for NMUs.  Requested
4657         by Josip Rodin <joy@>. [#78035]
4658
4659 2001-02-04  James Troup  <james@nocrew.org>
4660
4661         * tea (check_override): new function; ensures packages in suites
4662         are also in the override file.  Thanks to bod@ for noticing that
4663         such packages existed.
4664
4665         * katie: move file type compiled regular expressions to utils as
4666         catherine uses them too.
4667         (check_changes): always default maintainer822 to the installer
4668         address so that any bail out won't cause undefs later.
4669         (check_files): update file type re's to match above.
4670         (stable_install): likewise.
4671         (reject): handle any except from moving the changes files.  Fixes
4672         crashes on unreadable changes files.
4673
4674         * melanie (main): add an explanation of why things are not removed
4675         from testing.
4676
4677 2001-01-31  James Troup  <james@nocrew.org>
4678
4679         * melanie (main): ignore a) no message, b) removing from stable or
4680         testing when invoked with -n/--no-action.
4681
4682         * katie (check_override): lower section before checking to see if
4683         we're whining about 'non-US' versus 'non-US/main'.
4684
4685         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4686         function so that we can use inside of PostgreSQL.
4687
4688 2001-01-28  James Troup  <james@nocrew.org>
4689
4690         * katie: updated to pass new flag to parse_changes() and deal with
4691         the exception raised on invalid .dsc's if appropriate.
4692         * shania (main): likewise.
4693         * melanie (main): likewise.
4694
4695         * tea (check_dscs): new function to validate all .dsc files in
4696         unstable.
4697
4698         * utils.py (parse_changes): if passed an additional flag, validate
4699         the .dsc file to ensure it's extractable by dpkg-source.
4700         Requested by Ben Collins <bcollins@>.
4701
4702 2001-01-27  James Troup  <james@nocrew.org>
4703
4704         * madison (main): connect to the DB as nobody.
4705
4706         * katie (check_files): remove support for -r/--no-version-check
4707         since it makes no sense under katie (jenna will automatically
4708         remove the (new) older version) and was evil in any event.
4709         (check_changes): add missing new line to rejection message.
4710         (check_dsc): likewise.
4711         (process_it): reset reject_message here.
4712         (main): not here.  Also remove support for -r.
4713
4714 2001-01-26  James Troup  <james@nocrew.org>
4715
4716         * katie (check_override): don't whine about 'non-US/main' versus
4717         'non-US'.
4718
4719 2001-01-26  Michael Beattie  <mjb@debian.org>
4720
4721         * natalie.py (usage): new function.
4722         (main): use it.
4723
4724 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4725
4726         * update-mirrorlists: Update README.non-US too (request from Joy).
4727
4728 2001-01-25  James Troup  <james@nocrew.org>
4729
4730         * katie (reject): catch any exception from utils.move() and just
4731         pass, we previously only caught can't-overwrite errors and not
4732         can't-read ones.
4733
4734         * jenna (generate_src_list): use ORDER BY in selects to avoid
4735         unnecessary changes to Packages files.
4736         (generate_bin_list): likewise.
4737
4738         * utils.py (extract_component_from_section): separated out from
4739         build_file_list() as it's now used by claire too.
4740
4741         * claire.py (find_dislocated_stable): rewrite the query to extract
4742         section information and handle component-less locations properly.
4743         Thanks to ajt@ for the improved queries.
4744         (fix_component_section): new function to fix components and
4745         sections.
4746
4747 2001-01-23  James Troup  <james@nocrew.org>
4748
4749         * katie (check_files): set file type for (u?)debs first thing, so
4750         that if we continue, other functions which rely on file type
4751         existing don't bomb out.  If apt_pkg or apt_inst raise an
4752         exception when parsing the control file, don't try any other
4753         checks, just drop out.
4754         (check_changes): new test to ensure there is actually a target
4755         distribution.
4756
4757 2001-01-22  James Troup  <james@nocrew.org>
4758
4759         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4760         <grin@>.
4761         (check_changes): when mapping to unstable, remember to actually
4762         add unstable to the suite list and not just remove the invalid
4763         suite.
4764
4765 2001-01-21  James Troup  <james@nocrew.org>
4766
4767         * katie (check_files): catch exceptions from debExtractControl()
4768         and reject packages which raise any.
4769
4770 2001-01-19  James Troup  <james@nocrew.org>
4771
4772         * katie (check_signature): basename() file name in rejection
4773         message.
4774
4775 2001-01-18  James Troup  <james@nocrew.org>
4776
4777         * katie (in_override_p): remember the section and priority from
4778         the override file so we can check them against the package later.
4779         (check_override): new function; checks section and priority (for
4780         binaries) from the package against the override file and mails the
4781         maintainer about any disparities.
4782         (install): call check_override after announcing the upload.
4783
4784 2001-01-16  James Troup  <james@nocrew.org>
4785
4786         * utils.py (build_file_list): catch ValueError's from splitting up
4787         the files field and translate it into a parse error.
4788
4789         * tea: add support for finding unreferenced files.
4790
4791         * katie (in_override_p): add support for suite-aliasing so that
4792         proposed-updates uploads work again.
4793         (check_changes): catch parses errors from utils.build_file_list().
4794         (check_dsc): likewise.
4795         (check_diff): yet more dpkg breakage so we require even newer a
4796         version.
4797
4798         * jenna (generate_bin_list): don't do nasty path munging that's no
4799         longer needed.
4800
4801         * denise (main): support for non-US; and rename testing's override
4802         files so they're based on testing's codename.
4803
4804 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4805
4806         * melanie: add to the bug closing message explaining what happens
4807         (or rather doesn't) with bugs against packages that have been
4808         removed.
4809
4810 2001-01-14  James Troup  <james@nocrew.org>
4811
4812         * charisma (main): fix silly off-by-one error; suite priority
4813         checking was done using "less than" rather than "less than or
4814         equal to" which was causing weird hesienbugs with wrong Maintainer
4815         fields.
4816
4817 2001-01-10  James Troup  <james@nocrew.org>
4818
4819         * katie (in_override_p): adapted to use SQL-based overrides.
4820         read_override_file function disappears.
4821
4822         * db_access.py: add new functions get_section_id, get_priority_id
4823         and get_override_type_id.
4824         (get_architecture_id): return -1 if the architecture is not found.
4825
4826         * heidi: switch %d -> %d in all SQL queries.
4827         (get_list): Use string.join where appropriate.
4828
4829         * rhona (in_override_p): don't die if the override file doesn't
4830         exist.
4831         (main): warn if the override file doesn't exist.
4832
4833         * alyson: new script; will eventually sync the config file and the
4834         SQL database.
4835
4836         * natalie.py: new script; manipulates overrides.
4837
4838         * melanie: new script; removes packages from suites.
4839
4840 2001-01-08  James Troup  <james@nocrew.org>
4841
4842         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4843         anything it just changed the symptom.  Recognise the new breakage
4844         and reject them too.
4845
4846 2001-01-07  James Troup  <james@nocrew.org>
4847
4848         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4849         to the .changes file, be sure to set up files[filename]["type"]
4850         too.
4851
4852 2001-01-06  James Troup  <james@nocrew.org>
4853
4854         * katie (check_diff): new function; detects bad diff files
4855         produced by dpkg 1.8.1 and rejects thems.
4856         (process_it): call check_diff().
4857         (check_dsc): gar.  Add support for multiple versions of the
4858         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4859         and size against all versions and use one which matches if
4860         possible and exclude any that don't from being poolized to avoid
4861         file overwrites.  Thanks to broonie@ for providing the example.
4862         (install): skip any files marked as excluded as above.
4863
4864 2001-01-05  James Troup  <james@nocrew.org>
4865
4866         * heidi (process_file): add missing argument to error message.
4867
4868 2001-01-04  James Troup  <james@nocrew.org>
4869
4870         * heidi (main): fix handling of multiple files by reading all
4871         files not just the first file n times (where n = the number of
4872         files passed as arguments).
4873
4874 2001-01-04  Anthony Towns  <ajt@debian.org>
4875
4876         * katie (check_dsc): proper fix for the code which locates the
4877         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4878
4879 2000-12-20  James Troup  <james@nocrew.org>
4880
4881         * rhona: replace IN's with EXISTS's to make DELETE time for
4882         binaries and source sane on auric.  Add a -n/--no-action flag and
4883         make it stop actions if used.  Fixed a bug in binaries deletion
4884         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4885         -V/--version.  Giving timing info on deletion till I'm sure it's
4886         sane.
4887
4888         * katie (check_changes): map testing to unstable.
4889
4890         * madison: new script; shows versions in different architectures.
4891
4892         * katie (check_dsc): ensure size matches as well as md5sum;
4893         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4894         #69702.
4895
4896 2000-12-19  James Troup  <james@nocrew.org>
4897
4898         * katie (reject): ignore the "can't overwrite file" exception from
4899         utils.move() and leave the files where they are.
4900         (reject): doh! os.access() test was reversed so we only tried to
4901         move files which didn't exist... replaced with os.path.exists()
4902         test the right way round.
4903
4904         * utils.py (move): raise an exception if we can't overwrite the
4905         destination file.
4906         (copy): likewise.
4907
4908 2000-12-18  James Troup  <james@nocrew.org>
4909
4910         * rhona: first working version.
4911
4912         * db_access.py (get_files_id): force both sizes to be integers.
4913
4914         * katie (main): use size_type().
4915
4916         * utils.py (size_type): new function; pretty prints a file size.
4917
4918 2000-12-17  James Troup  <james@nocrew.org>
4919
4920         * charisma (main): do version compares so that older packages do
4921         not override newer ones and process source first as source wins
4922         over binaries in terms of who we think of as the Maintainer.
4923
4924 2000-12-15  James Troup  <james@nocrew.org>
4925
4926         * katie (install): use the files id for the .orig.tar.gz from
4927         check_dsc().
4928         (install): limit select for legacy source to a) source in legacy
4929         or legacy-mixed type locations and b) distinct on files.id.
4930         (install): rather than the bizarre insert new, delete old method
4931         for moving legacy source into the pool, use a simple update of
4932         files.
4933         (process_it): initalize some globals before each process.
4934
4935 2000-12-14  James Troup  <james@nocrew.org>
4936
4937         * katie (in_override_p): index on binary_type too since .udeb
4938         overrides are in a different file.
4939         (read_override_file): likewise.
4940         (check_files): correct filename passed to get_files_id().
4941         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4942         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4943         (check_dsc): remember the files id of the .orig.tar.gz, not the
4944         location id.
4945
4946 2000-12-13  James Troup  <james@nocrew.org>
4947
4948         * utils.py (poolify): force the component to lower case except for
4949         non-US.
4950
4951         * katie (in_override_p): handle .udeb-specific override files.
4952         (check_files): pass the binary type to in_override_p().
4953         (check_dsc): remember the location id of the old .orig.tar.gz in
4954         case it's not in the pool.
4955         (install): use location id from dsc_files; which is where
4956         check_dsc() puts it for old .orig.tar.gz files.
4957         (install): install files after all DB work is complete.
4958         (reject): basename() the changes filename.
4959         (manual_reject): likewise.
4960
4961         * shania: new progam; replaces incomingcleaner.
4962
4963 2000-12-05  James Troup  <james@nocrew.org>
4964
4965         * katie (check_changes): if inside stable and can't find files
4966         from the .changes; assume it's installed in the pool and chdir()
4967         to there.
4968         (check_files): we are not installing for stable installs, so don't
4969         check for overwriting existing files.
4970         (check_dsc): likewise.
4971         (check_dsc): reorder .orig.tar.gz handling so that we search in
4972         the pool first and only then fall back on any .orig.tar.gz in the
4973         cwd; this avoids false positives on the overwrite check when
4974         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4975         (install): if this is a stable install, bail out to
4976         stable_install() immediately.
4977         (install): dsc_files handling was horribly broken. a) we need to
4978         add files from the .dsc and not the .changes (duh), b) we need to
4979         add the .dsc file itself to dsc_files (to be consistent with neve
4980         if for no other reason).
4981         (stable_install): new function; handles installs from inside
4982         proposed-updates to stable.
4983         (acknowledge_new): basename changes_filename before doing
4984         anything.
4985         (process_it): absolutize the changes filename to avoid the
4986         requirement of being in the same directory as the .changes file.
4987         (process_it): save and restore the cwd as stable installs can
4988         potentially jump into the pool to find files.
4989
4990         * jenna: dislocated_files support using claire.
4991
4992         * heidi (process_file): select package field from binaries
4993         explicitly.
4994
4995         * db_access.py (get_files_id): fix cache key used.
4996
4997         * utils.py (build_file_list): fix 'non-US/non-free' case in
4998         section/component splitting.
4999         (move): use os.path.isdir() rather than stat.
5000         (copy): likewise.
5001
5002         * claire.py: new file; stable in non-stable munger.
5003
5004         * tea: new file; simply ensures all files in the DB exist.
5005
5006 2000-12-01  James Troup  <james@nocrew.org>
5007
5008         * katie (check_dsc): use regex_safe().
5009         (check_changes): typo in changes{} key:
5010         s/distributions/distribution/.
5011         (install): use changes["source"], not files[file]["source"] as the
5012         latter may not exist and the former is used elsewhere.  Commit the
5013         SQL transaction earlier.
5014
5015         * utils.py (regex_safe): new function; escapes characters which
5016         have meaning to SQL's regex comparison operator ('~').
5017
5018 2000-11-30  James Troup  <james@nocrew.org>
5019
5020         * katie (install): pool_location is based on source package name,
5021         not binary package.
5022
5023         * utils.py (move): if dest is a directory, append the filename
5024         before chmod-ing.
5025         (copy): ditto.
5026
5027         * katie (check_files): don't allow overwriting of existing .debs.
5028         (check_dsc): don't allow overwriting of existing source files.
5029
5030 2000-11-27  James Troup  <james@nocrew.org>
5031
5032         * katie (check_signature): don't try to load rsaref; it's
5033         obsolete.
5034         (in_override_p): don't try to lookup override entries for packages
5035         with an invalid suite name.
5036         (announce): don't assume the suite name is valid; use Find() to
5037         lookup the mailing list name for announcements.
5038
5039         * utils.py (where_am_i): typo; hostname is in the first element,
5040         not second.
5041
5042         * db_access.py (get_suite_id): return -1 on an unknown suite.
5043
5044 2000-11-26  James Troup  <james@nocrew.org>
5045
5046         * katie (install): fix CopyChanges handling; typo in in checking
5047         Cnf for CopyChanges flag and was calling non-existent function
5048         copy_file.
5049
5050         * utils.py (copy): new function; clone of move without the
5051         unlink().
5052
5053 2000-11-25  James Troup  <james@nocrew.org>
5054
5055         * utils.py (build_file_list): handle non-US prefixes properly
5056         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5057         + 'libs' not 'non-US/libs').
5058         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5059         delays.  This is possibly(/probably) exim speicifc and (like other
5060         sendmail options) needs to be in the config file.
5061
5062 2000-11-24  James Troup  <james@nocrew.org>
5063
5064         * rhona (check_sources): we need file id from dsc_files; not id.
5065         Handle non .dsc source files being re-referenced in dsc_files.
5066
5067         * katie (in_override_p): strip out any 'non-US' prefix.
5068         (check_files): use utils.where_am_i() rather than hardcoding.
5069         (check_files): validate the component.
5070         (install): use utils.where_am_i() rather than hardcoding.
5071         (install): fix mail to go to actual recepient.
5072         (reject): likewise.
5073         (manual_reject): likewise.
5074         (acknowledge_new): likewise.
5075         (announce): likewise.
5076
5077         * db_access.py (get_component_id): ignore case when searching for
5078         the component and don't crash if the component can't be found, but
5079         return -1.
5080         (get_location_id): handle -1 from get_component_id().
5081
5082         * jenna (generate_src_list): don't bring 'suite' into our big
5083         multi-table-joining select as we already know the 'suite_id'.
5084         (generate_bin_list): likewise.
5085
5086         * neve (main): don't quit if not on ftp-master.
5087         (process_packages): remove unused variable 'suite_codename'.
5088
5089         * utils.py (move): actually move the file.
5090         (build_file_list): handle non-US prefixes in the section.
5091
5092         * catherine (main): use which_conf_file().
5093         * charisma (main): likewise.
5094         * heidi (main): likewise.
5095         * jenna (main): likewise.
5096         * katie (main): likewise.
5097         * neve (main): likewise.
5098         * rhona (main): likewise.
5099
5100         * utils.py (where_am_i): new routine; determines the archive as
5101         understood by other 'dak' programs.
5102         (which_conf_file): new routine; determines the conf file to read.
5103
5104 2000-11-17  James Troup  <james@nocrew.org>
5105
5106         * katie (install): fix where .changes files for proposed-updates
5107         go.
5108
5109 2000-11-04  James Troup  <james@nocrew.org>
5110
5111         * jenna (main): handle architecture properly if no
5112         -a/--architecture argument is given, i.e. reset architecture with
5113         the values for the suite for each suite.
5114
5115         * Add apt_pkg.init() to the start of all scripts as it's now
5116         required by python-apt.
5117
5118 2000-10-29  James Troup  <james@nocrew.org>
5119
5120         * jenna (generate_bin_list): take an additional argument 'type'
5121         and use it in the SELECT.
5122         (main): if processing component 'main', process udebs and debs.
5123
5124         * neve (process_packages): set up 'type' in 'binaries' (by
5125         assuming .deb).
5126
5127         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5128         (check_files): set up files[file]["dbtype"].
5129         (install): use files[file]["dbtype"] to set up the 'type' field in
5130         the 'binaries' table.
5131
5132         * init_pool.sql: add a 'type' field to the 'binaries' table to
5133         distinguisgh between ".udeb" and ".deb" files.
5134
5135         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5136         dest ? dirname(dest)" type check instead.
5137
5138         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5139         in the pool without crashing.  Also handle the case of being asked
5140         to look for something other than an .orig.tar.gz in the pool.
5141
5142 2000-10-26  James Troup  <james@nocrew.org>
5143
5144         * katie (install): fix filenames put into files table during
5145         poolification of legacy source.
5146
5147         * utils.py (move): work around a bug in os.path.basename() which
5148         cunningly returns '' if there is a trailing slash on the path
5149         passed to it.
5150
5151         * katie (check_dsc): Remove more cruft.  If we find the
5152         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5153         location, make a note of that so we can fix things in install().
5154         (install): as above.  Move any old source out of legacy locations
5155         so that 'apt-get source' will work.
5156         (process_it): reset the flag that indicates to install that the
5157         source needs moved.
5158
5159         * cron.daily: more.  Nowhere near complete yet though.
5160
5161         * katie (install): don't run os.makedirs, a) utils.move() does
5162         this now, b) we weren't removing the user's umask and were
5163         creating dirs with SNAFU permissions.
5164         (check_dsc): rewrite the .orig.tar.gz handling to take into
5165         account, err, package pools.  i.e. look anywhere in the pool
5166         rather than faffing around with two simple paths.
5167
5168         * neve (process_sources): add the .dsc to dsc_files too.
5169
5170 2000-10-25  James Troup  <james@nocrew.org>
5171
5172         * neve (process_sources): don't duplicate .orig.tar.gz's.
5173
5174 2000-10-23  James Troup  <james@nocrew.org>
5175
5176         * utils.py (re_extract_src_version): moved here.
5177
5178         * neve: move re_extract_src_version to utils.
5179         (process_packages): reflect change.
5180
5181         * katie (install): reflect change.
5182
5183 2000-10-19  James Troup  <james@nocrew.org>
5184
5185         * jenna (generate_src_list): handle locations with null
5186         components.
5187         (generate_bin_list): likewise.
5188