ChangeLog

   1 2008-05-04  Joerg Jaspert  <joerg@debian.org>
   2
   3         * dak/import_keyring.py: Remove unused daklib.logging and Logger
   4         and add the actually used daklib/utils
   5
   6         * dak/examine_package.py: remove daklib.queue import, never used
   7
   8         * dak/check_proposed_updates.py: Import stuff from daklib as
   9         "import daklib.foo as foo"
  10         * dak/clean_proposed_updates.py: likewise
  11         * dak/clean_queues.py: likewise
  12         * dak/clean_suites.py: likewise
  13         * dak/compare_suites.py: likewise
  14         * dak/cruft_report.py: likewise
  15         * dak/examine_package.py: likewise
  16         * dak/find_null_maintainers.py: likewise
  17         * dak/generate_index_diffs.py: likewise
  18         * dak/generate_releases.py: likewise
  19         * dak/import_archive.py: likewise
  20         * dak/import_ldap_fingerprints.py: likewise
  21         * dak/import_users_from_passwd.py: likewise
  22         * dak/init_db.py: likewise
  23         * dak/init_dirs.py: likewise
  24         * dak/ls.py: likewise
  25         * dak/make_maintainers.py: likewise
  26         * dak/make_overrides.py: likewise
  27         * dak/make_suite_file_list.py: likewise
  28         * dak/new_security_install.py: likewise
  29         * dak/override.py: likewise
  30         * dak/process_accepted.py: likewise
  31         * dak/process_new.py: likewise
  32         * dak/process_unchecked.py: likewise
  33         * dak/rm.py: likewise
  34         * dak/show_new.py: likewise
  35         * dak/split_done.py: likewise
  36         * dak/stats.py: likewise
  37         * dak/transitions.py: likewise
  38
  39         * dak/check_archive.py (check_files_not_symlinks): Remove
  40         long-time unused and commented code. Import stuff from daklib as
  41         "import daklib.foo as foo"
  42
  43 2008-05-03  Joerg Jaspert  <joerg@debian.org>
  44
  45         * dak/examine_package.py: clean up pychecker warnings (merged with
  46         Thomas changes to the NEW display)
  47
  48 2008-05-03  Mark Hymers <mhy@debian.org>
  49
  50         * dak/check_archive.py: clean up pychecker warnings
  51         * dak/check_overrides.py: likewise
  52         * dak/check_proposed_updates.py: likewise
  53         * dak/clean_proposed_updates.py: likewise
  54         * dak/clean_queues.py: likewise
  55         * dak/control_overrides.py: likewise
  56         * dak/control_suite.py: likewise
  57         * dak/decode_dot_dak.py: likewise
  58         * dak/examine_package.py: likewise
  59         * dak/process_new.py: likewise
  60         * dak/process_unchecked.py: likewise
  61         * dak/queue_report.py: likewise
  62         * dak/reject_proposed_updates.py: likewise
  63         * dak/security_install.py: likewise
  64         * dak/show_new.py: likewise
  65         * dak/stats.py: likewise
  66         * dak/symlink_dists.py: likewise
  67         * dak/transitions.py: likewise
  68
  69 2008-05-03  Joerg Jaspert  <joerg@debian.org>
  70
  71         * config/debian/cron.daily: Rename to
  72         * config/debian/cron.dinstall: this, as its not really something run
  73         daily for some time now. And while dinstall is an OLD name, its
  74         recognized pretty well within Debian
  75         Also add some more timing information
  76         Do not allow automated [o-]p-u-new processing to break dinstall
  77
  78 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
  79
  80         * web/,web/style.css: add web dir and current style.css
  81
  82         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
  83         based on mock-up by M. Ferrari.
  84         remove Checksums-* from examine-package output
  85
  86 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
  87
  88         * dak/process_unchecked.py (check_hashes): Reject on error while
  89         parsing Checksums-*.
  90
  91 2008-05-02  Joerg Jaspert  <joerg@debian.org>
  92
  93         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
  94         added wiki.debian.org (currently pointing to debian-www), closes #194206
  95         added security-tracker, closes #436152
  96         added release.debian.org, closes #451005
  97
  98         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
  99         still wants it - its in revision control...)
 100
 101         * config/debian/cron.daily: Modify call to update-ftpstats to only
 102         use files log/2*, instead of log/*, so it ignores the new cron/
 103         subdir. Makes sure it can't get confused, and is also safe for
 104         nearly thousand years. If this code is really in use in year 3000,
 105         im sure people can adjust it! :)
 106
 107         * config/debian/vars: Add logdir as a place for cronjob log output
 108
 109         * config/debian/cron.daily: Use a logfile and be more verbose of
 110         whats going on.
 111           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
 112         cron.weekly, ...
 113         * config/debian/cron.weekly: likewise,
 114           ... and activate those calls again. Once a week, as an
 115         additional safety bet to be sure the stuff does get run is ok,
 116         even if we have autovacuum by default.
 117
 118 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
 119
 120         * dak/process_unchecked.py (check_hashes): fix typo in
 121           checksum reject message.
 122
 123 2008-05-02  Joerg Jaspert  <joerg@debian.org>
 124
 125         * config/debian/extensions.py: used reindent.py from the python
 126         2.x source examples to get all dak code use the same indentation
 127         style, no longer a mix of 4 spaces / 1 tab.
 128         * dak/check_archive.py: likewise
 129         * dak/check_overrides.py: likewise
 130         * dak/check_proposed_updates.py: likewise
 131         * dak/clean_proposed_updates.py: likewise
 132         * dak/clean_queues.py: likewise
 133         * dak/clean_suites.py: likewise
 134         * dak/compare_suites.py: likewise
 135         * dak/control_overrides.py: likewise
 136         * dak/control_suite.py: likewise
 137         * dak/cruft_report.py: likewise
 138         * dak/dak.py: likewise
 139         * dak/decode_dot_dak.py: likewise
 140         * dak/examine_package.py: likewise
 141         * dak/find_null_maintainers.py: likewise
 142         * dak/generate_index_diffs.py: likewise
 143         * dak/generate_releases.py: likewise
 144         * dak/import_archive.py: likewise
 145         * dak/import_keyring.py: likewise
 146         * dak/import_ldap_fingerprints.py: likewise
 147         * dak/import_users_from_passwd.py: likewise
 148         * dak/init_db.py: likewise
 149         * dak/init_dirs.py: likewise
 150         * dak/ls.py: likewise
 151         * dak/make_maintainers.py: likewise
 152         * dak/make_overrides.py: likewise
 153         * dak/make_suite_file_list.py: likewise
 154         * dak/mirror_split.py: likewise
 155         * dak/new_security_install.py: likewise
 156         * dak/override.py: likewise
 157         * dak/poolize.py: likewise
 158         * dak/process_accepted.py: likewise
 159         * dak/process_new.py: likewise
 160         * dak/process_unchecked.py: likewise
 161         * dak/queue_report.py: likewise
 162         * dak/reject_proposed_updates.py: likewise
 163         * dak/rm.py: likewise
 164         * dak/security_install.py: likewise
 165         * dak/show_new.py: likewise
 166         * dak/split_done.py: likewise
 167         * dak/stats.py: likewise
 168         * dak/symlink_dists.py: likewise
 169         * dak/test/001/test.py: likewise
 170         * dak/test/002/test.py: likewise
 171         * dak/transitions.py: likewise
 172         * daklib/extensions.py: likewise
 173         * daklib/logging.py: likewise
 174         * daklib/queue.py: likewise
 175         * daklib/utils.py: likewise
 176         * scripts/debian/insert_missing_changedby.py: likewise
 177
 178         * dak/process_new.py (recheck): Make the path check more robust,
 179         so we no longer have to keep process_new seperate trees between
 180         security and normal archive.
 181
 182 2008-04-27  Joerg Jaspert  <joerg@debian.org>
 183
 184         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
 185         configured path does not exist or is not writeable by us. Use a
 186         tmp path if so, so we do not lose the urgencies in such cases.
 187
 188         * config/debian/dak.conf: Changed path for UrgencyLog
 189         Same for the ReleaseTransitions file
 190
 191         * config/debian/cron.daily: Notify qa user on merkel of dinstall
 192         start, Remove the britney call
 193
 194 2008-04-26  Joerg Jaspert  <joerg@debian.org>
 195
 196         * dak/process_new.py: Call end() whenever we try to leave by
 197         pressing Q
 198
 199         * config/debian/cron.daily: Also report NBS in experimental
 200
 201 2008-04-25  Joerg Jaspert  <joerg@debian.org>
 202
 203         * dak/cruft_report.py (main): Make it possible to look at
 204         experimental too, especially NBS
 205
 206         * dak/split_done.py (main): Only move files into their subdirs if
 207         they are older than 30 days. That enables us to run this script as
 208         part of a cronjob.
 209
 210         * config/debian/cron.weekly: Run dak split-done
 211
 212 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
 213
 214         * dak/process_unchecked.py: add changes["sponsoremail"]
 215           for sponsored uploads if desired
 216         * daklib/queue.py: add changes["sponsoremail"] to
 217           Subst["__MAINTAINER_TO__"] if present
 218         * daklib/utils.py: add functions
 219           is_email_alias to check which accounts allow email forwarding,
 220           which_alias_file to find the alias file, and
 221           gpg_get_key_addresses to find uid addresses for a given
 222             fingerprint
 223
 224 2008-04-22  Joerg Jaspert  <joerg@debian.org>
 225
 226         * setup/init_pool.sql: added a function/aggregate for the release
 227         team to base some script on it.
 228
 229         * config/debian/cron.daily: push katie@merkel to immediately start
 230         the sync of projectb there.
 231
 232 2008-04-21  Joerg Jaspert  <joerg@debian.org>
 233
 234         * scripts/debian/expire_dumps: New script, expires old database
 235         dumps, using a scheme to keep more of the recent dumps.
 236
 237         * config/debian/cron.daily: Use the new script. Also - compress
 238         all files older than 7 days, instead of 30.
 239
 240         * dak/process_accepted.py (install): Do not break if a
 241         source/maintainer combination is already in src_uploaders, "just"
 242         warn us.
 243
 244 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
 245
 246         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
 247         Format lines (ie. those having extra text appended).
 248
 249 2008-04-19  Joerg Jaspert  <joerg@debian.org>
 250
 251         * dak/process_unchecked.py (check_files): Sanity check the
 252         provides field, which closes #472783
 253
 254 2008-04-18  Joerg Jaspert  <joerg@debian.org>
 255
 256         * config/debian/dak.conf: Add mapping stable-proposed-updates
 257           -> proposed-updates.
 258
 259         * dak/transitions.py (load_transitions): Additionally check for
 260         invalid package list indentation
 261
 262 2008-04-17  Joerg Jaspert  <joerg@debian.org>
 263
 264         * config/debian/dak.conf: Add TempPath statement for the Release
 265         Transitions script
 266
 267         * dak/transitions.py (temp_transitions_file): Use the TempPath
 268         (write_transitions_from_file): Check if the file we should get our
 269         transitions from is in our TempPath, error out if it isnt
 270         (main): Check for TempPath existance
 271
 272 2008-04-12  James Troup  <troup@debian.org>
 273
 274         * dak/clean_proposed_updates.py: add support for -s/--suite and
 275         -n/--no-action.
 276
 277 2008-04-11  Anthony Towns  <ajt@debian.org>
 278
 279         * dak/utils.py: build_file_list() extra parameters so it can
 280         build a file list for checksums-foo fields. Don't use float() to
 281         compare formats, because Format: 1.10 should compare greater than
 282         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
 283
 284         * dak/process_unchecked.py: check_md5sum becomes check_hashes
 285         and check_hash. If changes format is 1.8 or later, also check
 286         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
 287         and reject on presence/absence of un/expected checksums-* fields.
 288
 289 2008-04-07  Joerg Jaspert  <joerg@debian.org>
 290
 291         * daklib/utils.py (build_file_list): Check for dpkg .changes
 292         adjusted to reject newer (and right now broken) 1.8 version, until
 293         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
 294
 295 2008-03-22  Joerg Jaspert  <joerg@debian.org>
 296
 297         * dak/transitions.py (load_transitions): Check if all our keys are
 298         defined, if there are only keys defined we want and also the types
 299         of the various keys.
 300
 301 2008-03-22  Anthony Towns  <ajt@debian.org>
 302
 303         * dak/edit_transitions.py: Add --import option.
 304         Add --use-sudo option. Use fcntl locking for writing.
 305         Move writing into a function (write_transitions).
 306         Reinvoke self using sudo and --import if necessary.
 307         Move temporary file creation into a function, use mkstemp.
 308         Rename to "dak transitions".
 309
 310 2008-03-21  Joerg Jaspert  <joerg@debian.org>
 311
 312         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
 313         edited file back in place
 314         (check_transitions): Use proper locking and also use sudo to copy
 315         the new file in place
 316
 317 2008-03-21  Anthony Towns <ajt@debian.org>
 318
 319         * config/debian/extensions.py: Add infrastructure for replacing
 320         functions in dak modules; add upload blocking for dpkg.
 321
 322 2008-03-12  Joerg Jaspert  <joerg@debian.org>
 323
 324         * dak/edit_transitions.py: Done a number of cleanups to make code
 325         working. Also changed the way prompting/answering goes, to not
 326         have to import daklib/queue.
 327         (edit_transitions): When done with a successful edit - also print
 328         a final overview about defined transitions
 329
 330 2008-03-11  Joerg Jaspert  <joerg@debian.org>
 331
 332         * dak/process_unchecked.py: Import syck module directly, not "from
 333         syck import *"
 334         (check_transition): Do the check for sourceful upload in here
 335         Also adjust the syck loading commands, rename new_vers to
 336         expected, curvers to current, to make it more clear what they mean.
 337
 338         * daklib/database.py (get_suite_version): Renamed from
 339         get_testing_version. Also changed the cache variables name
 340
 341         * The above changes are based on modifications from Anthony.
 342
 343         * dak/dak.py (init): Renamed check -> edit transitions
 344
 345         * dak/edit_transitions.py: Renamed from check_transitions.py
 346         (main): Also rename new_vers/curvers to expected/current
 347         Basically a nice rewrite, so it now does checks and edit,
 348         depending on how you call it. Check also removes old transitions,
 349         if user wants it.
 350
 351 2008-03-02  Joerg Jaspert  <joerg@debian.org>
 352
 353         * debian/control (Suggests): Add python-syck to Depends:
 354
 355         * dak/dak.py (init): Tell it about check_transitions
 356
 357         * dak/check_transitions.py (usage): Added, checks the transitions
 358         file (if any)
 359
 360         * daklib/database.py (get_testing_version): Added. Returns the
 361         version for the source in testing, if any
 362
 363         * dak/process_unchecked.py (check_transition): Added. Checks if a
 364         release team member defined a transition, and rejects based on
 365         that data.
 366         (process_it): Use it.
 367         (check_transition): Warn on broken transitions file and return,
 368         not doing anything.
 369         (check_transition): Moved out of here, into daklib/queue
 370         (process_it): Call check_transitions only if
 371         changes[architecture] has source included.
 372         (check_transition): Now call the database.get_testing_version
 373
 374 2008-02-09  Christoph Berg <myon@debian.org>
 375
 376         * daklib/queue.py (get_type): fubar does not exist in global
 377         namespace.
 378
 379         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
 380         to source table, and move src_uploaders after source so the REFERNCES
 381         clause works.
 382         * dak/process_accepted.py (install): Fill the changedby column from
 383         the information found in the .changes. This will allow to identify
 384         NMUs and sponsored uploads more precisely in tools querying projectb.
 385         * scripts/debian/insert_missing_changedby.py: Script to import yet
 386         missing fields from filippo's uploads-history DB.
 387
 388 2008-02-06  Joerg Jaspert  <joerg@debian.org>
 389
 390         * daklib/utils.py (check_signature): Make variable key available,
 391         so we can access it.
 392
 393 2008-01-07  Joerg Jaspert  <joerg@debian.org>
 394
 395         * dak/examine_package.py (check_deb): Remove linda call. It
 396         provides no added benefit to lintian anymore.
 397
 398 2008-01-07  Joerg Jaspert  <joerg@debian.org>
 399
 400         * dak/examine_package.py (check_deb): Remove linda call. It
 401         provides no added benefit to lintian anymore.
 402
 403 2008-01-06  Joerg Jaspert  <joerg@debian.org>
 404
 405         * dak/examine_package.py (do_lintian): lintian now supports html
 406         coloring, so use it.
 407         (do_command): Dont escape html chars if param escaped = 1
 408
 409 2008-01-06  Joerg Jaspert  <joerg@debian.org>
 410
 411         * dak/examine_package.py (do_lintian): lintian now supports html
 412         coloring, so use it.
 413         (do_command): Dont escape html chars if param escaped = 1
 414
 415 2007-12-31  Anthony Towns  <ajt@debian.org>
 416
 417         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
 418         when processing result of check_dsc_against_db so we don't promote
 419         warnings to rejections.
 420
 421 2007-12-31  Anthony Towns  <ajt@debian.org>
 422
 423         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
 424         when processing result of check_dsc_against_db so we don't promote
 425         warnings to rejections.
 426
 427 2007-12-30  Joerg Jaspert  <joerg@debian.org>
 428
 429         * dak/dak.py (init): add show-new. This is based on a patch
 430         submitted by Thomas Viehmann in Bug #408318, but large parts of
 431         handling it are rewritten and show-new is done by me.
 432
 433         * dak/queue_report.py (table_row): Add link to generated html page
 434         for NEW package.
 435
 436         * dak/show_new.py: new file, generates html overview for NEW
 437         packages, similar to what we see with examine-package.
 438
 439         * config/debian/cron.hourly: Add show-new call
 440
 441         * config/debian/dak.conf: Add HTMLPath for Show-New
 442
 443         * dak/examine_package.py (print_copyright): ignore stderr when
 444         finding copyright file.
 445         (main): add html option
 446         (html_escape): new function
 447         (escape_if_needed): ditto
 448         (headline): ditto
 449         (colour_output): ditto
 450         (print_escaped_text): ditto
 451         (print_formatted_text): ditto
 452         - use those functions everywhere where we generate output, as they
 453         easily know if we want html or not and just DTRT
 454         (do_lintian): new function
 455         (check_deb): use it
 456         (output_deb_info): Use print_escaped_text, not print_formatted_text.
 457         Also import daklib.queue, determine_new now lives there
 458
 459         Also add a variable to see if we want html output. Default is
 460         disabled, show_new enables it for its use.
 461         Most of html, besides header/footer are in examine_package instead
 462         of show_new, as it makes it a whole lot easier to deal with it at
 463         the point the info is generated.
 464
 465
 466         * dak/process_new.py (determine_new): Moved out of here.
 467         (check_valid): Moved out of here.
 468         (get_type): Moved out of here.
 469
 470         * daklib/queue.py (determine_new): Moved here.
 471         (check_valid): Moved here.
 472         (get_type): Moved here.
 473
 474         * dak/init_db.py (do_section): Remove non-US code
 475
 476         * dak/make_overrides.py (main): ditto
 477
 478         * dak/process_new.py (determine_new): ditto
 479
 480         * daklib/queue.py (Upload.in_override_p),
 481         (Upload.check_override): ditto
 482
 483         * daklib/utils.py (extract_component_from_section):,
 484         (poolify): ditto
 485
 486         * dak/import_archive.py (update_section): ditto
 487
 488         * dak/symlink_dists.py (fix_component_section): ditto
 489
 490         * scripts/debian/mkmaintainers: ditto
 491
 492         * scripts/debian/update-mirrorlists (masterlist): ditto
 493
 494         * config/debian-non-US/*: Remove subdir
 495
 496         * scripts/debian/update-readmenonus: Removed.
 497
 498
 499 2007-12-30  Joerg Jaspert  <joerg@debian.org>
 500
 501         * dak/dak.py (init): add show-new. This is based on a patch
 502         submitted by Thomas Viehmann in Bug #408318, but large parts of
 503         handling it are rewritten and show-new is done by me.
 504
 505         * dak/queue_report.py (table_row): Add link to generated html page
 506         for NEW package.
 507
 508         * dak/show_new.py: new file, generates html overview for NEW
 509         packages, similar to what we see with examine-package.
 510
 511         * config/debian/cron.hourly: Add show-new call
 512
 513         * config/debian/dak.conf: Add HTMLPath for Show-New
 514
 515         * dak/examine_package.py (print_copyright): ignore stderr when
 516         finding copyright file.
 517         (main): add html option
 518         (html_escape): new function
 519         (escape_if_needed): ditto
 520         (headline): ditto
 521         (colour_output): ditto
 522         (print_escaped_text): ditto
 523         (print_formatted_text): ditto
 524         - use those functions everywhere where we generate output, as they
 525         easily know if we want html or not and just DTRT
 526         (do_lintian): new function
 527         (check_deb): use it
 528         (output_deb_info): Use print_escaped_text, not print_formatted_text.
 529         Also import daklib.queue, determine_new now lives there
 530
 531         Also add a variable to see if we want html output. Default is
 532         disabled, show_new enables it for its use.
 533         Most of html, besides header/footer are in examine_package instead
 534         of show_new, as it makes it a whole lot easier to deal with it at
 535         the point the info is generated.
 536
 537
 538         * dak/process_new.py (determine_new): Moved out of here.
 539         (check_valid): Moved out of here.
 540         (get_type): Moved out of here.
 541
 542         * daklib/queue.py (determine_new): Moved here.
 543         (check_valid): Moved here.
 544         (get_type): Moved here.
 545
 546         * dak/init_db.py (do_section): Remove non-US code
 547
 548         * dak/make_overrides.py (main): ditto
 549
 550         * dak/process_new.py (determine_new): ditto
 551
 552         * daklib/queue.py (Upload.in_override_p),
 553         (Upload.check_override): ditto
 554
 555         * daklib/utils.py (extract_component_from_section):,
 556         (poolify): ditto
 557
 558         * dak/import_archive.py (update_section): ditto
 559
 560         * dak/symlink_dists.py (fix_component_section): ditto
 561
 562         * scripts/debian/mkmaintainers: ditto
 563
 564         * scripts/debian/update-mirrorlists (masterlist): ditto
 565
 566         * config/debian-non-US/*: Remove subdir
 567
 568         * scripts/debian/update-readmenonus: Removed.
 569
 570
 571 2007-12-28  Anthony Towns  <ajt@debian.org>
 572
 573         * daklib/utils.py (check_signature): add NOTATION_DATA and
 574         NOTATION_NAME to known keywords.
 575
 576         * daklib/queue.py (Upload.check_source_against_db):
 577
 578         * dak/make_suite_file_list.py: add -f/--force option.
 579
 580         * dak/generate_releases.py: add -a/--apt-conf=FILE and
 581         -f/--force-touch options.  Pull version info from the database.
 582         Make suite description optional.
 583
 584         * config/debian/dak.conf: update
 585         Reject-Proposed-Updates::MoreInfoURL.  Comment out
 586         Suite::Stable::Version and ::Description.
 587
 588         * config/debian/apt.conf: Add hurd-i386 to unstable
 589         debian-installer stanza.
 590
 591 2007-12-28  Joerg Jaspert  <joerg@debian.org>
 592
 593         * KEYEXPIRED is actually a known keyword. We do check it earlier
 594         on and reject in case the sig is bad (or unknown)
 595
 596 2007-12-28  Anthony Towns  <ajt@debian.org>
 597
 598         * daklib/utils.py (check_signature): add NOTATION_DATA and
 599         NOTATION_NAME to known keywords.
 600
 601         * daklib/queue.py (Upload.check_source_against_db):
 602
 603         * dak/make_suite_file_list.py: add -f/--force option.
 604
 605         * dak/generate_releases.py: add -a/--apt-conf=FILE and
 606         -f/--force-touch options.  Pull version info from the database.
 607         Make suite description optional.
 608
 609         * config/debian/dak.conf: update
 610         Reject-Proposed-Updates::MoreInfoURL.  Comment out
 611         Suite::Stable::Version and ::Description.
 612
 613         * config/debian/apt.conf: Add hurd-i386 to unstable
 614         debian-installer stanza.
 615
 616 2007-12-28  Joerg Jaspert  <joerg@debian.org>
 617
 618         * KEYEXPIRED is actually a known keyword. We do check it earlier
 619         on and reject in case the sig is bad (or unknown)
 620
 621 2007-12-24  Joerg Jaspert  <joerg@debian.org>
 622
 623         * Also run lintian on the .dsc file to check the source itself.
 624
 625         * Fix the direct usage of ar | tar etc to get the copyright file
 626         and use dpkg-deb, which is made for this and makes us able to
 627         process data.tar.bz2 (or whatever format it will be in the
 628         future).
 629
 630 2007-12-24  Joerg Jaspert  <joerg@debian.org>
 631
 632         * Also run lintian on the .dsc file to check the source itself.
 633
 634         * Fix the direct usage of ar | tar etc to get the copyright file
 635         and use dpkg-deb, which is made for this and makes us able to
 636         process data.tar.bz2 (or whatever format it will be in the
 637         future).
 638
 639 2007-12-21  Joerg Jaspert  <joerg@debian.org>
 640
 641         * Remove the (now useless) check for a pre-depends on dpkg for
 642           binaries that contain bzip2 compressed data tarballs.
 643
 644 2007-12-21  Joerg Jaspert  <joerg@debian.org>
 645
 646         * Remove the (now useless) check for a pre-depends on dpkg for
 647           binaries that contain bzip2 compressed data tarballs.
 648
 649 2007-08-28  Anthony Towns  <ajt@debian.org>
 650
 651         * process_unchecked.py: Add support for automatic BYHAND
 652         processing.
 653         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
 654         processing of tag-overrides.
 655         * examine_package.py: Summarise duplicate copyright file entries
 656         (same md5sum) with a reference to the previous instance, rather
 657         than repeating them.
 658         * process_new.py: When rejecting from the p-u-new or o-p-u-new
 659         holding queues, don't worry if dak has its own reasons for
 660         rejecting the package as well as the SRMs.
 661
 662 2007-08-28  Anthony Towns  <ajt@debian.org>
 663
 664         * process_unchecked.py: Add support for automatic BYHAND
 665         processing.
 666         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
 667         processing of tag-overrides.
 668         * examine_package.py: Summarise duplicate copyright file entries
 669         (same md5sum) with a reference to the previous instance, rather
 670         than repeating them.
 671         * process_new.py: When rejecting from the p-u-new or o-p-u-new
 672         holding queues, don't worry if dak has its own reasons for
 673         rejecting the package as well as the SRMs.
 674
 675 2007-06-19  Anthony Towns  <ajt@debian.org>
 676
 677         * Add nm.debian.org pseudopackage
 678
 679 2007-06-19  Anthony Towns  <ajt@debian.org>
 680
 681         * Add nm.debian.org pseudopackage
 682
 683 2007-06-18  Anthony Towns  <ajt@debian.org>
 684
 685         * daklib/logging.py: Set umask to not exclude group-writability
 686         so we don't get reminded at the start of each month. Thanks to
 687         Random J.
 688         * dak/override.py: More changes from Herr von Wifflepuck: warn
 689         if section of source is different to binary section; restore
 690         functionality on source-only overrides; croak if trying to set
 691         priority of a source override; never set priority of source
 692         overrides; correct typo in logging (s/priority/section/ at
 693         one place)
 694
 695         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
 696         * config/debian/cron.daily: auotmatically accept/reject
 697         oldstable-proposed-updates based on COMMENTS directory
 698
 699 2007-06-18  Anthony Towns  <ajt@debian.org>
 700
 701         * config/debian/apt.conf, config/debian/apt.conf.stable,
 702         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
 703         (sarge), support for oldstable-proposed-updates, dropping m68k
 704         from etch, creating etch-m68k suite, creating lenny.
 705
 706         * config/debian/vars: update for lenny
 707
 708         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
 709         drop upload limitations, add release postgres user
 710
 711         * dak/process_new.py: support for automatically accepting and rejecting
 712         packages from proposed-updates holding queues via COMMENTS directory
 713         * cron.daily: automatically process COMMENTS-based approvals
 714         and rejections for proposed-updates holding queues
 715
 716         * dak/process_unchecked.py: add support for oldproposedupdates
 717         holding queue
 718
 719         * dak/control_suite.py: allow control-suite to work with etch-m68k
 720
 721         * dak/generate_releases.py: unlink old Release files before updating
 722         them if nlinks > 1 (ie, if two files used to be the same, maybe they
 723         shouldn't be when generate-releases is run)
 724
 725         * dak/generate_releases.py: add a couple of commented lines to make
 726         it easier to deal with point releases
 727
 728         * dak/make_overrides.py: generate overrides for !contrib udebs
 729
 730         * docs/README.stable-point-release: update docs for doing a
 731         point release
 732
 733 2007-06-18  Anthony Towns  <ajt@debian.org>
 734
 735         * daklib/logging.py: Set umask to not exclude group-writability
 736         so we don't get reminded at the start of each month. Thanks to
 737         Random J.
 738         * dak/override.py: More changes from Herr von Wifflepuck: warn
 739         if section of source is different to binary section; restore
 740         functionality on source-only overrides; croak if trying to set
 741         priority of a source override; never set priority of source
 742         overrides; correct typo in logging (s/priority/section/ at
 743         one place)
 744
 745         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
 746         * config/debian/cron.daily: auotmatically accept/reject
 747         oldstable-proposed-updates based on COMMENTS directory
 748
 749 2007-06-18  Anthony Towns  <ajt@debian.org>
 750
 751         * config/debian/apt.conf, config/debian/apt.conf.stable,
 752         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
 753         (sarge), support for oldstable-proposed-updates, dropping m68k
 754         from etch, creating etch-m68k suite, creating lenny.
 755
 756         * config/debian/vars: update for lenny
 757
 758         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
 759         drop upload limitations, add release postgres user
 760
 761         * dak/process_new.py: support for automatically accepting and rejecting
 762         packages from proposed-updates holding queues via COMMENTS directory
 763         * cron.daily: automatically process COMMENTS-based approvals
 764         and rejections for proposed-updates holding queues
 765
 766         * dak/process_unchecked.py: add support for oldproposedupdates
 767         holding queue
 768
 769         * dak/control_suite.py: allow control-suite to work with etch-m68k
 770
 771         * dak/generate_releases.py: unlink old Release files before updating
 772         them if nlinks > 1 (ie, if two files used to be the same, maybe they
 773         shouldn't be when generate-releases is run)
 774
 775         * dak/generate_releases.py: add a couple of commented lines to make
 776         it easier to deal with point releases
 777
 778         * dak/make_overrides.py: generate overrides for !contrib udebs
 779
 780         * docs/README.stable-point-release: update docs for doing a
 781         point release
 782
 783 2007-03-05  Anthony Towns  <ajt@debian.org>
 784
 785         * config/debian/dak.conf: update for 3.1r5.
 786         * scripts/debian/ssh-move: add ssh-move script from debbugs
 787         * config/debian/cron.unchecked: push version info to debbugs using
 788         ssh-move.
 789
 790 2007-03-05  Anthony Towns  <ajt@debian.org>
 791
 792         * config/debian/dak.conf: update for 3.1r5.
 793         * scripts/debian/ssh-move: add ssh-move script from debbugs
 794         * config/debian/cron.unchecked: push version info to debbugs using
 795         ssh-move.
 796
 797 2007-02-14  James Troup  <troup@ries.debian.org>
 798
 799         * docs/README.config: remove Dinstall::GroupOverrideFilename.
 800         * config/debian/dak.conf: likewise.
 801         * config/debian-non-US/dak.conf: likewise.
 802         * config/debian-security/dak.conf: likewise.
 803
 804         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
 805         experimental differently, just close the bugs and let version
 806         tracking sort it out.
 807          (nmu_p): remove entire class - now unused.
 808          (Upload.__init__): don't use nmu_p.
 809
 810 2007-02-14  James Troup  <troup@ries.debian.org>
 811
 812         * docs/README.config: remove Dinstall::GroupOverrideFilename.
 813         * config/debian/dak.conf: likewise.
 814         * config/debian-non-US/dak.conf: likewise.
 815         * config/debian-security/dak.conf: likewise.
 816
 817         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
 818         experimental differently, just close the bugs and let version
 819         tracking sort it out.
 820          (nmu_p): remove entire class - now unused.
 821          (Upload.__init__): don't use nmu_p.
 822
 823 2007-02-08  Anthony Towns  <ajt@debian.org>
 824
 825         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
 826         signing key.  Drop maximum index diffs down to 14.
 827
 828         * config/debian/apt.conf: add udeb support for non-free (testing,
 829         unstable) and experimental.
 830         * config/debian/dak.conf: likewise.
 831
 832         * dak/generate_releases.py (main): handle udebs in any component.
 833
 834         * daklib/queue.py (Upload.build_summaries): handle files without a
 835         'type' gracefully.
 836
 837         * dak/generate_releases.py (print_sha256_files): new function.
 838         (main): use it.
 839
 840         * dak/process_accepted.py (stable_install): fix name of template
 841         mail.
 842
 843         * dak/process_unchecked.py (is_stableupdate): fix invocation of
 844         database.get_suite_id().
 845
 846         * templates/process-new.bxa_notification: Update on request
 847         of/after discussion with BIS staff.
 848
 849         * scripts/debian/mkfilesindices: also handle proposed-updates.
 850
 851 2007-02-08  Ryan Murray  <rmurray@debian.org>
 852
 853         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
 854         group name for chgrp of mail archives.
 855
 856         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
 857         orig.tar.gz's by picking the first one by file id.
 858
 859         * dak/override.py (main): limit to binary overrides only for now.
 860         (usage): update to match.
 861
 862         * config/debian/cron.daily: track when we have the accepted lock
 863         and clean it up on exit if we have it.  Take/check the
 864         cron.unchecked lock just before traping to cleanup on exit.
 865         Remove potato override handling.  Remove any dangling symlinks in
 866         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
 867
 868         * config/debian/apt.conf: change default compression scheme for
 869         both Sources and Packages to gzip and bzip2 rather than
 870         uncompressed and gzip (Packages) and gzip (Sources).  Use old
 871         defaults for proposed-updates.
 872
 873         * dak/control_overrides.py (main): refuse to operate on
 874         untouchable suites.
 875
 876         * config/debian/pseudo-packages.maintainers: drop install,
 877         installation, boot-floppy, slink-cd, potato-cd and
 878         nonus.debian.org.  Update base.
 879         * config/debian/pseudo-packages.description: likewise.
 880
 881         * daklib/utils.py (re_srchasver): new regex.
 882         (parse_changes): use regex to split 'Source (Version)' style
 883         Source fields into 'source' and 'source-version'.
 884
 885         * config/debian/cron.daily: use $base instead of hardcoding path
 886         name.
 887
 888         * scripts/debian/mkfilesindices: source 'vars' file and use it's
 889         variables instead of hardcoding path names.
 890
 891         * config/debian/apt.conf: switch from /org to /srv.
 892         * config/debian/apt.conf.buildd: likewise.
 893         * config/debian/apt.conf.stable: likewise.
 894         * config/debian/cron.daily: likewise.
 895         * config/debian/cron.hourly: likewise.
 896         * config/debian/cron.monthly: likewise.
 897         * config/debian/cron.unchecked: likewise.
 898         * config/debian/cron.weekly: likewise.
 899         * config/debian/dak.conf: likewise.
 900         * config/debian/vars: likewise.
 901         * scripts/debian/mkfilesindices: likewise.
 902
 903 2007-02-08  James Troup  <james@nocrew.org>
 904
 905         * dak/process_unchecked.py (check_signed_by_key): new function to
 906         ensure .changes files are signed by an authorized uploader.
 907         (process_it): use it.
 908
 909         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
 910         to configure per suite/component/architecture binary upload
 911         restrictions.
 912
 913 2007-02-08  Anthony Towns  <ajt@debian.org>
 914
 915         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
 916         signing key.  Drop maximum index diffs down to 14.
 917
 918         * config/debian/apt.conf: add udeb support for non-free (testing,
 919         unstable) and experimental.
 920         * config/debian/dak.conf: likewise.
 921
 922         * dak/generate_releases.py (main): handle udebs in any component.
 923
 924         * daklib/queue.py (Upload.build_summaries): handle files without a
 925         'type' gracefully.
 926
 927         * dak/generate_releases.py (print_sha256_files): new function.
 928         (main): use it.
 929
 930         * dak/process_accepted.py (stable_install): fix name of template
 931         mail.
 932
 933         * dak/process_unchecked.py (is_stableupdate): fix invocation of
 934         database.get_suite_id().
 935
 936         * templates/process-new.bxa_notification: Update on request
 937         of/after discussion with BIS staff.
 938
 939         * scripts/debian/mkfilesindices: also handle proposed-updates.
 940
 941 2007-02-08  Ryan Murray  <rmurray@debian.org>
 942
 943         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
 944         group name for chgrp of mail archives.
 945
 946         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
 947         orig.tar.gz's by picking the first one by file id.
 948
 949         * dak/override.py (main): limit to binary overrides only for now.
 950         (usage): update to match.
 951
 952         * config/debian/cron.daily: track when we have the accepted lock
 953         and clean it up on exit if we have it.  Take/check the
 954         cron.unchecked lock just before traping to cleanup on exit.
 955         Remove potato override handling.  Remove any dangling symlinks in
 956         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
 957
 958         * config/debian/apt.conf: change default compression scheme for
 959         both Sources and Packages to gzip and bzip2 rather than
 960         uncompressed and gzip (Packages) and gzip (Sources).  Use old
 961         defaults for proposed-updates.
 962
 963         * dak/control_overrides.py (main): refuse to operate on
 964         untouchable suites.
 965
 966         * config/debian/pseudo-packages.maintainers: drop install,
 967         installation, boot-floppy, slink-cd, potato-cd and
 968         nonus.debian.org.  Update base.
 969         * config/debian/pseudo-packages.description: likewise.
 970
 971         * daklib/utils.py (re_srchasver): new regex.
 972         (parse_changes): use regex to split 'Source (Version)' style
 973         Source fields into 'source' and 'source-version'.
 974
 975         * config/debian/cron.daily: use $base instead of hardcoding path
 976         name.
 977
 978         * scripts/debian/mkfilesindices: source 'vars' file and use it's
 979         variables instead of hardcoding path names.
 980
 981         * config/debian/apt.conf: switch from /org to /srv.
 982         * config/debian/apt.conf.buildd: likewise.
 983         * config/debian/apt.conf.stable: likewise.
 984         * config/debian/cron.daily: likewise.
 985         * config/debian/cron.hourly: likewise.
 986         * config/debian/cron.monthly: likewise.
 987         * config/debian/cron.unchecked: likewise.
 988         * config/debian/cron.weekly: likewise.
 989         * config/debian/dak.conf: likewise.
 990         * config/debian/vars: likewise.
 991         * scripts/debian/mkfilesindices: likewise.
 992
 993 2007-02-08  James Troup  <james@nocrew.org>
 994
 995         * dak/process_unchecked.py (check_signed_by_key): new function to
 996         ensure .changes files are signed by an authorized uploader.
 997         (process_it): use it.
 998
 999         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
1000         to configure per suite/component/architecture binary upload
1001         restrictions.
1002
1003 2006-10-09  James Troup  <james.troup@canonical.com>
1004
1005         * dak/process_unchecked.py (check_timestamps): change match to
1006         search as recent versions of python-apt prefix the string with 'E: '.
1007
1008 2006-10-09  James Troup  <james.troup@canonical.com>
1009
1010         * dak/process_unchecked.py (check_timestamps): change match to
1011         search as recent versions of python-apt prefix the string with 'E: '.
1012
1013 2006-06-26  Ryan Murray  <rmurray@debian.org>
1014
1015         * dak/process_unchecked.py (check_files): strip optional source version
1016         from Source: field in changes file, and ensure what is left is a valid
1017         package name.
1018
1019 2006-06-26  Ryan Murray  <rmurray@debian.org>
1020
1021         * dak/process_unchecked.py (check_files): strip optional source version
1022         from Source: field in changes file, and ensure what is left is a valid
1023         package name.
1024
1025 2006-06-23  Ryan Murray  <rmurray@debian.org>
1026
1027         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1028         queue for source.
1029
1030 2006-06-23  Ryan Murray  <rmurray@debian.org>
1031
1032         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1033         queue for source.
1034
1035 2006-06-18  Ryan Murray  <rmurray@debian.org>
1036
1037         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1038         the log, too.
1039
1040         * dak/process_unchecked.py (check_files): only check embargoed and
1041         unembargoed queues if the keys are set.
1042
1043         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1044         and bzip2 for etch.
1045
1046 2006-06-18  Ryan Murray  <rmurray@debian.org>
1047
1048         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1049         the log, too.
1050
1051         * dak/process_unchecked.py (check_files): only check embargoed and
1052         unembargoed queues if the keys are set.
1053
1054         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1055         and bzip2 for etch.
1056
1057 2006-06-16  James Troup  <james@nocrew.org>
1058
1059         * dak/dak.py (init): add new-security-install.
1060
1061         * dak/new_security_install.py: cleanups and adapt for new naming
1062         scheme and other changes.
1063
1064 2006-06-16  Anthony Towns  <ajt@debian.org>
1065
1066         * dak/new_security_install.py: initial version imported from
1067         klecker.
1068
1069 2006-06-16  James Troup  <james@nocrew.org>
1070
1071         [Merged changes from klecker - original author unknown.]
1072
1073         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1074
1075         * dak/security_install.py (do_upload): fix check for oldstable and
1076         upload file list handling.
1077
1078         * dak/process_unchecked.py (check_files): update "check for
1079         source" code to also look in Embargoed and Unembargoed queues.
1080         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1081
1082         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1083
1084         * config/debian-security/vars (disembargo): add.
1085
1086         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1087         update.
1088         (Process-Unchecked::AcceptedLockFile): add.
1089         (Suite::Testing): clean up Version and Description.
1090         (SuiteMappings): add silent map from etch-secure to testing.
1091
1092         * config/debian-security/cron.unchecked: add support for
1093         disembargoed queues.
1094
1095         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1096         files too.
1097
1098         * config/debian-security/apt.conf: add amd64 to architectures for
1099         testing-security.
1100
1101 2006-06-11  James Troup  <troup@spohr.debian.org>
1102
1103         * config/debian/cron.daily: invoke process-accepted not
1104         process-unchecked.
1105
1106         * config/debian/vars (scriptsdir): new variable.
1107         * config/debian/cron.daily: use it.
1108
1109         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1110         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1111         make-maintainers' invocation to look in $configdir for
1112         pseudo-packages.maintainers.
1113
1114         * daklib/queue.py (Upload.do_reject): use correct name for
1115         rejection template.
1116
1117 2006-06-11  James Troup  <james@nocrew.org>
1118
1119         * dak/override.py (main): temporarily add content of old X-Katie
1120         header back as the PTS apparently filters on it.
1121         * dak/process_accepted.py (main): likewise.
1122         * dak/process_new.py (main): likewise.
1123         * dak/process_unchecked.py (main): likewise.
1124         * dak/reject_proposed_updates.py (main): likewise.
1125         * dak/rm.py (main): likewise.
1126         * daklib/queue.py (Upload.do_reject): likewise.
1127
1128         * config/debian/cron.unchecked: set -u to error out on undefined
1129         variables.  Preset LOCKDAILY to "" accordingly.
1130         * config/debian/cron.hourly: likewise.
1131         * config/debian/cron.monthly: likewise.
1132         * config/debian/cron.weekly: likewise.
1133
1134         * config/debian/vars (configdir): add new variable pointing to
1135         this directory.
1136
1137         * config/debian/cron.daily: use $configdir inplace of $masterdir
1138         when that's what we mean, and don't cd into $masterdir just to run
1139         dak scripts as we don't need to do that anymore.
1140         * config/debian/cron.hourly: likewise.
1141         * config/debian/cron.unchecked: likewise.
1142         * config/debian/cron.weekly: likewise.
1143
1144         * config/debian/dak.conf
1145         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1146         user back to list of known users as it's non-trivial to entirely
1147         change the owner of a database with postgresql 7.4.
1148
1149         * daklib/queue.py (Upload.source_exists): use string object
1150         methods rather than string module.
1151         (Upload.get_anyversion): likewise.
1152
1153         * daklib/utils.py (validate_changes_file_arg): update filename
1154         slicing to cope with new .dak filenames.
1155
1156         * dak/ls.py (main): add back 'heidi' as a valid argument for
1157         -f/--format as people are using it in scripts and breaking that
1158         without warning seems rude.
1159
1160 2006-05-21  James Troup  <james@nocrew.org>
1161
1162         * dak/rm.py (main): use string .isdigit() rather than
1163         utils.str_isnum().
1164         * dak/process_new.py (edit_overrides): likewise.
1165
1166         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1167         string import.
1168
1169 2006-05-21  James Troup  <james@nocrew.org>
1170
1171         * dak/check_archive.py (check_indices_files_exist): use list
1172         comprehension instead of map().  No longer need to import
1173         deprecated string module as a side-effect.
1174         * dak/check_overrides.py (process): likewise.
1175         (main): likewise.
1176         * dak/cruft_report.py (do_obsolete_source): likewise.
1177         (main): likewise.
1178         * dak/ls.py (main): likewise.
1179         * dak/make_suite_file_list.py (write_filelists): likewise.
1180         * dak/process_accepted.py (stable_install): likewise.
1181         * dak/rm.py (main): likewise.
1182         * dak/stats.py (number_of_packages): likewise.
1183         * daklib/logging.py (Logger.log): likewise.
1184         * daklib/queue.py (Upload.source_exists): likewise.
1185         (Upload.cross_suite_version_check): likewise.
1186         * daklib/utils.py (parse_args): likewise.
1187
1188 2006-05-21  James Troup  <james@nocrew.org>
1189
1190         * daklib/utils.py (process_gpgv_output): new function, split out
1191         of check_signature().
1192         (check_signature): adapt accordingly.
1193         (retrieve_key): new function that will try to retrieve the key
1194         that signed a given file from a keyserver.
1195         (check_signature): add 'autofetch' argument that if not set
1196         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1197         If 'autofetch' is true, invoke retrieve_key().
1198
1199         * docs/README.config: document Dinstall::KeyAutoFetch and
1200         Dinstall:KeyServer.
1201
1202 2006-05-20  James Troup  <james@nocrew.org>
1203
1204         * dak/find_null_maintainers.py (main):
1205         s/createtimestamp/createTimestamp/ to make things work with modern
1206         slapd.
1207
1208         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1209         Stable::Version and Stable::Description for 3.1r2.
1210
1211         * config/debian-non-US/dak.conf: sync with klecker - update
1212         version number of 3.0 and MoreInfoURL.
1213
1214         * docs/README.stable-point-release: Add notes about updating
1215         dak.conf and Reject-Proposed-Updates section in particular.
1216         s/woody/stable/.  Also need to update README.html.
1217
1218         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1219
1220         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1221
1222 2006-05-20  Ryan Murray  <rmurray@debian.org>
1223
1224         * scripts/debian/update-ftpstats: new script to update daily
1225         architecture size graph data.
1226
1227         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1228         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1229         there.
1230
1231         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1232         before we finish.  Don't push to merkel.
1233
1234         * dak/process_unchecked.py (check_changes): Also look in
1235         ProposedUpdates queue dir.
1236         (check_files): likewise.
1237
1238 2006-05-20  Anthony Towns  <ajt@debian.org>
1239
1240         * scripts/debian/mkfilesindices: new script to generate file
1241         indices used for partial mirroring.
1242
1243         * config/debian/cron.daily: add progress timestamps.
1244
1245         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1246         amd64 to testing, unstable and experimental.  Drop sh from
1247         experimental.  Move Experimental to dists/experimental.  Add
1248         Dir::ProposedUpdates.  Add Architectures::amd64.
1249
1250         * config/debian/apt.conf: add amd64 to testing, unstable and
1251         experimental.  Drop uncompressed Packages files from testing. Drop
1252         sh from experimental.  Move experimental to dists/experimental/.
1253
1254         * config/debian/vars (archs): add amd64.
1255
1256         * dak/process_unchecked.py (action): Add support for
1257         proposed-updates approval queue.
1258         (is_stableupdate): new function - checks if the upload is targeted
1259         at proposed-updates.
1260         (do_stableupdate): likewise - moves upload to proposed-updates
1261         holding area.
1262
1263         * dak/process_new.py (do_new): warn if original or new target
1264         suite are invalid.
1265
1266         * dak/generate_releases.py (print_md5sha_files): less whitespace
1267         between the hash and size.
1268
1269         * dak/generate_index_diffs.py (genchanges): don't say we're not
1270         doing anything.  Better formatting of other messages.
1271         (main): don't skip experimental and remove some 'doing stuff'
1272         prints.
1273
1274 2006-05-18  James Troup  <james@nocrew.org>
1275
1276         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1277         query.
1278
1279         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1280         docstrings, untabify, don't shadow builtins, lowercase non-global
1281         variable names, spaces after commas.  Also bail if given any
1282         arguments since we don't accept any.
1283         * dak/init_db.py: likewise.  Also split large main() into
1284         subfunctions and rename get() to sql_get().
1285
1286         * dak/init_db.py (main): check returned value from
1287         database.get_archive_id().
1288
1289         * dak/dak.py: renamed from shell.py.  Update to support new source
1290         layout.  Created init() and usage() functions.  Various
1291         pylint-inspired cleanups.  Use daklib utils.warn() and
1292         utils.fubar().  Change 'functionality' variable to only have
1293         (command, description) and always invoke main() when running the
1294         module.  Also support -h.
1295
1296 2006-05-17  James Troup  <james@nocrew.org>
1297
1298         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1299         imports of and calls to daklib modules.  Change script name
1300         everywhere, i.e. in output, mails, comments and configuration tree
1301         + filenames.  Also update references to other renamed scripts,
1302         classes and templates.  Use '.dak' instead of '.katie' for the
1303         queue info storage files.
1304         (Renamed from tea)
1305         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1306         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1307         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1308         * dak/clean_queues.py: likewise.  (Renamed from shania)
1309         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1310         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1311         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1312         * dak/control_suite.py: likewise.  (Renamed from heidi)
1313         * dak/cruft_report.py: likewise.  (Renamed from rene)
1314         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1315         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1316         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1317         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1318         * dak/import_archive.py: likewise.  (Renamed from neve)
1319         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1320         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1321         * dak/init_db.py: likewise. (Renamed from alyson)
1322         * dak/init_dirs.py: likewise. (Renamed from rose)
1323         * dak/ls.py: likewise. (Renamed from madison)
1324         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1325         * dak/make_overrides.py: likewise.  (Renamed from denise)
1326         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1327         * dak/mirror_split.py: likewise.  (Renamed from billie)
1328         * dak/override.py: likewise.  (Renamed from alicia)
1329         * dak/poolize.py: likewise.  (Renamed from catherine)
1330         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1331         * dak/process_new.py: likewise.  (Renamed from lisa)
1332         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1333         * dak/queue_report.py: likewise.  (Renamed from helena)
1334         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1335         * dak/rm.py: likewise.  (Renamed from melanie)
1336         * dak/security_install.py: likewise.  (Renamed from amber)
1337         * dak/split_done.py: likewise.  (Renamed from nina)
1338         * dak/stats.py: likewise.  (Renamed from saffron)
1339         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1340         * daklib/database.py: likewise.  (Renamed from db_access)
1341         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1342         * daklib/utils.py: likewise.
1343
1344         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1345         doesn't need to notify anyone" string.
1346         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1347
1348         * dak/process_accepted.py (init): drop -V/--version argument.
1349         * dak/process_new.py (init): likewise.
1350         * dak/process_unchecked.py (init): likewise.
1351         * dak/reject_proposed_updates.py (init): likewise
1352
1353         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1354
1355         * dak/stats.py: in usage() output change STAT to MODE.
1356
1357 2006-05-15  James Troup  <james@nocrew.org>
1358
1359         * dak/queue_report.py: remove unused encodings imports.
1360
1361         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1362         imports.  Initalize 'Cnf' as a global.
1363         (BillieDB._internal_recurse): fix 'util.' typo.
1364
1365         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1366         commented out time check for LDAP search.
1367
1368 2005-12-16  Ryan Murray  <rmurray@debian.org>
1369
1370         * halle: add support for udebs
1371         * kelly: stable_install: add support for binNMU versions
1372
1373 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1374
1375         * katie.py: Move accept() autobuilding support into separate function
1376         (queue_build), and generalise to build different queues
1377
1378         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1379
1380         * jennifer: Initial support for enabling embargo handling with the
1381         Dinstall::SecurityQueueHandling option.
1382         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1383         functions.
1384
1385         * katie.conf-security: Include embargo options
1386         * katie.conf-security: Add Lock dir
1387         * init_pool.sql-security: Create disembargo table
1388         * init_pool.sql-security: Add constraints for disembargo table
1389
1390 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1391
1392         * Merge of changes from klecker, by various people
1393
1394         * amber: special casing for not passing on amd64 and oldstable updates
1395         * amber: security mirror triggering
1396         * templates/amber.advisory: updated advisory structure
1397         * apt.conf.buildd-security: update for sarge's release
1398         * apt.conf-security: update for sarge's release
1399         * cron.buildd-security: generalise suite support, update for sarge's release
1400         * cron.daily-security: update for sarge's release, add udeb support
1401         * vars-security: update for sarge's release
1402         * katie.conf-security: update for sarge's release, add amd64 support,
1403         update signing key
1404
1405         * docs/README.names, docs/README.quotes: include the additions
1406
1407 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1408
1409         * Changed accepted_autobuild to queue_build everywhere.
1410         * Add a queue table.
1411         * Add a "queue" field in the queue_build table (currently always 0)
1412
1413         * jennifer: Restructure to make it easier to support special
1414         purpose queues between unchecked and accepted.
1415
1416 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1417
1418         * Finishing merge of changes from spohr, by various people still
1419
1420         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1421         works
1422         * jennifer: Re-enable .deb ar format checking
1423         * katie.py: Convert to +bX binNMU special casing
1424         * rhona: Add some debug output when deleting binaries
1425         * cron.daily: Add emilie
1426         * cron.unchecked: Add lock files
1427
1428 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1429
1430         * Merge of changes from spohr, by various people.
1431
1432         * tiffani: new script to do patches to Packages, Sources and Contents
1433         files for quicker downloads.
1434         * ziyi: update to authenticate tiffani generated files
1435
1436         * dak: new script to provide a single binary with less arbitrary names
1437         for access to dak functionality.
1438
1439         * cindy: script implemented
1440
1441         * saffron: cope with suites that don't have a Priority specified
1442         * heidi: use get_suite_id()
1443         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1444         * denise: remove override munging for testing (now done by cindy)
1445         * helena: expanded help, added new, sort and age options, and fancy headers
1446         * jennifer: require description, add a reject for missing dsc file
1447         * jennifer: change lock file
1448         * kelly: propogation support
1449         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1450         * madison: don't say "dep-retry"
1451         * melanie: bug fix in output (missing %)
1452         * natalie: cope with maintainer_override == None; add type_id for overrides
1453         * nina: use mtime, not ctime
1454
1455         * katie.py: propogation bug fixes
1456         * logging.py: add debugging support, use | as the logfile separator
1457
1458         * katie.conf: updated signing key (4F368D5D)
1459         * katie.conf: changed lockfile to dinstall.lock
1460         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1461         * katie.conf: added tiffani, cindy support
1462         * katie.conf: updated to match 3.0r6 release
1463         * katie.conf: updated to match sarge's release
1464
1465         * apt.conf: update for sarge's release
1466         * apt.conf.stable: update for sarge's release
1467         * apt.conf: bump daily max Contents change to 25MB from 12MB
1468
1469         * cron.daily: add accepted lock and invoke cindy
1470         * cron.daily: add daily.lock
1471         * cron.daily: invoke tiffani
1472         * cron.daily: rebuild accepted buildd stuff
1473         * cron.daily: save rene-daily output on the web site
1474         * cron.daily: disable billie
1475         * cron.daily: add stats pr0n
1476
1477         * cron.hourly: invoke helena
1478
1479         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1480         * vars: add lockdir, add etch to copyoverrides
1481         * Makefile: add -Ipostgresql/server to CXXFLAGS
1482
1483         * docs/: added README.quotes
1484         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1485         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1486
1487         * TODO: correct spelling of "conflicts"
1488
1489 2005-05-28  James Troup  <james@nocrew.org>
1490
1491         * helena (process_changes_files): use MTIME rather than CTIME (the
1492         C's not for 'creation', stupid).
1493         * lisa (sort_changes): likewise.
1494
1495         * jennifer (check_distributions): use has_key rather than an 'in'
1496         test which doesn't work with python2.1.  [Probably by AJ]
1497
1498 2005-03-19  James Troup  <james@nocrew.org>
1499
1500         * rene (main): use Suite::<suite>::UdebComponents to determine
1501         what components have udebs rather than assuming only 'main' does.
1502
1503 2005-03-18  James Troup  <james@nocrew.org>
1504
1505         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1506         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1507         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1508         <andrew@ubuntu.com>.
1509
1510 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1511
1512         * helena: add -n/--new HTML output option and improved sorting
1513         options.
1514
1515 2005-03-06  Ryan Murray  <rmurray@debian.org>
1516
1517         * shania(main): use Cnf::Dir::Reject instead of REJECT
1518
1519 2005-02-08  James Troup  <james@nocrew.org>
1520
1521         * rene (main): add partial NBS support by checking that binary
1522         packages are built by their real parent and not some random
1523         stranger.
1524         (do_partial_nbs): likewise.
1525
1526 2005-01-18  James Troup  <james@nocrew.org>
1527
1528         * katie.py (Katie.build_summaries): avoid leaking file handle when
1529         extracting package description.
1530         (Katie.force_reject): remember and close each file descriptor we
1531         use.
1532         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1533         s/reason_file/reason_fd/ because it's a file descriptor.
1534         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1535         invoking apt_pkg.md5sum().
1536
1537         * jennifer (check_deb_ar): new function: sanity check the ar
1538         contents of a .deb.
1539         (check_files): use it.
1540         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1541         found.
1542         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1543
1544 2005-01-14  Anthony Towns  <ajt@debian.org>
1545
1546         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1547
1548         * propup stuff (thanks to Andreas Barth)
1549         * katie.conf: add stable MustBeOlderThan testing, add -security
1550           propup
1551         * jennifer: set distribution-version in .katie if propup may be needed
1552         * katie.py: add propogation to cross_suite_version_check
1553
1554 2004-11-27  James Troup  <james@nocrew.org>
1555
1556         * nina: new script to split monolithic queue/done into date-based
1557         hierarchy.
1558
1559         * rene (usage): document -s/--suite.
1560         (add_nbs): use .setdefault().
1561         (do_anais): likewise.
1562         (do_nbs): don't set a string to "" and then += it.
1563         (do_obsolete_source): new function - looks for obsolete source
1564         packages (i.e source packages whose binary packages are ALL a)
1565         claimed by someone else and b) newer when built from the other
1566         source package).
1567         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1568         and 'full' check modes.  Check for obsolete source packages.
1569         linux-wlan-ng has been fixed - remove hideous bodge.
1570
1571         * jennifer (check_distributions): support 'reject' suite map type.
1572
1573         * utils.py (validate_changes_file_arg): s/file/filename/.
1574         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1575         and return the .changes filename regardless.
1576         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1577         (re_no_revision): don't escape '-', it's not a special character.
1578         s/\*/+/ as there must be at least one non-dash character after the
1579         dash in a revision.  Thanks to Christian Reis for noticing both of
1580         these.
1581
1582         * ashley (main): pass require_changes=-1 to
1583         utils.validate_changes_file_arg().
1584
1585         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1586         Team <debian-kernel@lists.debian.org>'.
1587
1588         * katie.py (Katie.in_override_p): fix .startswith() usage.
1589
1590         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1591         (Lauren::MoreInfoURL): update to 3.0r3.
1592         (Suite::Stable::Version): likewise.
1593         (Suite::Stable::Description): likewise.
1594
1595         * cron.daily: disable automatic task override generation.
1596
1597         * cindy (process): restrict "find all packages" queries by
1598         component.  Respect Options["No-Action"].
1599         (main): add -n/--no-action support.  Only run on unstable.  Rename
1600         type to otype (pychecker).
1601
1602 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1603
1604         * katie.conf (Billie::BasicTrees): add all architectures.
1605         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1606         'everything'.
1607
1608         * cron.daily: Update a 'current' symlink when creating the
1609         post-daily-cron-job database backup to aid mirroring to merkel.
1610         Run billie.
1611
1612         * billie (BillieTarget.poolish_match): handle .udeb too.
1613
1614 2004-10-13  Ryan Murray  <rmurray@debian.org>
1615
1616         * amber (do_upload): Sort changes files in "katie" order so that
1617           source always arrives before binary-only rebuilds
1618
1619 2004-10-05  James Troup  <james@nocrew.org>
1620
1621         * jennifer (check_dsc): correct reject message on invalid
1622         Maintainer field.
1623
1624 2004-09-20  James Troup  <james@nocrew.org>
1625
1626         * alicia: remove unused 'pwd' import.
1627
1628         * tea (check_override): underline suite name in output properly.
1629
1630         * rene (main): read a compressed Packages file.
1631         * tea (validate_packages): likewise.
1632
1633         * katie.py (re_fdnic): add 'r' prefix.
1634         (re_bin_only_nmu_of_mu): likewise.
1635         (re_bin_only_nmu_of_nmu): likewise.
1636
1637         * madison (main): retrieve component information too and display
1638         it if it's not 'main'.
1639         * melanie (reverse_depends_check): likewise.
1640
1641         * utils.py (pp_dep): renamed...
1642         (pp_deps): ... to this.
1643         * jeri (check_dep): update calls to utils.pp_deps().
1644         * melanie (reverse_depends_check): likewise.
1645
1646         * jennifer (check_changes): move initalization of email variables
1647         from here...
1648         (process_it): ...to here as we no longer always run
1649         check_changes().  Don't bother to initialize
1650         changes["architecture"].
1651
1652         * denise (list): renamed to...
1653         (do_list): ...this to avoid name clash with builtin 'list'.
1654         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1655         for dictionaries.
1656         (main): Likewise for name clash avoidance and also
1657         s/override_type/suffix/.  Adjust call to do_list().
1658
1659 2004-09-01  Ryan Murray  <rmurray@debian.org>
1660
1661         * tea (check_files): check the pool/ directory instead of dists/
1662
1663 2004-08-04  James Troup  <james@nocrew.org>
1664
1665         * jenna (cleanup): use .setdefault() for dictionaries.
1666         (write_filelists): likewise.
1667
1668         (write_filelists): Use utils.split_args() not split() to split
1669         command line arguments.
1670         (stable_dislocation_p): likewise.
1671
1672         (write_filelists): Add support for mapping side of suite-based
1673         "Arch: all mapping".
1674         (do_da_do_da): ensure that if we're not doing all suites that we
1675         process enough to be able correct map arch: all packages.
1676
1677         * utils.py (cant_open_exc): correct exception string,
1678         s/read/open/, s/.$//.
1679
1680         * templates/amber.advisory: update to match reality a little
1681         better.
1682
1683         * melanie (reverse_depends_check): read Packages.gz rather than
1684         Packages.
1685
1686         * jennifer (check_files): check for unknown component before
1687         checking for NEWness.
1688
1689         * katie.py (Katie.in_override_p): use .startswith in favour of a
1690         slice.
1691
1692         * docs/melanie.1.sgml: document -R/--rdep-check.
1693
1694 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1695
1696         * billie (main): Make the verbatim lists include all the README
1697           elements.
1698         * docs/README.names: Add billie in (correcting oversight)
1699
1700 2004-07-01  James Troup  <james@nocrew.org>
1701
1702         * emilie (main): handle woody's case-sensitive python-ldap,
1703         s/keyfingerprint/keyFingerPrint/.
1704
1705 2004-06-25  James Troup  <james@nocrew.org>
1706
1707         * debian/control (Depends): add dpkg-dev since jennifer uses
1708         dpkg-source.
1709
1710 2004-06-24  James Troup  <james@nocrew.org>
1711
1712         * melanie (main): s/file/temp_file/ and close file handle before
1713         removing the temporary file.
1714         (main): don't warn about needing a --carbon-copy if in no-action
1715         mode.
1716
1717         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1718         (main): likewise.
1719
1720         * test/006/test.py (main): check bracketed email-only form.
1721
1722         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1723         email-only, strip the brackets so we don't end up with
1724         <<james@nocrew.org>>.
1725
1726 2004-06-20  James Troup  <james@nocrew.org>
1727
1728         * jennifer (process_it): only run check_changes() if
1729         check_signature() returns something.  (Likewise)
1730
1731         * utils.py (changes_compare): if there's no changes["version"] use
1732         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1733
1734 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1735
1736         * jeri (pp_dep): moved from here to ...
1737         * utils.py (pp_dep): here.
1738
1739         * melanie (main): add reverse dependency checking.
1740
1741 2004-06-17  James Troup  <james@nocrew.org>
1742
1743         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1744         * tea (check_dscs): likewise.
1745
1746         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1747         change from boolean to a variable with 3 possible values, 0 and 1
1748         as before, -1 means don't require a signature.  Makes
1749         parse_changes() useful for parsing arbitary RFC822-style files,
1750         e.g. 'Release' files.
1751         (check_signature): add support for detached signatures by passing
1752         the files the signature is for as an optional third argument.
1753         s/filename/sig_filename/g.  Add a fourth optional argument to
1754         choose the keyring(s) to use.  Don't os.path.basename() the
1755         sig_filename before checking it for taint.
1756         (re_taint_free): allow '/'.
1757
1758 2004-06-11  James Troup  <james@nocrew.org>
1759
1760         * tea (check_files): make override.unreadable optional.
1761         (validate_sources): close the Sources file handle.
1762
1763         * docs/README.first: clarify that 'alyson' and running
1764         add_constraints.sql by hand is something you only want to do if
1765         you're not running 'neve'.
1766
1767         * docs/README.config (Location::$LOCATION::Suites): document.
1768
1769         * db_access.py (do_query): also print out the result of the query.
1770
1771 2004-06-10  James Troup  <james@nocrew.org>
1772
1773         * katie.py (Katie.cross_suite_version_check): post-woody versions
1774         of python-apt's apt_pkg.VersionCompare() function apparently
1775         returns variable integers for less than or greater than results -
1776         update our result checking to match.
1777         * jenna (resolve_arch_all_vs_any): likewise.
1778         * charisma (main): likewise.
1779
1780 2004-06-09  James Troup  <james@nocrew.org>
1781
1782         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1783         valid_dsc_p and don't run check_source() if check_dsc() failed.
1784         (check_dsc): on fatal failures return 0 so check_source() isn't
1785         run (since it makes fatal assumptions about the presence of
1786         mandatory .dsc fields).
1787         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1788
1789 2004-05-07  James Troup  <james@nocrew.org>
1790
1791         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1792         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1793
1794         * katie.conf (Dir::Override): remove duplicate definition.
1795
1796         * neve (get_or_set_files_id): add an always-NULL last_used column
1797         to output.
1798
1799 2004-04-27  James Troup  <james@nocrew.org>
1800
1801         * apt.conf-security (tree "dists/stable/updates"): add
1802         ExtraOverride - noticed by Joey Hess (#246050).
1803         (tree "dists/testing/updates"): likewise.
1804
1805 2004-04-20  James Troup  <james@nocrew.org>
1806
1807         * jennifer (check_files): check for existing .changes or .katie
1808         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1809         directories.
1810
1811 2004-04-19  James Troup  <james@nocrew.org>
1812
1813         * jennifer (check_source): handle failure to remove the temporary
1814          directory (used for source tree extraction) better, specifically:
1815          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1816          and try again and if that works, REJECT the package.
1817
1818 2004-04-17  James Troup  <james@nocrew.org>
1819
1820         * docs/madison.1.sgml: document -b/--binary-type,
1821         -g/--greaterorequal and -G/--greaterthan.
1822
1823         * madison (usage): -b/--binary-type only takes a single argument.
1824         Document -g/--greaterorequal and -G/--greaterthan.
1825         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1826
1827 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1828
1829         * billie: Cleaned up a load of comments, added /README.non-US to
1830           the verbatim matches list.
1831
1832 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1833
1834         * utils.py (size_type): Make it use real binary megabytes and
1835           kilobytes, instead of the marketing terms used before.
1836
1837 2004-04-07  James Troup  <james@nocrew.org>
1838
1839         * katie.py (Katie.check_dsc_against_db): in the case we're
1840         ignoring an identical-to-existing orig.tar.gz remember the path to
1841         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1842         location.path too to be able to do so.
1843
1844 2004-04-03  James Troup  <james@nocrew.org>
1845
1846         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1847         needed for new utils.rfc2047_encode() function.
1848
1849         * utils.py (re_parse_maintainer): allow whitespace inside the
1850         email address.
1851         (Error): new exception base class.
1852         (ParseMaintError): new exception class.
1853         (force_to_utf8): new function.
1854         (rfc2047_encode): likewise.
1855         (fix_maintainer): rework.  use force_to_utf8() to force name and
1856         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1857         return an rfc2047 value.  Validate the address to catch missing
1858         email addresses and (some) broken ones.
1859
1860         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1861         by adopting foo2047 return value.
1862         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1863         mandatory changes fields.  Promote changes and maintainer822 to
1864         mandatory fields.
1865         (Katie.update_subst): default maintainer2047 rather than
1866         maintainer822.  User foo2047 rather than foo822 when setting
1867         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1868
1869         * jennifer (check_changes): set default changes["maintainer2047"]
1870         and changes["changedby2047"] values rather than their 822
1871         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1872         to new utils.fix_maintainer() - reject on exception and adopt
1873         foo2047 return value.
1874         (check_dsc): if a mandatory field is missing don't do any further
1875         checks and as a result reduce paranoia about dsc[var] existence.
1876         Validate the maintainer field by calling new
1877         utils.fix_maintainer().
1878
1879         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1880         changes fields.  Promote maintainer822 to a mandatory changes
1881         field.  add "pool name" to files fields.
1882
1883         * test/006/test.py: new file - tests for new
1884         utils.fix_maintainer().
1885
1886 2004-04-01  James Troup  <james@nocrew.org>
1887
1888         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1889
1890         * jennifer (get_changelog_versions): create a symlink mirror of
1891         the source files in the temporary directory.
1892         (check_source): if check_dsc_against_db() couldn't find the
1893         orig.tar.gz bail out.
1894
1895         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1896         part of the upload store the path to it in pkg.orig_tar_gz and if
1897         it can't be found set pkg.orig_tar_gz to -1.
1898
1899         Explicitly return the second value as None in the (usual) case
1900         where we don't have to reprocess.  Remove obsolete diagnostic
1901         logs.
1902
1903         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1904
1905         * utils.py (temp_filename): new helper function that wraps around
1906         tempfile.mktemp().
1907
1908         * katie.py (Katie.do_reject): use it and don't import tempfile.
1909         * lisa (prod_maintainer): likewise.
1910         (edit_note): likewise.
1911         (edit_new): likewise.
1912         * lauren (reject): likewise.
1913         * melanie (main): likewise.
1914         * neve (do_sources): likewise.
1915         * rene (main): likewise.
1916         * tea (validate_sources): likewise.
1917
1918 2004-03-31  James Troup  <james@nocrew.org>
1919
1920         * tea (validate_sources): remove unused 's' temporary variable.
1921
1922 2004-03-15  James Troup  <james@nocrew.org>
1923
1924         * jennifer (check_dsc): check changes["architecture"] for
1925         source before we do anything else.
1926
1927 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1928
1929         * billie: Added
1930         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1931
1932 2004-03-12  James Troup  <james@nocrew.org>
1933
1934         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1935
1936         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1937
1938         * katie.py (Katie.accept): add support for DebBugs Version
1939         Tracking by writing out .versions (generated in jennifer's
1940         get_changelog_versions()) and .debinfo (mapping of binary ->
1941         source) files.
1942
1943         * ashley (main): add dsc["bts changelog"].
1944
1945         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1946
1947         * jennifer (check_diff): obsoleted by check_source(), removed.
1948         (check_source): new function: create a temporary directory and
1949         move into it and call get_changelog_versions().
1950         (get_changelog_versions): new function: extract the source package
1951         and optionally parse debian/changelog to obtain the version
1952         history for the BTS.
1953         (process_it): call check_source() rather than check_diff().
1954
1955 2004-03-08  James Troup  <james@nocrew.org>
1956
1957         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1958         listbar" rather than "if listbar.count(varfoo)"' change on
1959         2004-02-24.
1960
1961 2004-03-05  James Troup  <james@nocrew.org>
1962
1963         * alicia (main): don't warn about not closing bugs - we don't
1964         manage overrides through the BTS.
1965
1966 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1967
1968         * docs/README.config: lots of updates and corrections.
1969         * docs/README.first: likewise.
1970
1971         * docs/README.config: drop unused Dir::Queue::Root.
1972         * katie.conf-non-US: likewise.
1973         * katie.conf: likewise.
1974         * katie.conf-security: likewise.
1975
1976 2004-02-27  James Troup  <james@nocrew.org>
1977
1978         * rose (process_tree): use 'if var in [ list ]' rather than long
1979         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1980         Michlmayr.
1981
1982         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1983         suggested by Martin Michlmayr.
1984         * catherine (poolize): likewise.
1985         * charisma (main): likewise.
1986         * halle (check_changes): likewise.
1987         * heidi (main): likewise.
1988         (process_file): likewise.
1989         * kelly (install): likewise.
1990         (stable_install): likewise.
1991         * utils.py (fix_maintainer): likewise.
1992
1993         * apt.conf: add support for debian-installer in testing-proposed-updates.
1994         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1995         add - set to main.
1996
1997         * mkmaintainers: add "-T15" option to wget of non-US packages file
1998         so that we don't hang cron.daily if non-US is down.
1999
2000         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
2001
2002         * templates/jennifer.bug-close: add Source and Source-Version
2003         pseudo-headers that may be used for BTS Version Tracking someday
2004         [ajt@].
2005
2006         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2007         (main): likewise.
2008
2009         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2010
2011 2004-02-25  James Troup  <james@nocrew.org>
2012
2013         * katie.conf (SuiteMappings): don't map testing-security to
2014         proposed-updates.
2015
2016 2004-02-24  James Troup  <james@nocrew.org>
2017
2018         * katie.py (Katie.__init__): remove unused 'values' field.
2019
2020         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2021         rather than 's.count(c) > 0'.
2022
2023         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2024         rather than "if listbar.count(varfoo)".
2025         * halle (check_joey): likewise.
2026         * jeri (check_joey): likewise.
2027         * lisa (edit_index): likewise.
2028         * jenna (stable_dislocation_p): likewise.
2029
2030         * jennifer (main): remove unused global 'nmu'.
2031
2032 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2033
2034         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2035           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2036           the dak tools close bugs.
2037
2038 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2039
2040         * katie.conf (Alicia): Added an Alicia section with email address
2041         * templates/alicia.bug-close: Added
2042         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2043         * alicia (main): Added a -d/--done argument
2044
2045 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2046
2047         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2048
2049 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2050
2051         * lisa (prod_maintainer): Added function to prod the maintainer without
2052           accepting or rejecting the package
2053         * templates/lisa.prod: Added this template for the prodding mail
2054
2055         * .cvsignore: Added neve-files which turns up in new installations
2056
2057 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2058
2059         * alicia (usage): Fixed usage message to offer section and priority
2060           as seperately optional arguments.
2061         * alicia (main): Added a % (arg) interpolation needed when only
2062           one of section or priority is provided and it cannot be found.
2063
2064 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2065
2066         * alicia: Added
2067         * docs/alicia.1.sgml: Added
2068         * docs/Makefile: Added alicia to the list of manpages to build
2069         * docs/README.names: Noted what alicia does
2070         * docs/README.first: Noted where alicia is useful
2071
2072 2004-01-21  James Troup  <james@nocrew.org>
2073
2074         * madison (main): add -b/--binary-type.
2075         (usage): likewise.
2076
2077         * denise (main): generate debian-installer overrides for testing
2078         too.
2079         * apt.conf: add support for debian-installer in testing.
2080         * katie.conf (Suite::Testing::UdebComponents): set to main.
2081
2082         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2083         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2084         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2085
2086         * utils.py (parse_changes): don't process data not inside the
2087         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2088         pointing this out.
2089         * test/005/test.py (main): new test to test for above.
2090
2091 2004-01-04  James Troup  <james@nocrew.org>
2092
2093         * jenna (write_filelists): correct typo, s/Components/Component/
2094         for Options.
2095
2096 2004-01-04  Ryan Murray  <rmurray@debian.org>
2097
2098         * cron.buildd: move update of overrides and Packages file...
2099         * cron.unchecked: to here.
2100         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2101         * katie.conf-security: likewise
2102
2103 2003-11-20  James Troup  <james@nocrew.org>
2104
2105         * jenna (main): don't use utils.try_with_debug(), it produces way
2106         too much output.
2107
2108         * halle (check_changes): don't error out if a .changes refers to a
2109         non-existent package, just warn and skip the file.
2110
2111         * docs/README.stable-point-release: mention halle and .changes
2112         obsoleted by removal through melanie.  Update for 3.0r2.
2113
2114         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2115         (Suite::Stable::Description): update for 3.0r2.
2116         (Lauren::MoreInfoURL): likewise.
2117         * katie.conf-non-US (Suite::Stable::Version): likewise.
2118         (Suite::Stable::Description): likewise.
2119         (Lauren::MoreInfoURL): likewise.
2120
2121         * apt.conf.stable (Default): don't define MaxContentsChange.
2122         * apt.conf.stable-non-US (Default): likewise.
2123
2124         * lauren (reject): hack to work around partial replacement of an
2125         upload, i.e. one or more binaries superseded by another source
2126         package.
2127
2128 2003-11-17  James Troup  <james@nocrew.org>
2129
2130         * pseudo-packages.maintainers: point installation-reports at
2131         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2132         request.
2133
2134         * utils.py (parse_changes): calculate the number of lines once
2135         with len() rather than max().
2136
2137         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2138         files, since check_dsc_against_db() deletes the .orig.tar.gz
2139         entry.
2140
2141 2003-11-13  Ryan Murray  <rmurray@debian.org>
2142
2143         * apt.conf: specify a src override file for debian-installer
2144
2145 2003-11-10  James Troup  <james@nocrew.org>
2146
2147         * fernanda.py (strip_pgp_signature): new function - strips PGP
2148         signature from a file and returns the modified contents of the
2149         file in a string.
2150         (display_changes): use it.
2151         (read_dsc): likewise.
2152
2153 2003-11-09  Ryan Murray  <rmurray@debian.org>
2154
2155         * cron.buildd: export accepted_autobuild table for unstable, and use
2156         it to generate the incoming Packages/Sources rather than having apt
2157         walk the directory.
2158         * apt.conf.buildd: use exported table from cron.buildd to generate
2159         Packages/Sources
2160
2161 2003-11-07  James Troup  <james@nocrew.org>
2162
2163         * kelly: import errno.
2164
2165         * katie.py (Katie.build_summaries): sort override disparities.
2166
2167         * kelly (install): set dsc_component based on the .dsc's component
2168         not a random binaries.
2169
2170 2003-10-29  James Troup  <james@nocrew.org>
2171
2172         * katie.py (Katie.build_summaries): don't assume changes["source"]
2173         exists since it might not.
2174
2175 2003-10-20  James Troup  <james@nocrew.org>
2176
2177         * pseudo-packages.maintainers: update security.d.o to use
2178         team@s.d.o at joy@'s request.
2179
2180 2003-10-17  James Troup  <james@nocrew.org>
2181
2182         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2183
2184 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2185
2186         * tea (chk_bd_process_dir): use .endswith rather than slice.
2187
2188 2003-10-14  James Troup  <james@nocrew.org>
2189
2190         * tea (check_build_depends): new function.
2191         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2192         in the archive.
2193         (main): update for new function.
2194         (usage): likewise.
2195
2196         * katie.py (Katie.do_reject): sanitize variable names,
2197         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2198         os.close() to outside if clause.
2199
2200         * jennifer (check_dsc): check build-depends and
2201         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2202         Fold the ARRAY check into the same code block and tidy up it's
2203         rejection message.
2204         (check_changes): ensure that the Files field is non-empty.
2205         Suggested by Santiago Vila <sanvila@unex.es>
2206         (check_changes): normalize reject messages.
2207         (check_dsc): instead of doing most of the checks inside a for loop
2208         and an if, find the dsc_filename in a short loop over files first
2209         and then do all the checks.  Add check for more than one .dsc in a
2210         .changes which we can't handle.  Normalize reject messages.
2211
2212 2003-10-13  James Troup  <james@nocrew.org>
2213
2214         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2215         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2216
2217         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2218         variables while iterating over 'files'.  Don't regenerate it when
2219         checking for source if source is mentioned.
2220
2221         Reject source only uploads if the config variable
2222         Dinstall::Reject::NoSourceOnly is set.
2223
2224 2003-10-03  James Troup  <james@nocrew.org>
2225
2226         * rene (main): add nasty hardcoded reference to debian-installer
2227         so we detect NBS .udebs.
2228
2229 2003-09-29  James Troup  <james@nocrew.org>
2230
2231         * apt.conf (old-proposed-updates): remove.
2232         * apt.conf-non-US (old-proposed-updates): likewise.
2233
2234 2003-09-24  James Troup  <james@nocrew.org>
2235
2236         * tea (check_files_not_symlinks): new function, ensure files
2237         mentioned in the database aren't symlinks.  Includes code to
2238         update any files that are like this to their real filenames +
2239         location; commented out by though.
2240         (usage): update for new function.
2241         (main): likewise.
2242
2243 2003-09-24  Anthony Towns  <ajt@debian.org>
2244
2245         * vars: external-overrides variable added
2246         * cron.daily: Update testing/unstable Task: overrides from joeyh
2247         managed external source.
2248
2249 2003-09-22  James Troup  <james@nocrew.org>
2250
2251         * kelly (install): if we can't move the .changes into queue/done,
2252         fail don't warn and carry on.  The old behaviour pre-dates NI and
2253         doesn't make much sense now since jennifer checks both
2254         queue/accepted and queue/done for any .changes files it's
2255         processing.
2256
2257         * utils.py (move): don't throw exceptions on existing files or
2258         can't overwrite, instead just fubar out.
2259
2260         * jennifer (check_dsc): also check Build-Depends-Indep for
2261         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2262
2263 2003-09-18  James Troup  <james@nocrew.org>
2264
2265         * katie.py (Katie.close_bugs): only log the bugs we've closed
2266         once.
2267
2268         * kelly (main): log as 'kelly', not 'katie'.
2269
2270 2003-09-16  James Troup  <james@nocrew.org>
2271
2272         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2273
2274         * jennifer (check_changes): normalize reject message for "changes
2275         file already exists" to be %s: <foo>.
2276         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2277         produced by broken dpkg-source in 1.10.11.  Tone down and
2278         normalize rejection message for incompatible 'Format' version
2279         numbers.
2280         (check_diff): likewise tone down and normalize.
2281
2282 2003-09-07  James Troup  <james@nocrew.org>
2283
2284         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2285         don't bomb out on bogus empty lines.
2286         (build_file_list): check for changes["files"] earlier.  use Dict
2287         to create files[name] dictionary.
2288         (send_mail): don't bother validating arguments.
2289         (check_signature): minor improvements to some of the rejection
2290         messages including listing the key id of the key that wasn't found
2291         in the keyring.
2292         (wrap): new function.
2293
2294         * tea: add new check 'validate-indices' that ensures all files
2295         mentioned in indices (Packages, Sources) files do in fact exist.
2296
2297         * catherine (poolize): use a local re_isadeb which handles legacy
2298         (i.e. no architecture) style .deb filenames.
2299
2300         * rosamund: new script.
2301
2302         * rhona (check_binaries): when checking for binary packages not in
2303         a suite, don't bother selecting files that already have a
2304         last_used date.
2305         (check_sources): likewise.
2306
2307         * rhona: change all SQL EXISTS sub-query clauses to use the
2308         postgres suggested convention of "SELECT 1 FROM".
2309         * andrea (main): likewise.
2310         * tea (check_override): likewise.
2311         * catherine (main): likewise.
2312
2313         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2314         entries and in other suites MustBeNewerThan's.
2315         (SuiteMappings): likewise
2316         * katie.conf-non-US: likewise.
2317         * katie.conf-security: likewise.
2318
2319         * apt.conf-security: remove oldstable.
2320         * apt.conf.stable: likewise.
2321         * apt.conf.stable-non-US: likewise.
2322         * cron.buildd-security: likewise.
2323         * cron.daily-security: likewise.
2324         * vars-security (suites): likewise.
2325         * wanna-build/trigger.daily: likewise.
2326
2327         * claire.py (clean_symlink): move...
2328         * utils.py (clean_symlink): here.
2329
2330         * claire.py (find_dislocated_stable): update accordingly.
2331
2332 2003-08-16  Anthony Towns  <ajt@debian.org>
2333
2334         * katie.py (source_exists): expand the list of distributions
2335         the source may exist in to include any suite that's mapped to
2336         the destination suite (even transitively (a->b->c)). This should
2337         unbreak binary uploads to *-proposed-updates.
2338
2339 2003-08-09  Randall Donald  <rdonald@debian.org>
2340
2341         * lisa (recheck): change changes["distribution"].keys() to
2342         Katie.pkg.changes...
2343
2344 2003-08-08  Randall Donald  <rdonald@debian.org>
2345
2346         * katie.py: only tag bugs as fixed-in-experimental for
2347         experimental uploads
2348
2349 2003-07-26  Anthony Towns  <ajt@debian.org>
2350
2351         * katie.py (source_exists): add an extra parameter to limit the
2352         distribution(s) the source must exist in.
2353         * kelly, lisa, jennifer: update to use the new source_exists
2354
2355 2003-07-15  Anthony Towns  <ajt@debian.org>
2356
2357         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2358         checksums for debian-installer stuff even when it's just a symlink to
2359         another suite
2360
2361         * apt.conf: add the FakeDI line
2362
2363 2003-06-09  James Troup  <james@nocrew.org>
2364
2365         * kelly (check): make sure the 'file' we're looking for in 'files'
2366         hasn't been deleted by katie.check_dsc_against_db().
2367
2368 2003-05-07  James Troup  <james@nocrew.org>
2369
2370         * helena (time_pp): fix s/years/year/ typo.
2371
2372 2003-04-29  James Troup  <james@nocrew.org>
2373
2374         * madison (usage): document -c/--component.
2375
2376         * madison (usage): Fix s/seperated/separated/.
2377         * melanie (usage): likewise.
2378         * jenna (usage): likewise.
2379
2380 2003-04-24  James Troup  <james@nocrew.org>
2381
2382         * cron.daily-non-US: if there's nothing for kelly to install, say
2383         so.
2384
2385         * jennifer (check_timestamps): print sys.exc_value as well as
2386         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2387         failed' with 'deb contents' to make it clearer what timestamp(s)
2388         are being checked.
2389
2390 2003-04-15  James Troup  <james@nocrew.org>
2391
2392         * cron.daily-non-US: only run kelly if there are some .changes
2393         files in accepted.
2394
2395         * rene: add -m/--mode argument which can be either daily (default)
2396         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2397         Various changes to make this possible including a poor attempt at
2398         splitting main() up a little.  De-hardcode suite numbers from SQL
2399         queries and return quietly from do_nviu() if experimental doesn't
2400         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2401         is.
2402
2403         * debian/control (Depends): remove python-zlib as it's obsolete.
2404
2405         * charisma (main): don't slice the \n off strings when we're
2406         strip()-ing it anyway.
2407         * heidi (set_suite): likewise.
2408         (process_file): likewise.
2409         * natalie (process_file): likewise.
2410
2411 2003-04-08  James Troup  <james@nocrew.org>
2412
2413         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2414         slow queries by using one LIKE '%foo%' and then matching against
2415         '%s' or '/%s$' in python.  Also only join location when we need it
2416         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2417         query, so 6s for each sourceful package.
2418
2419         * cron.daily: invoke rene and send the report to ftpmaster.
2420         * cron.daily-non-US: likewise.
2421
2422 2003-03-14  James Troup  <james@nocrew.org>
2423
2424         * utils.py (send_mail): default filename to blank.
2425         * amber (make_advisory): adapt.
2426         * jennifer (acknowledge_new): likewise.
2427         * katie.py (Katie.close_bugs): likewise.
2428         (Katie.announce): likewise.
2429         (Katie.accept): likewise.
2430         (Katie.check_override): likewise.
2431         (Katie.do_reject): likewise.
2432         * kelly (do_reject): likewise.
2433         (stable_install): likewise.
2434         * lisa (do_bxa_notification): likewise.
2435         * lauren (reject): likewise.
2436         * melanie (main): likewise.
2437
2438         * rene (add_nbs): check any NBS packages against unstable to see
2439         if they haven't been removed already.
2440
2441         * templates/katie.rejected: remove paragraph about rejected files
2442         since they're o-rwx due to c-i-m and the uploader can't do
2443         anything about them and shania will take care of them anyway.
2444
2445         * madison (usage): update usage example to use comma seperation.
2446         * melanie (usage): likewise.
2447
2448         * utils.py (split_args): new function; splits command line
2449         arguments either by space or comma (whichever is used).  Also has
2450         optional-but-default DWIM spurious space detection to avoid
2451         'command -a i386, m68k' problems.
2452         (parse_args): use it.
2453         * melanie (main): likewise.
2454
2455         * melanie (main): force the admin to tell someone if we're not
2456         doing a rene-led removal (or closing a bug, which counts as
2457         telling someone).
2458
2459 2003-03-05  James Troup  <james@nocrew.org>
2460
2461         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2462         and python sections.
2463         * katie.conf-security (Section): likewise.
2464
2465         * add_constraints.sql: add uid and uid_id_seq to grants.
2466
2467         * lisa (determine_new): also warn about adding overrides to
2468         oldstable.
2469
2470         * madison (main): make the -S/--source-and-binary query obey
2471         -s/--suite restrictions.
2472
2473 2003-03-03  James Troup  <james@nocrew.org>
2474
2475         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2476         exists, warn the user that our output might seem strange.  (People
2477         get confused by multiple versions in a suite which happens
2478         post-kelly but pre-jenna.)
2479
2480 2003-02-21  James Troup  <james@nocrew.org>
2481
2482         * kelly (main): we don't need to worry about StableRejector.
2483
2484         * melanie (main): sort versions with apt_pkg.VersionCompare()
2485         prior to output.
2486
2487         * lauren: new script to manually reject packages from
2488         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2489
2490 2003-02-20  James Troup  <james@nocrew.org>
2491
2492         * kelly (init): remove unused -m/--manual-reject argument.
2493
2494         * katie.py (Katie.force_reject): renamed from force_move to make
2495         it more explicit what this function does.
2496         (Katie.do_reject): update to match.
2497
2498         * utils.py (prefix_multi_line_string): add an optional argument
2499         include_blank_lines which defaults to 0.  If non-zero, blank lines
2500         will be includes in the output.
2501
2502         * katie.py (Katie.do_reject): don't add leading space to each line
2503         of the reject message.  Include blank lines when showing the
2504         message to the user.
2505
2506 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2507
2508         * utils.py (fix_maintainer): replace pointless re.sub() with
2509         simple string format.
2510
2511 2003-02-11  James Troup  <james@nocrew.org>
2512
2513         * lisa (edit_overrides): only strip-to-one-char and upper-case
2514         non-numeric answers.  Fixes editing of items with indices >= 10;
2515         noticed by Randall.
2516         (edit_overrides): correct order of arguments to "not a valid
2517         index" error message.
2518
2519         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2520         remove_duplicate_versions(); thanks to aj for the initial
2521         diagnosis.
2522         (remove_duplicate_versions): correct how we return
2523         dominant_versions.
2524         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2525         a tuple rather than just a tuple.
2526
2527 2003-02-10  James Troup  <james@nocrew.org>
2528
2529         * emilie: new script - sync fingerprint and uid tables with a
2530         debian.org LDAP DB.
2531
2532         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2533         in 'fingerprint'.
2534
2535         * db_access.py (get_or_set_uid_id): new function.
2536
2537         * jennifer (main): update locking to a) not used FCNTL (deprecated
2538         in python >= 2.2) and b) acknowledge upstream's broken
2539         implementation of lockf (see Debian bug #74777), c) try to acquire
2540         the lock non-blocking.
2541         * kelly (main): likewise.
2542
2543         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2544
2545         * madison (main): only append the package to new_packages if it's
2546         not already in there; fixes -S/--source-and-binary for cases where
2547         the source builds a binary package of the same name.
2548
2549 2003-02-10  Anthony Towns  <ajt@debian.org>
2550
2551         * madison (main): use explicit JOIN syntax for
2552         -S/--source-and-binary queries to reduce the query's runtime from
2553         >10 seconds to negligible.
2554
2555 2003-02-08  James Troup  <james@nocrew.org>
2556
2557         * rene (main): in the NVIU output, append items to lists, not
2558         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2559         should be removed.
2560
2561 2003-02-07  James Troup  <james@nocrew.org>
2562
2563         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2564         Sources [aj].
2565
2566         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2567         O. Benham/Adam Heath/.
2568
2569         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2570         (Suite::Stable::Description): update for 3.0r1a.
2571         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2572
2573         * utils.py (gpgv_get_status_output): rename from
2574         get_status_output().
2575
2576         * neve (check_signature): use gpgv_get_status_output and Dict from
2577         utils().  Add missing newline to error message about duplicate tokens.
2578
2579         * saffron (per_arch_space_use): also print space used by source.
2580         (output_format): correct string.join() invocation.
2581
2582         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2583
2584 2003-02-04  James Troup  <james@nocrew.org>
2585
2586         * cron.buildd: correct generation of Packages/Sources and grep out
2587         non-US/non-free as well as non-free.
2588
2589 2003-02-03  Ryan Murray  <rmurray@debian.org>
2590
2591         * cron.buildd: generate quinn-diff output with full Packages/Sources
2592           files to get out-of-date vs. uncompiled right.
2593         * apt.conf.buildd: no longer generate uncompressed files, as they
2594           are generated in cron.buildd instead
2595         * add -i option to quinn-diff to ignore binary-all packages
2596         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2597           aren't in the packages file, the arch that uploaded them will build
2598           them anyways...
2599
2600 2003-01-30  James Troup  <james@nocrew.org>
2601
2602         * rene (main): only print suggested melanie command when there's
2603         some NBS to remove.
2604
2605 2003-01-30  Ryan Murray  <rmurray@debian.org>
2606
2607         * cron.buildd: fix incorrectly inverted lockfile check
2608
2609 2003-01-29  Ryan Murray  <rmurray@debian.org>
2610
2611         * cron.buildd: generate override.sid.all3.src
2612         * apt.conf.buildd: use generated override.sid.all3.src
2613
2614 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2615
2616         * utils.py (get_status_output): moved from jennifer.
2617         (Dict): likewise.
2618         (check_signature): likewise.
2619
2620         * jennifer (get_status_output): moved to utils.py.
2621         (Dict): likewise.
2622         (check_signature): likewise.
2623
2624         * utils.py (check_signature): add an argument to specifiy which
2625         function to call when an error was found.
2626         (check_signature): document this function better.
2627
2628         * jennifer (check_files): pass the reject function as an argument
2629         to utils.check_signature.
2630         (process_it): likewise.
2631
2632 2003-01-20  James Troup  <james@nocrew.org>
2633
2634         * rene (main): lots of changes to improve the output and make it
2635         more useful.
2636
2637         * katie.py (Katie.check_override): make the override messages
2638         clearer (hopefully).
2639
2640 2002-12-26  James Troup  <james@nocrew.org>
2641
2642         * ziyi (usage): document the ability to pass suite(s) as
2643         argument(s).
2644         (main): read apt.conf after checking for -h/--help.
2645
2646         * tea (main): take the check to run as an argument.
2647
2648         * saffron.R: R script to graph daily install runs.
2649
2650         * saffron: new script; various stats functions.
2651
2652         * rhona (main): connect to the database after checking for -h/--help.
2653
2654         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2655
2656         * melanie (main): sort versions with utils.arch_compare_sw().
2657
2658         * madison (usage): alphabetize order of options.
2659         * melanie (usage): likewise.
2660
2661         * kelly (usage): fix usage short description (we aren't dinstall).
2662
2663         * julia (usage): fix usage description and alphabetize order of
2664         options.
2665
2666         * jeri (usage): fix usage short description.
2667
2668         * jennifer (main): move --help and --version checks from here...
2669         (init): to here so that they work with an empty katie.conf.
2670         * kelly: likewise.
2671
2672         * alyson (usage): new function.
2673         (main): use it.
2674         * andrea: likewise.
2675         * ashley: likewise.
2676         * cindy: likewise.
2677         * denise: likewise.
2678         * helena: likewise.
2679         * neve: likewise.
2680         * rene: likewise.
2681         * rose: likewise.
2682         * tea: likewise.
2683
2684         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2685         entry that caused tasks to be omitted from 3.0r1.
2686
2687 2002-12-10  James Troup  <james@nocrew.org>
2688
2689         * jennifer (check_files): sanity check the Depends field to ensure
2690         it's non-empty if present since apt chokes on an empty one.
2691         Thanks to Ryan Murray for the idea.
2692
2693 2002-12-08  James Troup  <james@nocrew.org>
2694
2695         * katie.conf-security (Helena::Directories): new; include accepted
2696         in addition to byhand and new.
2697
2698         * helena (process_changes_files): use utils.arch_compare_sw().
2699         Justify things based on the longest [package, version,
2700         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2701         the commas in architecture and version lists for the same reason.
2702         (main): make directories we process configurable through
2703         Helena::Directories in the config file; if that doesn't exist
2704         default to the old hardcoded values (byhand & new).
2705
2706         * utils.py (arch_compare_sw): moved here from madison.
2707         * madison (main): adjust to compensate.
2708
2709 2002-12-06  James Troup  <james@nocrew.org>
2710
2711         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2712         right filename.
2713
2714 2002-12-05  James Troup  <james@nocrew.org>
2715
2716         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2717
2718 2002-11-28  Randall Donald  <rdonald@debian.org>
2719
2720         * fernanda.py (read_control): fix typo of 'Architecture'.
2721
2722 2002-11-26  James Troup  <james@nocrew.org>
2723
2724         * lisa (check_pkg): call less with '-R' so we see the colour from
2725         Randall's fernanda changes.
2726
2727         * neve (process_sources): if Directory points to a legacy location
2728         but the .dsc isn't there; assume it's broken and look in the pool.
2729         (update_section): new, borroed from alyson.
2730         (do_da_do_da): use it.
2731         (process_packages): add suite_it to the cache key used for
2732         arch_all_cache since otherwise we only add a package to the first
2733         suite it's in and ignore any subsequent ones.
2734
2735         * katie.conf-non-US (Location): fixed to reflect reality (all
2736         suites, except old-proposed-updates (which is legacy-mixed)) are
2737         pool.
2738
2739         * utils.py (try_with_debug): wrapper for print_exc().
2740         * jenna (main): use it.
2741         * neve (main): likewise.
2742
2743 2002-11-25  Randall Donald  <rdonald@debian.org>
2744
2745         * fernanda.py (main): added -R to less command line for raw control
2746         character support to print colours
2747         (check_deb): Instead of running dpkg -I on deb file, call
2748         output_deb_info, the new colourized control reporter.
2749         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2750         of printing out each .dsc line.
2751         (output_deb_info): new function. Outputs each key/value pair from
2752         read_control except in special cases where we highlight section,
2753         maintainer, architecture, depends and recommends.
2754         (create_depends_string): new function. Takes Depends tree and looks
2755         up it's compontent via projectb db, colourizes and constructs a
2756         depends string in original order.
2757         (read_dsc): new function. reads and parses .dsc info via
2758         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2759         colourized.
2760         (read_control): new function. reads and parses control info via
2761         apt_pkg. Depends and Recommends are split in to list structures,
2762         Section and Architecture are colourized. Maintainer is colourized
2763         if it has a localhost.localdomain address.
2764         (split_depends): new function. Creates a list of lists of
2765         dictionaries of depends (package,version relation). Top list is
2766         colected from comma delimited items. Sub lists are | delimited.
2767         (get_comma_list): new function. splits string input among commas
2768         (get_or_list): new function. splits string input among | delimiters
2769         (get_depends_parts): new function. Creates dictionary of package name
2770         and version relation from dependancy string.
2771         Colours for section and depends are per component. Unfound depends
2772         are in bold. Lookups using version info is not supported yet.
2773
2774 2002-11-22  James Troup  <james@nocrew.org>
2775
2776         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2777         'udmsearch'.
2778
2779         * amber (make_advisory): string.atol() is deprecated and hasn't
2780         been ported to string methods.  Use long() instead.
2781
2782         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2783         creating the database since we'll fail badly if it's created with
2784         e.g. UNICODE encoding.
2785
2786         * rose (main): AptCnf is a global.
2787
2788         * neve (get_location_path): new function determines the location
2789         from the the first (left-most) directory of a Filename/Directory.
2790         (process_sources): don't need 'location' anymore.  Use
2791         utils.warn().  Use the Directory: field for each package to find
2792         the .dsc.  Use get_location_path() to determine the location for
2793         each .dsc.
2794         (process_packages): do't need 'location' anymore.  Use
2795         utils.warn().  Use get_location_path().
2796         (do_sources): don't need 'location', drop 'prefix' in favour of
2797         being told the full path to the Sources file, like
2798         process_packages().
2799         (do_da_do_da): main() renamed, so that main can call us in a
2800         try/except.  Adapt for the changes in do_sources() and
2801         process_packages() above.  Assume Sources and Packages file are in
2802         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2803
2804         * katie.conf-security (Location): fixed to reflect reality (all
2805         suites are pool, not legacy).
2806
2807         * utils.py (print_exc): more useful (i.e. much more verbose)
2808         traceback; a recipe from the Python cookbook.
2809         * jenna (main): use it.
2810         * neve (main): likewise.
2811
2812 2002-11-19  James Troup  <james@nocrew.org>
2813
2814         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2815         handling which was FUBAR for multi-suite uploads.  Now we just
2816         make a dictionary of destinations to copy to and iterate over
2817         those.
2818
2819         * fernanda.py (check_deb): run linda as well as lintian.
2820
2821 2002-10-21  James Troup  <james@nocrew.org>
2822
2823         * melanie (main): change X-Melanie to X-Katie and prefix it with
2824         'melanie '.
2825
2826         * lisa (main): prefix X-Katie with 'lisa '.
2827
2828         * jennifer (clean_holding): fix typo in string method changes;
2829         s/file.find(file/file.find(/.
2830
2831         * cron.daily: invoke helena and send the report to ftpmaster.
2832         * cron.daily-non-US: likewise.
2833
2834 2002-10-16  James Troup  <james@nocrew.org>
2835
2836         * kelly (check): call reject() with a blank prefix when parsing
2837         the return of check_dsc_against_db() since it does its own
2838         prefix-ing.
2839
2840         * rose: new script; only handles directory creation initally.
2841
2842         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2843         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2844
2845 2002-10-06  James Troup  <james@nocrew.org>
2846
2847         * rene (main): remove bogus argument handling.
2848
2849         * kelly: katie, renamed.
2850         * cron.daily: adapt for katie being renamed to kelly.
2851         * cron.daily-non-US: likewise.
2852         * amber (main): likewise.
2853
2854         * Changes for python 2.1.
2855
2856         * kelly: time.strftime no longer requires a second argument of
2857         "time.localtime(time.time())".
2858         * logging.py: likewise.
2859         * rhona: likewise.
2860         * shania (init): likewise.
2861
2862         * amber: use augmented assignment.
2863         * catherine (poolize): likewise.
2864         * claire.py (fix_component_section): likewise.
2865         * halle (check_changes): likewise.
2866         * helena: likewise.
2867         * jenna: likewise.
2868         * jennifer: likewise.
2869         * jeri: likewise.
2870         * katie.py: likewise.
2871         * kelly: likewise.
2872         * lisa: likewise.
2873         * madison (main): likewise.
2874         * melanie: likewise.
2875         * natalie: likewise.
2876         * neve: likewise.
2877         * rhona: likewise.
2878         * tea: likewise.
2879         * utils.py: likewise.
2880         * ziyi: likewise.
2881
2882         * amber: use .endswith.
2883         * fernanda.py: likewise.
2884         * halle (main): likewise.
2885         * jennifer: likewise.
2886         * jeri: likewise.
2887         * katie.py: likewise.
2888         * kelly: likewise.
2889         * lisa: likewise.
2890         * neve: likewise.
2891         * shania (main): likewise.
2892         * utils.py: likewise.
2893
2894         * alyson: use string methods.
2895         * amber: likewise.
2896         * andrea: likewise.
2897         * ashley: likewise.
2898         * catherine: likewise.
2899         * charisma: likewise.
2900         * claire.py: likewise.
2901         * db_access.py: likewise.
2902         * denise: likewise.
2903         * halle: likewise.
2904         * heidi: likewise.
2905         * helena: likewise.
2906         * jenna: likewise.
2907         * jennifer: likewise.
2908         * jeri: likewise.
2909         * julia: likewise.
2910         * katie.py: likewise.
2911         * kelly: likewise.
2912         * lisa: likewise.
2913         * logging.py: likewise.
2914         * madison: likewise.
2915         * melanie: likewise.
2916         * natalie: likewise.
2917         * neve: likewise.
2918         * rene: likewise.
2919         * tea: likewise.
2920         * utils.py: likewise.
2921         * ziyi: likewise.
2922
2923 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2924
2925         * utils.py (parse_changes): use <string>.startswith() rather than
2926         string.find().
2927
2928 2002-08-27  Anthony Towns  <ajt@debian.org>
2929
2930         * katie.py (in_override_p): when searching for a source override,
2931         and the dsc query misses, search for both udeb and deb overrides
2932         as well. Should fix the UNACCEPT issues with udebs.
2933
2934 2002-08-24  James Troup  <james@nocrew.org>
2935
2936         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2937         source+binary package finding code which was causing severe
2938         performance degradation with postgres 7.2.
2939
2940 2002-08-14  James Troup  <james@nocrew.org>
2941
2942         * julia (main): use the pwd.getpwall() to get system user info
2943         rather than trying to read a password file.  Add a -n/--no-action
2944         option.
2945
2946         * cron.hourly: julia no longer takes any arguments.
2947         * cron.hourly-non-US: likewise.
2948
2949 2002-08-07  James Troup  <james@nocrew.org>
2950
2951         * katie (install): handle multi-suite uploads when CopyChanges
2952         and/or CopyKatie are in use, ensuring we only copy stuff once.
2953
2954 2002-08-01  Ryan Murray  <rmurray@debian.org>
2955
2956         * wanna-build/trigger.daily: initial commit, with locking
2957         * cron.buildd: add locking against daily run
2958
2959 2002-07-30  James Troup  <james@nocrew.org>
2960
2961         * melanie (main): readd creation of suite_ids_list so melanie is
2962         remotely useful again.
2963
2964         * katie.conf: adopt for woody release; diable
2965         StableDislocationSupport, add oldstable, adjust other suites and
2966         mappings, fix up location.
2967         * katie.conf-non-US: likewise.
2968         * katie.conf-security: likewise.
2969
2970         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2971         stable.
2972         * apt.conf.stable-non-US: likewise.
2973
2974         * apt.conf-security: adapt for woody release; adding oldstable,
2975         oldstable, adjust stable and testing.
2976         * cron.daily-security: likewise.
2977         * cron.buildd-security: likewise.
2978
2979         * apt.conf: adapt for woody release; rename woody-proposed-updates
2980         to testing-proposed-updates and proposed-updates to
2981         old-proposed-updates.
2982         * apt.conf-non-US: likewise.
2983
2984         * vars-non-US (copyoverrides): add sarge.
2985         * vars (copyoverrides): likewise.
2986
2987         * vars-security (suites): add oldstable.
2988
2989 2002-07-22  Ryan Murray  <rmurray@debian.org>
2990
2991         * apt.conf.security-buildd: use suite codenames instead of
2992           distnames.
2993
2994 2002-07-16  James Troup  <james@nocrew.org>
2995
2996         * denise (main): fix filenames for testing override files.
2997
2998 2002-07-14  James Troup  <james@nocrew.org>
2999
3000         * jennifer (process_it): call check_md5sums later so we can check
3001         files in the .dsc too
3002         (check_md5sums): check files in the .dsc too.  Check both md5sum
3003         and size.
3004
3005         * melanie (main): use parse_args() and join_with_commas_and() from
3006         utils.  If there's nothing to do, say so and exit, don't ask for
3007         confirmation etc.
3008
3009         * amber (join_with_commas_and): moved from here to ...
3010         * utils.py (join_with_commas_and): here.
3011
3012 2002-07-13  James Troup  <james@nocrew.org>
3013
3014         * madison (main): use parse_args() from utils.  Support
3015         -c/--component.
3016
3017         * jenna (parse_args): moved from here to ...
3018         * utils.py (parse_args): here.
3019
3020         * katie.conf (Architectures): minor corrections to the description
3021         for arm, mips and mipsel.
3022         * katie.conf-non-US (Architectures): likewise.
3023         * katie.conf-security (Architectures): likewise.
3024
3025         * cron.daily-security: use natalie's new -a/--add functionality to
3026         flesh out the security overrides.
3027
3028 2002-07-12  James Troup  <james@nocrew.org>
3029
3030         * cron.buildd (ARCHS): add arm.
3031
3032         * katie.conf: 2.2r7 was released.
3033         * katie.conf-non-US: likewise.
3034
3035         * utils.py (parse_changes): handle a multi-line field with no
3036         starting line.
3037
3038 2002-06-25  James Troup  <james@nocrew.org>
3039
3040         * templates/amber.advisory (To): add missing email address since
3041         __WHOAMI__ is only a name.
3042
3043         * katie.conf-security (Melane::LogFile): correct to go somewhere
3044         katie has write access to.
3045         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3046         Testing.
3047
3048         * natalie: add support for -a/-add which adds packages only
3049         (ignoring changes and deletions).
3050
3051         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3052         use FindB, not get.
3053
3054 2002-06-22  James Troup  <james@nocrew.org>
3055
3056         * jennifer (check_files): validate the package name and version
3057         field.  If 'Package', 'Version' or 'Architecture' are missing,
3058         don't try any further checks.
3059         (check_dsc): likewise.
3060
3061         * utils.py (re_taint_free): add '~' as a valid character.
3062
3063 2002-06-20  Anthony Towns  <ajt@debian.org>
3064
3065         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3066
3067 2002-06-09  James Troup  <james@nocrew.org>
3068
3069         * jennifer (check_files): reduce useless code.
3070
3071         * cron.daily-security: run symlinks -dr on $ftpdir.
3072
3073         * vars-security (ftpdir): add.
3074
3075 2002-06-08  James Troup  <james@nocrew.org>
3076
3077         * neve (update_override_type): transaction is handled higher up in
3078         main().
3079         (update_priority): likewise.
3080         (process_sources): remove code that makes testing a duplicate of
3081         stable.
3082         (process_packages): likewise.
3083
3084         * templates/amber.advisory: add missing mail headers.
3085
3086         * cron.daily-security: also call apt-ftparchive clean for
3087         apt.conf.buildd-security.
3088         * cron.weekly: likewise.
3089
3090         * amber (do_upload): write out a list of source packages (and
3091         their version) uploaded for testing.
3092         (make_advisory): add more Subst mappings for the mail headers.
3093         (spawn): check for suspicious characters in the command and abort
3094         if their found.
3095
3096 2002-06-07  James Troup  <james@nocrew.org>
3097
3098         * ziyi (main): remove the 'nonus'/'security' hacks and use
3099         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3100         the lower level Release files, even if they don't exist.  fubar
3101         out if we can't open a lower level Release file for writing.
3102
3103         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3104         ziyi.
3105         * katie.conf-security (Dinstall): likewise.
3106
3107         * amber (do_upload): renamed from get_file_list().  Determine the
3108         upload host from the original component.
3109         (init): Add a -n/--no-action option.  Fix how we get changes_files
3110         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3111         sys.argv).  Add an Options global.
3112         (make_advisory): support -n/--no-action.
3113         (spawn): likewise.
3114         (main): likewise.
3115         (usage): document -n/--no-action.
3116
3117         * cron.buildd-security: fix path to Packages-arch-specific in
3118         quinn-diff invocation.
3119
3120         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3121         to proper suite names (i.e. stable, testing) rather than codenames
3122         (potato, woody).
3123         (Dinstall::DefaultSuite): likewise.
3124         (Suite): likewise.
3125         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3126         * vars-security (suites): likewise.
3127         * apt.conf-security: likewise.
3128
3129         * katie.conf-security (Component): add "updates/" prefix.
3130         (Suite::*::Components): likewise.
3131         (ComponentMappings): new; map all {ftp-master,non-US} components
3132         -> updates/<foo>.
3133
3134         * katie.conf-security (Natalie): removed; the options have
3135         defaults and ComponentPosition is used by alyson which doesn't
3136         work on security.d.o.
3137         (Amber): replace UploadHost and UploadDir with ComponentMappings
3138         which is a mapping of components -> URI.
3139         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3140         (SuiteMappings): use "silent-map" in preference to "map".
3141
3142         * cron.unchecked-security: fix call to cron.buildd-security.
3143
3144         * cron.daily-security: map local suite (stable) -> override suite
3145         (potato) when fixing overrides.  Correct component in natalie call
3146         to take into account "updates/" prefix.  Fix cut'n'waste in
3147         override.$dist.all3 generation, the old files weren't being
3148         removed, so they were endlessly growing.
3149
3150         * neve (main): don't use .Find for the CodeName since we require
3151         it.  Location::*::Suites is a ValueList.
3152         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3153         out on expired keys, just warn.
3154         (update_override_type): new function; lifted from alyson.
3155         (update_priority): likewise.
3156         (main): use update_{override_type,priority}().
3157
3158         * jennifer (check_distributions): remove redunant test for
3159         SuiteMappings; ValueList("does-not-exist") returns [] which is
3160         fine.  Add support for a "silent-map" type which doesn't warn
3161         about the mapping to the user.
3162         (check_files): add support for ComponentMappings, similar to
3163         SuiteMappings, but there's no type, just a source and a
3164         destination and the original component is stored in "original
3165         component".
3166         * katie.py (Katie.dump_vars): add "original component" as an
3167         optionsal files[file] dump variable.
3168
3169         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3170         query.  Add support for section-less legacy locations like current
3171         security.debian.org through YetAnotherConfigBoolean
3172         'LegacyStableHasNoSections'.
3173         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3174
3175         * utils.py (real_arch): moved here from ziyi.
3176         * ziyi (real_arch): moved to utils.py.
3177         * ziyi (main): likewise.
3178
3179         * claire.py (find_dislocated_stable): use real_arch() with
3180         filter() to strip out source and all.
3181         * neve (main): likewise.
3182         * rene (main): likewise.
3183         * jeri (parse_packages): likewise.
3184
3185 2002-06-06  James Troup  <james@nocrew.org>
3186
3187         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3188         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3189         doing.
3190
3191 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3192
3193         * jeri (check_joey): check if the line contains two elements
3194         before accessing the second.  Also, strip trailing spaces as well
3195         as the newline.
3196         * halle (check_joey): likewise.
3197
3198 2002-06-05  James Troup  <james@nocrew.org>
3199
3200         * cron.unchecked-security: new file; like cron.unchecked but if
3201         there's nothing to do exit so we don't call cron.buildd-security.
3202
3203         * apt.conf.buildd-security: new file.
3204
3205         * vars (archs): alphabetize.
3206         * vars-non-US (archs): likewise.
3207
3208         * vars-security: add unchecked.
3209
3210         * madison (main): reduce rather bizarrely verbose and purposeless
3211         code to print arches to a simple string.join.
3212
3213         * katie.conf (Suites::Unstable): add UdebComponents, a new
3214         valuelist of suites, used by jenna to flesh out the list of
3215         <suite>_main-debian-installer-binary-<arch>.list files generated.
3216         (Dinstall): add StableDislocationSupport, a new boolean used by
3217         jenna to enable or disable stable dislocation support
3218         (i.e. claire), as true.
3219
3220         * katie.conf (Dinstall): add StableDislocationSupport, a new
3221         boolean used by jenna to enable or disable stable dislocation
3222         support (i.e. claire), as true.
3223         * katie.conf-non-US: likewise.
3224         * katie.conf-security: likewise.
3225
3226         * cron.daily-security: generate .all3 overrides for the buildd
3227         support.  Freshen a local copy of Packages-arch-specific from
3228         buildd.debian.org.
3229
3230         * claire.py (find_dislocated_stable): disable the support for
3231         files in legacy-mixed locations since none of the Debian archives
3232         have any anymore.
3233
3234         * helena: new script; produces a report on NEW and BYHAND
3235         packages.
3236
3237         * jenna: rewritten from scratch to fix speed problems.  Run time
3238         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3239         minutes, 105 seconds are the monster query and 70 odd seconds is
3240         claire.
3241
3242         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3243         irrelevant.
3244
3245 2002-06-05  Ryan Murray  <rmurray@debian.org>
3246
3247         * cron.buildd-security: new file.
3248
3249 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3250
3251         * denise (list): take a file argument and use it.
3252         (main): don't abuse sys.stdout, just write to the file.
3253
3254         * claire.py (usage): Fix misspelling.
3255         (clean_symlink): Simplify.
3256         (find_dislocated_stable): Avoid unnecessary work.
3257
3258 2002-05-29  James Troup  <james@nocrew.org>
3259
3260         * cameron: removed; apt-ftparchive can simply walk the directory.
3261
3262 2002-05-26  Anthony Towns  <ajt@debian.org>
3263
3264         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3265         for the autobuilders.
3266
3267 2002-05-24  Ryan Murray  <rmurray@debian.org>
3268
3269         * cron.buildd: update override files before running apt-ftparchive
3270
3271 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3272
3273         * amber (main): remove extra space in prompt.
3274
3275         * utils.py (validate_changes_file_arg): use original filename in
3276         error messages.
3277
3278         * jeri (check_joey): close file after use.
3279         (parse_packages): likewise.
3280         (main): setup debug option properly.
3281
3282         * melanie (main): remove unused packages variable and simplify the
3283         code to build up con_packages by using repr().
3284
3285 2002-05-23  James Troup  <james@nocrew.org>
3286
3287         * lisa (recheck): when we reject, also return 0 so the package is
3288         skipped.
3289         (sg_compare): fix note sorting.
3290         (recheck): remove the .katie file after rejection.
3291
3292         * katie.py (Katie.accept): accepted auto-build support take 3;
3293         this time adding support for security.  Security needs a) non-pool
3294         files copied rather than symlinked since accepted is readable only
3295         by katie/security and www-data needs to be able to see the files,
3296         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3297         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3298         SecurityAcceptedAutoBuild is a new boolean which controls whether
3299         or not normal or security style is used.  The unstable_accepted
3300         table was renamed to accepted_autobuild and a suite column added.
3301         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3302         didn't have it's last_used/in_accepted flags correctly updated.
3303         * katie (install): likewise.
3304         * rhona (clean_accepted_autobuild): likewise.
3305
3306 2002-05-22  James Troup  <james@nocrew.org>
3307
3308         * lisa (sort_changes): new function; sorts changes properly.
3309         Finally.
3310         (sg_compare): new function; helper for sort_changes().  Sorts by
3311         have note and time of oldest upload.
3312         (indiv_sg_compare): new function; helper for sort_changes().
3313         Sorts by source version, have source and filename.
3314         (main): use sort_changes().
3315         (changes_compare): obsoleted; removed.
3316
3317 2002-05-20  James Troup  <james@nocrew.org>
3318
3319         * rhona (clean_accepted_autobuild): don't die if a file we're
3320         trying to remove doesn't exist.  Makes rhona more friendly to
3321         katie/katie.py crashes/bugs without any undue cost.
3322
3323 2002-05-19  James Troup  <james@nocrew.org>
3324
3325         * lisa (main): if sorting a large number of changes give some
3326         feedback.
3327         (recheck): new function, run the same checks (modulo NEW,
3328         obviously) as katie does, if they fail do the standard
3329         reject/skip/quit dance.
3330         (do_pkg): use it.
3331
3332         * katie (install): don't try to unlink the symlink in the
3333         AcceptedAutoBuild support if the destination is not a symlink (or
3334         doesn't exist).  Avoids unnecessary bombs on previous partial
3335         accepts and will still bomb hard if the file exists and isn't a
3336         symlink.
3337
3338         * utils.py: blah, commands _is_ used when the mail stuff isn't
3339         commented out like it is in my test environment.
3340
3341         * lisa (changes_compare): "has note" overrides everything else.
3342         Use .katie files rather than running parse_changes, faster and
3343         allows "has note" to work.  Correct version compare, it was
3344         reversed.  Ctime check should only kick in if the source packages
3345         are not the same.
3346         (print_new): print out and return any note.  Rename 'ret_code' to
3347         'broken'.
3348         (edit_new): renamed from spawn_editor.  Don't leak file
3349         descriptors.  Clean up error message if editor fails.
3350         (edit_note): new function, allows one to edit notes.
3351         (do_new): add note support, editing and removing.
3352         (init): kill -s/--sort; with notes we always want to use our
3353         sorting method.
3354         (usage): likewise.
3355
3356         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3357         changes field.
3358
3359         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3360         it default to 0.  Adapt tests to assume it's boolean.
3361         * fernanda.py (check_changes): adjust call appropriately.
3362         * halle (check_changes): likewise.
3363         * jennifer (check_changes): likewise.
3364         * jeri (check_changes): likewise.
3365         * shania (flush_orphans): likewise.
3366
3367         * jennifer (check_dsc): pass is_a_dsc by name when calling
3368         build_file_list() for clarity.
3369         * shania (flush_orphans): likewise.
3370         * tea (check_missing_tar_gz_in_dsc): likewise.
3371
3372         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3373         calling parse_changes() for clarity.
3374         * tea (check_dscs): likewise.
3375
3376         * utils.py (parse_changes): make dsc_whitespace_rules default to
3377         not true.
3378         * halle (check_changes): adjust call appropriately.
3379         * jennifer (check_changes): likewise.
3380         * jeri (check_changes): likewise.
3381         * lisa (changes_compare): likewise.
3382         * utils.py (changes_compare): likewise.
3383         * melanie (main): likewise.
3384         * shania (flush_orphans): likewise.
3385         * fernanda.py (check_changes): likewise.
3386
3387 2002-05-18  James Troup  <james@nocrew.org>
3388
3389         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3390         it's not useful and by and large a duplication of information
3391         available in readable format in other files.
3392
3393 2002-05-16  Ryan Murray  <rmurray@debian.org>
3394
3395         * melanie: Dir::TemplatesDir -> Dir::Templates
3396
3397 2002-05-15  Ryan Murray  <rmurray@debian.org>
3398
3399         * cameron: correct the use of os.path.join
3400
3401 2002-05-15  Anthony Towns  <ajt@debian.org>
3402
3403         * ziyi: Update to match the new format for Architectures/Components
3404         in katie.conf.
3405
3406 2002-05-14  James Troup  <james@nocrew.org>
3407
3408         * amber: new script; 'installer' wrapper script for the security
3409         team.
3410
3411         * katie.py (Katie.announce): remove unused 'dsc' local
3412         variable. (pychecker)
3413
3414         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3415
3416         * neve: don't import sys, we don't use it. (pychecker)
3417         (check_signature): fix return type mismatch. (pychecker)
3418
3419         * utils.py: don't import commands, we don't use it.  (pychecker)
3420
3421         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3422
3423         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3424         obsoleted by the change to "othercomponents" handling in jennifer
3425         detailed below.
3426         (Katie.cross_suite_version_check): new function; implements
3427         cross-suite version checking rules specified in the conf file
3428         while also enforcing the standard "must be newer than target
3429         suite" rule.
3430         (Katie.check_binary_against_db): renamed, since it's invoked once
3431         per-binary, "binaries" was inaccurate.  Use
3432         cross_suite_version_check() and don't bother with the "oldfiles"
3433         rubbish as jennifer works out "othercomponents" herself now.
3434         (Katie.check_source_against_db): use cross_suite_version_check().
3435
3436         * katie (check): the version and file overwrite checks
3437         (check_{binary,source,dsc}_against_db) are not per-suite.
3438
3439         * jennifer (check_files): less duplication of
3440         'control.Find("Architecture", "")' by putting it in a local
3441         variable.
3442         (check_files): call check_binary_against_db higher up since it's
3443         not a per-suite check.
3444         (check_files): get "othercomponents" directly rather than having
3445         check_binary_against_db do it for us.
3446
3447         * heidi (main): 'if x:', not 'if x != []:'.
3448         * katie.py (Katie.in_override_p): likewise.
3449         (Katie.check_dsc_against_db): likewise.
3450         * natalie (main): likewise.
3451         * rene (main): likewise.
3452         * ziyi (real_arch): likewise.
3453
3454         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3455         and OverrideType are now value lists, not lists.
3456         * andrea (main): likewise.
3457         * cindy (main): likewise.
3458         * claire.py (find_dislocated_stable): likewise.
3459         * denise (main): likewise.
3460         * jenna (main): likewise.
3461         * jennifer (check_distributions): likewise.
3462         (check_files): likewise.
3463         (check_urgency): likewise (Urgency::Valid).
3464         * jeri (parse_packages): likewise.
3465         * neve (main): likewise (and Location::%s::Suites).
3466         * rene (main): likewise.
3467
3468 2002-05-13  James Troup  <james@nocrew.org>
3469
3470         * katie.py (Katie.check_source_against_db): correct case of reject
3471         message to be consistent with binary checks.
3472
3473         * jennifer (get_status_output): don't leak 2 file descriptors per
3474         invocation.
3475         (check_signature): add missing '\n' to "duplicate status token"
3476         error message.
3477
3478 2002-05-09  James Troup  <james@nocrew.org>
3479
3480         * utils.py (validate_changes_file_arg): new function; validates an
3481         argument which should be a .changes file.
3482         * ashley (main): use it.
3483         * lisa (main): likewise.
3484
3485         * katie.py (Katie.check_dsc_against_db): since there can be more
3486         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3487         entry still exists in files.
3488
3489         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3490         files, since check_dsc_against_db() deletes the .orig.tar.gz
3491         entry.
3492
3493         * cameron: cleanups.
3494
3495         * utils.py (changes_compare): change sort order so that source
3496         name and source version trump 'have source'; this should fix
3497         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3498         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3499         by Ryan.
3500
3501         * lisa (main): allow the arguments to be .katie files too.
3502
3503 2002-05-07  Ryan Murray  <rmurray@debian.org>
3504
3505         * cron.buildd: add s390 to arch list again
3506
3507 2002-05-05  Ryan Murray  <rmurray@debian.org>
3508
3509         * cron.buildd: new script, update w-b database from unstable_accepted
3510         table
3511         * cameron: new script, take list in unstable_accepted and write out
3512         a file list for apt-ftparchive
3513         * apt.conf.buildd: new apt configuration for Packages/Sources for
3514         unstable_accepted
3515         * vars: add s390 to arch list.
3516
3517 2002-05-03  James Troup  <james@nocrew.org>
3518
3519         * neve (main): don't hard code the calling user as that doesn't
3520         work with modern postgres installs.  Fix psql invocation for
3521         init_pool.sql (database name required).  Dont' hard code the
3522         database name.
3523         (process_sources): add support for fingerprint and install_date.
3524         (process_packages): add support for fingerprint.
3525         (do_sources): pass in the directory, fingerprint support needs it.
3526         (get_status_output): borrowed from jennifer.
3527         (reject): likewise.
3528         (check_signature): likewise.
3529
3530         * katie (install): only try to log urgencies if Urgency_Logger is
3531         defined.
3532         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3533         defined; only close Urgency_Logger if it's defined.
3534
3535         * catherine (poolize): adapt for Dir rationalization.
3536         * claire.py (find_dislocated_stable): likewise.
3537         * denise (main): likewise.
3538         * halle (check_joey): likewise.
3539         * jenna: likewise.
3540         * jennifer: likewise.
3541         * jeri: likewise.
3542         * katie.py: likewise.
3543         * katie: likewise.
3544         * lisa (do_bxa_notification): likewise.
3545         * logging.py (Logger.__init__): likewise
3546         * rene (main): likewise.
3547         * rhona (clean): likewise.
3548         * shania (init): likewise.
3549         * tea: likewise.
3550         * ziyi: likewise.
3551
3552         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3553         FindB, not FindI.
3554
3555         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3556         boolean, use FindB, not get.
3557
3558         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3559         .orig.tar.gz's which are an exact (size/md5sum) match.
3560
3561         * ashley (main): really allow *.katie files as arguments too;
3562         noticed by aj.
3563
3564         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3565
3566 2002-05-03  Anthony Towns  <ajt@debian.org>
3567
3568         * ziyi: support for security.
3569
3570 2002-05-02  James Troup  <james@nocrew.org>
3571
3572         * jennifer (accept): call Katie.check_override() unconditional as
3573         no-mail check moved into that function.
3574         (do_byhand): likewise.
3575
3576         * katie.py (Katie.check_override): don't do anything if we're a)
3577         not sending mail or b) the override disparity checks have been
3578         disbled via Dinstall::OverrideDisparityCheck.
3579
3580         * jennifer (check_files): don't hard code Unstable as the suite
3581         used to check for architecture validity; use
3582         Dinstall::DefaultSuite instead, if it exists.
3583         (accept): conditionalize
3584
3585         * katie.py (Katie.update_subst): support global maintainer
3586         override with Dinstall::OverrideMaintainer.
3587
3588         * jennifer (check_distributions): new function, Distribution
3589         validation and mapping.  Uses new SuiteMappings variable from
3590         config file to abstract suite mappings.
3591         (check_changes): call it.
3592
3593         * natalie: renamed; nothing imports or likely will for some time.
3594
3595         * denise (main): remove unused natalie import and init().
3596
3597         * natalie.py (init): removed.
3598         (main): initalize here instead and don't hardcode the database
3599         name.
3600
3601 2002-04-30  James Troup  <james@nocrew.org>
3602
3603         * katie.py (Katie.close_bugs): new function, split out from
3604         announce().
3605         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3606         true.
3607         (Katie.close_bugs): new function, split out
3608         (Katie.close_bugs): return immediately if there are no bugs to
3609         close.
3610
3611         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3612         * katie (do_reject): likewise.
3613         (stable_install): likewise.
3614         * katie.py (Katie.announce): likewise.
3615         (Katie.accept): likewise.
3616         (Katie.check_override): likewise.
3617         (Katie.do_reject): likewise.
3618         * lisa (do_bxa_notification): likewise.
3619         * melanie (main): likewise.
3620
3621         * utils.py (TemplateSubst): change second argument to be a
3622         filename rather than a template since every caller opened a file
3623         on the fly which was ugly and leaked file descriptor.
3624
3625 2002-04-29  James Troup  <james@nocrew.org>
3626
3627         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3628         <hertzog@debian.org> to send 'accepted' announce mails to the
3629         PTS. [#128140]
3630
3631 2002-04-24  James Troup  <james@nocrew.org>
3632
3633         * init_pool.sql (unstable_accepted): add two new fields to
3634         unstable_accepted; in_accepted is a boolean indicating whether or
3635         not the file is in accepted and last_used is a timestamp used by
3636         rhona to determine when to remove symlinks for installed packages.
3637
3638         * katie.py (Katie.accept): auto-build support take 2.  Create
3639         symlinks for all files into a seperate directory.  Add files to
3640         unstable_accepted as paths to the new directory; mark them as
3641         being in accepted for cameron.  Properly conditionalize it on a
3642         configuration variable.
3643
3644         * katie (install): likewise.  Update symlinks to point into the
3645         pool; mark the files for later deletion by rhona and mark them as
3646         not being in accepted for cameron.
3647
3648         * rhona (clean_accepted_autobuild): new function.
3649
3650 2002-04-22  James Troup  <james@nocrew.org>
3651
3652         * jennifer (check_files): handle db_access.get_location_id()
3653         returning -1 properly/better.
3654
3655         * rhona (clean_fingerprints): new function.
3656
3657 2002-04-21  James Troup  <james@nocrew.org>
3658
3659         * utils.py (touch_file): unused; remove.
3660         (plural): likewise.
3661
3662         * jennifer (check_files): close file descriptor used to get the
3663         control file.
3664         (check_md5sums): likewise.
3665         (callback): likewise.
3666
3667         * katie.py (Katie.do_reject): handle manual rejects much better;
3668         call the editor first and get confirmation from the user before
3669         proceeding.
3670
3671         * jennifer (check_signature): prefix_multi_line_string() moved to
3672         utils.
3673
3674         * utils.py (prefix_multi_line_string): moved here from jennifer.
3675
3676 2002-04-20  James Troup  <james@nocrew.org>
3677
3678         * lisa (main): handle non-existent files.
3679
3680         * ashley (main): allow *.katie files as arguments too.
3681
3682 2002-04-19  James Troup  <james@nocrew.org>
3683
3684         * katie.py (Katie.accept): add stuff to help auto-building from
3685         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3686         in the pool), create a symlink to it in the accepted directory and
3687         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3688
3689         * katie (install): undo the "auto-building from accepted" stuff
3690         (i.e. remove the .orig.tar.gz symlink and remove the files from
3691         unstable_accepted table).
3692
3693 2002-04-16  James Troup  <james@nocrew.org>
3694
3695         * jennifer (upload_too_new): fix typo which was causing all
3696         timestamp comparisons to be against the .changes file.  Also move
3697         back to the original directory so we do the comparisons against
3698         accurate timestamps.
3699
3700         * tea (check_missing_tar_gz_in_dsc): new function.
3701
3702         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3703         file mentioned in the .dsc.
3704
3705         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3706         way mails reach debian-{devel-,}changes@l.d.o.
3707
3708 2002-04-02  Ryan Murray  <rmurray@debian.org>
3709
3710         * cron.daily: run shania after rhona
3711         * cron.daily-non-US: likewise.
3712
3713 2002-04-01  James Troup  <james@nocrew.org>
3714
3715         * katie: re-add proposed-updates/stable install support.
3716
3717         * katie.py (Katie.dump_vars): add changes["changes"] as an
3718         optional field; should be mandatory later.
3719
3720 2002-03-31  James Troup  <james@nocrew.org>
3721
3722         * katie (install): support a Suite::<foo>::CopyKatie similar to
3723         CopyChanges.  Done seperately because .katie files don't need to
3724         be mirrored and will probably be copied to another directory as a
3725         result.
3726
3727         * halle (main): add missing debug to options.
3728
3729 2002-03-29  James Troup  <james@nocrew.org>
3730
3731         * madison (main): add a -r/--regex option.
3732
3733 2002-03-26  James Troup  <james@nocrew.org>
3734
3735         * lisa: don't trample on changes["distribution"]; make a copy of
3736         it as changes["suite"] instead and use that.
3737
3738 2002-03-16  Anthony Towns  <ajt@debian.org>
3739
3740         * templates/lisa.bxa_notification: Fix some grammatical errors.
3741         Encourage contact via bxa@ftp-master email address.
3742
3743 2002-03-15  James Troup  <james@nocrew.org>
3744
3745         * jennifer (check_timestamps): remove bogus raise in except.
3746
3747 2002-03-15  Anthony Towns  <ajt@debian.org>
3748
3749         * cron.monthly: rotate mail/archive/bxamail as well as
3750         mail/archive/mail. This is for a complete archive of
3751         correspondence with the BXA.
3752
3753 2002-03-14  Anthony Towns  <ajt@debian.org>
3754
3755         * crypto-in-main changes.
3756
3757         * utils.py (move, copy): add an optional perms= parameter to let you
3758         set the resulting permissions of the moved/copied file
3759         * katie.py (force_move): rejected/morgued files should be unreadable
3760         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3761         should be unreadable.
3762
3763 2002-03-07  Ryan Murray  <rmurray@debian.org>
3764
3765         * katie (install): check for existance of "files id" key as well as
3766         it being set to a valid value.
3767         * katie (install): check for existense and valid value for location
3768         id as well
3769
3770 2002-03-05  Ryan Murray  <rmurray@debian.org>
3771
3772         * katie.py (do_reject): reread the reason file after editing it.
3773
3774 2002-02-25  James Troup  <james@nocrew.org>
3775
3776         * jennifer (check_changes): don't enforce sanity in .changes file
3777         names since it doesn't seem to be possible; pcmica-cs and similar
3778         freak show packages in particular cause real problems.
3779
3780         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3781         each dsc_file since the .orig.tar.gz checking code now uses it as
3782         a boolean.  Fixes bizarro rejections which bogusly claimed
3783         .diff.gz md5sum/size was incorrect.
3784
3785 2002-02-24  James Troup  <james@nocrew.org>
3786
3787         * katie (process_it): reset reject_message.
3788
3789 2002-02-22  James Troup  <james@nocrew.org>
3790
3791         * db_access.py(set_files_id): disable use of
3792         currval('files_id_seq') because it was taking 3 seconds on auric
3793         which is insane (most calls take < 0.01) and simply call
3794         get_files_id() for the return value instead.
3795
3796         * katie.py (Katie.do_query): convenience function; unused by
3797         default, useful for profiling.
3798         * db_access.py (do_query): likewise.
3799
3800         * katie (install): fix insert SQL call when binary has no source.
3801
3802         * lisa (determine_new): auto-correct non-US/main to non-US.
3803         (determine_new): add a warning when adding things to stable.
3804         (edit_index): use our_raw_input().
3805         (edit_overrides): likewise.
3806         (do_new): likewise.  Use re.search() not re.match() since the
3807         default answer may not be the first one.
3808         (do_byhand): likewise.
3809         (do_new): Default to 'S'kip and never 'A'dd.
3810
3811         * jennifer (action): pass prompt to our_raw_input().
3812         * melanie (game_over): likewise.
3813         * katie (action): likewise.
3814
3815         * utils.py (our_raw_input): add an optional prompt argument to
3816         make the function more usable as a drop in replacement for
3817         raw_input().
3818
3819         * jennifer (check_files): correct reject() to not double prefix
3820         when using katie.py based functions.
3821         (check_dsc): likewise.
3822
3823         * katie.py (Katie.reject): prepend a new line if appropriate
3824         rathen than appending one to avoid double new lines when caller
3825         adds one of his own.
3826
3827         * lisa (determine_new): warn if the package is also in other
3828         components.
3829
3830 2002-02-20  James Troup  <james@nocrew.org>
3831
3832         * jennifer (check_files): if .changes file lists "source" in
3833         Architecture field, there must be a .dsc.
3834
3835 2002-02-15  James Troup  <james@nocrew.org>
3836
3837         * ashley (main): add some missing fields.
3838
3839         * katie.py (Katie.check_dsc_against_db): fix to take into account
3840         the fact that the .orig.tar.gz might be in byhand, accepted or
3841         new.  Also fix calling of reject().
3842         (Katie.check_binaries_against_db): fix calling of reject().
3843         (Katie.check_source_against_db): likewise.
3844         (Katie.dump_vars): add missing variables used for bug closures.
3845
3846         * lisa (changes_compare_by_time): sort by reverse time.
3847
3848         * katie.py (Katie.accept): log.
3849         (Katie.dump_vars): missing has_key test for optional changes fields.
3850
3851         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3852         (process_it): traceback goes to stderr, not stdout.
3853         (acknowledge_new): log.
3854         (do_byhand): likewise.
3855
3856         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3857
3858         * add_constraints.sql: add grants for the new fingerprint table.
3859
3860 2002-02-13  James Troup  <james@nocrew.org>
3861
3862         * katie (do_reject): basename the .changes filename before trying
3863         to use it to construct the .reason filename.
3864         (process_it): call Katie.update_subst() so do_reject() DTRT with
3865         the mail template.
3866         (do_reject): setup the mail template correctly.
3867
3868 2002-02-12  James Troup  <james@nocrew.org>
3869
3870         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3871         (check_files): don't abuse global dictionaries.
3872         (Ent): use all variables.
3873         (check_timestamps): don't abuse global dictionaries.
3874
3875         * fernanda.py: renamed to .py so lisa can import it.
3876         (check_dsc): remove unused local variables (pychecker).
3877         (display_changes): split off from check_changes.
3878
3879         * katie: rewritten; most of the functionality moves to jennifer;
3880         what's left is the code to install packages once a day from the
3881         'accepted' directory.
3882
3883         * jennifer: new program, processes packages in 'unchecked'
3884         (i.e. most of the non-install functionality of old katie).
3885
3886         * katie.py: common functions shared between the clique of
3887         jennifer, lisa and katie.
3888
3889         * lisa: new program; handles NEW and BYHAND packages.
3890
3891         * jeri (usage): new function.
3892         (main): use it.
3893         (check_package): remove unused local variable (pychecker).
3894
3895         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3896         binaries and source.  Add install_date to source.
3897
3898         * halle (usage): new function.
3899         (main): use it.  Remove unused options.
3900         (check_changes): remove unused local variable (pychecker).
3901
3902         * add_constraints.sql: add fingerprint references.
3903
3904         * db_access.py (get_or_set_fingerprint_id): new function.
3905
3906         * ashley (main): new program; dumps the contents of a .katie file
3907         to stdout.
3908
3909         * alyson (main): remove option handling since we don't actually
3910         support any.
3911         * cindy (main): likewise.
3912
3913         * remove unnecessary imports and pre-define globals (pychecker).
3914
3915 2002-02-11  Anthony Towns  <ajt@debian.org>
3916
3917         * added installation-report and upgrade-report pseudo-packages
3918
3919 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3920
3921         * katie (update_subst): use Dinstall::TrackingServer.
3922         * melanie (main): likewise.
3923
3924 2002-01-27  James Troup  <james@nocrew.org>
3925
3926         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3927         noticing, jgg@ for fix.
3928
3929 2002-01-19  James Troup  <james@nocrew.org>
3930
3931         * utils.py (extract_component_from_section): handle non-US
3932         non-main properly.
3933
3934 2002-01-12  James Troup  <james@nocrew.org>
3935
3936         * madison: add support for -S/--source-and-binary which displays
3937         information for the source package and all it's binary children.
3938
3939 2002-01-13  Anthony Towns  <ajt@debian.org>
3940
3941         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3942         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3943           and 2002 key ids.
3944         * katie.conf-non-US: Likewise.
3945         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3946           multiple keys automatically. This is probably only useful for
3947           transitioning from an expired (or revoked?) key.
3948
3949 2002-01-08  Ryan Murray  <rmurray@debian.org>
3950
3951         * debian/python-dep: new file that prints out python:Depends for
3952           substvars
3953         * debian/control: use python:Depends, build-depend on python
3954           lower Depends: on postgresql to Suggests:
3955         * debian/rules: determine python version, install to the correct
3956           versioned dir
3957
3958 2001-12-18  Anthony Towns  <ajt@debian.org>
3959
3960         * ziyi: unlink Release files before overwriting them (in case they've
3961           been merged)
3962         * ziyi: always include checksums/sizes for the uncompressed versions
3963           of Sources and Packages, even if they're not present on disk
3964
3965 2001-11-26  Ryan Murray  <rmurray@debian.org>
3966
3967         * ziyi (main): add SigningPubKey config option
3968         * katie.conf: use SigningPubKey config option
3969         * katie.conf-non-US: likewise
3970
3971 2001-11-24  James Troup  <james@nocrew.org>
3972
3973         * katie (acknowledge_new): log newness.
3974
3975 2001-11-24  Anthony Towns  <ajt@debian.org>
3976
3977         * ziyi (real_arch): bail out if some moron forgot to reset
3978         untouchable on stable.
3979         (real_arch): source Release files.
3980
3981 2001-11-19  James Troup  <james@nocrew.org>
3982
3983         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3984         utils.get_conf().
3985         * shania (main): likewise.
3986
3987         * rhona (main): add default options.
3988
3989         * db_access.py (get_archive_id): case independent.
3990
3991         * katie (action): sort files so that ordering is consistent
3992         between mails; noticed/requested by Joey.
3993
3994 2001-11-17  Ryan Murray  <rmurray@debian.org>
3995
3996         * utils.py: add get_conf function, change startup code to read all
3997           config files to the Cnf that get_conf returns
3998           use the component list from the katie conf rather than the hardcoded
3999           list.
4000         * all scripts: use new get_conf function
4001         * shania: fix try/except around changes files
4002         * jenna: only do debian-installer if it is a section in Cnf
4003
4004 2001-11-16  Ryan Murray  <rmurray@debian.org>
4005
4006         * shania (main): Initialize days to a string of a number.
4007                  (main): Initialize Cnf vars before reading in Cnf
4008
4009 2001-11-14  Ryan Murray  <rmurray@debian.org>
4010
4011         * shania (main): Initialize days to a number.
4012
4013 2001-11-04  James Troup  <james@nocrew.org>
4014
4015         * docs/Makefile: use docbook-utils' docbook2man binary.
4016
4017         * Change all "if foo == []" constructs into "if not foo".
4018
4019         * katie (check_changes): when installing into stable from
4020         proposed-updates, remove all non-stable target distributions.
4021         (check_override): don't check for override disparities on stable
4022         installs.
4023         (stable_install): update install_bytes appropriately.
4024         (reject): stable rejection support; i.e. don't remove files when
4025         rejecting files in the pool, rather remove them from the
4026         proposed-update suite instead, rhona will do the rest.
4027         (manual_reject): support for a stable specific template.
4028         (main): setup up stable rejector in subst.
4029
4030 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4031
4032         * debian/control (Build-Depends): docbook2man has been superseded
4033         by docbook-utils.
4034
4035         * neve (main): exit with a more useful error message.
4036         (update_suites): Suite::<suite>::Version, Origin and Description
4037         are not required, so don't fail if they don't exist.
4038
4039         * db_access.py (get_archive_id): return -1 on error rather than
4040         raise an exception.
4041         (get_location_id): likewise.
4042
4043         * madison (main): don't exit on the first not-found package,
4044         rather exit with an appropriate return code after processing all
4045         packages.
4046
4047 2001-11-03  James Troup  <james@nocrew.org>
4048
4049         * claire.py (find_dislocated_stable): add per-architecture
4050         symlinks for dislocated architecture: all debs.
4051
4052 2001-10-19  Anthony Towns  <ajt@debian.org>
4053
4054         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4055
4056 2001-10-10  Anthony Towns  <ajt@debian.org>
4057
4058         * claire.py (fix_component_section): do _not_ assign to None under
4059         any circumstances
4060
4061 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4062
4063         * melanie (main): don't duplicate architectures when removing from
4064         more than one suite.
4065
4066         * heidi (main, process_file, get_list): report suite name not ID.
4067
4068         * naima (nmu_p): be case insensitive.
4069
4070         * naima (action): more list handling clean ups.
4071
4072         * melanie (main): clean up lists handling to use string.join and
4073         IN's.
4074
4075         * madison (main): clean up suite and architecture argument parsing
4076         to use slices less and string.join more.
4077
4078         * utils.py (parse_changes): Use string.find() instead of slices for
4079         string comparisons thereby avoid hardcoding the length of strings.
4080         * ziyi (main): likewise.
4081
4082 2001-10-07  James Troup  <james@nocrew.org>
4083
4084         * Remove mode argument from utils.open_files() calls if it's the
4085         default, i.e. 'r'.
4086
4087 2001-09-27  James Troup  <james@nocrew.org>
4088
4089         * katie (init): new function; options clean up.
4090         (usage): add missing options, remove obsolete ones.
4091         (main): adapt for the two changes above.  If the lock file or
4092         new-ack log file don't exist, create them.  Don't try to open the
4093         new-ack log file except running in new-ack mode.
4094
4095         * alyson (main): initialize all the tables that are based on the
4096         conf file.
4097
4098         * utils.py (touch_file): like touch(1).
4099         (where_am_i): typo.
4100
4101         * catherine (usage): new.
4102         (main): use it.  options cleanup.
4103         * claire.py: likewise.
4104         * fernanda: likewise.
4105         * heidi: likewise.
4106         * jenna: likewise.
4107         * shania: likewise.
4108         * ziyi: likewise.
4109
4110         * andrea: options cleanup.
4111         * charisma: likewise.
4112         * julia: likewise.
4113         * madison: likewise.
4114         * melanie: likewise.
4115         * natalie: likewise.
4116         * rhona: likewise.
4117         * tea: likewise.
4118
4119 2001-09-26  James Troup  <james@nocrew.org>
4120
4121         * utils.py: default to sane config file locations
4122         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4123         or they can point to the real ones through use of a new Config
4124         section.  Based on an old patch by Adam Heath.
4125         (where_am_i): use the new default config stuff.
4126         (which_conf_file): likewise.
4127         (which_apt_conf_file): likewise.
4128
4129         * charisma (main): output defaults to
4130         `Package~Version\tMaintainer'; input can be of either form.  When
4131         parsing the new format do version comparisons, when parsing the
4132         old format assume anything in the extra file wins.  This fixes the
4133         problem of newer non-US packages being overwhelmed by older
4134         versions still in stable on main.
4135
4136 2001-09-17  James Troup  <james@nocrew.org>
4137
4138         * natalie.py (list): use result_join().
4139
4140         * denise (main): result_join() moved to utils.
4141
4142         * utils.py (result_join): move to utils; add an optional seperator
4143         argument.
4144
4145 2001-09-14  James Troup  <james@nocrew.org>
4146
4147         * heidi (set_suite): new function; does --set like natalie does,
4148         i.e. turns it into a sequence of --add's and --remove's
4149         internally.  This is a major win (~20 minute run time > ~20
4150         seconds) in the common, everday (i.e. testing) case.
4151         (get_id): common code used by set_suite() and process_file().
4152         (process_file): call set_suite() and get_id().
4153         (main): add logging support.
4154
4155         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4156         files.
4157
4158         * utils.py (parse_changes): use slices or simple string comparison
4159         in favour of regexes where possible.
4160
4161         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4162         fact that the string VARDATA() points to are not null terminated.
4163
4164         * denise (result_join): new function; like string.join() but
4165         handles None's.
4166         (list): use it.
4167         (main): likewise.
4168
4169         * charisma (main): python-pygresql 7.1 returns None not "".
4170
4171 2001-09-14  Ryan Murray  <rmurray@debian.org>
4172
4173         * natalie.py (list): handle python-pygresql 7.1 returning None.
4174
4175 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4176
4177         * madison (main): return 1 if no package is found.
4178
4179 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4180
4181         * madison (main): better error handling for incorrect
4182         -a/--architecture or -s/--suite arguments.
4183         (usage): new.
4184         (main): use it.
4185
4186 2001-09-05  Ryan Murray  <rmurray@debian.org>
4187
4188         * charisma, madison, katie: remove use of ROUser
4189         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4190
4191 2001-08-26  James Troup  <james@nocrew.org>
4192
4193         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4194         maintained packages at cjwatson@'s request.
4195
4196 2001-08-21  James Troup  <james@nocrew.org>
4197
4198         * madison (main): add -a/--architecture support.
4199
4200         * jenna: use logging instead of being overly verbose on stdout.
4201
4202 2001-08-11  Ryan Murray  <rmurray@debian.org>
4203
4204         * melanie: add functional help option
4205
4206 2001-08-07  Anthony Towns  <ajt@debian.org>
4207
4208         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4209
4210 2001-07-28  James Troup  <james@nocrew.org>
4211
4212         * katie (check_dsc): ensure source version is >> than existing
4213         source in target suite.
4214
4215 2001-07-25  James Troup  <james@nocrew.org>
4216
4217         * natalie.py: add logging support.
4218
4219         * utils.py (open_file): make the second argument optional and
4220         default to read-only.
4221
4222         * rene (main): work around broken source packages that duplicate
4223         arch: all packages with arch: !all packages (no longer allowed
4224         into the archive by katie).
4225
4226 2001-07-13  James Troup  <james@nocrew.org>
4227
4228         * katie (action): don't assume distribution is a dictionary.
4229         (update_subst): don't assume architecture is a dictionary and that
4230         maintainer822 is defined.
4231         (check_changes): recognise nk_format exceptions.
4232         (check_changes): reject on 'testing' only uploads.
4233         (check_files): when checking to ensure all packages are newer
4234         versions check against arch-all packages too.
4235         (check_dsc): enforce the existent of a sane set of mandatory
4236         fields.  Ensure the version number in the .dsc (modulo epoch)
4237         matches the version number in the .changes file.
4238
4239         * utils.py (changes_compare): ignore all exceptions when parsing
4240         the changes files.
4241         (build_file_list): don't UNDEF on a changes file with no format
4242         field.
4243
4244 2001-07-07  James Troup  <james@nocrew.org>
4245
4246         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4247         rather than 'changedbyname' to avoid false negatives on uploads
4248         with an email-address-only Changed-By field.
4249         (check_dsc): don't overwrite reject_message; append to it.
4250         (check_signature): likewise.
4251         (check_changes): likewise.
4252         (announce): condition logging on 'action'.
4253
4254         * logging.py: new logging module.
4255
4256         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4257         sub-tree into a separate (global) variable.
4258         (check_dsc): ensure format is 1.0 to retain backwards
4259         compatability with dpkg-source in potato.
4260         (main): only try to obtain the lock when not running in no-action
4261         mode.
4262         Use the new logging module.
4263
4264         * christina: initial version; only partially usable.
4265
4266 2001-06-28  Anthony Towns  <ajt@debian.org>
4267
4268         * apt.conf: Add ExtraOverrides to auric.
4269
4270 2001-06-25  James Troup  <james@nocrew.org>
4271
4272         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4273         they preferred the name 'Uploaders'.
4274
4275 2001-06-23  James Troup  <james@nocrew.org>
4276
4277         * katie (check_files): fix typo in uncommon rejection message,
4278         s/sourceversion/source version/.
4279
4280         * denise (main): we can't use print because stdout has been
4281         redirected.
4282
4283         * katie (source_exists): new function; moved out of check_files()
4284         and added support for binary-only NMUs of earlier sourceful NMUs.
4285
4286         * rhona (clean): find_next_free has moved.
4287
4288         * utils.py (find_next_free): new function; moved here from rhona.
4289         Change too_many to be an argument with a default value, rather
4290         than a hardcoded variable.
4291
4292         * shania: rewritten to work better; REJECTion reminder mail
4293         handling got lost though.
4294
4295 2001-06-22  James Troup  <james@nocrew.org>
4296
4297         * rhona (main): remove unused override code.
4298
4299         * fernanda (main): remove extraneous \n's from utils.warn calls.
4300         * natalie.py (list): likewise.
4301
4302         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4303         use utils.{warn,fubar} where appropriate.
4304
4305 2001-06-21  James Troup  <james@nocrew.org>
4306
4307         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4308         functionality.
4309         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4310         by the "Maintainers" field in the .dsc file and maintainer groups.
4311         (nmu_p.__init__): read in the list of group maintainer names.
4312         (announce): use nmu_p.
4313
4314 2001-06-20  James Troup  <james@nocrew.org>
4315
4316         * rene (main): hardcode the suite experimental is compared to by
4317         name rather than number.
4318
4319         * katie (check_files): differentiate between doesn't-exist and
4320         permission-denied in "can not read" rejections; requested by edd@.
4321         (check_dsc): use os.path.exists rather than os.access to allow the
4322         above check to kick in.
4323
4324         * heidi (process_file): read all input before doing anything and
4325         use transactions.
4326
4327 2001-06-15  James Troup  <james@nocrew.org>
4328
4329         * fernanda: new script; replaces old 'check' shell script
4330         nastiness.
4331
4332 2001-06-14  James Troup  <james@nocrew.org>
4333
4334         * katie: actually import traceback module to avoid amusing
4335         infinite loop.
4336
4337 2001-06-10  James Troup  <james@nocrew.org>
4338
4339         * utils.py (extract_component_from_section): fix to handle just
4340         'non-free' and 'contrib'.  Also fix to handle non-US in a
4341         completely case insensitive manner as a component.
4342
4343 2001-06-08  James Troup  <james@nocrew.org>
4344
4345         * madison (arch_compare): sort function that sorts 'source' first
4346         then alphabetically.
4347         (main): use it.
4348
4349 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4350
4351         * catherine (poolize): explicitly make poolized_size a long so it
4352         doesn't overflow when poolizing e.g. entire archives.
4353
4354 2001-06-01  James Troup  <james@nocrew.org>
4355
4356         * utils.py (send_mail): throw exceptions rather than exiting.
4357
4358         * katie (process_it): catch exceptions and ignore them.
4359
4360 2001-06-01  Michael Beattie  <mjb@debian.org>
4361
4362         * added update-mailingliststxt and update-readmenonus to update
4363         those files, respectively. modified cron.daily{,-non-US} to
4364         use them.
4365
4366 2001-05-31  Anthony Towns  <ajt@debian.org>
4367
4368         * rhona: make StayOfExecution work.
4369
4370 2001-05-31  James Troup  <james@nocrew.org>
4371
4372         * rhona (find_next_free): fixes to not overwrite files but rename
4373         them by appending .<n> instead.
4374         (clean): use find_next_free and use dated sub-directories in the
4375         morgue.
4376
4377         * utils.py (move): don't overwrite files unless forced to.
4378         (copy): likewise.
4379
4380 2001-05-24  James Troup  <james@nocrew.org>
4381
4382         * katie (check_files): determine the source version here instead
4383         of during install().
4384         (check_files): check for existent source with bin-only NMU
4385         support.
4386         (main): sort the list of changes so that the source-must-exist
4387         check Does The Right Thing(tm).
4388
4389         * utils.py (changes_compare): new function; sorts a list of
4390         changes files by 'have-source', source, version.
4391         (cc_fix_changes): helper function.
4392         (parse_changes): use compiled regexes.
4393         (fix_maintainer): likewise.
4394
4395         * rene (main): warn about packages in experimental that are
4396         superseded by newer versions in unstable.
4397
4398 2001-05-21  James Troup  <james@nocrew.org>
4399
4400         * rene (main): add support for checking for ANAIS (Architecture
4401         Not Allowed In Source) packages.
4402
4403 2001-05-17  James Troup  <james@nocrew.org>
4404
4405         * katie (check_changes): initalize `architecture' dictionary in
4406         changes global so that if we can't parse the changes file for
4407         whatever reason we don't undef later on.
4408
4409         * utils.py (parse_changes): fix handling of multi-line fields
4410         where the first line did have data.
4411
4412 2001-05-05  Anthony Towns  <ajt@debian.org>
4413
4414         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4415         (It should always have been there. Ooopsy.)
4416
4417 2001-05-03  Anthony Towns  <ajt@debian.org>
4418
4419         * jenna: Cleanup packages that move from arch:any to arch:all or
4420         vice-versa.
4421
4422 2001-04-24  Anthony Towns  <ajt@debian.org>
4423
4424         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4425         cope with debian-installer and boot-floppies' md5sum.txt.
4426
4427 2001-04-16  James Troup  <james@nocrew.org>
4428
4429         * katie (check_changes): add missing %s format string argument.
4430         (stable_install): temporary work around for morgue location to
4431         move installed changes files into.
4432         (stable_install): helps if you actually read in the template.
4433         (manual_reject): fix for editing of reject messages which was
4434         using the wrong variable name.
4435
4436         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4437
4438 2001-04-13  James Troup  <james@nocrew.org>
4439
4440         * katie (manual_reject): Cc the installer.
4441         (reject): don't.
4442         (check_changes): remove unused maintainer-determination code.
4443         (update_subst): add support for Changed-By when setting the
4444         *MAINTAINER* variables.
4445
4446         * rene (bar): new function to check for packages on architectures
4447         when they shouldn't be.
4448
4449         * natalie.py (main): use fubar() and warn() from utils.
4450
4451         * utils.py (whoami): new mini-function().
4452         * melanie (main): use it.
4453         * katie (manual_reject): likewise.
4454
4455 2001-04-03  James Troup  <james@nocrew.org>
4456
4457         * katie (action): ignore exceptions from os.path.getmtime() so we
4458         don't crash on non-existent changes files (e.g. when they are
4459         moved between the start of the install run in cron.daily and the
4460         time we get round to processing them).
4461
4462         * madison (main): also list source and accept -s/--suite.
4463
4464         * jenna (generate_src_list): missing \n in error message.
4465
4466         * katie (update_subst): add sane defaults for when changes is
4467         skeletal.
4468
4469 2001-03-29  James Troup  <james@nocrew.org>
4470
4471         * melanie (main): use fubar() and warn() from utils.  Remember who
4472         the maintainer for the removed packages are and display that info
4473         to the user.  Readd support for melanie-specific Bcc-ing that got
4474         lost in the TemplateSubst transition.
4475
4476         * utils.py (fubar): new function.
4477         (warn): like wise.
4478
4479         * db_access.py (get_maintainer): as below.
4480
4481         * charisma (get_maintainer): moved the bulk of this function to
4482         db_access so that melanie can use it too.
4483
4484         * claire.py (find_dislocated_stable): restrict the override join
4485         to those entries where the suite is stable; this avoids problems
4486         with packages which have moved to new sections (e.g. science)
4487         between stable and unstable.
4488
4489 2001-03-24  James Troup  <james@nocrew.org>
4490
4491         * catherine (poolize): new function; not really independent of
4492         main() fully, yet.
4493         (main): use it.
4494
4495         * katie (stable_install): __SUITE__ needs to be space prefixed
4496         because buildd's check for 'INSTALLED$'.
4497
4498 2001-03-22  James Troup  <james@nocrew.org>
4499
4500         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4501
4502         * jenna: rewritten; now does deletions on a per-suite level
4503         instead of a per-suite-component-architecture-type level.  This
4504         allows mutli-component packages to be auto-cleaned (and as a
4505         bonus, reduces the code size and duplication).
4506
4507 2001-03-22  Anthony Towns  <ajt@debian.org>
4508
4509         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4510         instead of just giving a gpg error.
4511
4512 2001-03-21  James Troup  <james@nocrew.org>
4513
4514         * madison (main): use apt_pkg.VersionCompare to sort versions so
4515         that output is correctly sorted for packages like debhlper.
4516         Noticed by ajt@.
4517
4518         * tea (check_source_in_one_dir): actually find problematic source
4519         packages.
4520
4521         * katie (check_dsc): remember the orig.tar.gz's location ID if
4522         it's not in a legacy suite.
4523         (check_diff): we don't use orig_tar_id.
4524         (install): add code to handle sourceful diff-only upload of
4525         packages which change components by copying the .orig.tar.gz into
4526         the new component, if it doesn't already exist there.
4527         (process_it): reset orig_tar_location (as above).
4528
4529         * melanie (main): use template substiution for the bug closing
4530         emails.
4531         (main): don't hardcode bugs.debian.org or packages.debian.org
4532         either; use configuration items.
4533
4534         * katie: likewise.
4535
4536         * natalie.py (init): use None rather than 'localhost' for the
4537         hostname given to pg.connect.
4538
4539         * utils.py (TemplateSubst): new function; lifted from
4540         userdir-ldap.
4541
4542 2001-03-21  Ryan Murray  <rmurray@debian.org>
4543
4544         * katie (announce): fix the case of non-existent
4545         Suite::$SUITE::Announce.
4546
4547 2001-03-20  Ryan Murray  <rmurray@debian.org>
4548
4549         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4550         /usr/.
4551
4552         * alyson (main): use config variable for database name.
4553         * andrea (main): likewise.
4554         * catherine (main): likewise.
4555         * charisma (main): likewise.
4556         * cindy (main): likewise.
4557         * claire.py (main): likewise.
4558         * denise (main): likewise.
4559         * heidi (main): likewise.
4560         * jenna (main): likewise.
4561         * katie (main): likewise.
4562         * madison (main): likewise.
4563         * melanie (main): likewise.
4564         * neve (main): likewise.
4565         * rhona (main): likewise.
4566         * tea (main): likewise.
4567
4568 2001-03-15  James Troup  <james@nocrew.org>
4569
4570         * rhona (check_sources): fixed evil off by one (letter) error
4571         which was causing only .dsc files to be deleted when cleaning
4572         source packages.
4573
4574         * charisma (get_maintainer_from_source): remove really stupid and
4575         gratuitous IN sub-query and replace with normal inner join.
4576         (main): connect as read-only user nobody.
4577
4578         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4579         with EXISTS.
4580         (check_files): likewise; still disabled by default though.
4581         (clean_binaries): add ' seconds' to the mysterious number in the
4582         output.
4583         (clean): likewise.
4584
4585         * tea (check_files): add missing global declaration on db_files.
4586
4587 2001-03-14  James Troup  <james@nocrew.org>
4588
4589         * rhona: rewritten large chunks. Removed a lot of the silly
4590         selecting into dictionaries and replaced it with 'where exists'
4591         based sub queries.  Added support for StayOfExecution.  Fix the
4592         problem with deleting dsc_files too early and disable cleaning of
4593         unattached files.
4594
4595 2001-03-14  Anthony Towns  <ajt@debian.org>
4596
4597         * katie (announce): also check Changed-By when trying to detect
4598         NMUs.
4599
4600 2001-03-06  Anthony Towns  <ajt@debian.org>
4601
4602         * ziyi (main): Generate Release.gpg files as well, using the key from
4603         Dinstall::SigningKey in katie.conf, if present. That key has to be
4604         passwordless, and hence kept fairly secretly.
4605
4606 2001-03-02  James Troup  <james@nocrew.org>
4607
4608         * utils.py (str_isnum): new function; checks to see if the string
4609         is a number.
4610
4611         * shania (main): fix _hideous_ bug which was causing all files > 2
4612         weeks old to be deleted from incoming, even if they were part of a
4613         valid upload.
4614
4615 2001-02-27  James Troup  <james@nocrew.org>
4616
4617         * melanie (main): accept new argument -C/--carbon-copy which
4618         allows arbitarty carbon-copying of the bug closure messages.
4619         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4620         separate variable.
4621
4622 2001-02-27  Anthony Towns  <ajt@debian.org>
4623
4624         * ziyi: new program; generates Release files.
4625
4626 2001-02-25  James Troup  <james@nocrew.org>
4627
4628         * katie (reject): add missing '\n' to error message.
4629         (manual_reject): likewise.
4630         (install): catch exceptions from moving the changes file into DONE
4631         and ignore them.
4632
4633         * tea (check_md5sums): new function.
4634
4635 2001-02-25  Michael Beattie  <mjb@debian.org>
4636
4637         * melanie: use $EDITOR if available.
4638
4639 2001-02-15  James Troup  <james@nocrew.org>
4640
4641         * utils.py (parse_changes): don't crash and burn on empty .changes
4642         files.  Symptoms noticed by mjb@.
4643
4644 2001-02-15  Adam Heath  <doogie@debian.org>
4645
4646         * denise (main): use an absolute path for the output filename.
4647
4648         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4649         compile errors with postgresql-dev >= 7.0.
4650
4651 2001-02-12  James Troup  <james@nocrew.org>
4652
4653         * rene: initial version.
4654
4655         * andrea: initial version.
4656
4657         * catherine (main): remove obsolete assignment of arguments.
4658
4659 2001-02-09  James Troup  <james@nocrew.org>
4660
4661         * catherine: first working version.
4662
4663 2001-02-06  James Troup  <james@nocrew.org>
4664
4665         * katie (check_files): validate the priority field; i.e. ensure it
4666         doesn't contain a '/' (to catch people prepending the priority
4667         with the component rather than the section).
4668         (check_override): don't warn about source packages; the only check
4669         is on section and we have no GUI tools that would use the Section
4670         field for a Sources file.
4671         (announce): use tags rather than severities for NMUs.  Requested
4672         by Josip Rodin <joy@>. [#78035]
4673
4674 2001-02-04  James Troup  <james@nocrew.org>
4675
4676         * tea (check_override): new function; ensures packages in suites
4677         are also in the override file.  Thanks to bod@ for noticing that
4678         such packages existed.
4679
4680         * katie: move file type compiled regular expressions to utils as
4681         catherine uses them too.
4682         (check_changes): always default maintainer822 to the installer
4683         address so that any bail out won't cause undefs later.
4684         (check_files): update file type re's to match above.
4685         (stable_install): likewise.
4686         (reject): handle any except from moving the changes files.  Fixes
4687         crashes on unreadable changes files.
4688
4689         * melanie (main): add an explanation of why things are not removed
4690         from testing.
4691
4692 2001-01-31  James Troup  <james@nocrew.org>
4693
4694         * melanie (main): ignore a) no message, b) removing from stable or
4695         testing when invoked with -n/--no-action.
4696
4697         * katie (check_override): lower section before checking to see if
4698         we're whining about 'non-US' versus 'non-US/main'.
4699
4700         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4701         function so that we can use inside of PostgreSQL.
4702
4703 2001-01-28  James Troup  <james@nocrew.org>
4704
4705         * katie: updated to pass new flag to parse_changes() and deal with
4706         the exception raised on invalid .dsc's if appropriate.
4707         * shania (main): likewise.
4708         * melanie (main): likewise.
4709
4710         * tea (check_dscs): new function to validate all .dsc files in
4711         unstable.
4712
4713         * utils.py (parse_changes): if passed an additional flag, validate
4714         the .dsc file to ensure it's extractable by dpkg-source.
4715         Requested by Ben Collins <bcollins@>.
4716
4717 2001-01-27  James Troup  <james@nocrew.org>
4718
4719         * madison (main): connect to the DB as nobody.
4720
4721         * katie (check_files): remove support for -r/--no-version-check
4722         since it makes no sense under katie (jenna will automatically
4723         remove the (new) older version) and was evil in any event.
4724         (check_changes): add missing new line to rejection message.
4725         (check_dsc): likewise.
4726         (process_it): reset reject_message here.
4727         (main): not here.  Also remove support for -r.
4728
4729 2001-01-26  James Troup  <james@nocrew.org>
4730
4731         * katie (check_override): don't whine about 'non-US/main' versus
4732         'non-US'.
4733
4734 2001-01-26  Michael Beattie  <mjb@debian.org>
4735
4736         * natalie.py (usage): new function.
4737         (main): use it.
4738
4739 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4740
4741         * update-mirrorlists: Update README.non-US too (request from Joy).
4742
4743 2001-01-25  James Troup  <james@nocrew.org>
4744
4745         * katie (reject): catch any exception from utils.move() and just
4746         pass, we previously only caught can't-overwrite errors and not
4747         can't-read ones.
4748
4749         * jenna (generate_src_list): use ORDER BY in selects to avoid
4750         unnecessary changes to Packages files.
4751         (generate_bin_list): likewise.
4752
4753         * utils.py (extract_component_from_section): separated out from
4754         build_file_list() as it's now used by claire too.
4755
4756         * claire.py (find_dislocated_stable): rewrite the query to extract
4757         section information and handle component-less locations properly.
4758         Thanks to ajt@ for the improved queries.
4759         (fix_component_section): new function to fix components and
4760         sections.
4761
4762 2001-01-23  James Troup  <james@nocrew.org>
4763
4764         * katie (check_files): set file type for (u?)debs first thing, so
4765         that if we continue, other functions which rely on file type
4766         existing don't bomb out.  If apt_pkg or apt_inst raise an
4767         exception when parsing the control file, don't try any other
4768         checks, just drop out.
4769         (check_changes): new test to ensure there is actually a target
4770         distribution.
4771
4772 2001-01-22  James Troup  <james@nocrew.org>
4773
4774         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4775         <grin@>.
4776         (check_changes): when mapping to unstable, remember to actually
4777         add unstable to the suite list and not just remove the invalid
4778         suite.
4779
4780 2001-01-21  James Troup  <james@nocrew.org>
4781
4782         * katie (check_files): catch exceptions from debExtractControl()
4783         and reject packages which raise any.
4784
4785 2001-01-19  James Troup  <james@nocrew.org>
4786
4787         * katie (check_signature): basename() file name in rejection
4788         message.
4789
4790 2001-01-18  James Troup  <james@nocrew.org>
4791
4792         * katie (in_override_p): remember the section and priority from
4793         the override file so we can check them against the package later.
4794         (check_override): new function; checks section and priority (for
4795         binaries) from the package against the override file and mails the
4796         maintainer about any disparities.
4797         (install): call check_override after announcing the upload.
4798
4799 2001-01-16  James Troup  <james@nocrew.org>
4800
4801         * utils.py (build_file_list): catch ValueError's from splitting up
4802         the files field and translate it into a parse error.
4803
4804         * tea: add support for finding unreferenced files.
4805
4806         * katie (in_override_p): add support for suite-aliasing so that
4807         proposed-updates uploads work again.
4808         (check_changes): catch parses errors from utils.build_file_list().
4809         (check_dsc): likewise.
4810         (check_diff): yet more dpkg breakage so we require even newer a
4811         version.
4812
4813         * jenna (generate_bin_list): don't do nasty path munging that's no
4814         longer needed.
4815
4816         * denise (main): support for non-US; and rename testing's override
4817         files so they're based on testing's codename.
4818
4819 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4820
4821         * melanie: add to the bug closing message explaining what happens
4822         (or rather doesn't) with bugs against packages that have been
4823         removed.
4824
4825 2001-01-14  James Troup  <james@nocrew.org>
4826
4827         * charisma (main): fix silly off-by-one error; suite priority
4828         checking was done using "less than" rather than "less than or
4829         equal to" which was causing weird hesienbugs with wrong Maintainer
4830         fields.
4831
4832 2001-01-10  James Troup  <james@nocrew.org>
4833
4834         * katie (in_override_p): adapted to use SQL-based overrides.
4835         read_override_file function disappears.
4836
4837         * db_access.py: add new functions get_section_id, get_priority_id
4838         and get_override_type_id.
4839         (get_architecture_id): return -1 if the architecture is not found.
4840
4841         * heidi: switch %d -> %d in all SQL queries.
4842         (get_list): Use string.join where appropriate.
4843
4844         * rhona (in_override_p): don't die if the override file doesn't
4845         exist.
4846         (main): warn if the override file doesn't exist.
4847
4848         * alyson: new script; will eventually sync the config file and the
4849         SQL database.
4850
4851         * natalie.py: new script; manipulates overrides.
4852
4853         * melanie: new script; removes packages from suites.
4854
4855 2001-01-08  James Troup  <james@nocrew.org>
4856
4857         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4858         anything it just changed the symptom.  Recognise the new breakage
4859         and reject them too.
4860
4861 2001-01-07  James Troup  <james@nocrew.org>
4862
4863         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4864         to the .changes file, be sure to set up files[filename]["type"]
4865         too.
4866
4867 2001-01-06  James Troup  <james@nocrew.org>
4868
4869         * katie (check_diff): new function; detects bad diff files
4870         produced by dpkg 1.8.1 and rejects thems.
4871         (process_it): call check_diff().
4872         (check_dsc): gar.  Add support for multiple versions of the
4873         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4874         and size against all versions and use one which matches if
4875         possible and exclude any that don't from being poolized to avoid
4876         file overwrites.  Thanks to broonie@ for providing the example.
4877         (install): skip any files marked as excluded as above.
4878
4879 2001-01-05  James Troup  <james@nocrew.org>
4880
4881         * heidi (process_file): add missing argument to error message.
4882
4883 2001-01-04  James Troup  <james@nocrew.org>
4884
4885         * heidi (main): fix handling of multiple files by reading all
4886         files not just the first file n times (where n = the number of
4887         files passed as arguments).
4888
4889 2001-01-04  Anthony Towns  <ajt@debian.org>
4890
4891         * katie (check_dsc): proper fix for the code which locates the
4892         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4893
4894 2000-12-20  James Troup  <james@nocrew.org>
4895
4896         * rhona: replace IN's with EXISTS's to make DELETE time for
4897         binaries and source sane on auric.  Add a -n/--no-action flag and
4898         make it stop actions if used.  Fixed a bug in binaries deletion
4899         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4900         -V/--version.  Giving timing info on deletion till I'm sure it's
4901         sane.
4902
4903         * katie (check_changes): map testing to unstable.
4904
4905         * madison: new script; shows versions in different architectures.
4906
4907         * katie (check_dsc): ensure size matches as well as md5sum;
4908         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4909         #69702.
4910
4911 2000-12-19  James Troup  <james@nocrew.org>
4912
4913         * katie (reject): ignore the "can't overwrite file" exception from
4914         utils.move() and leave the files where they are.
4915         (reject): doh! os.access() test was reversed so we only tried to
4916         move files which didn't exist... replaced with os.path.exists()
4917         test the right way round.
4918
4919         * utils.py (move): raise an exception if we can't overwrite the
4920         destination file.
4921         (copy): likewise.
4922
4923 2000-12-18  James Troup  <james@nocrew.org>
4924
4925         * rhona: first working version.
4926
4927         * db_access.py (get_files_id): force both sizes to be integers.
4928
4929         * katie (main): use size_type().
4930
4931         * utils.py (size_type): new function; pretty prints a file size.
4932
4933 2000-12-17  James Troup  <james@nocrew.org>
4934
4935         * charisma (main): do version compares so that older packages do
4936         not override newer ones and process source first as source wins
4937         over binaries in terms of who we think of as the Maintainer.
4938
4939 2000-12-15  James Troup  <james@nocrew.org>
4940
4941         * katie (install): use the files id for the .orig.tar.gz from
4942         check_dsc().
4943         (install): limit select for legacy source to a) source in legacy
4944         or legacy-mixed type locations and b) distinct on files.id.
4945         (install): rather than the bizarre insert new, delete old method
4946         for moving legacy source into the pool, use a simple update of
4947         files.
4948         (process_it): initalize some globals before each process.
4949
4950 2000-12-14  James Troup  <james@nocrew.org>
4951
4952         * katie (in_override_p): index on binary_type too since .udeb
4953         overrides are in a different file.
4954         (read_override_file): likewise.
4955         (check_files): correct filename passed to get_files_id().
4956         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4957         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4958         (check_dsc): remember the files id of the .orig.tar.gz, not the
4959         location id.
4960
4961 2000-12-13  James Troup  <james@nocrew.org>
4962
4963         * utils.py (poolify): force the component to lower case except for
4964         non-US.
4965
4966         * katie (in_override_p): handle .udeb-specific override files.
4967         (check_files): pass the binary type to in_override_p().
4968         (check_dsc): remember the location id of the old .orig.tar.gz in
4969         case it's not in the pool.
4970         (install): use location id from dsc_files; which is where
4971         check_dsc() puts it for old .orig.tar.gz files.
4972         (install): install files after all DB work is complete.
4973         (reject): basename() the changes filename.
4974         (manual_reject): likewise.
4975
4976         * shania: new progam; replaces incomingcleaner.
4977
4978 2000-12-05  James Troup  <james@nocrew.org>
4979
4980         * katie (check_changes): if inside stable and can't find files
4981         from the .changes; assume it's installed in the pool and chdir()
4982         to there.
4983         (check_files): we are not installing for stable installs, so don't
4984         check for overwriting existing files.
4985         (check_dsc): likewise.
4986         (check_dsc): reorder .orig.tar.gz handling so that we search in
4987         the pool first and only then fall back on any .orig.tar.gz in the
4988         cwd; this avoids false positives on the overwrite check when
4989         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4990         (install): if this is a stable install, bail out to
4991         stable_install() immediately.
4992         (install): dsc_files handling was horribly broken. a) we need to
4993         add files from the .dsc and not the .changes (duh), b) we need to
4994         add the .dsc file itself to dsc_files (to be consistent with neve
4995         if for no other reason).
4996         (stable_install): new function; handles installs from inside
4997         proposed-updates to stable.
4998         (acknowledge_new): basename changes_filename before doing
4999         anything.
5000         (process_it): absolutize the changes filename to avoid the
5001         requirement of being in the same directory as the .changes file.
5002         (process_it): save and restore the cwd as stable installs can
5003         potentially jump into the pool to find files.
5004
5005         * jenna: dislocated_files support using claire.
5006
5007         * heidi (process_file): select package field from binaries
5008         explicitly.
5009
5010         * db_access.py (get_files_id): fix cache key used.
5011
5012         * utils.py (build_file_list): fix 'non-US/non-free' case in
5013         section/component splitting.
5014         (move): use os.path.isdir() rather than stat.
5015         (copy): likewise.
5016
5017         * claire.py: new file; stable in non-stable munger.
5018
5019         * tea: new file; simply ensures all files in the DB exist.
5020
5021 2000-12-01  James Troup  <james@nocrew.org>
5022
5023         * katie (check_dsc): use regex_safe().
5024         (check_changes): typo in changes{} key:
5025         s/distributions/distribution/.
5026         (install): use changes["source"], not files[file]["source"] as the
5027         latter may not exist and the former is used elsewhere.  Commit the
5028         SQL transaction earlier.
5029
5030         * utils.py (regex_safe): new function; escapes characters which
5031         have meaning to SQL's regex comparison operator ('~').
5032
5033 2000-11-30  James Troup  <james@nocrew.org>
5034
5035         * katie (install): pool_location is based on source package name,
5036         not binary package.
5037
5038         * utils.py (move): if dest is a directory, append the filename
5039         before chmod-ing.
5040         (copy): ditto.
5041
5042         * katie (check_files): don't allow overwriting of existing .debs.
5043         (check_dsc): don't allow overwriting of existing source files.
5044
5045 2000-11-27  James Troup  <james@nocrew.org>
5046
5047         * katie (check_signature): don't try to load rsaref; it's
5048         obsolete.
5049         (in_override_p): don't try to lookup override entries for packages
5050         with an invalid suite name.
5051         (announce): don't assume the suite name is valid; use Find() to
5052         lookup the mailing list name for announcements.
5053
5054         * utils.py (where_am_i): typo; hostname is in the first element,
5055         not second.
5056
5057         * db_access.py (get_suite_id): return -1 on an unknown suite.
5058
5059 2000-11-26  James Troup  <james@nocrew.org>
5060
5061         * katie (install): fix CopyChanges handling; typo in in checking
5062         Cnf for CopyChanges flag and was calling non-existent function
5063         copy_file.
5064
5065         * utils.py (copy): new function; clone of move without the
5066         unlink().
5067
5068 2000-11-25  James Troup  <james@nocrew.org>
5069
5070         * utils.py (build_file_list): handle non-US prefixes properly
5071         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5072         + 'libs' not 'non-US/libs').
5073         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5074         delays.  This is possibly(/probably) exim speicifc and (like other
5075         sendmail options) needs to be in the config file.
5076
5077 2000-11-24  James Troup  <james@nocrew.org>
5078
5079         * rhona (check_sources): we need file id from dsc_files; not id.
5080         Handle non .dsc source files being re-referenced in dsc_files.
5081
5082         * katie (in_override_p): strip out any 'non-US' prefix.
5083         (check_files): use utils.where_am_i() rather than hardcoding.
5084         (check_files): validate the component.
5085         (install): use utils.where_am_i() rather than hardcoding.
5086         (install): fix mail to go to actual recepient.
5087         (reject): likewise.
5088         (manual_reject): likewise.
5089         (acknowledge_new): likewise.
5090         (announce): likewise.
5091
5092         * db_access.py (get_component_id): ignore case when searching for
5093         the component and don't crash if the component can't be found, but
5094         return -1.
5095         (get_location_id): handle -1 from get_component_id().
5096
5097         * jenna (generate_src_list): don't bring 'suite' into our big
5098         multi-table-joining select as we already know the 'suite_id'.
5099         (generate_bin_list): likewise.
5100
5101         * neve (main): don't quit if not on ftp-master.
5102         (process_packages): remove unused variable 'suite_codename'.
5103
5104         * utils.py (move): actually move the file.
5105         (build_file_list): handle non-US prefixes in the section.
5106
5107         * catherine (main): use which_conf_file().
5108         * charisma (main): likewise.
5109         * heidi (main): likewise.
5110         * jenna (main): likewise.
5111         * katie (main): likewise.
5112         * neve (main): likewise.
5113         * rhona (main): likewise.
5114
5115         * utils.py (where_am_i): new routine; determines the archive as
5116         understood by other 'dak' programs.
5117         (which_conf_file): new routine; determines the conf file to read.
5118
5119 2000-11-17  James Troup  <james@nocrew.org>
5120
5121         * katie (install): fix where .changes files for proposed-updates
5122         go.
5123
5124 2000-11-04  James Troup  <james@nocrew.org>
5125
5126         * jenna (main): handle architecture properly if no
5127         -a/--architecture argument is given, i.e. reset architecture with
5128         the values for the suite for each suite.
5129
5130         * Add apt_pkg.init() to the start of all scripts as it's now
5131         required by python-apt.
5132
5133 2000-10-29  James Troup  <james@nocrew.org>
5134
5135         * jenna (generate_bin_list): take an additional argument 'type'
5136         and use it in the SELECT.
5137         (main): if processing component 'main', process udebs and debs.
5138
5139         * neve (process_packages): set up 'type' in 'binaries' (by
5140         assuming .deb).
5141
5142         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5143         (check_files): set up files[file]["dbtype"].
5144         (install): use files[file]["dbtype"] to set up the 'type' field in
5145         the 'binaries' table.
5146
5147         * init_pool.sql: add a 'type' field to the 'binaries' table to
5148         distinguisgh between ".udeb" and ".deb" files.
5149
5150         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5151         dest ? dirname(dest)" type check instead.
5152
5153         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5154         in the pool without crashing.  Also handle the case of being asked
5155         to look for something other than an .orig.tar.gz in the pool.
5156
5157 2000-10-26  James Troup  <james@nocrew.org>
5158
5159         * katie (install): fix filenames put into files table during
5160         poolification of legacy source.
5161
5162         * utils.py (move): work around a bug in os.path.basename() which
5163         cunningly returns '' if there is a trailing slash on the path
5164         passed to it.
5165
5166         * katie (check_dsc): Remove more cruft.  If we find the
5167         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5168         location, make a note of that so we can fix things in install().
5169         (install): as above.  Move any old source out of legacy locations
5170         so that 'apt-get source' will work.
5171         (process_it): reset the flag that indicates to install that the
5172         source needs moved.
5173
5174         * cron.daily: more.  Nowhere near complete yet though.
5175
5176         * katie (install): don't run os.makedirs, a) utils.move() does
5177         this now, b) we weren't removing the user's umask and were
5178         creating dirs with SNAFU permissions.
5179         (check_dsc): rewrite the .orig.tar.gz handling to take into
5180         account, err, package pools.  i.e. look anywhere in the pool
5181         rather than faffing around with two simple paths.
5182
5183         * neve (process_sources): add the .dsc to dsc_files too.
5184
5185 2000-10-25  James Troup  <james@nocrew.org>
5186
5187         * neve (process_sources): don't duplicate .orig.tar.gz's.
5188
5189 2000-10-23  James Troup  <james@nocrew.org>
5190
5191         * utils.py (re_extract_src_version): moved here.
5192
5193         * neve: move re_extract_src_version to utils.
5194         (process_packages): reflect change.
5195
5196         * katie (install): reflect change.
5197
5198 2000-10-19  James Troup  <james@nocrew.org>
5199
5200         * jenna (generate_src_list): handle locations with null
5201         components.
5202         (generate_bin_list): likewise.
5203