]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
[AJ] don't auto-reject on warnings
[dak.git] / ChangeLog
1 2007-08-28  Anthony Towns  <ajt@debian.org>
2
3         * process_unchecked.py: Add support for automatic BYHAND
4         processing.
5         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
6         processing of tag-overrides.
7         * examine_package.py: Summarise duplicate copyright file entries
8         (same md5sum) with a reference to the previous instance, rather
9         than repeating them.
10         * process_new.py: When rejecting from the p-u-new or o-p-u-new
11         holding queues, don't worry if dak has its own reasons for
12         rejecting the package as well as the SRMs.
13
14 2007-06-19  Anthony Towns  <ajt@debian.org>
15
16         * Add nm.debian.org pseudopackage
17
18 2007-06-18  Anthony Towns  <ajt@debian.org>
19
20         * daklib/logging.py: Set umask to not exclude group-writability
21         so we don't get reminded at the start of each month. Thanks to
22         Random J.
23         * dak/override.py: More changes from Herr von Wifflepuck: warn
24         if section of source is different to binary section; restore
25         functionality on source-only overrides; croak if trying to set
26         priority of a source override; never set priority of source
27         overrides; correct typo in logging (s/priority/section/ at
28         one place)
29
30         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
31         * config/debian/cron.daily: auotmatically accept/reject
32         oldstable-proposed-updates based on COMMENTS directory
33
34 2007-06-18  Anthony Towns  <ajt@debian.org>
35
36         * config/debian/apt.conf, config/debian/apt.conf.stable,
37         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
38         (sarge), support for oldstable-proposed-updates, dropping m68k
39         from etch, creating etch-m68k suite, creating lenny.
40
41         * config/debian/vars: update for lenny
42
43         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
44         drop upload limitations, add release postgres user
45         
46         * dak/process_new.py: support for automatically accepting and rejecting
47         packages from proposed-updates holding queues via COMMENTS directory
48         * cron.daily: automatically process COMMENTS-based approvals
49         and rejections for proposed-updates holding queues
50
51         * dak/process_unchecked.py: add support for oldproposedupdates
52         holding queue
53
54         * dak/control_suite.py: allow control-suite to work with etch-m68k
55
56         * dak/generate_releases.py: unlink old Release files before updating
57         them if nlinks > 1 (ie, if two files used to be the same, maybe they
58         shouldn't be when generate-releases is run)
59
60         * dak/generate_releases.py: add a couple of commented lines to make
61         it easier to deal with point releases
62
63         * dak/make_overrides.py: generate overrides for !contrib udebs
64
65         * docs/README.stable-point-release: update docs for doing a
66         point release
67
68 2007-03-05  Anthony Towns  <ajt@debian.org>
69
70         * config/debian/dak.conf: update for 3.1r5.
71         * scripts/debian/ssh-move: add ssh-move script from debbugs
72         * config/debian/cron.unchecked: push version info to debbugs using
73         ssh-move.
74
75 2007-02-14  James Troup  <troup@ries.debian.org>
76
77         * docs/README.config: remove Dinstall::GroupOverrideFilename.
78         * config/debian/dak.conf: likewise.
79         * config/debian-non-US/dak.conf: likewise.
80         * config/debian-security/dak.conf: likewise.
81
82         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
83         experimental differently, just close the bugs and let version
84         tracking sort it out.
85          (nmu_p): remove entire class - now unused.
86          (Upload.__init__): don't use nmu_p.
87
88 2007-02-08  Anthony Towns  <ajt@debian.org>
89
90         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
91         signing key.  Drop maximum index diffs down to 14.
92
93         * config/debian/apt.conf: add udeb support for non-free (testing,
94         unstable) and experimental.
95         * config/debian/dak.conf: likewise.
96
97         * dak/generate_releases.py (main): handle udebs in any component.
98
99         * daklib/queue.py (Upload.build_summaries): handle files without a
100         'type' gracefully.
101
102         * dak/generate_releases.py (print_sha256_files): new function.
103         (main): use it.
104
105         * dak/process_accepted.py (stable_install): fix name of template
106         mail.
107
108         * dak/process_unchecked.py (is_stableupdate): fix invocation of
109         database.get_suite_id().
110
111         * templates/process-new.bxa_notification: Update on request
112         of/after discussion with BIS staff.
113
114         * scripts/debian/mkfilesindices: also handle proposed-updates.
115
116 2007-02-08  Ryan Murray  <rmurray@debian.org>
117
118         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
119         group name for chgrp of mail archives.
120
121         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
122         orig.tar.gz's by picking the first one by file id.
123
124         * dak/override.py (main): limit to binary overrides only for now.
125         (usage): update to match.
126
127         * config/debian/cron.daily: track when we have the accepted lock
128         and clean it up on exit if we have it.  Take/check the
129         cron.unchecked lock just before traping to cleanup on exit.
130         Remove potato override handling.  Remove any dangling symlinks in
131         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
132
133         * config/debian/apt.conf: change default compression scheme for
134         both Sources and Packages to gzip and bzip2 rather than
135         uncompressed and gzip (Packages) and gzip (Sources).  Use old
136         defaults for proposed-updates.
137
138         * dak/control_overrides.py (main): refuse to operate on
139         untouchable suites.
140
141         * config/debian/pseudo-packages.maintainers: drop install,
142         installation, boot-floppy, slink-cd, potato-cd and
143         nonus.debian.org.  Update base.
144         * config/debian/pseudo-packages.description: likewise.
145
146         * daklib/utils.py (re_srchasver): new regex.
147         (parse_changes): use regex to split 'Source (Version)' style
148         Source fields into 'source' and 'source-version'.
149
150         * config/debian/cron.daily: use $base instead of hardcoding path
151         name.
152
153         * scripts/debian/mkfilesindices: source 'vars' file and use it's
154         variables instead of hardcoding path names.
155
156         * config/debian/apt.conf: switch from /org to /srv.
157         * config/debian/apt.conf.buildd: likewise.
158         * config/debian/apt.conf.stable: likewise.
159         * config/debian/cron.daily: likewise.
160         * config/debian/cron.hourly: likewise.
161         * config/debian/cron.monthly: likewise.
162         * config/debian/cron.unchecked: likewise.
163         * config/debian/cron.weekly: likewise.
164         * config/debian/dak.conf: likewise.
165         * config/debian/vars: likewise.
166         * scripts/debian/mkfilesindices: likewise.
167         
168 2007-02-08  James Troup  <james@nocrew.org>
169
170         * dak/process_unchecked.py (check_signed_by_key): new function to
171         ensure .changes files are signed by an authorized uploader.
172         (process_it): use it.
173
174         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
175         to configure per suite/component/architecture binary upload
176         restrictions.
177
178 2006-10-09  James Troup  <james.troup@canonical.com>
179
180         * dak/process_unchecked.py (check_timestamps): change match to
181         search as recent versions of python-apt prefix the string with 'E: '.
182
183 2006-06-26  Ryan Murray  <rmurray@debian.org>
184
185         * dak/process_unchecked.py (check_files): strip optional source version
186         from Source: field in changes file, and ensure what is left is a valid
187         package name.
188
189 2006-06-23  Ryan Murray  <rmurray@debian.org>
190
191         * dak/process_unchecked.py (check_files): also check ProposedUpdates
192         queue for source.
193
194 2006-06-18  Ryan Murray  <rmurray@debian.org>
195
196         * dak/scripts/debian/update-ftpstats: look for dak named processes in
197         the log, too.
198
199         * dak/process_unchecked.py (check_files): only check embargoed and
200         unembargoed queues if the keys are set.
201
202         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
203         and bzip2 for etch.
204
205 2006-06-16  James Troup  <james@nocrew.org>
206
207         * dak/dak.py (init): add new-security-install.
208
209         * dak/new_security_install.py: cleanups and adapt for new naming
210         scheme and other changes.
211
212 2006-06-16  Anthony Towns  <ajt@debian.org>
213
214         * dak/new_security_install.py: initial version imported from
215         klecker.
216
217 2006-06-16  James Troup  <james@nocrew.org>
218
219         [Merged changes from klecker - original author unknown.]
220
221         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
222
223         * dak/security_install.py (do_upload): fix check for oldstable and
224         upload file list handling.
225
226         * dak/process_unchecked.py (check_files): update "check for
227         source" code to also look in Embargoed and Unembargoed queues.
228         (is_unembargo): fix handling of Dir::Queue::Disembargo.
229
230         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
231
232         * config/debian-security/vars (disembargo): add.
233
234         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
235         update.
236         (Process-Unchecked::AcceptedLockFile): add.
237         (Suite::Testing): clean up Version and Description.
238         (SuiteMappings): add silent map from etch-secure to testing.
239
240         * config/debian-security/cron.unchecked: add support for
241         disembargoed queues.
242
243         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
244         files too.
245
246         * config/debian-security/apt.conf: add amd64 to architectures for
247         testing-security.
248
249 2006-06-11  James Troup  <troup@spohr.debian.org>
250
251         * config/debian/cron.daily: invoke process-accepted not
252         process-unchecked.
253
254         * config/debian/vars (scriptsdir): new variable.
255         * config/debian/cron.daily: use it.
256
257         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
258         $base/misc/ instead of versioned $masterdir.  Correct 'dak
259         make-maintainers' invocation to look in $configdir for
260         pseudo-packages.maintainers.
261
262         * daklib/queue.py (Upload.do_reject): use correct name for
263         rejection template.
264
265 2006-06-11  James Troup  <james@nocrew.org>
266
267         * dak/override.py (main): temporarily add content of old X-Katie
268         header back as the PTS apparently filters on it.
269         * dak/process_accepted.py (main): likewise.
270         * dak/process_new.py (main): likewise.
271         * dak/process_unchecked.py (main): likewise.
272         * dak/reject_proposed_updates.py (main): likewise.
273         * dak/rm.py (main): likewise.
274         * daklib/queue.py (Upload.do_reject): likewise.
275
276         * config/debian/cron.unchecked: set -u to error out on undefined
277         variables.  Preset LOCKDAILY to "" accordingly.
278         * config/debian/cron.hourly: likewise.
279         * config/debian/cron.monthly: likewise.
280         * config/debian/cron.weekly: likewise.
281
282         * config/debian/vars (configdir): add new variable pointing to
283         this directory.
284
285         * config/debian/cron.daily: use $configdir inplace of $masterdir
286         when that's what we mean, and don't cd into $masterdir just to run
287         dak scripts as we don't need to do that anymore.
288         * config/debian/cron.hourly: likewise.
289         * config/debian/cron.unchecked: likewise.
290         * config/debian/cron.weekly: likewise.
291
292         * config/debian/dak.conf
293         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
294         user back to list of known users as it's non-trivial to entirely
295         change the owner of a database with postgresql 7.4.
296
297         * daklib/queue.py (Upload.source_exists): use string object
298         methods rather than string module.
299         (Upload.get_anyversion): likewise.
300
301         * daklib/utils.py (validate_changes_file_arg): update filename
302         slicing to cope with new .dak filenames.
303
304         * dak/ls.py (main): add back 'heidi' as a valid argument for
305         -f/--format as people are using it in scripts and breaking that
306         without warning seems rude.
307
308 2006-05-21  James Troup  <james@nocrew.org>
309
310         * dak/rm.py (main): use string .isdigit() rather than
311         utils.str_isnum().
312         * dak/process_new.py (edit_overrides): likewise.
313
314         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
315         string import.
316
317 2006-05-21  James Troup  <james@nocrew.org>
318
319         * dak/check_archive.py (check_indices_files_exist): use list
320         comprehension instead of map().  No longer need to import
321         deprecated string module as a side-effect.
322         * dak/check_overrides.py (process): likewise.
323         (main): likewise.
324         * dak/cruft_report.py (do_obsolete_source): likewise.
325         (main): likewise.
326         * dak/ls.py (main): likewise.
327         * dak/make_suite_file_list.py (write_filelists): likewise.
328         * dak/process_accepted.py (stable_install): likewise.
329         * dak/rm.py (main): likewise.
330         * dak/stats.py (number_of_packages): likewise.
331         * daklib/logging.py (Logger.log): likewise.
332         * daklib/queue.py (Upload.source_exists): likewise.
333         (Upload.cross_suite_version_check): likewise.
334         * daklib/utils.py (parse_args): likewise.
335
336 2006-05-21  James Troup  <james@nocrew.org>
337
338         * daklib/utils.py (process_gpgv_output): new function, split out
339         of check_signature().
340         (check_signature): adapt accordingly.
341         (retrieve_key): new function that will try to retrieve the key
342         that signed a given file from a keyserver.
343         (check_signature): add 'autofetch' argument that if not set
344         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
345         If 'autofetch' is true, invoke retrieve_key().  
346
347         * docs/README.config: document Dinstall::KeyAutoFetch and
348         Dinstall:KeyServer.
349
350 2006-05-20  James Troup  <james@nocrew.org>
351
352         * dak/find_null_maintainers.py (main):
353         s/createtimestamp/createTimestamp/ to make things work with modern
354         slapd.
355
356         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
357         Stable::Version and Stable::Description for 3.1r2.
358
359         * config/debian-non-US/dak.conf: sync with klecker - update
360         version number of 3.0 and MoreInfoURL.
361
362         * docs/README.stable-point-release: Add notes about updating
363         dak.conf and Reject-Proposed-Updates section in particular.
364         s/woody/stable/.  Also need to update README.html.
365
366         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
367
368         * config/debian/apt.conf: Add udeb tree for proposed-updates.
369
370 2006-05-20  Ryan Murray  <rmurray@debian.org>
371
372         * scripts/debian/update-ftpstats: new script to update daily
373         architecture size graph data.
374
375         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
376         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
377         there.
378
379         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
380         before we finish.  Don't push to merkel.
381
382         * dak/process_unchecked.py (check_changes): Also look in
383         ProposedUpdates queue dir.
384         (check_files): likewise.
385
386 2006-05-20  Anthony Towns  <ajt@debian.org>
387
388         * scripts/debian/mkfilesindices: new script to generate file
389         indices used for partial mirroring.
390
391         * config/debian/cron.daily: add progress timestamps.
392
393         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
394         amd64 to testing, unstable and experimental.  Drop sh from
395         experimental.  Move Experimental to dists/experimental.  Add
396         Dir::ProposedUpdates.  Add Architectures::amd64.
397
398         * config/debian/apt.conf: add amd64 to testing, unstable and
399         experimental.  Drop uncompressed Packages files from testing. Drop
400         sh from experimental.  Move experimental to dists/experimental/.
401
402         * config/debian/vars (archs): add amd64.
403
404         * dak/process_unchecked.py (action): Add support for
405         proposed-updates approval queue.
406         (is_stableupdate): new function - checks if the upload is targeted
407         at proposed-updates.
408         (do_stableupdate): likewise - moves upload to proposed-updates
409         holding area.
410
411         * dak/process_new.py (do_new): warn if original or new target
412         suite are invalid.
413
414         * dak/generate_releases.py (print_md5sha_files): less whitespace
415         between the hash and size.
416
417         * dak/generate_index_diffs.py (genchanges): don't say we're not
418         doing anything.  Better formatting of other messages.
419         (main): don't skip experimental and remove some 'doing stuff'
420         prints.
421
422 2006-05-18  James Troup  <james@nocrew.org>
423
424         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
425         query.
426
427         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
428         docstrings, untabify, don't shadow builtins, lowercase non-global
429         variable names, spaces after commas.  Also bail if given any
430         arguments since we don't accept any.
431         * dak/init_db.py: likewise.  Also split large main() into
432         subfunctions and rename get() to sql_get().
433
434         * dak/init_db.py (main): check returned value from
435         database.get_archive_id().
436
437         * dak/dak.py: renamed from shell.py.  Update to support new source
438         layout.  Created init() and usage() functions.  Various
439         pylint-inspired cleanups.  Use daklib utils.warn() and
440         utils.fubar().  Change 'functionality' variable to only have
441         (command, description) and always invoke main() when running the
442         module.  Also support -h.
443
444 2006-05-17  James Troup  <james@nocrew.org>
445
446         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
447         imports of and calls to daklib modules.  Change script name
448         everywhere, i.e. in output, mails, comments and configuration tree
449         + filenames.  Also update references to other renamed scripts,
450         classes and templates.  Use '.dak' instead of '.katie' for the
451         queue info storage files.
452         (Renamed from tea)
453         * dak/check_overrides.py: likewise.  (Renamed from cindy)
454         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
455         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
456         * dak/clean_queues.py: likewise.  (Renamed from shania)
457         * dak/clean_suites.py: likewise.  (Renamed from rhona)
458         * dak/compare_suites.py: likewise.  (Renamed from andrea)
459         * dak/control_overrides.py: likewise.  (Renamed from natalie)
460         * dak/control_suite.py: likewise.  (Renamed from heidi)
461         * dak/cruft_report.py: likewise.  (Renamed from rene)
462         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
463         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
464         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
465         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
466         * dak/import_archive.py: likewise.  (Renamed from neve)
467         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
468         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
469         * dak/init_db.py: likewise. (Renamed from alyson)
470         * dak/init_dirs.py: likewise. (Renamed from rose)
471         * dak/ls.py: likewise. (Renamed from madison)
472         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
473         * dak/make_overrides.py: likewise.  (Renamed from denise)
474         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
475         * dak/mirror_split.py: likewise.  (Renamed from billie)
476         * dak/override.py: likewise.  (Renamed from alicia)
477         * dak/poolize.py: likewise.  (Renamed from catherine)
478         * dak/process_accepted.py: likewise.  (Renamed from kelly)
479         * dak/process_new.py: likewise.  (Renamed from lisa)
480         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
481         * dak/queue_report.py: likewise.  (Renamed from helena)
482         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
483         * dak/rm.py: likewise.  (Renamed from melanie)
484         * dak/security_install.py: likewise.  (Renamed from amber)
485         * dak/split_done.py: likewise.  (Renamed from nina)
486         * dak/stats.py: likewise.  (Renamed from saffron)
487         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
488         * daklib/database.py: likewise.  (Renamed from db_access)
489         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
490         * daklib/utils.py: likewise.
491
492         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
493         doesn't need to notify anyone" string.
494         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
495
496         * dak/process_accepted.py (init): drop -V/--version argument.
497         * dak/process_new.py (init): likewise.
498         * dak/process_unchecked.py (init): likewise.
499         * dak/reject_proposed_updates.py (init): likewise
500
501         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
502
503         * dak/stats.py: in usage() output change STAT to MODE.
504
505 2006-05-15  James Troup  <james@nocrew.org>
506
507         * dak/queue_report.py: remove unused encodings imports.
508
509         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
510         imports.  Initalize 'Cnf' as a global.
511         (BillieDB._internal_recurse): fix 'util.' typo.
512
513         * dak/import_ldap_fingerprints.py (main): drop unused time import and
514         commented out time check for LDAP search.
515
516 2005-12-16  Ryan Murray  <rmurray@debian.org>
517
518         * halle: add support for udebs
519         * kelly: stable_install: add support for binNMU versions
520
521 2005-12-05  Anthony Towns  <aj@erisian.com.au>
522
523         * katie.py: Move accept() autobuilding support into separate function 
524         (queue_build), and generalise to build different queues
525
526         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
527
528         * jennifer: Initial support for enabling embargo handling with the
529         Dinstall::SecurityQueueHandling option.
530         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
531         functions.
532
533         * katie.conf-security: Include embargo options
534         * katie.conf-security: Add Lock dir
535         * init_pool.sql-security: Create disembargo table
536         * init_pool.sql-security: Add constraints for disembargo table
537
538 2005-11-26  Anthony Towns  <aj@erisian.com.au>
539
540         * Merge of changes from klecker, by various people
541
542         * amber: special casing for not passing on amd64 and oldstable updates
543         * amber: security mirror triggering
544         * templates/amber.advisory: updated advisory structure
545         * apt.conf.buildd-security: update for sarge's release
546         * apt.conf-security: update for sarge's release
547         * cron.buildd-security: generalise suite support, update for sarge's release
548         * cron.daily-security: update for sarge's release, add udeb support
549         * vars-security: update for sarge's release
550         * katie.conf-security: update for sarge's release, add amd64 support,
551         update signing key
552
553         * docs/README.names, docs/README.quotes: include the additions
554
555 2005-11-25  Anthony Towns  <aj@erisian.com.au>
556
557         * Changed accepted_autobuild to queue_build everywhere.
558         * Add a queue table.
559         * Add a "queue" field in the queue_build table (currently always 0)
560
561         * jennifer: Restructure to make it easier to support special
562         purpose queues between unchecked and accepted.
563
564 2005-11-25  Anthony Towns  <aj@erisian.com.au>
565
566         * Finishing merge of changes from spohr, by various people still
567
568         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
569         works
570         * jennifer: Re-enable .deb ar format checking
571         * katie.py: Convert to +bX binNMU special casing
572         * rhona: Add some debug output when deleting binaries
573         * cron.daily: Add emilie
574         * cron.unchecked: Add lock files
575
576 2005-11-15  Anthony Towns  <aj@erisian.com.au>
577
578         * Merge of changes from spohr, by various people.
579
580         * tiffani: new script to do patches to Packages, Sources and Contents
581         files for quicker downloads.
582         * ziyi: update to authenticate tiffani generated files
583
584         * dak: new script to provide a single binary with less arbitrary names
585         for access to dak functionality.
586
587         * cindy: script implemented
588
589         * saffron: cope with suites that don't have a Priority specified
590         * heidi: use get_suite_id()
591         * denise: don't hardcode stable and unstable, or limit udebs to unstable
592         * denise: remove override munging for testing (now done by cindy)
593         * helena: expanded help, added new, sort and age options, and fancy headers
594         * jennifer: require description, add a reject for missing dsc file
595         * jennifer: change lock file
596         * kelly: propogation support
597         * lisa: honour accepted lock, use mtime not ctime, add override type_id
598         * madison: don't say "dep-retry"
599         * melanie: bug fix in output (missing %)
600         * natalie: cope with maintainer_override == None; add type_id for overrides
601         * nina: use mtime, not ctime
602
603         * katie.py: propogation bug fixes
604         * logging.py: add debugging support, use | as the logfile separator
605
606         * katie.conf: updated signing key (4F368D5D)
607         * katie.conf: changed lockfile to dinstall.lock
608         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
609         * katie.conf: added tiffani, cindy support
610         * katie.conf: updated to match 3.0r6 release
611         * katie.conf: updated to match sarge's release
612
613         * apt.conf: update for sarge's release
614         * apt.conf.stable: update for sarge's release
615         * apt.conf: bump daily max Contents change to 25MB from 12MB
616
617         * cron.daily: add accepted lock and invoke cindy  
618         * cron.daily: add daily.lock
619         * cron.daily: invoke tiffani
620         * cron.daily: rebuild accepted buildd stuff
621         * cron.daily: save rene-daily output on the web site
622         * cron.daily: disable billie
623         * cron.daily: add stats pr0n
624
625         * cron.hourly: invoke helena
626
627         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
628         * vars: add lockdir, add etch to copyoverrides
629         * Makefile: add -Ipostgresql/server to CXXFLAGS
630
631         * docs/: added README.quotes
632         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
633         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
634
635         * TODO: correct spelling of "conflicts"
636
637 2005-05-28  James Troup  <james@nocrew.org>
638
639         * helena (process_changes_files): use MTIME rather than CTIME (the
640         C's not for 'creation', stupid).
641         * lisa (sort_changes): likewise.
642
643         * jennifer (check_distributions): use has_key rather than an 'in'
644         test which doesn't work with python2.1.  [Probably by AJ]
645
646 2005-03-19  James Troup  <james@nocrew.org>
647
648         * rene (main): use Suite::<suite>::UdebComponents to determine
649         what components have udebs rather than assuming only 'main' does.
650
651 2005-03-18  James Troup  <james@nocrew.org>
652
653         * utils.py (rfc2047_encode): use codecs.lookup() rather than
654         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
655         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
656         <andrew@ubuntu.com>.
657
658 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
659
660         * helena: add -n/--new HTML output option and improved sorting
661         options.
662
663 2005-03-06  Ryan Murray  <rmurray@debian.org>
664
665         * shania(main): use Cnf::Dir::Reject instead of REJECT
666
667 2005-02-08  James Troup  <james@nocrew.org>
668
669         * rene (main): add partial NBS support by checking that binary
670         packages are built by their real parent and not some random
671         stranger.
672         (do_partial_nbs): likewise.
673
674 2005-01-18  James Troup  <james@nocrew.org>
675
676         * katie.py (Katie.build_summaries): avoid leaking file handle when
677         extracting package description.
678         (Katie.force_reject): remember and close each file descriptor we
679         use.
680         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
681         s/reason_file/reason_fd/ because it's a file descriptor.
682         (Katie.check_dsc_against_db): avoid leaking file handle whenever
683         invoking apt_pkg.md5sum().
684
685         * jennifer (check_deb_ar): new function: sanity check the ar
686         contents of a .deb.
687         (check_files): use it.
688         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
689         found.
690         (check_files): accept 'raw-installer' as an alias for 'byhand'.
691
692 2005-01-14  Anthony Towns  <ajt@debian.org>
693
694         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
695
696         * propup stuff (thanks to Andreas Barth)
697         * katie.conf: add stable MustBeOlderThan testing, add -security
698           propup
699         * jennifer: set distribution-version in .katie if propup may be needed
700         * katie.py: add propogation to cross_suite_version_check
701
702 2004-11-27  James Troup  <james@nocrew.org>
703
704         * nina: new script to split monolithic queue/done into date-based
705         hierarchy.
706
707         * rene (usage): document -s/--suite.
708         (add_nbs): use .setdefault().
709         (do_anais): likewise.
710         (do_nbs): don't set a string to "" and then += it.
711         (do_obsolete_source): new function - looks for obsolete source
712         packages (i.e source packages whose binary packages are ALL a)
713         claimed by someone else and b) newer when built from the other
714         source package).
715         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
716         and 'full' check modes.  Check for obsolete source packages.
717         linux-wlan-ng has been fixed - remove hideous bodge.
718
719         * jennifer (check_distributions): support 'reject' suite map type.
720
721         * utils.py (validate_changes_file_arg): s/file/filename/.
722         s/fatal/require_changes/.  If require_changes is -1, ignore errors
723         and return the .changes filename regardless.
724         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
725         (re_no_revision): don't escape '-', it's not a special character.
726         s/\*/+/ as there must be at least one non-dash character after the
727         dash in a revision.  Thanks to Christian Reis for noticing both of
728         these.
729
730         * ashley (main): pass require_changes=-1 to
731         utils.validate_changes_file_arg().
732
733         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
734         Team <debian-kernel@lists.debian.org>'.
735
736         * katie.py (Katie.in_override_p): fix .startswith() usage.
737
738         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
739         (Lauren::MoreInfoURL): update to 3.0r3.
740         (Suite::Stable::Version): likewise.
741         (Suite::Stable::Description): likewise.
742
743         * cron.daily: disable automatic task override generation.
744
745         * cindy (process): restrict "find all packages" queries by
746         component.  Respect Options["No-Action"].
747         (main): add -n/--no-action support.  Only run on unstable.  Rename
748         type to otype (pychecker).
749
750 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
751
752         * katie.conf (Billie::BasicTrees): add all architectures.
753         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
754         'everything'.
755
756         * cron.daily: Update a 'current' symlink when creating the
757         post-daily-cron-job database backup to aid mirroring to merkel.
758         Run billie.
759
760         * billie (BillieTarget.poolish_match): handle .udeb too.
761
762 2004-10-13  Ryan Murray  <rmurray@debian.org>
763
764         * amber (do_upload): Sort changes files in "katie" order so that
765           source always arrives before binary-only rebuilds
766         
767 2004-10-05  James Troup  <james@nocrew.org>
768
769         * jennifer (check_dsc): correct reject message on invalid
770         Maintainer field.
771
772 2004-09-20  James Troup  <james@nocrew.org>
773
774         * alicia: remove unused 'pwd' import.
775
776         * tea (check_override): underline suite name in output properly.
777
778         * rene (main): read a compressed Packages file.
779         * tea (validate_packages): likewise.
780
781         * katie.py (re_fdnic): add 'r' prefix.
782         (re_bin_only_nmu_of_mu): likewise.
783         (re_bin_only_nmu_of_nmu): likewise.
784
785         * madison (main): retrieve component information too and display
786         it if it's not 'main'.
787         * melanie (reverse_depends_check): likewise.
788
789         * utils.py (pp_dep): renamed...
790         (pp_deps): ... to this.
791         * jeri (check_dep): update calls to utils.pp_deps().
792         * melanie (reverse_depends_check): likewise.
793
794         * jennifer (check_changes): move initalization of email variables
795         from here...
796         (process_it): ...to here as we no longer always run
797         check_changes().  Don't bother to initialize
798         changes["architecture"].
799
800         * denise (list): renamed to...
801         (do_list): ...this to avoid name clash with builtin 'list'.
802         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
803         for dictionaries.
804         (main): Likewise for name clash avoidance and also
805         s/override_type/suffix/.  Adjust call to do_list().
806
807 2004-09-01  Ryan Murray  <rmurray@debian.org>
808
809         * tea (check_files): check the pool/ directory instead of dists/
810
811 2004-08-04  James Troup  <james@nocrew.org>
812
813         * jenna (cleanup): use .setdefault() for dictionaries.
814         (write_filelists): likewise.
815
816         (write_filelists): Use utils.split_args() not split() to split
817         command line arguments.
818         (stable_dislocation_p): likewise.
819
820         (write_filelists): Add support for mapping side of suite-based
821         "Arch: all mapping".
822         (do_da_do_da): ensure that if we're not doing all suites that we
823         process enough to be able correct map arch: all packages.
824
825         * utils.py (cant_open_exc): correct exception string,
826         s/read/open/, s/.$//.
827
828         * templates/amber.advisory: update to match reality a little
829         better.
830
831         * melanie (reverse_depends_check): read Packages.gz rather than
832         Packages.
833
834         * jennifer (check_files): check for unknown component before
835         checking for NEWness.
836
837         * katie.py (Katie.in_override_p): use .startswith in favour of a
838         slice.
839
840         * docs/melanie.1.sgml: document -R/--rdep-check.
841
842 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
843
844         * billie (main): Make the verbatim lists include all the README
845           elements.
846         * docs/README.names: Add billie in (correcting oversight)
847
848 2004-07-01  James Troup  <james@nocrew.org>
849
850         * emilie (main): handle woody's case-sensitive python-ldap,
851         s/keyfingerprint/keyFingerPrint/.
852
853 2004-06-25  James Troup  <james@nocrew.org>
854
855         * debian/control (Depends): add dpkg-dev since jennifer uses
856         dpkg-source.
857
858 2004-06-24  James Troup  <james@nocrew.org>
859
860         * melanie (main): s/file/temp_file/ and close file handle before
861         removing the temporary file.
862         (main): don't warn about needing a --carbon-copy if in no-action
863         mode.
864
865         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
866         (main): likewise.
867
868         * test/006/test.py (main): check bracketed email-only form.
869
870         * utils.py (fix_maintainer): if the Maintainer string is bracketed
871         email-only, strip the brackets so we don't end up with
872         <<james@nocrew.org>>.
873
874 2004-06-20  James Troup  <james@nocrew.org>
875
876         * jennifer (process_it): only run check_changes() if
877         check_signature() returns something.  (Likewise)
878
879         * utils.py (changes_compare): if there's no changes["version"] use
880         "0" rather than None.  (Avoids a crash on unsigned changes file.)
881
882 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
883
884         * jeri (pp_dep): moved from here to ...
885         * utils.py (pp_dep): here.
886
887         * melanie (main): add reverse dependency checking.
888
889 2004-06-17  James Troup  <james@nocrew.org>
890
891         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
892         * tea (check_dscs): likewise.
893
894         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
895         change from boolean to a variable with 3 possible values, 0 and 1
896         as before, -1 means don't require a signature.  Makes
897         parse_changes() useful for parsing arbitary RFC822-style files,
898         e.g. 'Release' files.
899         (check_signature): add support for detached signatures by passing
900         the files the signature is for as an optional third argument.
901         s/filename/sig_filename/g.  Add a fourth optional argument to
902         choose the keyring(s) to use.  Don't os.path.basename() the
903         sig_filename before checking it for taint.
904         (re_taint_free): allow '/'.
905
906 2004-06-11  James Troup  <james@nocrew.org>
907
908         * tea (check_files): make override.unreadable optional.
909         (validate_sources): close the Sources file handle.
910
911         * docs/README.first: clarify that 'alyson' and running
912         add_constraints.sql by hand is something you only want to do if
913         you're not running 'neve'.
914
915         * docs/README.config (Location::$LOCATION::Suites): document.
916
917         * db_access.py (do_query): also print out the result of the query.
918
919 2004-06-10  James Troup  <james@nocrew.org>
920
921         * katie.py (Katie.cross_suite_version_check): post-woody versions
922         of python-apt's apt_pkg.VersionCompare() function apparently
923         returns variable integers for less than or greater than results -
924         update our result checking to match.
925         * jenna (resolve_arch_all_vs_any): likewise.
926         * charisma (main): likewise.
927
928 2004-06-09  James Troup  <james@nocrew.org>
929
930         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
931         valid_dsc_p and don't run check_source() if check_dsc() failed.
932         (check_dsc): on fatal failures return 0 so check_source() isn't
933         run (since it makes fatal assumptions about the presence of
934         mandatory .dsc fields).  
935         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
936
937 2004-05-07  James Troup  <james@nocrew.org>
938
939         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
940         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
941
942         * katie.conf (Dir::Override): remove duplicate definition.
943
944         * neve (get_or_set_files_id): add an always-NULL last_used column
945         to output.
946
947 2004-04-27  James Troup  <james@nocrew.org>
948
949         * apt.conf-security (tree "dists/stable/updates"): add
950         ExtraOverride - noticed by Joey Hess (#246050).
951         (tree "dists/testing/updates"): likewise.
952
953 2004-04-20  James Troup  <james@nocrew.org>
954
955         * jennifer (check_files): check for existing .changes or .katie
956         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
957         directories.
958
959 2004-04-19  James Troup  <james@nocrew.org>
960
961         * jennifer (check_source): handle failure to remove the temporary
962          directory (used for source tree extraction) better, specifically:
963          if we fail with -EACCES, chmod -R u+rwx the temporary directory
964          and try again and if that works, REJECT the package.
965
966 2004-04-17  James Troup  <james@nocrew.org>
967
968         * docs/madison.1.sgml: document -b/--binary-type,
969         -g/--greaterorequal and -G/--greaterthan.
970
971         * madison (usage): -b/--binary-type only takes a single argument.
972         Document -g/--greaterorequal and -G/--greaterthan.
973         (main): add support for -g/--greaterorequal and -G/--greaterthan.
974
975 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
976
977         * billie: Cleaned up a load of comments, added /README.non-US to
978           the verbatim matches list.
979
980 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
981
982         * utils.py (size_type): Make it use real binary megabytes and
983           kilobytes, instead of the marketing terms used before.
984
985 2004-04-07  James Troup  <james@nocrew.org>
986
987         * katie.py (Katie.check_dsc_against_db): in the case we're
988         ignoring an identical-to-existing orig.tar.gz remember the path to
989         the existent version in pkg.orig_tar_gz.  Adjust query to grab
990         location.path too to be able to do so.
991
992 2004-04-03  James Troup  <james@nocrew.org>
993
994         * debian/control (Depends): add python2.1-email | python (>= 2.2)
995         needed for new utils.rfc2047_encode() function.
996
997         * utils.py (re_parse_maintainer): allow whitespace inside the
998         email address.
999         (Error): new exception base class.
1000         (ParseMaintError): new exception class.
1001         (force_to_utf8): new function.
1002         (rfc2047_encode): likewise.
1003         (fix_maintainer): rework.  use force_to_utf8() to force name and
1004         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1005         return an rfc2047 value.  Validate the address to catch missing
1006         email addresses and (some) broken ones.
1007
1008         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1009         by adopting foo2047 return value.
1010         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1011         mandatory changes fields.  Promote changes and maintainer822 to
1012         mandatory fields.
1013         (Katie.update_subst): default maintainer2047 rather than
1014         maintainer822.  User foo2047 rather than foo822 when setting
1015         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1016
1017         * jennifer (check_changes): set default changes["maintainer2047"]
1018         and changes["changedby2047"] values rather than their 822
1019         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1020         to new utils.fix_maintainer() - reject on exception and adopt
1021         foo2047 return value.
1022         (check_dsc): if a mandatory field is missing don't do any further
1023         checks and as a result reduce paranoia about dsc[var] existence.
1024         Validate the maintainer field by calling new
1025         utils.fix_maintainer().
1026
1027         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1028         changes fields.  Promote maintainer822 to a mandatory changes
1029         field.  add "pool name" to files fields.
1030
1031         * test/006/test.py: new file - tests for new
1032         utils.fix_maintainer().
1033
1034 2004-04-01  James Troup  <james@nocrew.org>
1035
1036         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1037
1038         * jennifer (get_changelog_versions): create a symlink mirror of
1039         the source files in the temporary directory.
1040         (check_source): if check_dsc_against_db() couldn't find the
1041         orig.tar.gz bail out.
1042
1043         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1044         part of the upload store the path to it in pkg.orig_tar_gz and if
1045         it can't be found set pkg.orig_tar_gz to -1.
1046
1047         Explicitly return the second value as None in the (usual) case
1048         where we don't have to reprocess.  Remove obsolete diagnostic
1049         logs.
1050
1051         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1052
1053         * utils.py (temp_filename): new helper function that wraps around
1054         tempfile.mktemp().
1055
1056         * katie.py (Katie.do_reject): use it and don't import tempfile.
1057         * lisa (prod_maintainer): likewise.
1058         (edit_note): likewise.
1059         (edit_new): likewise.
1060         * lauren (reject): likewise.
1061         * melanie (main): likewise.
1062         * neve (do_sources): likewise.
1063         * rene (main): likewise.
1064         * tea (validate_sources): likewise.
1065
1066 2004-03-31  James Troup  <james@nocrew.org>
1067
1068         * tea (validate_sources): remove unused 's' temporary variable.
1069
1070 2004-03-15  James Troup  <james@nocrew.org>
1071
1072         * jennifer (check_dsc): check changes["architecture"] for
1073         source before we do anything else.
1074
1075 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1076
1077         * billie: Added
1078         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1079
1080 2004-03-12  James Troup  <james@nocrew.org>
1081
1082         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1083
1084         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1085
1086         * katie.py (Katie.accept): add support for DebBugs Version
1087         Tracking by writing out .versions (generated in jennifer's
1088         get_changelog_versions()) and .debinfo (mapping of binary ->
1089         source) files.
1090
1091         * ashley (main): add dsc["bts changelog"].
1092
1093         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1094
1095         * jennifer (check_diff): obsoleted by check_source(), removed.
1096         (check_source): new function: create a temporary directory and
1097         move into it and call get_changelog_versions().
1098         (get_changelog_versions): new function: extract the source package
1099         and optionally parse debian/changelog to obtain the version
1100         history for the BTS.
1101         (process_it): call check_source() rather than check_diff().
1102
1103 2004-03-08  James Troup  <james@nocrew.org>
1104
1105         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1106         listbar" rather than "if listbar.count(varfoo)"' change on
1107         2004-02-24.
1108
1109 2004-03-05  James Troup  <james@nocrew.org>
1110
1111         * alicia (main): don't warn about not closing bugs - we don't
1112         manage overrides through the BTS.
1113
1114 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1115
1116         * docs/README.config: lots of updates and corrections.
1117         * docs/README.first: likewise.
1118
1119         * docs/README.config: drop unused Dir::Queue::Root.
1120         * katie.conf-non-US: likewise.
1121         * katie.conf: likewise.
1122         * katie.conf-security: likewise.
1123
1124 2004-02-27  James Troup  <james@nocrew.org>
1125
1126         * rose (process_tree): use 'if var in [ list ]' rather than long
1127         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1128         Michlmayr.
1129
1130         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1131         suggested by Martin Michlmayr.
1132         * catherine (poolize): likewise.
1133         * charisma (main): likewise.
1134         * halle (check_changes): likewise.
1135         * heidi (main): likewise.
1136         (process_file): likewise.
1137         * kelly (install): likewise.
1138         (stable_install): likewise.
1139         * utils.py (fix_maintainer): likewise.
1140
1141         * apt.conf: add support for debian-installer in testing-proposed-updates.
1142         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1143         add - set to main.
1144
1145         * mkmaintainers: add "-T15" option to wget of non-US packages file
1146         so that we don't hang cron.daily if non-US is down.
1147
1148         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1149
1150         * templates/jennifer.bug-close: add Source and Source-Version
1151         pseudo-headers that may be used for BTS Version Tracking someday
1152         [ajt@].
1153
1154         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1155         (main): likewise.
1156
1157         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1158
1159 2004-02-25  James Troup  <james@nocrew.org>
1160
1161         * katie.conf (SuiteMappings): don't map testing-security to
1162         proposed-updates.
1163
1164 2004-02-24  James Troup  <james@nocrew.org>
1165
1166         * katie.py (Katie.__init__): remove unused 'values' field.
1167
1168         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1169         rather than 's.count(c) > 0'.
1170
1171         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1172         rather than "if listbar.count(varfoo)".
1173         * halle (check_joey): likewise.
1174         * jeri (check_joey): likewise.
1175         * lisa (edit_index): likewise.
1176         * jenna (stable_dislocation_p): likewise.
1177
1178         * jennifer (main): remove unused global 'nmu'.
1179
1180 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1181
1182         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1183           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1184           the dak tools close bugs.
1185
1186 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1187
1188         * katie.conf (Alicia): Added an Alicia section with email address
1189         * templates/alicia.bug-close: Added
1190         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1191         * alicia (main): Added a -d/--done argument
1192
1193 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1194
1195         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1196
1197 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1198
1199         * lisa (prod_maintainer): Added function to prod the maintainer without
1200           accepting or rejecting the package
1201         * templates/lisa.prod: Added this template for the prodding mail
1202
1203         * .cvsignore: Added neve-files which turns up in new installations
1204
1205 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1206
1207         * alicia (usage): Fixed usage message to offer section and priority
1208           as seperately optional arguments.
1209         * alicia (main): Added a % (arg) interpolation needed when only
1210           one of section or priority is provided and it cannot be found.
1211
1212 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1213
1214         * alicia: Added
1215         * docs/alicia.1.sgml: Added
1216         * docs/Makefile: Added alicia to the list of manpages to build
1217         * docs/README.names: Noted what alicia does
1218         * docs/README.first: Noted where alicia is useful
1219
1220 2004-01-21  James Troup  <james@nocrew.org>
1221
1222         * madison (main): add -b/--binary-type.
1223         (usage): likewise.
1224
1225         * denise (main): generate debian-installer overrides for testing
1226         too.
1227         * apt.conf: add support for debian-installer in testing.
1228         * katie.conf (Suite::Testing::UdebComponents): set to main.
1229
1230         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1231         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1232         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1233
1234         * utils.py (parse_changes): don't process data not inside the
1235         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1236         pointing this out.
1237         * test/005/test.py (main): new test to test for above.
1238
1239 2004-01-04  James Troup  <james@nocrew.org>
1240
1241         * jenna (write_filelists): correct typo, s/Components/Component/
1242         for Options.
1243
1244 2004-01-04  Ryan Murray  <rmurray@debian.org>
1245
1246         * cron.buildd: move update of overrides and Packages file...
1247         * cron.unchecked: to here.
1248         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1249         * katie.conf-security: likewise
1250
1251 2003-11-20  James Troup  <james@nocrew.org>
1252
1253         * jenna (main): don't use utils.try_with_debug(), it produces way
1254         too much output.
1255
1256         * halle (check_changes): don't error out if a .changes refers to a
1257         non-existent package, just warn and skip the file.
1258
1259         * docs/README.stable-point-release: mention halle and .changes
1260         obsoleted by removal through melanie.  Update for 3.0r2.
1261
1262         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1263         (Suite::Stable::Description): update for 3.0r2.
1264         (Lauren::MoreInfoURL): likewise.
1265         * katie.conf-non-US (Suite::Stable::Version): likewise.
1266         (Suite::Stable::Description): likewise.
1267         (Lauren::MoreInfoURL): likewise.
1268
1269         * apt.conf.stable (Default): don't define MaxContentsChange.
1270         * apt.conf.stable-non-US (Default): likewise.
1271
1272         * lauren (reject): hack to work around partial replacement of an
1273         upload, i.e. one or more binaries superseded by another source
1274         package.
1275
1276 2003-11-17  James Troup  <james@nocrew.org>
1277
1278         * pseudo-packages.maintainers: point installation-reports at
1279         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1280         request.
1281
1282         * utils.py (parse_changes): calculate the number of lines once
1283         with len() rather than max().
1284
1285         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1286         files, since check_dsc_against_db() deletes the .orig.tar.gz
1287         entry.
1288
1289 2003-11-13  Ryan Murray  <rmurray@debian.org>
1290
1291         * apt.conf: specify a src override file for debian-installer
1292
1293 2003-11-10  James Troup  <james@nocrew.org>
1294
1295         * fernanda.py (strip_pgp_signature): new function - strips PGP
1296         signature from a file and returns the modified contents of the
1297         file in a string.
1298         (display_changes): use it.
1299         (read_dsc): likewise.
1300
1301 2003-11-09  Ryan Murray  <rmurray@debian.org>
1302
1303         * cron.buildd: export accepted_autobuild table for unstable, and use
1304         it to generate the incoming Packages/Sources rather than having apt
1305         walk the directory.
1306         * apt.conf.buildd: use exported table from cron.buildd to generate
1307         Packages/Sources
1308
1309 2003-11-07  James Troup  <james@nocrew.org>
1310
1311         * kelly: import errno.
1312
1313         * katie.py (Katie.build_summaries): sort override disparities.
1314
1315         * kelly (install): set dsc_component based on the .dsc's component
1316         not a random binaries.
1317
1318 2003-10-29  James Troup  <james@nocrew.org>
1319
1320         * katie.py (Katie.build_summaries): don't assume changes["source"]
1321         exists since it might not.
1322
1323 2003-10-20  James Troup  <james@nocrew.org>
1324
1325         * pseudo-packages.maintainers: update security.d.o to use
1326         team@s.d.o at joy@'s request.
1327
1328 2003-10-17  James Troup  <james@nocrew.org>
1329
1330         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1331
1332 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1333
1334         * tea (chk_bd_process_dir): use .endswith rather than slice.
1335
1336 2003-10-14  James Troup  <james@nocrew.org>
1337
1338         * tea (check_build_depends): new function.
1339         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1340         in the archive.
1341         (main): update for new function.
1342         (usage): likewise.
1343
1344         * katie.py (Katie.do_reject): sanitize variable names,
1345         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1346         os.close() to outside if clause.
1347
1348         * jennifer (check_dsc): check build-depends and
1349         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1350         Fold the ARRAY check into the same code block and tidy up it's
1351         rejection message.
1352         (check_changes): ensure that the Files field is non-empty.
1353         Suggested by Santiago Vila <sanvila@unex.es>
1354         (check_changes): normalize reject messages.
1355         (check_dsc): instead of doing most of the checks inside a for loop
1356         and an if, find the dsc_filename in a short loop over files first
1357         and then do all the checks.  Add check for more than one .dsc in a
1358         .changes which we can't handle.  Normalize reject messages.
1359
1360 2003-10-13  James Troup  <james@nocrew.org>
1361
1362         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1363         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1364
1365         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1366         variables while iterating over 'files'.  Don't regenerate it when
1367         checking for source if source is mentioned.
1368
1369         Reject source only uploads if the config variable
1370         Dinstall::Reject::NoSourceOnly is set.
1371
1372 2003-10-03  James Troup  <james@nocrew.org>
1373
1374         * rene (main): add nasty hardcoded reference to debian-installer
1375         so we detect NBS .udebs.
1376
1377 2003-09-29  James Troup  <james@nocrew.org>
1378
1379         * apt.conf (old-proposed-updates): remove.
1380         * apt.conf-non-US (old-proposed-updates): likewise.
1381
1382 2003-09-24  James Troup  <james@nocrew.org>
1383
1384         * tea (check_files_not_symlinks): new function, ensure files
1385         mentioned in the database aren't symlinks.  Includes code to
1386         update any files that are like this to their real filenames +
1387         location; commented out by though.
1388         (usage): update for new function.
1389         (main): likewise.
1390
1391 2003-09-24  Anthony Towns  <ajt@debian.org>
1392
1393         * vars: external-overrides variable added
1394         * cron.daily: Update testing/unstable Task: overrides from joeyh
1395         managed external source.
1396
1397 2003-09-22  James Troup  <james@nocrew.org>
1398
1399         * kelly (install): if we can't move the .changes into queue/done,
1400         fail don't warn and carry on.  The old behaviour pre-dates NI and
1401         doesn't make much sense now since jennifer checks both
1402         queue/accepted and queue/done for any .changes files it's
1403         processing.
1404
1405         * utils.py (move): don't throw exceptions on existing files or
1406         can't overwrite, instead just fubar out.
1407
1408         * jennifer (check_dsc): also check Build-Depends-Indep for
1409         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1410
1411 2003-09-18  James Troup  <james@nocrew.org>
1412
1413         * katie.py (Katie.close_bugs): only log the bugs we've closed
1414         once.
1415
1416         * kelly (main): log as 'kelly', not 'katie'.
1417
1418 2003-09-16  James Troup  <james@nocrew.org>
1419
1420         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1421
1422         * jennifer (check_changes): normalize reject message for "changes
1423         file already exists" to be %s: <foo>.
1424         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1425         produced by broken dpkg-source in 1.10.11.  Tone down and
1426         normalize rejection message for incompatible 'Format' version
1427         numbers.
1428         (check_diff): likewise tone down and normalize.
1429
1430 2003-09-07  James Troup  <james@nocrew.org>
1431
1432         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1433         don't bomb out on bogus empty lines.
1434         (build_file_list): check for changes["files"] earlier.  use Dict
1435         to create files[name] dictionary.
1436         (send_mail): don't bother validating arguments.
1437         (check_signature): minor improvements to some of the rejection
1438         messages including listing the key id of the key that wasn't found
1439         in the keyring.
1440         (wrap): new function.
1441
1442         * tea: add new check 'validate-indices' that ensures all files
1443         mentioned in indices (Packages, Sources) files do in fact exist.
1444
1445         * catherine (poolize): use a local re_isadeb which handles legacy
1446         (i.e. no architecture) style .deb filenames.
1447
1448         * rosamund: new script.
1449
1450         * rhona (check_binaries): when checking for binary packages not in
1451         a suite, don't bother selecting files that already have a
1452         last_used date.
1453         (check_sources): likewise.
1454
1455         * rhona: change all SQL EXISTS sub-query clauses to use the
1456         postgres suggested convention of "SELECT 1 FROM".
1457         * andrea (main): likewise.
1458         * tea (check_override): likewise.
1459         * catherine (main): likewise.
1460
1461         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1462         entries and in other suites MustBeNewerThan's.
1463         (SuiteMappings): likewise
1464         * katie.conf-non-US: likewise.
1465         * katie.conf-security: likewise.
1466
1467         * apt.conf-security: remove oldstable.
1468         * apt.conf.stable: likewise.
1469         * apt.conf.stable-non-US: likewise.
1470         * cron.buildd-security: likewise.
1471         * cron.daily-security: likewise.
1472         * vars-security (suites): likewise.
1473         * wanna-build/trigger.daily: likewise.
1474
1475         * claire.py (clean_symlink): move...
1476         * utils.py (clean_symlink): here.
1477
1478         * claire.py (find_dislocated_stable): update accordingly.
1479
1480 2003-08-16  Anthony Towns  <ajt@debian.org>
1481
1482         * katie.py (source_exists): expand the list of distributions
1483         the source may exist in to include any suite that's mapped to
1484         the destination suite (even transitively (a->b->c)). This should
1485         unbreak binary uploads to *-proposed-updates.
1486
1487 2003-08-09  Randall Donald  <rdonald@debian.org>
1488
1489         * lisa (recheck): change changes["distribution"].keys() to
1490         Katie.pkg.changes...
1491
1492 2003-08-08  Randall Donald  <rdonald@debian.org>
1493
1494         * katie.py: only tag bugs as fixed-in-experimental for
1495         experimental uploads
1496
1497 2003-07-26  Anthony Towns  <ajt@debian.org>
1498
1499         * katie.py (source_exists): add an extra parameter to limit the
1500         distribution(s) the source must exist in.
1501         * kelly, lisa, jennifer: update to use the new source_exists
1502
1503 2003-07-15  Anthony Towns  <ajt@debian.org>
1504
1505         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1506         checksums for debian-installer stuff even when it's just a symlink to
1507         another suite
1508
1509         * apt.conf: add the FakeDI line
1510
1511 2003-06-09  James Troup  <james@nocrew.org>
1512
1513         * kelly (check): make sure the 'file' we're looking for in 'files'
1514         hasn't been deleted by katie.check_dsc_against_db().
1515
1516 2003-05-07  James Troup  <james@nocrew.org>
1517
1518         * helena (time_pp): fix s/years/year/ typo.
1519
1520 2003-04-29  James Troup  <james@nocrew.org>
1521
1522         * madison (usage): document -c/--component.
1523
1524         * madison (usage): Fix s/seperated/separated/.
1525         * melanie (usage): likewise.
1526         * jenna (usage): likewise.
1527
1528 2003-04-24  James Troup  <james@nocrew.org>
1529
1530         * cron.daily-non-US: if there's nothing for kelly to install, say
1531         so.
1532
1533         * jennifer (check_timestamps): print sys.exc_value as well as
1534         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1535         failed' with 'deb contents' to make it clearer what timestamp(s)
1536         are being checked.
1537
1538 2003-04-15  James Troup  <james@nocrew.org>
1539
1540         * cron.daily-non-US: only run kelly if there are some .changes
1541         files in accepted.
1542
1543         * rene: add -m/--mode argument which can be either daily (default)
1544         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1545         Various changes to make this possible including a poor attempt at
1546         splitting main() up a little.  De-hardcode suite numbers from SQL
1547         queries and return quietly from do_nviu() if experimental doesn't
1548         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1549         is.
1550
1551         * debian/control (Depends): remove python-zlib as it's obsolete.
1552
1553         * charisma (main): don't slice the \n off strings when we're
1554         strip()-ing it anyway.
1555         * heidi (set_suite): likewise.
1556         (process_file): likewise.
1557         * natalie (process_file): likewise.
1558
1559 2003-04-08  James Troup  <james@nocrew.org>
1560
1561         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1562         slow queries by using one LIKE '%foo%' and then matching against
1563         '%s' or '/%s$' in python.  Also only join location when we need it
1564         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1565         query, so 6s for each sourceful package.
1566
1567         * cron.daily: invoke rene and send the report to ftpmaster.
1568         * cron.daily-non-US: likewise.
1569
1570 2003-03-14  James Troup  <james@nocrew.org>
1571
1572         * utils.py (send_mail): default filename to blank.
1573         * amber (make_advisory): adapt.
1574         * jennifer (acknowledge_new): likewise.
1575         * katie.py (Katie.close_bugs): likewise.
1576         (Katie.announce): likewise.
1577         (Katie.accept): likewise.
1578         (Katie.check_override): likewise.
1579         (Katie.do_reject): likewise.
1580         * kelly (do_reject): likewise.
1581         (stable_install): likewise.
1582         * lisa (do_bxa_notification): likewise.
1583         * lauren (reject): likewise.
1584         * melanie (main): likewise.
1585
1586         * rene (add_nbs): check any NBS packages against unstable to see
1587         if they haven't been removed already.
1588
1589         * templates/katie.rejected: remove paragraph about rejected files
1590         since they're o-rwx due to c-i-m and the uploader can't do
1591         anything about them and shania will take care of them anyway.
1592
1593         * madison (usage): update usage example to use comma seperation.
1594         * melanie (usage): likewise.
1595
1596         * utils.py (split_args): new function; splits command line
1597         arguments either by space or comma (whichever is used).  Also has
1598         optional-but-default DWIM spurious space detection to avoid
1599         'command -a i386, m68k' problems.
1600         (parse_args): use it.
1601         * melanie (main): likewise.
1602
1603         * melanie (main): force the admin to tell someone if we're not
1604         doing a rene-led removal (or closing a bug, which counts as
1605         telling someone).
1606
1607 2003-03-05  James Troup  <james@nocrew.org>
1608
1609         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1610         and python sections.
1611         * katie.conf-security (Section): likewise.
1612
1613         * add_constraints.sql: add uid and uid_id_seq to grants.
1614
1615         * lisa (determine_new): also warn about adding overrides to
1616         oldstable.
1617
1618         * madison (main): make the -S/--source-and-binary query obey
1619         -s/--suite restrictions.
1620
1621 2003-03-03  James Troup  <james@nocrew.org>
1622
1623         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1624         exists, warn the user that our output might seem strange.  (People
1625         get confused by multiple versions in a suite which happens
1626         post-kelly but pre-jenna.)
1627
1628 2003-02-21  James Troup  <james@nocrew.org>
1629
1630         * kelly (main): we don't need to worry about StableRejector.
1631
1632         * melanie (main): sort versions with apt_pkg.VersionCompare()
1633         prior to output.
1634
1635         * lauren: new script to manually reject packages from
1636         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1637
1638 2003-02-20  James Troup  <james@nocrew.org>
1639
1640         * kelly (init): remove unused -m/--manual-reject argument.
1641
1642         * katie.py (Katie.force_reject): renamed from force_move to make
1643         it more explicit what this function does.
1644         (Katie.do_reject): update to match.
1645
1646         * utils.py (prefix_multi_line_string): add an optional argument
1647         include_blank_lines which defaults to 0.  If non-zero, blank lines
1648         will be includes in the output.
1649
1650         * katie.py (Katie.do_reject): don't add leading space to each line
1651         of the reject message.  Include blank lines when showing the
1652         message to the user.
1653
1654 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1655
1656         * utils.py (fix_maintainer): replace pointless re.sub() with
1657         simple string format.
1658
1659 2003-02-11  James Troup  <james@nocrew.org>
1660
1661         * lisa (edit_overrides): only strip-to-one-char and upper-case
1662         non-numeric answers.  Fixes editing of items with indices >= 10;
1663         noticed by Randall.
1664         (edit_overrides): correct order of arguments to "not a valid
1665         index" error message.
1666
1667         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1668         remove_duplicate_versions(); thanks to aj for the initial
1669         diagnosis.
1670         (remove_duplicate_versions): correct how we return
1671         dominant_versions.
1672         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1673         a tuple rather than just a tuple.
1674
1675 2003-02-10  James Troup  <james@nocrew.org>
1676
1677         * emilie: new script - sync fingerprint and uid tables with a
1678         debian.org LDAP DB.
1679
1680         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1681         in 'fingerprint'.
1682
1683         * db_access.py (get_or_set_uid_id): new function.
1684
1685         * jennifer (main): update locking to a) not used FCNTL (deprecated
1686         in python >= 2.2) and b) acknowledge upstream's broken
1687         implementation of lockf (see Debian bug #74777), c) try to acquire
1688         the lock non-blocking.
1689         * kelly (main): likewise.
1690
1691         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1692
1693         * madison (main): only append the package to new_packages if it's
1694         not already in there; fixes -S/--source-and-binary for cases where
1695         the source builds a binary package of the same name.
1696
1697 2003-02-10  Anthony Towns  <ajt@debian.org>
1698
1699         * madison (main): use explicit JOIN syntax for
1700         -S/--source-and-binary queries to reduce the query's runtime from
1701         >10 seconds to negligible.
1702
1703 2003-02-08  James Troup  <james@nocrew.org>
1704
1705         * rene (main): in the NVIU output, append items to lists, not
1706         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1707         should be removed.
1708
1709 2003-02-07  James Troup  <james@nocrew.org>
1710
1711         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1712         Sources [aj].
1713
1714         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1715         O. Benham/Adam Heath/.
1716
1717         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1718         (Suite::Stable::Description): update for 3.0r1a.
1719         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1720
1721         * utils.py (gpgv_get_status_output): rename from
1722         get_status_output().
1723
1724         * neve (check_signature): use gpgv_get_status_output and Dict from
1725         utils().  Add missing newline to error message about duplicate tokens.
1726
1727         * saffron (per_arch_space_use): also print space used by source.
1728         (output_format): correct string.join() invocation.
1729
1730         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1731
1732 2003-02-04  James Troup  <james@nocrew.org>
1733
1734         * cron.buildd: correct generation of Packages/Sources and grep out
1735         non-US/non-free as well as non-free.
1736
1737 2003-02-03  Ryan Murray  <rmurray@debian.org>
1738
1739         * cron.buildd: generate quinn-diff output with full Packages/Sources
1740           files to get out-of-date vs. uncompiled right.
1741         * apt.conf.buildd: no longer generate uncompressed files, as they
1742           are generated in cron.buildd instead
1743         * add -i option to quinn-diff to ignore binary-all packages
1744         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1745           aren't in the packages file, the arch that uploaded them will build
1746           them anyways...
1747
1748 2003-01-30  James Troup  <james@nocrew.org>
1749
1750         * rene (main): only print suggested melanie command when there's
1751         some NBS to remove.
1752
1753 2003-01-30  Ryan Murray  <rmurray@debian.org>
1754
1755         * cron.buildd: fix incorrectly inverted lockfile check
1756
1757 2003-01-29  Ryan Murray  <rmurray@debian.org>
1758
1759         * cron.buildd: generate override.sid.all3.src
1760         * apt.conf.buildd: use generated override.sid.all3.src
1761
1762 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1763
1764         * utils.py (get_status_output): moved from jennifer.
1765         (Dict): likewise.
1766         (check_signature): likewise.
1767
1768         * jennifer (get_status_output): moved to utils.py.
1769         (Dict): likewise.
1770         (check_signature): likewise.
1771
1772         * utils.py (check_signature): add an argument to specifiy which
1773         function to call when an error was found.
1774         (check_signature): document this function better.
1775
1776         * jennifer (check_files): pass the reject function as an argument
1777         to utils.check_signature.
1778         (process_it): likewise.
1779
1780 2003-01-20  James Troup  <james@nocrew.org>
1781
1782         * rene (main): lots of changes to improve the output and make it
1783         more useful.
1784
1785         * katie.py (Katie.check_override): make the override messages
1786         clearer (hopefully).
1787
1788 2002-12-26  James Troup  <james@nocrew.org>
1789
1790         * ziyi (usage): document the ability to pass suite(s) as
1791         argument(s).
1792         (main): read apt.conf after checking for -h/--help.
1793
1794         * tea (main): take the check to run as an argument.
1795
1796         * saffron.R: R script to graph daily install runs.
1797
1798         * saffron: new script; various stats functions.
1799
1800         * rhona (main): connect to the database after checking for -h/--help.
1801
1802         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1803
1804         * melanie (main): sort versions with utils.arch_compare_sw().
1805
1806         * madison (usage): alphabetize order of options.
1807         * melanie (usage): likewise.
1808
1809         * kelly (usage): fix usage short description (we aren't dinstall).
1810
1811         * julia (usage): fix usage description and alphabetize order of
1812         options.
1813
1814         * jeri (usage): fix usage short description.
1815
1816         * jennifer (main): move --help and --version checks from here...
1817         (init): to here so that they work with an empty katie.conf.
1818         * kelly: likewise.
1819
1820         * alyson (usage): new function.
1821         (main): use it.
1822         * andrea: likewise.
1823         * ashley: likewise.
1824         * cindy: likewise.
1825         * denise: likewise.
1826         * helena: likewise.
1827         * neve: likewise.
1828         * rene: likewise.
1829         * rose: likewise.
1830         * tea: likewise.
1831
1832         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1833         entry that caused tasks to be omitted from 3.0r1.
1834
1835 2002-12-10  James Troup  <james@nocrew.org>
1836
1837         * jennifer (check_files): sanity check the Depends field to ensure
1838         it's non-empty if present since apt chokes on an empty one.
1839         Thanks to Ryan Murray for the idea.
1840
1841 2002-12-08  James Troup  <james@nocrew.org>
1842
1843         * katie.conf-security (Helena::Directories): new; include accepted
1844         in addition to byhand and new.
1845
1846         * helena (process_changes_files): use utils.arch_compare_sw().
1847         Justify things based on the longest [package, version,
1848         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1849         the commas in architecture and version lists for the same reason.
1850         (main): make directories we process configurable through
1851         Helena::Directories in the config file; if that doesn't exist
1852         default to the old hardcoded values (byhand & new).
1853
1854         * utils.py (arch_compare_sw): moved here from madison.
1855         * madison (main): adjust to compensate.
1856
1857 2002-12-06  James Troup  <james@nocrew.org>
1858
1859         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1860         right filename.
1861
1862 2002-12-05  James Troup  <james@nocrew.org>
1863
1864         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1865
1866 2002-11-28  Randall Donald  <rdonald@debian.org>
1867
1868         * fernanda.py (read_control): fix typo of 'Architecture'.
1869
1870 2002-11-26  James Troup  <james@nocrew.org>
1871
1872         * lisa (check_pkg): call less with '-R' so we see the colour from
1873         Randall's fernanda changes.
1874
1875         * neve (process_sources): if Directory points to a legacy location
1876         but the .dsc isn't there; assume it's broken and look in the pool.
1877         (update_section): new, borroed from alyson.
1878         (do_da_do_da): use it.
1879         (process_packages): add suite_it to the cache key used for
1880         arch_all_cache since otherwise we only add a package to the first
1881         suite it's in and ignore any subsequent ones.
1882
1883         * katie.conf-non-US (Location): fixed to reflect reality (all
1884         suites, except old-proposed-updates (which is legacy-mixed)) are
1885         pool.
1886
1887         * utils.py (try_with_debug): wrapper for print_exc().
1888         * jenna (main): use it.
1889         * neve (main): likewise.
1890
1891 2002-11-25  Randall Donald  <rdonald@debian.org>
1892
1893         * fernanda.py (main): added -R to less command line for raw control
1894         character support to print colours
1895         (check_deb): Instead of running dpkg -I on deb file, call
1896         output_deb_info, the new colourized control reporter.
1897         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1898         of printing out each .dsc line.
1899         (output_deb_info): new function. Outputs each key/value pair from
1900         read_control except in special cases where we highlight section,
1901         maintainer, architecture, depends and recommends.
1902         (create_depends_string): new function. Takes Depends tree and looks
1903         up it's compontent via projectb db, colourizes and constructs a
1904         depends string in original order.
1905         (read_dsc): new function. reads and parses .dsc info via
1906         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1907         colourized.
1908         (read_control): new function. reads and parses control info via
1909         apt_pkg. Depends and Recommends are split in to list structures,
1910         Section and Architecture are colourized. Maintainer is colourized
1911         if it has a localhost.localdomain address.
1912         (split_depends): new function. Creates a list of lists of
1913         dictionaries of depends (package,version relation). Top list is
1914         colected from comma delimited items. Sub lists are | delimited.
1915         (get_comma_list): new function. splits string input among commas
1916         (get_or_list): new function. splits string input among | delimiters
1917         (get_depends_parts): new function. Creates dictionary of package name
1918         and version relation from dependancy string.
1919         Colours for section and depends are per component. Unfound depends
1920         are in bold. Lookups using version info is not supported yet.
1921
1922 2002-11-22  James Troup  <james@nocrew.org>
1923
1924         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1925         'udmsearch'.
1926
1927         * amber (make_advisory): string.atol() is deprecated and hasn't
1928         been ported to string methods.  Use long() instead.
1929
1930         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1931         creating the database since we'll fail badly if it's created with
1932         e.g. UNICODE encoding.
1933
1934         * rose (main): AptCnf is a global.
1935
1936         * neve (get_location_path): new function determines the location
1937         from the the first (left-most) directory of a Filename/Directory.
1938         (process_sources): don't need 'location' anymore.  Use
1939         utils.warn().  Use the Directory: field for each package to find
1940         the .dsc.  Use get_location_path() to determine the location for
1941         each .dsc.
1942         (process_packages): do't need 'location' anymore.  Use
1943         utils.warn().  Use get_location_path().
1944         (do_sources): don't need 'location', drop 'prefix' in favour of
1945         being told the full path to the Sources file, like
1946         process_packages().
1947         (do_da_do_da): main() renamed, so that main can call us in a
1948         try/except.  Adapt for the changes in do_sources() and
1949         process_packages() above.  Assume Sources and Packages file are in
1950         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1951
1952         * katie.conf-security (Location): fixed to reflect reality (all
1953         suites are pool, not legacy).
1954
1955         * utils.py (print_exc): more useful (i.e. much more verbose)
1956         traceback; a recipe from the Python cookbook.
1957         * jenna (main): use it.
1958         * neve (main): likewise.
1959
1960 2002-11-19  James Troup  <james@nocrew.org>
1961
1962         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1963         handling which was FUBAR for multi-suite uploads.  Now we just
1964         make a dictionary of destinations to copy to and iterate over
1965         those.
1966
1967         * fernanda.py (check_deb): run linda as well as lintian.
1968
1969 2002-10-21  James Troup  <james@nocrew.org>
1970
1971         * melanie (main): change X-Melanie to X-Katie and prefix it with
1972         'melanie '.
1973
1974         * lisa (main): prefix X-Katie with 'lisa '.
1975
1976         * jennifer (clean_holding): fix typo in string method changes;
1977         s/file.find(file/file.find(/.
1978
1979         * cron.daily: invoke helena and send the report to ftpmaster.
1980         * cron.daily-non-US: likewise.
1981
1982 2002-10-16  James Troup  <james@nocrew.org>
1983
1984         * kelly (check): call reject() with a blank prefix when parsing
1985         the return of check_dsc_against_db() since it does its own
1986         prefix-ing.
1987
1988         * rose: new script; only handles directory creation initally.
1989
1990         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1991         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1992
1993 2002-10-06  James Troup  <james@nocrew.org>
1994
1995         * rene (main): remove bogus argument handling.
1996
1997         * kelly: katie, renamed.
1998         * cron.daily: adapt for katie being renamed to kelly.
1999         * cron.daily-non-US: likewise.
2000         * amber (main): likewise.
2001
2002         * Changes for python 2.1.
2003
2004         * kelly: time.strftime no longer requires a second argument of
2005         "time.localtime(time.time())".
2006         * logging.py: likewise.
2007         * rhona: likewise.
2008         * shania (init): likewise.
2009
2010         * amber: use augmented assignment.
2011         * catherine (poolize): likewise.
2012         * claire.py (fix_component_section): likewise.
2013         * halle (check_changes): likewise.
2014         * helena: likewise.
2015         * jenna: likewise.
2016         * jennifer: likewise.
2017         * jeri: likewise.
2018         * katie.py: likewise.
2019         * kelly: likewise.
2020         * lisa: likewise.
2021         * madison (main): likewise.
2022         * melanie: likewise.
2023         * natalie: likewise.
2024         * neve: likewise.
2025         * rhona: likewise.
2026         * tea: likewise.
2027         * utils.py: likewise.
2028         * ziyi: likewise.
2029
2030         * amber: use .endswith.
2031         * fernanda.py: likewise.
2032         * halle (main): likewise.
2033         * jennifer: likewise.
2034         * jeri: likewise.
2035         * katie.py: likewise.
2036         * kelly: likewise.
2037         * lisa: likewise.
2038         * neve: likewise.
2039         * shania (main): likewise.
2040         * utils.py: likewise.
2041
2042         * alyson: use string methods.
2043         * amber: likewise.
2044         * andrea: likewise.
2045         * ashley: likewise.
2046         * catherine: likewise.
2047         * charisma: likewise.
2048         * claire.py: likewise.
2049         * db_access.py: likewise.
2050         * denise: likewise.
2051         * halle: likewise.
2052         * heidi: likewise.
2053         * helena: likewise.
2054         * jenna: likewise.
2055         * jennifer: likewise.
2056         * jeri: likewise.
2057         * julia: likewise.
2058         * katie.py: likewise.
2059         * kelly: likewise.
2060         * lisa: likewise.
2061         * logging.py: likewise.
2062         * madison: likewise.
2063         * melanie: likewise.
2064         * natalie: likewise.
2065         * neve: likewise.
2066         * rene: likewise.
2067         * tea: likewise.
2068         * utils.py: likewise.
2069         * ziyi: likewise.
2070
2071 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2072
2073         * utils.py (parse_changes): use <string>.startswith() rather than
2074         string.find().
2075
2076 2002-08-27  Anthony Towns  <ajt@debian.org>
2077
2078         * katie.py (in_override_p): when searching for a source override,
2079         and the dsc query misses, search for both udeb and deb overrides
2080         as well. Should fix the UNACCEPT issues with udebs.
2081
2082 2002-08-24  James Troup  <james@nocrew.org>
2083
2084         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2085         source+binary package finding code which was causing severe
2086         performance degradation with postgres 7.2.
2087
2088 2002-08-14  James Troup  <james@nocrew.org>
2089
2090         * julia (main): use the pwd.getpwall() to get system user info
2091         rather than trying to read a password file.  Add a -n/--no-action
2092         option.
2093
2094         * cron.hourly: julia no longer takes any arguments.
2095         * cron.hourly-non-US: likewise.
2096
2097 2002-08-07  James Troup  <james@nocrew.org>
2098
2099         * katie (install): handle multi-suite uploads when CopyChanges
2100         and/or CopyKatie are in use, ensuring we only copy stuff once.
2101
2102 2002-08-01  Ryan Murray  <rmurray@debian.org>
2103
2104         * wanna-build/trigger.daily: initial commit, with locking
2105         * cron.buildd: add locking against daily run
2106
2107 2002-07-30  James Troup  <james@nocrew.org>
2108
2109         * melanie (main): readd creation of suite_ids_list so melanie is
2110         remotely useful again.
2111
2112         * katie.conf: adopt for woody release; diable
2113         StableDislocationSupport, add oldstable, adjust other suites and
2114         mappings, fix up location.
2115         * katie.conf-non-US: likewise.
2116         * katie.conf-security: likewise.
2117
2118         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2119         stable.
2120         * apt.conf.stable-non-US: likewise.
2121
2122         * apt.conf-security: adapt for woody release; adding oldstable,
2123         oldstable, adjust stable and testing.
2124         * cron.daily-security: likewise.
2125         * cron.buildd-security: likewise.
2126
2127         * apt.conf: adapt for woody release; rename woody-proposed-updates
2128         to testing-proposed-updates and proposed-updates to
2129         old-proposed-updates.
2130         * apt.conf-non-US: likewise.
2131
2132         * vars-non-US (copyoverrides): add sarge.
2133         * vars (copyoverrides): likewise.
2134
2135         * vars-security (suites): add oldstable.
2136
2137 2002-07-22  Ryan Murray  <rmurray@debian.org>
2138
2139         * apt.conf.security-buildd: use suite codenames instead of
2140           distnames.
2141
2142 2002-07-16  James Troup  <james@nocrew.org>
2143
2144         * denise (main): fix filenames for testing override files.
2145
2146 2002-07-14  James Troup  <james@nocrew.org>
2147
2148         * jennifer (process_it): call check_md5sums later so we can check
2149         files in the .dsc too
2150         (check_md5sums): check files in the .dsc too.  Check both md5sum
2151         and size.
2152
2153         * melanie (main): use parse_args() and join_with_commas_and() from
2154         utils.  If there's nothing to do, say so and exit, don't ask for
2155         confirmation etc.
2156
2157         * amber (join_with_commas_and): moved from here to ...
2158         * utils.py (join_with_commas_and): here.
2159
2160 2002-07-13  James Troup  <james@nocrew.org>
2161
2162         * madison (main): use parse_args() from utils.  Support
2163         -c/--component.
2164
2165         * jenna (parse_args): moved from here to ...
2166         * utils.py (parse_args): here.
2167
2168         * katie.conf (Architectures): minor corrections to the description
2169         for arm, mips and mipsel.
2170         * katie.conf-non-US (Architectures): likewise.
2171         * katie.conf-security (Architectures): likewise.
2172
2173         * cron.daily-security: use natalie's new -a/--add functionality to
2174         flesh out the security overrides.
2175
2176 2002-07-12  James Troup  <james@nocrew.org>
2177
2178         * cron.buildd (ARCHS): add arm.
2179
2180         * katie.conf: 2.2r7 was released.
2181         * katie.conf-non-US: likewise.
2182
2183         * utils.py (parse_changes): handle a multi-line field with no
2184         starting line.
2185
2186 2002-06-25  James Troup  <james@nocrew.org>
2187
2188         * templates/amber.advisory (To): add missing email address since
2189         __WHOAMI__ is only a name.
2190
2191         * katie.conf-security (Melane::LogFile): correct to go somewhere
2192         katie has write access to.
2193         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2194         Testing.
2195
2196         * natalie: add support for -a/-add which adds packages only
2197         (ignoring changes and deletions).
2198
2199         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2200         use FindB, not get.
2201
2202 2002-06-22  James Troup  <james@nocrew.org>
2203
2204         * jennifer (check_files): validate the package name and version
2205         field.  If 'Package', 'Version' or 'Architecture' are missing,
2206         don't try any further checks.
2207         (check_dsc): likewise.
2208
2209         * utils.py (re_taint_free): add '~' as a valid character.
2210
2211 2002-06-20  Anthony Towns  <ajt@debian.org>
2212
2213         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2214
2215 2002-06-09  James Troup  <james@nocrew.org>
2216
2217         * jennifer (check_files): reduce useless code.
2218
2219         * cron.daily-security: run symlinks -dr on $ftpdir.
2220
2221         * vars-security (ftpdir): add.
2222
2223 2002-06-08  James Troup  <james@nocrew.org>
2224
2225         * neve (update_override_type): transaction is handled higher up in
2226         main().
2227         (update_priority): likewise.
2228         (process_sources): remove code that makes testing a duplicate of
2229         stable.
2230         (process_packages): likewise.
2231
2232         * templates/amber.advisory: add missing mail headers.
2233
2234         * cron.daily-security: also call apt-ftparchive clean for
2235         apt.conf.buildd-security.
2236         * cron.weekly: likewise.
2237
2238         * amber (do_upload): write out a list of source packages (and
2239         their version) uploaded for testing.
2240         (make_advisory): add more Subst mappings for the mail headers.
2241         (spawn): check for suspicious characters in the command and abort
2242         if their found.
2243
2244 2002-06-07  James Troup  <james@nocrew.org>
2245
2246         * ziyi (main): remove the 'nonus'/'security' hacks and use
2247         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2248         the lower level Release files, even if they don't exist.  fubar
2249         out if we can't open a lower level Release file for writing.
2250
2251         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2252         ziyi.
2253         * katie.conf-security (Dinstall): likewise.
2254
2255         * amber (do_upload): renamed from get_file_list().  Determine the
2256         upload host from the original component.
2257         (init): Add a -n/--no-action option.  Fix how we get changes_files
2258         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2259         sys.argv).  Add an Options global.
2260         (make_advisory): support -n/--no-action.
2261         (spawn): likewise.
2262         (main): likewise.
2263         (usage): document -n/--no-action.
2264
2265         * cron.buildd-security: fix path to Packages-arch-specific in
2266         quinn-diff invocation.
2267
2268         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2269         to proper suite names (i.e. stable, testing) rather than codenames
2270         (potato, woody).
2271         (Dinstall::DefaultSuite): likewise.
2272         (Suite): likewise.
2273         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2274         * vars-security (suites): likewise.
2275         * apt.conf-security: likewise.
2276
2277         * katie.conf-security (Component): add "updates/" prefix.
2278         (Suite::*::Components): likewise.
2279         (ComponentMappings): new; map all {ftp-master,non-US} components
2280         -> updates/<foo>.
2281
2282         * katie.conf-security (Natalie): removed; the options have
2283         defaults and ComponentPosition is used by alyson which doesn't
2284         work on security.d.o.
2285         (Amber): replace UploadHost and UploadDir with ComponentMappings
2286         which is a mapping of components -> URI.
2287         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2288         (SuiteMappings): use "silent-map" in preference to "map".
2289
2290         * cron.unchecked-security: fix call to cron.buildd-security.
2291
2292         * cron.daily-security: map local suite (stable) -> override suite
2293         (potato) when fixing overrides.  Correct component in natalie call
2294         to take into account "updates/" prefix.  Fix cut'n'waste in
2295         override.$dist.all3 generation, the old files weren't being
2296         removed, so they were endlessly growing.
2297
2298         * neve (main): don't use .Find for the CodeName since we require
2299         it.  Location::*::Suites is a ValueList.
2300         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2301         out on expired keys, just warn.
2302         (update_override_type): new function; lifted from alyson.
2303         (update_priority): likewise.
2304         (main): use update_{override_type,priority}().
2305
2306         * jennifer (check_distributions): remove redunant test for
2307         SuiteMappings; ValueList("does-not-exist") returns [] which is
2308         fine.  Add support for a "silent-map" type which doesn't warn
2309         about the mapping to the user.
2310         (check_files): add support for ComponentMappings, similar to
2311         SuiteMappings, but there's no type, just a source and a
2312         destination and the original component is stored in "original
2313         component".
2314         * katie.py (Katie.dump_vars): add "original component" as an
2315         optionsal files[file] dump variable.
2316
2317         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2318         query.  Add support for section-less legacy locations like current
2319         security.debian.org through YetAnotherConfigBoolean
2320         'LegacyStableHasNoSections'.
2321         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2322
2323         * utils.py (real_arch): moved here from ziyi.
2324         * ziyi (real_arch): moved to utils.py.
2325         * ziyi (main): likewise.
2326
2327         * claire.py (find_dislocated_stable): use real_arch() with
2328         filter() to strip out source and all.
2329         * neve (main): likewise.
2330         * rene (main): likewise.
2331         * jeri (parse_packages): likewise.
2332
2333 2002-06-06  James Troup  <james@nocrew.org>
2334
2335         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2336         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2337         doing.
2338
2339 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2340
2341         * jeri (check_joey): check if the line contains two elements
2342         before accessing the second.  Also, strip trailing spaces as well
2343         as the newline.
2344         * halle (check_joey): likewise.
2345
2346 2002-06-05  James Troup  <james@nocrew.org>
2347
2348         * cron.unchecked-security: new file; like cron.unchecked but if
2349         there's nothing to do exit so we don't call cron.buildd-security.
2350
2351         * apt.conf.buildd-security: new file.
2352
2353         * vars (archs): alphabetize.
2354         * vars-non-US (archs): likewise.
2355
2356         * vars-security: add unchecked.
2357
2358         * madison (main): reduce rather bizarrely verbose and purposeless
2359         code to print arches to a simple string.join.
2360
2361         * katie.conf (Suites::Unstable): add UdebComponents, a new
2362         valuelist of suites, used by jenna to flesh out the list of
2363         <suite>_main-debian-installer-binary-<arch>.list files generated.
2364         (Dinstall): add StableDislocationSupport, a new boolean used by
2365         jenna to enable or disable stable dislocation support
2366         (i.e. claire), as true.
2367
2368         * katie.conf (Dinstall): add StableDislocationSupport, a new
2369         boolean used by jenna to enable or disable stable dislocation
2370         support (i.e. claire), as true.
2371         * katie.conf-non-US: likewise.
2372         * katie.conf-security: likewise.
2373
2374         * cron.daily-security: generate .all3 overrides for the buildd
2375         support.  Freshen a local copy of Packages-arch-specific from
2376         buildd.debian.org.
2377
2378         * claire.py (find_dislocated_stable): disable the support for
2379         files in legacy-mixed locations since none of the Debian archives
2380         have any anymore.
2381
2382         * helena: new script; produces a report on NEW and BYHAND
2383         packages.
2384
2385         * jenna: rewritten from scratch to fix speed problems.  Run time
2386         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2387         minutes, 105 seconds are the monster query and 70 odd seconds is
2388         claire.
2389
2390         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2391         irrelevant.
2392
2393 2002-06-05  Ryan Murray  <rmurray@debian.org>
2394
2395         * cron.buildd-security: new file.
2396
2397 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2398
2399         * denise (list): take a file argument and use it.
2400         (main): don't abuse sys.stdout, just write to the file.
2401
2402         * claire.py (usage): Fix misspelling.
2403         (clean_symlink): Simplify.
2404         (find_dislocated_stable): Avoid unnecessary work.
2405
2406 2002-05-29  James Troup  <james@nocrew.org>
2407
2408         * cameron: removed; apt-ftparchive can simply walk the directory.
2409
2410 2002-05-26  Anthony Towns  <ajt@debian.org>
2411
2412         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2413         for the autobuilders.
2414
2415 2002-05-24  Ryan Murray  <rmurray@debian.org>
2416
2417         * cron.buildd: update override files before running apt-ftparchive
2418
2419 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2420
2421         * amber (main): remove extra space in prompt.
2422
2423         * utils.py (validate_changes_file_arg): use original filename in
2424         error messages.
2425
2426         * jeri (check_joey): close file after use.
2427         (parse_packages): likewise.
2428         (main): setup debug option properly.
2429
2430         * melanie (main): remove unused packages variable and simplify the
2431         code to build up con_packages by using repr().
2432
2433 2002-05-23  James Troup  <james@nocrew.org>
2434
2435         * lisa (recheck): when we reject, also return 0 so the package is
2436         skipped.
2437         (sg_compare): fix note sorting.
2438         (recheck): remove the .katie file after rejection.
2439
2440         * katie.py (Katie.accept): accepted auto-build support take 3;
2441         this time adding support for security.  Security needs a) non-pool
2442         files copied rather than symlinked since accepted is readable only
2443         by katie/security and www-data needs to be able to see the files,
2444         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2445         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2446         SecurityAcceptedAutoBuild is a new boolean which controls whether
2447         or not normal or security style is used.  The unstable_accepted
2448         table was renamed to accepted_autobuild and a suite column added.
2449         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2450         didn't have it's last_used/in_accepted flags correctly updated.
2451         * katie (install): likewise.
2452         * rhona (clean_accepted_autobuild): likewise.
2453
2454 2002-05-22  James Troup  <james@nocrew.org>
2455
2456         * lisa (sort_changes): new function; sorts changes properly.
2457         Finally.
2458         (sg_compare): new function; helper for sort_changes().  Sorts by
2459         have note and time of oldest upload.
2460         (indiv_sg_compare): new function; helper for sort_changes().
2461         Sorts by source version, have source and filename.
2462         (main): use sort_changes().
2463         (changes_compare): obsoleted; removed.
2464
2465 2002-05-20  James Troup  <james@nocrew.org>
2466
2467         * rhona (clean_accepted_autobuild): don't die if a file we're
2468         trying to remove doesn't exist.  Makes rhona more friendly to
2469         katie/katie.py crashes/bugs without any undue cost.
2470
2471 2002-05-19  James Troup  <james@nocrew.org>
2472
2473         * lisa (main): if sorting a large number of changes give some
2474         feedback.
2475         (recheck): new function, run the same checks (modulo NEW,
2476         obviously) as katie does, if they fail do the standard
2477         reject/skip/quit dance.
2478         (do_pkg): use it.
2479
2480         * katie (install): don't try to unlink the symlink in the
2481         AcceptedAutoBuild support if the destination is not a symlink (or
2482         doesn't exist).  Avoids unnecessary bombs on previous partial
2483         accepts and will still bomb hard if the file exists and isn't a
2484         symlink.
2485
2486         * utils.py: blah, commands _is_ used when the mail stuff isn't
2487         commented out like it is in my test environment.
2488
2489         * lisa (changes_compare): "has note" overrides everything else.
2490         Use .katie files rather than running parse_changes, faster and
2491         allows "has note" to work.  Correct version compare, it was
2492         reversed.  Ctime check should only kick in if the source packages
2493         are not the same.
2494         (print_new): print out and return any note.  Rename 'ret_code' to
2495         'broken'.
2496         (edit_new): renamed from spawn_editor.  Don't leak file
2497         descriptors.  Clean up error message if editor fails.
2498         (edit_note): new function, allows one to edit notes.
2499         (do_new): add note support, editing and removing.
2500         (init): kill -s/--sort; with notes we always want to use our
2501         sorting method.
2502         (usage): likewise.
2503
2504         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2505         changes field.
2506
2507         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2508         it default to 0.  Adapt tests to assume it's boolean.
2509         * fernanda.py (check_changes): adjust call appropriately.
2510         * halle (check_changes): likewise.
2511         * jennifer (check_changes): likewise.
2512         * jeri (check_changes): likewise.
2513         * shania (flush_orphans): likewise.
2514
2515         * jennifer (check_dsc): pass is_a_dsc by name when calling
2516         build_file_list() for clarity.
2517         * shania (flush_orphans): likewise.
2518         * tea (check_missing_tar_gz_in_dsc): likewise.
2519
2520         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2521         calling parse_changes() for clarity.
2522         * tea (check_dscs): likewise.
2523
2524         * utils.py (parse_changes): make dsc_whitespace_rules default to
2525         not true.
2526         * halle (check_changes): adjust call appropriately.
2527         * jennifer (check_changes): likewise.
2528         * jeri (check_changes): likewise.
2529         * lisa (changes_compare): likewise.
2530         * utils.py (changes_compare): likewise.
2531         * melanie (main): likewise.
2532         * shania (flush_orphans): likewise.
2533         * fernanda.py (check_changes): likewise.
2534
2535 2002-05-18  James Troup  <james@nocrew.org>
2536
2537         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2538         it's not useful and by and large a duplication of information
2539         available in readable format in other files.
2540
2541 2002-05-16  Ryan Murray  <rmurray@debian.org>
2542
2543         * melanie: Dir::TemplatesDir -> Dir::Templates
2544
2545 2002-05-15  Ryan Murray  <rmurray@debian.org>
2546
2547         * cameron: correct the use of os.path.join
2548
2549 2002-05-15  Anthony Towns  <ajt@debian.org>
2550
2551         * ziyi: Update to match the new format for Architectures/Components
2552         in katie.conf.
2553
2554 2002-05-14  James Troup  <james@nocrew.org>
2555
2556         * amber: new script; 'installer' wrapper script for the security
2557         team.
2558
2559         * katie.py (Katie.announce): remove unused 'dsc' local
2560         variable. (pychecker)
2561
2562         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2563
2564         * neve: don't import sys, we don't use it. (pychecker)
2565         (check_signature): fix return type mismatch. (pychecker)
2566
2567         * utils.py: don't import commands, we don't use it.  (pychecker)
2568
2569         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2570
2571         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2572         obsoleted by the change to "othercomponents" handling in jennifer
2573         detailed below.
2574         (Katie.cross_suite_version_check): new function; implements
2575         cross-suite version checking rules specified in the conf file
2576         while also enforcing the standard "must be newer than target
2577         suite" rule.
2578         (Katie.check_binary_against_db): renamed, since it's invoked once
2579         per-binary, "binaries" was inaccurate.  Use
2580         cross_suite_version_check() and don't bother with the "oldfiles"
2581         rubbish as jennifer works out "othercomponents" herself now.
2582         (Katie.check_source_against_db): use cross_suite_version_check().
2583
2584         * katie (check): the version and file overwrite checks
2585         (check_{binary,source,dsc}_against_db) are not per-suite.
2586
2587         * jennifer (check_files): less duplication of
2588         'control.Find("Architecture", "")' by putting it in a local
2589         variable.
2590         (check_files): call check_binary_against_db higher up since it's
2591         not a per-suite check.
2592         (check_files): get "othercomponents" directly rather than having
2593         check_binary_against_db do it for us.
2594
2595         * heidi (main): 'if x:', not 'if x != []:'.
2596         * katie.py (Katie.in_override_p): likewise.
2597         (Katie.check_dsc_against_db): likewise.
2598         * natalie (main): likewise.
2599         * rene (main): likewise.
2600         * ziyi (real_arch): likewise.
2601
2602         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2603         and OverrideType are now value lists, not lists.
2604         * andrea (main): likewise.
2605         * cindy (main): likewise.
2606         * claire.py (find_dislocated_stable): likewise.
2607         * denise (main): likewise.
2608         * jenna (main): likewise.
2609         * jennifer (check_distributions): likewise.
2610         (check_files): likewise.
2611         (check_urgency): likewise (Urgency::Valid).
2612         * jeri (parse_packages): likewise.
2613         * neve (main): likewise (and Location::%s::Suites).
2614         * rene (main): likewise.
2615
2616 2002-05-13  James Troup  <james@nocrew.org>
2617
2618         * katie.py (Katie.check_source_against_db): correct case of reject
2619         message to be consistent with binary checks.
2620
2621         * jennifer (get_status_output): don't leak 2 file descriptors per
2622         invocation.
2623         (check_signature): add missing '\n' to "duplicate status token"
2624         error message.
2625
2626 2002-05-09  James Troup  <james@nocrew.org>
2627
2628         * utils.py (validate_changes_file_arg): new function; validates an
2629         argument which should be a .changes file.
2630         * ashley (main): use it.
2631         * lisa (main): likewise.
2632
2633         * katie.py (Katie.check_dsc_against_db): since there can be more
2634         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2635         entry still exists in files.
2636
2637         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2638         files, since check_dsc_against_db() deletes the .orig.tar.gz
2639         entry.
2640
2641         * cameron: cleanups.
2642
2643         * utils.py (changes_compare): change sort order so that source
2644         name and source version trump 'have source'; this should fix
2645         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2646         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2647         by Ryan.
2648
2649         * lisa (main): allow the arguments to be .katie files too.
2650
2651 2002-05-07  Ryan Murray  <rmurray@debian.org>
2652
2653         * cron.buildd: add s390 to arch list again
2654
2655 2002-05-05  Ryan Murray  <rmurray@debian.org>
2656
2657         * cron.buildd: new script, update w-b database from unstable_accepted
2658         table
2659         * cameron: new script, take list in unstable_accepted and write out
2660         a file list for apt-ftparchive
2661         * apt.conf.buildd: new apt configuration for Packages/Sources for
2662         unstable_accepted
2663         * vars: add s390 to arch list.
2664
2665 2002-05-03  James Troup  <james@nocrew.org>
2666
2667         * neve (main): don't hard code the calling user as that doesn't
2668         work with modern postgres installs.  Fix psql invocation for
2669         init_pool.sql (database name required).  Dont' hard code the
2670         database name.
2671         (process_sources): add support for fingerprint and install_date.
2672         (process_packages): add support for fingerprint.
2673         (do_sources): pass in the directory, fingerprint support needs it.
2674         (get_status_output): borrowed from jennifer.
2675         (reject): likewise.
2676         (check_signature): likewise.
2677
2678         * katie (install): only try to log urgencies if Urgency_Logger is
2679         defined.
2680         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2681         defined; only close Urgency_Logger if it's defined.
2682
2683         * catherine (poolize): adapt for Dir rationalization.
2684         * claire.py (find_dislocated_stable): likewise.
2685         * denise (main): likewise.
2686         * halle (check_joey): likewise.
2687         * jenna: likewise.
2688         * jennifer: likewise.
2689         * jeri: likewise.
2690         * katie.py: likewise.
2691         * katie: likewise.
2692         * lisa (do_bxa_notification): likewise.
2693         * logging.py (Logger.__init__): likewise
2694         * rene (main): likewise.
2695         * rhona (clean): likewise.
2696         * shania (init): likewise.
2697         * tea: likewise.
2698         * ziyi: likewise.
2699
2700         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2701         FindB, not FindI.
2702
2703         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2704         boolean, use FindB, not get.
2705
2706         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2707         .orig.tar.gz's which are an exact (size/md5sum) match.
2708
2709         * ashley (main): really allow *.katie files as arguments too;
2710         noticed by aj.
2711
2712         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2713
2714 2002-05-03  Anthony Towns  <ajt@debian.org>
2715
2716         * ziyi: support for security.
2717
2718 2002-05-02  James Troup  <james@nocrew.org>
2719
2720         * jennifer (accept): call Katie.check_override() unconditional as
2721         no-mail check moved into that function.
2722         (do_byhand): likewise.
2723
2724         * katie.py (Katie.check_override): don't do anything if we're a)
2725         not sending mail or b) the override disparity checks have been
2726         disbled via Dinstall::OverrideDisparityCheck.
2727
2728         * jennifer (check_files): don't hard code Unstable as the suite
2729         used to check for architecture validity; use
2730         Dinstall::DefaultSuite instead, if it exists.
2731         (accept): conditionalize
2732
2733         * katie.py (Katie.update_subst): support global maintainer
2734         override with Dinstall::OverrideMaintainer.
2735
2736         * jennifer (check_distributions): new function, Distribution
2737         validation and mapping.  Uses new SuiteMappings variable from
2738         config file to abstract suite mappings.
2739         (check_changes): call it.
2740
2741         * natalie: renamed; nothing imports or likely will for some time.
2742
2743         * denise (main): remove unused natalie import and init().
2744
2745         * natalie.py (init): removed.
2746         (main): initalize here instead and don't hardcode the database
2747         name.
2748
2749 2002-04-30  James Troup  <james@nocrew.org>
2750
2751         * katie.py (Katie.close_bugs): new function, split out from
2752         announce().
2753         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2754         true.
2755         (Katie.close_bugs): new function, split out
2756         (Katie.close_bugs): return immediately if there are no bugs to
2757         close.
2758
2759         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2760         * katie (do_reject): likewise.
2761         (stable_install): likewise.
2762         * katie.py (Katie.announce): likewise.
2763         (Katie.accept): likewise.
2764         (Katie.check_override): likewise.
2765         (Katie.do_reject): likewise.
2766         * lisa (do_bxa_notification): likewise.
2767         * melanie (main): likewise.
2768
2769         * utils.py (TemplateSubst): change second argument to be a
2770         filename rather than a template since every caller opened a file
2771         on the fly which was ugly and leaked file descriptor.
2772
2773 2002-04-29  James Troup  <james@nocrew.org>
2774
2775         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2776         <hertzog@debian.org> to send 'accepted' announce mails to the
2777         PTS. [#128140]
2778
2779 2002-04-24  James Troup  <james@nocrew.org>
2780
2781         * init_pool.sql (unstable_accepted): add two new fields to
2782         unstable_accepted; in_accepted is a boolean indicating whether or
2783         not the file is in accepted and last_used is a timestamp used by
2784         rhona to determine when to remove symlinks for installed packages.
2785
2786         * katie.py (Katie.accept): auto-build support take 2.  Create
2787         symlinks for all files into a seperate directory.  Add files to
2788         unstable_accepted as paths to the new directory; mark them as
2789         being in accepted for cameron.  Properly conditionalize it on a
2790         configuration variable.
2791
2792         * katie (install): likewise.  Update symlinks to point into the
2793         pool; mark the files for later deletion by rhona and mark them as
2794         not being in accepted for cameron.
2795
2796         * rhona (clean_accepted_autobuild): new function.
2797
2798 2002-04-22  James Troup  <james@nocrew.org>
2799
2800         * jennifer (check_files): handle db_access.get_location_id()
2801         returning -1 properly/better.
2802
2803         * rhona (clean_fingerprints): new function.
2804
2805 2002-04-21  James Troup  <james@nocrew.org>
2806
2807         * utils.py (touch_file): unused; remove.
2808         (plural): likewise.
2809
2810         * jennifer (check_files): close file descriptor used to get the
2811         control file.
2812         (check_md5sums): likewise.
2813         (callback): likewise.
2814
2815         * katie.py (Katie.do_reject): handle manual rejects much better;
2816         call the editor first and get confirmation from the user before
2817         proceeding.
2818
2819         * jennifer (check_signature): prefix_multi_line_string() moved to
2820         utils.
2821
2822         * utils.py (prefix_multi_line_string): moved here from jennifer.
2823
2824 2002-04-20  James Troup  <james@nocrew.org>
2825
2826         * lisa (main): handle non-existent files.
2827
2828         * ashley (main): allow *.katie files as arguments too.
2829
2830 2002-04-19  James Troup  <james@nocrew.org>
2831
2832         * katie.py (Katie.accept): add stuff to help auto-building from
2833         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2834         in the pool), create a symlink to it in the accepted directory and
2835         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2836
2837         * katie (install): undo the "auto-building from accepted" stuff
2838         (i.e. remove the .orig.tar.gz symlink and remove the files from
2839         unstable_accepted table).
2840
2841 2002-04-16  James Troup  <james@nocrew.org>
2842
2843         * jennifer (upload_too_new): fix typo which was causing all
2844         timestamp comparisons to be against the .changes file.  Also move
2845         back to the original directory so we do the comparisons against
2846         accurate timestamps.
2847
2848         * tea (check_missing_tar_gz_in_dsc): new function.
2849
2850         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2851         file mentioned in the .dsc.
2852
2853         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2854         way mails reach debian-{devel-,}changes@l.d.o.
2855
2856 2002-04-02  Ryan Murray  <rmurray@debian.org>
2857
2858         * cron.daily: run shania after rhona
2859         * cron.daily-non-US: likewise.
2860
2861 2002-04-01  James Troup  <james@nocrew.org>
2862
2863         * katie: re-add proposed-updates/stable install support.
2864
2865         * katie.py (Katie.dump_vars): add changes["changes"] as an
2866         optional field; should be mandatory later.
2867
2868 2002-03-31  James Troup  <james@nocrew.org>
2869
2870         * katie (install): support a Suite::<foo>::CopyKatie similar to
2871         CopyChanges.  Done seperately because .katie files don't need to
2872         be mirrored and will probably be copied to another directory as a
2873         result.
2874
2875         * halle (main): add missing debug to options.
2876
2877 2002-03-29  James Troup  <james@nocrew.org>
2878
2879         * madison (main): add a -r/--regex option.
2880
2881 2002-03-26  James Troup  <james@nocrew.org>
2882
2883         * lisa: don't trample on changes["distribution"]; make a copy of
2884         it as changes["suite"] instead and use that.
2885
2886 2002-03-16  Anthony Towns  <ajt@debian.org>
2887
2888         * templates/lisa.bxa_notification: Fix some grammatical errors.
2889         Encourage contact via bxa@ftp-master email address.
2890
2891 2002-03-15  James Troup  <james@nocrew.org>
2892
2893         * jennifer (check_timestamps): remove bogus raise in except.
2894
2895 2002-03-15  Anthony Towns  <ajt@debian.org>
2896
2897         * cron.monthly: rotate mail/archive/bxamail as well as
2898         mail/archive/mail. This is for a complete archive of
2899         correspondence with the BXA.
2900
2901 2002-03-14  Anthony Towns  <ajt@debian.org>
2902
2903         * crypto-in-main changes.
2904
2905         * utils.py (move, copy): add an optional perms= parameter to let you
2906         set the resulting permissions of the moved/copied file
2907         * katie.py (force_move): rejected/morgued files should be unreadable
2908         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2909         should be unreadable.
2910
2911 2002-03-07  Ryan Murray  <rmurray@debian.org>
2912
2913         * katie (install): check for existance of "files id" key as well as
2914         it being set to a valid value.
2915         * katie (install): check for existense and valid value for location
2916         id as well
2917
2918 2002-03-05  Ryan Murray  <rmurray@debian.org>
2919
2920         * katie.py (do_reject): reread the reason file after editing it.
2921
2922 2002-02-25  James Troup  <james@nocrew.org>
2923
2924         * jennifer (check_changes): don't enforce sanity in .changes file
2925         names since it doesn't seem to be possible; pcmica-cs and similar
2926         freak show packages in particular cause real problems.
2927
2928         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2929         each dsc_file since the .orig.tar.gz checking code now uses it as
2930         a boolean.  Fixes bizarro rejections which bogusly claimed
2931         .diff.gz md5sum/size was incorrect.
2932
2933 2002-02-24  James Troup  <james@nocrew.org>
2934
2935         * katie (process_it): reset reject_message.
2936
2937 2002-02-22  James Troup  <james@nocrew.org>
2938
2939         * db_access.py(set_files_id): disable use of
2940         currval('files_id_seq') because it was taking 3 seconds on auric
2941         which is insane (most calls take < 0.01) and simply call
2942         get_files_id() for the return value instead.
2943
2944         * katie.py (Katie.do_query): convenience function; unused by
2945         default, useful for profiling.
2946         * db_access.py (do_query): likewise.
2947
2948         * katie (install): fix insert SQL call when binary has no source.
2949
2950         * lisa (determine_new): auto-correct non-US/main to non-US.
2951         (determine_new): add a warning when adding things to stable.
2952         (edit_index): use our_raw_input().
2953         (edit_overrides): likewise.
2954         (do_new): likewise.  Use re.search() not re.match() since the
2955         default answer may not be the first one.
2956         (do_byhand): likewise.
2957         (do_new): Default to 'S'kip and never 'A'dd.
2958
2959         * jennifer (action): pass prompt to our_raw_input().
2960         * melanie (game_over): likewise.
2961         * katie (action): likewise.
2962
2963         * utils.py (our_raw_input): add an optional prompt argument to
2964         make the function more usable as a drop in replacement for
2965         raw_input().
2966
2967         * jennifer (check_files): correct reject() to not double prefix
2968         when using katie.py based functions.
2969         (check_dsc): likewise.
2970
2971         * katie.py (Katie.reject): prepend a new line if appropriate
2972         rathen than appending one to avoid double new lines when caller
2973         adds one of his own.
2974
2975         * lisa (determine_new): warn if the package is also in other
2976         components.
2977
2978 2002-02-20  James Troup  <james@nocrew.org>
2979
2980         * jennifer (check_files): if .changes file lists "source" in
2981         Architecture field, there must be a .dsc.
2982
2983 2002-02-15  James Troup  <james@nocrew.org>
2984
2985         * ashley (main): add some missing fields.
2986
2987         * katie.py (Katie.check_dsc_against_db): fix to take into account
2988         the fact that the .orig.tar.gz might be in byhand, accepted or
2989         new.  Also fix calling of reject().
2990         (Katie.check_binaries_against_db): fix calling of reject().
2991         (Katie.check_source_against_db): likewise.
2992         (Katie.dump_vars): add missing variables used for bug closures.
2993
2994         * lisa (changes_compare_by_time): sort by reverse time.
2995
2996         * katie.py (Katie.accept): log.
2997         (Katie.dump_vars): missing has_key test for optional changes fields.
2998
2999         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3000         (process_it): traceback goes to stderr, not stdout.
3001         (acknowledge_new): log.
3002         (do_byhand): likewise.
3003
3004         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3005
3006         * add_constraints.sql: add grants for the new fingerprint table.
3007
3008 2002-02-13  James Troup  <james@nocrew.org>
3009
3010         * katie (do_reject): basename the .changes filename before trying
3011         to use it to construct the .reason filename.
3012         (process_it): call Katie.update_subst() so do_reject() DTRT with
3013         the mail template.
3014         (do_reject): setup the mail template correctly.
3015
3016 2002-02-12  James Troup  <james@nocrew.org>
3017
3018         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3019         (check_files): don't abuse global dictionaries.
3020         (Ent): use all variables.
3021         (check_timestamps): don't abuse global dictionaries.
3022
3023         * fernanda.py: renamed to .py so lisa can import it.
3024         (check_dsc): remove unused local variables (pychecker).
3025         (display_changes): split off from check_changes.
3026
3027         * katie: rewritten; most of the functionality moves to jennifer;
3028         what's left is the code to install packages once a day from the
3029         'accepted' directory.
3030
3031         * jennifer: new program, processes packages in 'unchecked'
3032         (i.e. most of the non-install functionality of old katie).
3033
3034         * katie.py: common functions shared between the clique of
3035         jennifer, lisa and katie.
3036
3037         * lisa: new program; handles NEW and BYHAND packages.
3038
3039         * jeri (usage): new function.
3040         (main): use it.
3041         (check_package): remove unused local variable (pychecker).
3042
3043         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3044         binaries and source.  Add install_date to source.
3045
3046         * halle (usage): new function.
3047         (main): use it.  Remove unused options.
3048         (check_changes): remove unused local variable (pychecker).
3049
3050         * add_constraints.sql: add fingerprint references.
3051
3052         * db_access.py (get_or_set_fingerprint_id): new function.
3053
3054         * ashley (main): new program; dumps the contents of a .katie file
3055         to stdout.
3056
3057         * alyson (main): remove option handling since we don't actually
3058         support any.
3059         * cindy (main): likewise.
3060
3061         * remove unnecessary imports and pre-define globals (pychecker).
3062
3063 2002-02-11  Anthony Towns  <ajt@debian.org>
3064
3065         * added installation-report and upgrade-report pseudo-packages
3066
3067 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3068
3069         * katie (update_subst): use Dinstall::TrackingServer.
3070         * melanie (main): likewise.
3071
3072 2002-01-27  James Troup  <james@nocrew.org>
3073
3074         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3075         noticing, jgg@ for fix.
3076
3077 2002-01-19  James Troup  <james@nocrew.org>
3078
3079         * utils.py (extract_component_from_section): handle non-US
3080         non-main properly.
3081
3082 2002-01-12  James Troup  <james@nocrew.org>
3083
3084         * madison: add support for -S/--source-and-binary which displays
3085         information for the source package and all it's binary children.
3086
3087 2002-01-13  Anthony Towns  <ajt@debian.org>
3088
3089         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3090         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3091           and 2002 key ids.
3092         * katie.conf-non-US: Likewise.
3093         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3094           multiple keys automatically. This is probably only useful for
3095           transitioning from an expired (or revoked?) key.
3096
3097 2002-01-08  Ryan Murray  <rmurray@debian.org>
3098
3099         * debian/python-dep: new file that prints out python:Depends for
3100           substvars
3101         * debian/control: use python:Depends, build-depend on python
3102           lower Depends: on postgresql to Suggests:
3103         * debian/rules: determine python version, install to the correct
3104           versioned dir
3105
3106 2001-12-18  Anthony Towns  <ajt@debian.org>
3107
3108         * ziyi: unlink Release files before overwriting them (in case they've
3109           been merged)
3110         * ziyi: always include checksums/sizes for the uncompressed versions
3111           of Sources and Packages, even if they're not present on disk
3112
3113 2001-11-26  Ryan Murray  <rmurray@debian.org>
3114
3115         * ziyi (main): add SigningPubKey config option
3116         * katie.conf: use SigningPubKey config option
3117         * katie.conf-non-US: likewise
3118
3119 2001-11-24  James Troup  <james@nocrew.org>
3120
3121         * katie (acknowledge_new): log newness.
3122
3123 2001-11-24  Anthony Towns  <ajt@debian.org>
3124
3125         * ziyi (real_arch): bail out if some moron forgot to reset
3126         untouchable on stable.
3127         (real_arch): source Release files.
3128
3129 2001-11-19  James Troup  <james@nocrew.org>
3130
3131         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3132         utils.get_conf().
3133         * shania (main): likewise.
3134
3135         * rhona (main): add default options.
3136
3137         * db_access.py (get_archive_id): case independent.
3138
3139         * katie (action): sort files so that ordering is consistent
3140         between mails; noticed/requested by Joey.
3141
3142 2001-11-17  Ryan Murray  <rmurray@debian.org>
3143
3144         * utils.py: add get_conf function, change startup code to read all
3145           config files to the Cnf that get_conf returns
3146           use the component list from the katie conf rather than the hardcoded
3147           list.
3148         * all scripts: use new get_conf function
3149         * shania: fix try/except around changes files
3150         * jenna: only do debian-installer if it is a section in Cnf
3151
3152 2001-11-16  Ryan Murray  <rmurray@debian.org>
3153
3154         * shania (main): Initialize days to a string of a number.
3155                  (main): Initialize Cnf vars before reading in Cnf
3156
3157 2001-11-14  Ryan Murray  <rmurray@debian.org>
3158
3159         * shania (main): Initialize days to a number.
3160
3161 2001-11-04  James Troup  <james@nocrew.org>
3162
3163         * docs/Makefile: use docbook-utils' docbook2man binary.
3164
3165         * Change all "if foo == []" constructs into "if not foo".
3166
3167         * katie (check_changes): when installing into stable from
3168         proposed-updates, remove all non-stable target distributions.
3169         (check_override): don't check for override disparities on stable
3170         installs.
3171         (stable_install): update install_bytes appropriately.
3172         (reject): stable rejection support; i.e. don't remove files when
3173         rejecting files in the pool, rather remove them from the
3174         proposed-update suite instead, rhona will do the rest.
3175         (manual_reject): support for a stable specific template.
3176         (main): setup up stable rejector in subst.
3177
3178 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3179
3180         * debian/control (Build-Depends): docbook2man has been superseded
3181         by docbook-utils.
3182
3183         * neve (main): exit with a more useful error message.
3184         (update_suites): Suite::<suite>::Version, Origin and Description
3185         are not required, so don't fail if they don't exist.
3186
3187         * db_access.py (get_archive_id): return -1 on error rather than
3188         raise an exception.
3189         (get_location_id): likewise.
3190
3191         * madison (main): don't exit on the first not-found package,
3192         rather exit with an appropriate return code after processing all
3193         packages.
3194
3195 2001-11-03  James Troup  <james@nocrew.org>
3196
3197         * claire.py (find_dislocated_stable): add per-architecture
3198         symlinks for dislocated architecture: all debs.
3199
3200 2001-10-19  Anthony Towns  <ajt@debian.org>
3201
3202         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3203
3204 2001-10-10  Anthony Towns  <ajt@debian.org>
3205
3206         * claire.py (fix_component_section): do _not_ assign to None under
3207         any circumstances
3208
3209 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3210
3211         * melanie (main): don't duplicate architectures when removing from
3212         more than one suite.
3213
3214         * heidi (main, process_file, get_list): report suite name not ID.
3215
3216         * naima (nmu_p): be case insensitive.
3217
3218         * naima (action): more list handling clean ups.
3219
3220         * melanie (main): clean up lists handling to use string.join and
3221         IN's.
3222
3223         * madison (main): clean up suite and architecture argument parsing
3224         to use slices less and string.join more.
3225
3226         * utils.py (parse_changes): Use string.find() instead of slices for
3227         string comparisons thereby avoid hardcoding the length of strings.
3228         * ziyi (main): likewise.
3229
3230 2001-10-07  James Troup  <james@nocrew.org>
3231
3232         * Remove mode argument from utils.open_files() calls if it's the
3233         default, i.e. 'r'.
3234
3235 2001-09-27  James Troup  <james@nocrew.org>
3236
3237         * katie (init): new function; options clean up.
3238         (usage): add missing options, remove obsolete ones.
3239         (main): adapt for the two changes above.  If the lock file or
3240         new-ack log file don't exist, create them.  Don't try to open the
3241         new-ack log file except running in new-ack mode.
3242
3243         * alyson (main): initialize all the tables that are based on the
3244         conf file.
3245
3246         * utils.py (touch_file): like touch(1).
3247         (where_am_i): typo.
3248
3249         * catherine (usage): new.
3250         (main): use it.  options cleanup.
3251         * claire.py: likewise.
3252         * fernanda: likewise.
3253         * heidi: likewise.
3254         * jenna: likewise.
3255         * shania: likewise.
3256         * ziyi: likewise.
3257
3258         * andrea: options cleanup.
3259         * charisma: likewise.
3260         * julia: likewise.
3261         * madison: likewise.
3262         * melanie: likewise.
3263         * natalie: likewise.
3264         * rhona: likewise.
3265         * tea: likewise.
3266
3267 2001-09-26  James Troup  <james@nocrew.org>
3268
3269         * utils.py: default to sane config file locations
3270         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3271         or they can point to the real ones through use of a new Config
3272         section.  Based on an old patch by Adam Heath.
3273         (where_am_i): use the new default config stuff.
3274         (which_conf_file): likewise.
3275         (which_apt_conf_file): likewise.
3276
3277         * charisma (main): output defaults to
3278         `Package~Version\tMaintainer'; input can be of either form.  When
3279         parsing the new format do version comparisons, when parsing the
3280         old format assume anything in the extra file wins.  This fixes the
3281         problem of newer non-US packages being overwhelmed by older
3282         versions still in stable on main.
3283
3284 2001-09-17  James Troup  <james@nocrew.org>
3285
3286         * natalie.py (list): use result_join().
3287
3288         * denise (main): result_join() moved to utils.
3289
3290         * utils.py (result_join): move to utils; add an optional seperator
3291         argument.
3292
3293 2001-09-14  James Troup  <james@nocrew.org>
3294
3295         * heidi (set_suite): new function; does --set like natalie does,
3296         i.e. turns it into a sequence of --add's and --remove's
3297         internally.  This is a major win (~20 minute run time > ~20
3298         seconds) in the common, everday (i.e. testing) case.
3299         (get_id): common code used by set_suite() and process_file().
3300         (process_file): call set_suite() and get_id().
3301         (main): add logging support.
3302
3303         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3304         files.
3305
3306         * utils.py (parse_changes): use slices or simple string comparison
3307         in favour of regexes where possible.
3308
3309         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3310         fact that the string VARDATA() points to are not null terminated.
3311
3312         * denise (result_join): new function; like string.join() but
3313         handles None's.
3314         (list): use it.
3315         (main): likewise.
3316
3317         * charisma (main): python-pygresql 7.1 returns None not "".
3318
3319 2001-09-14  Ryan Murray  <rmurray@debian.org>
3320
3321         * natalie.py (list): handle python-pygresql 7.1 returning None.
3322
3323 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3324
3325         * madison (main): return 1 if no package is found.
3326
3327 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3328
3329         * madison (main): better error handling for incorrect
3330         -a/--architecture or -s/--suite arguments.
3331         (usage): new.
3332         (main): use it.
3333
3334 2001-09-05  Ryan Murray  <rmurray@debian.org>
3335
3336         * charisma, madison, katie: remove use of ROUser
3337         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3338
3339 2001-08-26  James Troup  <james@nocrew.org>
3340
3341         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3342         maintained packages at cjwatson@'s request.
3343
3344 2001-08-21  James Troup  <james@nocrew.org>
3345
3346         * madison (main): add -a/--architecture support.
3347
3348         * jenna: use logging instead of being overly verbose on stdout.
3349
3350 2001-08-11  Ryan Murray  <rmurray@debian.org>
3351
3352         * melanie: add functional help option
3353
3354 2001-08-07  Anthony Towns  <ajt@debian.org>
3355
3356         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3357
3358 2001-07-28  James Troup  <james@nocrew.org>
3359
3360         * katie (check_dsc): ensure source version is >> than existing
3361         source in target suite.
3362
3363 2001-07-25  James Troup  <james@nocrew.org>
3364
3365         * natalie.py: add logging support.
3366
3367         * utils.py (open_file): make the second argument optional and
3368         default to read-only.
3369
3370         * rene (main): work around broken source packages that duplicate
3371         arch: all packages with arch: !all packages (no longer allowed
3372         into the archive by katie).
3373
3374 2001-07-13  James Troup  <james@nocrew.org>
3375
3376         * katie (action): don't assume distribution is a dictionary.
3377         (update_subst): don't assume architecture is a dictionary and that
3378         maintainer822 is defined.
3379         (check_changes): recognise nk_format exceptions.
3380         (check_changes): reject on 'testing' only uploads.
3381         (check_files): when checking to ensure all packages are newer
3382         versions check against arch-all packages too.
3383         (check_dsc): enforce the existent of a sane set of mandatory
3384         fields.  Ensure the version number in the .dsc (modulo epoch)
3385         matches the version number in the .changes file.
3386
3387         * utils.py (changes_compare): ignore all exceptions when parsing
3388         the changes files.
3389         (build_file_list): don't UNDEF on a changes file with no format
3390         field.
3391
3392 2001-07-07  James Troup  <james@nocrew.org>
3393
3394         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3395         rather than 'changedbyname' to avoid false negatives on uploads
3396         with an email-address-only Changed-By field.
3397         (check_dsc): don't overwrite reject_message; append to it.
3398         (check_signature): likewise.
3399         (check_changes): likewise.
3400         (announce): condition logging on 'action'.
3401
3402         * logging.py: new logging module.
3403
3404         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3405         sub-tree into a separate (global) variable.
3406         (check_dsc): ensure format is 1.0 to retain backwards
3407         compatability with dpkg-source in potato.
3408         (main): only try to obtain the lock when not running in no-action
3409         mode.
3410         Use the new logging module.
3411
3412         * christina: initial version; only partially usable.
3413
3414 2001-06-28  Anthony Towns  <ajt@debian.org>
3415
3416         * apt.conf: Add ExtraOverrides to auric.
3417
3418 2001-06-25  James Troup  <james@nocrew.org>
3419
3420         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3421         they preferred the name 'Uploaders'.
3422
3423 2001-06-23  James Troup  <james@nocrew.org>
3424
3425         * katie (check_files): fix typo in uncommon rejection message,
3426         s/sourceversion/source version/.
3427
3428         * denise (main): we can't use print because stdout has been
3429         redirected.
3430
3431         * katie (source_exists): new function; moved out of check_files()
3432         and added support for binary-only NMUs of earlier sourceful NMUs.
3433
3434         * rhona (clean): find_next_free has moved.
3435
3436         * utils.py (find_next_free): new function; moved here from rhona.
3437         Change too_many to be an argument with a default value, rather
3438         than a hardcoded variable.
3439
3440         * shania: rewritten to work better; REJECTion reminder mail
3441         handling got lost though.
3442
3443 2001-06-22  James Troup  <james@nocrew.org>
3444
3445         * rhona (main): remove unused override code.
3446
3447         * fernanda (main): remove extraneous \n's from utils.warn calls.
3448         * natalie.py (list): likewise.
3449
3450         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3451         use utils.{warn,fubar} where appropriate.
3452
3453 2001-06-21  James Troup  <james@nocrew.org>
3454
3455         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3456         functionality.
3457         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3458         by the "Maintainers" field in the .dsc file and maintainer groups.
3459         (nmu_p.__init__): read in the list of group maintainer names.
3460         (announce): use nmu_p.
3461
3462 2001-06-20  James Troup  <james@nocrew.org>
3463
3464         * rene (main): hardcode the suite experimental is compared to by
3465         name rather than number.
3466
3467         * katie (check_files): differentiate between doesn't-exist and
3468         permission-denied in "can not read" rejections; requested by edd@.
3469         (check_dsc): use os.path.exists rather than os.access to allow the
3470         above check to kick in.
3471
3472         * heidi (process_file): read all input before doing anything and
3473         use transactions.
3474
3475 2001-06-15  James Troup  <james@nocrew.org>
3476
3477         * fernanda: new script; replaces old 'check' shell script
3478         nastiness.
3479
3480 2001-06-14  James Troup  <james@nocrew.org>
3481
3482         * katie: actually import traceback module to avoid amusing
3483         infinite loop.
3484
3485 2001-06-10  James Troup  <james@nocrew.org>
3486
3487         * utils.py (extract_component_from_section): fix to handle just
3488         'non-free' and 'contrib'.  Also fix to handle non-US in a
3489         completely case insensitive manner as a component.
3490
3491 2001-06-08  James Troup  <james@nocrew.org>
3492
3493         * madison (arch_compare): sort function that sorts 'source' first
3494         then alphabetically.
3495         (main): use it.
3496
3497 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3498
3499         * catherine (poolize): explicitly make poolized_size a long so it
3500         doesn't overflow when poolizing e.g. entire archives.
3501
3502 2001-06-01  James Troup  <james@nocrew.org>
3503
3504         * utils.py (send_mail): throw exceptions rather than exiting.
3505
3506         * katie (process_it): catch exceptions and ignore them.
3507
3508 2001-06-01  Michael Beattie  <mjb@debian.org>
3509
3510         * added update-mailingliststxt and update-readmenonus to update
3511         those files, respectively. modified cron.daily{,-non-US} to
3512         use them.
3513
3514 2001-05-31  Anthony Towns  <ajt@debian.org>
3515
3516         * rhona: make StayOfExecution work.
3517
3518 2001-05-31  James Troup  <james@nocrew.org>
3519
3520         * rhona (find_next_free): fixes to not overwrite files but rename
3521         them by appending .<n> instead.
3522         (clean): use find_next_free and use dated sub-directories in the
3523         morgue.
3524
3525         * utils.py (move): don't overwrite files unless forced to.
3526         (copy): likewise.
3527
3528 2001-05-24  James Troup  <james@nocrew.org>
3529
3530         * katie (check_files): determine the source version here instead
3531         of during install().
3532         (check_files): check for existent source with bin-only NMU
3533         support.
3534         (main): sort the list of changes so that the source-must-exist
3535         check Does The Right Thing(tm).
3536
3537         * utils.py (changes_compare): new function; sorts a list of
3538         changes files by 'have-source', source, version.
3539         (cc_fix_changes): helper function.
3540         (parse_changes): use compiled regexes.
3541         (fix_maintainer): likewise.
3542
3543         * rene (main): warn about packages in experimental that are
3544         superseded by newer versions in unstable.
3545
3546 2001-05-21  James Troup  <james@nocrew.org>
3547
3548         * rene (main): add support for checking for ANAIS (Architecture
3549         Not Allowed In Source) packages.
3550
3551 2001-05-17  James Troup  <james@nocrew.org>
3552
3553         * katie (check_changes): initalize `architecture' dictionary in
3554         changes global so that if we can't parse the changes file for
3555         whatever reason we don't undef later on.
3556
3557         * utils.py (parse_changes): fix handling of multi-line fields
3558         where the first line did have data.
3559
3560 2001-05-05  Anthony Towns  <ajt@debian.org>
3561
3562         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3563         (It should always have been there. Ooopsy.)
3564
3565 2001-05-03  Anthony Towns  <ajt@debian.org>
3566
3567         * jenna: Cleanup packages that move from arch:any to arch:all or
3568         vice-versa.
3569
3570 2001-04-24  Anthony Towns  <ajt@debian.org>
3571
3572         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3573         cope with debian-installer and boot-floppies' md5sum.txt.
3574
3575 2001-04-16  James Troup  <james@nocrew.org>
3576
3577         * katie (check_changes): add missing %s format string argument.
3578         (stable_install): temporary work around for morgue location to
3579         move installed changes files into.
3580         (stable_install): helps if you actually read in the template.
3581         (manual_reject): fix for editing of reject messages which was
3582         using the wrong variable name.
3583
3584         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3585
3586 2001-04-13  James Troup  <james@nocrew.org>
3587
3588         * katie (manual_reject): Cc the installer.
3589         (reject): don't.
3590         (check_changes): remove unused maintainer-determination code.
3591         (update_subst): add support for Changed-By when setting the
3592         *MAINTAINER* variables.
3593
3594         * rene (bar): new function to check for packages on architectures
3595         when they shouldn't be.
3596
3597         * natalie.py (main): use fubar() and warn() from utils.
3598
3599         * utils.py (whoami): new mini-function().
3600         * melanie (main): use it.
3601         * katie (manual_reject): likewise.
3602
3603 2001-04-03  James Troup  <james@nocrew.org>
3604
3605         * katie (action): ignore exceptions from os.path.getmtime() so we
3606         don't crash on non-existent changes files (e.g. when they are
3607         moved between the start of the install run in cron.daily and the
3608         time we get round to processing them).
3609
3610         * madison (main): also list source and accept -s/--suite.
3611
3612         * jenna (generate_src_list): missing \n in error message.
3613
3614         * katie (update_subst): add sane defaults for when changes is
3615         skeletal.
3616
3617 2001-03-29  James Troup  <james@nocrew.org>
3618
3619         * melanie (main): use fubar() and warn() from utils.  Remember who
3620         the maintainer for the removed packages are and display that info
3621         to the user.  Readd support for melanie-specific Bcc-ing that got
3622         lost in the TemplateSubst transition.
3623
3624         * utils.py (fubar): new function.
3625         (warn): like wise.
3626
3627         * db_access.py (get_maintainer): as below.
3628
3629         * charisma (get_maintainer): moved the bulk of this function to
3630         db_access so that melanie can use it too.
3631
3632         * claire.py (find_dislocated_stable): restrict the override join
3633         to those entries where the suite is stable; this avoids problems
3634         with packages which have moved to new sections (e.g. science)
3635         between stable and unstable.
3636
3637 2001-03-24  James Troup  <james@nocrew.org>
3638
3639         * catherine (poolize): new function; not really independent of
3640         main() fully, yet.
3641         (main): use it.
3642
3643         * katie (stable_install): __SUITE__ needs to be space prefixed
3644         because buildd's check for 'INSTALLED$'.
3645
3646 2001-03-22  James Troup  <james@nocrew.org>
3647
3648         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3649
3650         * jenna: rewritten; now does deletions on a per-suite level
3651         instead of a per-suite-component-architecture-type level.  This
3652         allows mutli-component packages to be auto-cleaned (and as a
3653         bonus, reduces the code size and duplication).
3654
3655 2001-03-22  Anthony Towns  <ajt@debian.org>
3656
3657         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3658         instead of just giving a gpg error.
3659
3660 2001-03-21  James Troup  <james@nocrew.org>
3661
3662         * madison (main): use apt_pkg.VersionCompare to sort versions so
3663         that output is correctly sorted for packages like debhlper.
3664         Noticed by ajt@.
3665
3666         * tea (check_source_in_one_dir): actually find problematic source
3667         packages.
3668
3669         * katie (check_dsc): remember the orig.tar.gz's location ID if
3670         it's not in a legacy suite.
3671         (check_diff): we don't use orig_tar_id.
3672         (install): add code to handle sourceful diff-only upload of
3673         packages which change components by copying the .orig.tar.gz into
3674         the new component, if it doesn't already exist there.
3675         (process_it): reset orig_tar_location (as above).
3676
3677         * melanie (main): use template substiution for the bug closing
3678         emails.
3679         (main): don't hardcode bugs.debian.org or packages.debian.org
3680         either; use configuration items.
3681
3682         * katie: likewise.
3683
3684         * natalie.py (init): use None rather than 'localhost' for the
3685         hostname given to pg.connect.
3686
3687         * utils.py (TemplateSubst): new function; lifted from
3688         userdir-ldap.
3689
3690 2001-03-21  Ryan Murray  <rmurray@debian.org>
3691
3692         * katie (announce): fix the case of non-existent
3693         Suite::$SUITE::Announce.
3694
3695 2001-03-20  Ryan Murray  <rmurray@debian.org>
3696
3697         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3698         /usr/.
3699
3700         * alyson (main): use config variable for database name.
3701         * andrea (main): likewise.
3702         * catherine (main): likewise.
3703         * charisma (main): likewise.
3704         * cindy (main): likewise.
3705         * claire.py (main): likewise.
3706         * denise (main): likewise.
3707         * heidi (main): likewise.
3708         * jenna (main): likewise.
3709         * katie (main): likewise.
3710         * madison (main): likewise.
3711         * melanie (main): likewise.
3712         * neve (main): likewise.
3713         * rhona (main): likewise.
3714         * tea (main): likewise.
3715
3716 2001-03-15  James Troup  <james@nocrew.org>
3717
3718         * rhona (check_sources): fixed evil off by one (letter) error
3719         which was causing only .dsc files to be deleted when cleaning
3720         source packages.
3721
3722         * charisma (get_maintainer_from_source): remove really stupid and
3723         gratuitous IN sub-query and replace with normal inner join.
3724         (main): connect as read-only user nobody.
3725
3726         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3727         with EXISTS.
3728         (check_files): likewise; still disabled by default though.
3729         (clean_binaries): add ' seconds' to the mysterious number in the
3730         output.
3731         (clean): likewise.
3732
3733         * tea (check_files): add missing global declaration on db_files.
3734
3735 2001-03-14  James Troup  <james@nocrew.org>
3736
3737         * rhona: rewritten large chunks. Removed a lot of the silly
3738         selecting into dictionaries and replaced it with 'where exists'
3739         based sub queries.  Added support for StayOfExecution.  Fix the
3740         problem with deleting dsc_files too early and disable cleaning of
3741         unattached files.
3742
3743 2001-03-14  Anthony Towns  <ajt@debian.org>
3744
3745         * katie (announce): also check Changed-By when trying to detect
3746         NMUs.
3747
3748 2001-03-06  Anthony Towns  <ajt@debian.org>
3749
3750         * ziyi (main): Generate Release.gpg files as well, using the key from
3751         Dinstall::SigningKey in katie.conf, if present. That key has to be
3752         passwordless, and hence kept fairly secretly.
3753
3754 2001-03-02  James Troup  <james@nocrew.org>
3755
3756         * utils.py (str_isnum): new function; checks to see if the string
3757         is a number.
3758
3759         * shania (main): fix _hideous_ bug which was causing all files > 2
3760         weeks old to be deleted from incoming, even if they were part of a
3761         valid upload.
3762
3763 2001-02-27  James Troup  <james@nocrew.org>
3764
3765         * melanie (main): accept new argument -C/--carbon-copy which
3766         allows arbitarty carbon-copying of the bug closure messages.
3767         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3768         separate variable.
3769
3770 2001-02-27  Anthony Towns  <ajt@debian.org>
3771
3772         * ziyi: new program; generates Release files.
3773
3774 2001-02-25  James Troup  <james@nocrew.org>
3775
3776         * katie (reject): add missing '\n' to error message.
3777         (manual_reject): likewise.
3778         (install): catch exceptions from moving the changes file into DONE
3779         and ignore them.
3780
3781         * tea (check_md5sums): new function.
3782
3783 2001-02-25  Michael Beattie  <mjb@debian.org>
3784
3785         * melanie: use $EDITOR if available.
3786
3787 2001-02-15  James Troup  <james@nocrew.org>
3788
3789         * utils.py (parse_changes): don't crash and burn on empty .changes
3790         files.  Symptoms noticed by mjb@.
3791
3792 2001-02-15  Adam Heath  <doogie@debian.org>
3793
3794         * denise (main): use an absolute path for the output filename.
3795
3796         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3797         compile errors with postgresql-dev >= 7.0.
3798
3799 2001-02-12  James Troup  <james@nocrew.org>
3800
3801         * rene: initial version.
3802
3803         * andrea: initial version.
3804
3805         * catherine (main): remove obsolete assignment of arguments.
3806
3807 2001-02-09  James Troup  <james@nocrew.org>
3808
3809         * catherine: first working version.
3810
3811 2001-02-06  James Troup  <james@nocrew.org>
3812
3813         * katie (check_files): validate the priority field; i.e. ensure it
3814         doesn't contain a '/' (to catch people prepending the priority
3815         with the component rather than the section).
3816         (check_override): don't warn about source packages; the only check
3817         is on section and we have no GUI tools that would use the Section
3818         field for a Sources file.
3819         (announce): use tags rather than severities for NMUs.  Requested
3820         by Josip Rodin <joy@>. [#78035]
3821
3822 2001-02-04  James Troup  <james@nocrew.org>
3823
3824         * tea (check_override): new function; ensures packages in suites
3825         are also in the override file.  Thanks to bod@ for noticing that
3826         such packages existed.
3827
3828         * katie: move file type compiled regular expressions to utils as
3829         catherine uses them too.
3830         (check_changes): always default maintainer822 to the installer
3831         address so that any bail out won't cause undefs later.
3832         (check_files): update file type re's to match above.
3833         (stable_install): likewise.
3834         (reject): handle any except from moving the changes files.  Fixes
3835         crashes on unreadable changes files.
3836
3837         * melanie (main): add an explanation of why things are not removed
3838         from testing.
3839
3840 2001-01-31  James Troup  <james@nocrew.org>
3841
3842         * melanie (main): ignore a) no message, b) removing from stable or
3843         testing when invoked with -n/--no-action.
3844
3845         * katie (check_override): lower section before checking to see if
3846         we're whining about 'non-US' versus 'non-US/main'.
3847
3848         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3849         function so that we can use inside of PostgreSQL.
3850
3851 2001-01-28  James Troup  <james@nocrew.org>
3852
3853         * katie: updated to pass new flag to parse_changes() and deal with
3854         the exception raised on invalid .dsc's if appropriate.
3855         * shania (main): likewise.
3856         * melanie (main): likewise.
3857
3858         * tea (check_dscs): new function to validate all .dsc files in
3859         unstable.
3860
3861         * utils.py (parse_changes): if passed an additional flag, validate
3862         the .dsc file to ensure it's extractable by dpkg-source.
3863         Requested by Ben Collins <bcollins@>.
3864
3865 2001-01-27  James Troup  <james@nocrew.org>
3866
3867         * madison (main): connect to the DB as nobody.
3868
3869         * katie (check_files): remove support for -r/--no-version-check
3870         since it makes no sense under katie (jenna will automatically
3871         remove the (new) older version) and was evil in any event.
3872         (check_changes): add missing new line to rejection message.
3873         (check_dsc): likewise.
3874         (process_it): reset reject_message here.
3875         (main): not here.  Also remove support for -r.
3876
3877 2001-01-26  James Troup  <james@nocrew.org>
3878
3879         * katie (check_override): don't whine about 'non-US/main' versus
3880         'non-US'.
3881
3882 2001-01-26  Michael Beattie  <mjb@debian.org>
3883
3884         * natalie.py (usage): new function.
3885         (main): use it.
3886
3887 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3888
3889         * update-mirrorlists: Update README.non-US too (request from Joy).
3890
3891 2001-01-25  James Troup  <james@nocrew.org>
3892
3893         * katie (reject): catch any exception from utils.move() and just
3894         pass, we previously only caught can't-overwrite errors and not
3895         can't-read ones.
3896
3897         * jenna (generate_src_list): use ORDER BY in selects to avoid
3898         unnecessary changes to Packages files.
3899         (generate_bin_list): likewise.
3900
3901         * utils.py (extract_component_from_section): separated out from
3902         build_file_list() as it's now used by claire too.
3903
3904         * claire.py (find_dislocated_stable): rewrite the query to extract
3905         section information and handle component-less locations properly.
3906         Thanks to ajt@ for the improved queries.
3907         (fix_component_section): new function to fix components and
3908         sections.
3909
3910 2001-01-23  James Troup  <james@nocrew.org>
3911
3912         * katie (check_files): set file type for (u?)debs first thing, so
3913         that if we continue, other functions which rely on file type
3914         existing don't bomb out.  If apt_pkg or apt_inst raise an
3915         exception when parsing the control file, don't try any other
3916         checks, just drop out.
3917         (check_changes): new test to ensure there is actually a target
3918         distribution.
3919
3920 2001-01-22  James Troup  <james@nocrew.org>
3921
3922         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3923         <grin@>.
3924         (check_changes): when mapping to unstable, remember to actually
3925         add unstable to the suite list and not just remove the invalid
3926         suite.
3927
3928 2001-01-21  James Troup  <james@nocrew.org>
3929
3930         * katie (check_files): catch exceptions from debExtractControl()
3931         and reject packages which raise any.
3932
3933 2001-01-19  James Troup  <james@nocrew.org>
3934
3935         * katie (check_signature): basename() file name in rejection
3936         message.
3937
3938 2001-01-18  James Troup  <james@nocrew.org>
3939
3940         * katie (in_override_p): remember the section and priority from
3941         the override file so we can check them against the package later.
3942         (check_override): new function; checks section and priority (for
3943         binaries) from the package against the override file and mails the
3944         maintainer about any disparities.
3945         (install): call check_override after announcing the upload.
3946
3947 2001-01-16  James Troup  <james@nocrew.org>
3948
3949         * utils.py (build_file_list): catch ValueError's from splitting up
3950         the files field and translate it into a parse error.
3951
3952         * tea: add support for finding unreferenced files.
3953
3954         * katie (in_override_p): add support for suite-aliasing so that
3955         proposed-updates uploads work again.
3956         (check_changes): catch parses errors from utils.build_file_list().
3957         (check_dsc): likewise.
3958         (check_diff): yet more dpkg breakage so we require even newer a
3959         version.
3960
3961         * jenna (generate_bin_list): don't do nasty path munging that's no
3962         longer needed.
3963
3964         * denise (main): support for non-US; and rename testing's override
3965         files so they're based on testing's codename.
3966
3967 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3968
3969         * melanie: add to the bug closing message explaining what happens
3970         (or rather doesn't) with bugs against packages that have been
3971         removed.
3972
3973 2001-01-14  James Troup  <james@nocrew.org>
3974
3975         * charisma (main): fix silly off-by-one error; suite priority
3976         checking was done using "less than" rather than "less than or
3977         equal to" which was causing weird hesienbugs with wrong Maintainer
3978         fields.
3979
3980 2001-01-10  James Troup  <james@nocrew.org>
3981
3982         * katie (in_override_p): adapted to use SQL-based overrides.
3983         read_override_file function disappears.
3984
3985         * db_access.py: add new functions get_section_id, get_priority_id
3986         and get_override_type_id.
3987         (get_architecture_id): return -1 if the architecture is not found.
3988
3989         * heidi: switch %d -> %d in all SQL queries.
3990         (get_list): Use string.join where appropriate.
3991
3992         * rhona (in_override_p): don't die if the override file doesn't
3993         exist.
3994         (main): warn if the override file doesn't exist.
3995
3996         * alyson: new script; will eventually sync the config file and the
3997         SQL database.
3998
3999         * natalie.py: new script; manipulates overrides.
4000
4001         * melanie: new script; removes packages from suites.
4002
4003 2001-01-08  James Troup  <james@nocrew.org>
4004
4005         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4006         anything it just changed the symptom.  Recognise the new breakage
4007         and reject them too.
4008
4009 2001-01-07  James Troup  <james@nocrew.org>
4010
4011         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4012         to the .changes file, be sure to set up files[filename]["type"]
4013         too.
4014
4015 2001-01-06  James Troup  <james@nocrew.org>
4016
4017         * katie (check_diff): new function; detects bad diff files
4018         produced by dpkg 1.8.1 and rejects thems.
4019         (process_it): call check_diff().
4020         (check_dsc): gar.  Add support for multiple versions of the
4021         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4022         and size against all versions and use one which matches if
4023         possible and exclude any that don't from being poolized to avoid
4024         file overwrites.  Thanks to broonie@ for providing the example.
4025         (install): skip any files marked as excluded as above.
4026
4027 2001-01-05  James Troup  <james@nocrew.org>
4028
4029         * heidi (process_file): add missing argument to error message.
4030
4031 2001-01-04  James Troup  <james@nocrew.org>
4032
4033         * heidi (main): fix handling of multiple files by reading all
4034         files not just the first file n times (where n = the number of
4035         files passed as arguments).
4036
4037 2001-01-04  Anthony Towns  <ajt@debian.org>
4038
4039         * katie (check_dsc): proper fix for the code which locates the
4040         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4041
4042 2000-12-20  James Troup  <james@nocrew.org>
4043
4044         * rhona: replace IN's with EXISTS's to make DELETE time for
4045         binaries and source sane on auric.  Add a -n/--no-action flag and
4046         make it stop actions if used.  Fixed a bug in binaries deletion
4047         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4048         -V/--version.  Giving timing info on deletion till I'm sure it's
4049         sane.
4050
4051         * katie (check_changes): map testing to unstable.
4052
4053         * madison: new script; shows versions in different architectures.
4054
4055         * katie (check_dsc): ensure size matches as well as md5sum;
4056         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4057         #69702.
4058
4059 2000-12-19  James Troup  <james@nocrew.org>
4060
4061         * katie (reject): ignore the "can't overwrite file" exception from
4062         utils.move() and leave the files where they are.
4063         (reject): doh! os.access() test was reversed so we only tried to
4064         move files which didn't exist... replaced with os.path.exists()
4065         test the right way round.
4066
4067         * utils.py (move): raise an exception if we can't overwrite the
4068         destination file.
4069         (copy): likewise.
4070
4071 2000-12-18  James Troup  <james@nocrew.org>
4072
4073         * rhona: first working version.
4074
4075         * db_access.py (get_files_id): force both sizes to be integers.
4076
4077         * katie (main): use size_type().
4078
4079         * utils.py (size_type): new function; pretty prints a file size.
4080
4081 2000-12-17  James Troup  <james@nocrew.org>
4082
4083         * charisma (main): do version compares so that older packages do
4084         not override newer ones and process source first as source wins
4085         over binaries in terms of who we think of as the Maintainer.
4086
4087 2000-12-15  James Troup  <james@nocrew.org>
4088
4089         * katie (install): use the files id for the .orig.tar.gz from
4090         check_dsc().
4091         (install): limit select for legacy source to a) source in legacy
4092         or legacy-mixed type locations and b) distinct on files.id.
4093         (install): rather than the bizarre insert new, delete old method
4094         for moving legacy source into the pool, use a simple update of
4095         files.
4096         (process_it): initalize some globals before each process.
4097
4098 2000-12-14  James Troup  <james@nocrew.org>
4099
4100         * katie (in_override_p): index on binary_type too since .udeb
4101         overrides are in a different file.
4102         (read_override_file): likewise.
4103         (check_files): correct filename passed to get_files_id().
4104         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4105         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4106         (check_dsc): remember the files id of the .orig.tar.gz, not the
4107         location id.
4108
4109 2000-12-13  James Troup  <james@nocrew.org>
4110
4111         * utils.py (poolify): force the component to lower case except for
4112         non-US.
4113
4114         * katie (in_override_p): handle .udeb-specific override files.
4115         (check_files): pass the binary type to in_override_p().
4116         (check_dsc): remember the location id of the old .orig.tar.gz in
4117         case it's not in the pool.
4118         (install): use location id from dsc_files; which is where
4119         check_dsc() puts it for old .orig.tar.gz files.
4120         (install): install files after all DB work is complete.
4121         (reject): basename() the changes filename.
4122         (manual_reject): likewise.
4123
4124         * shania: new progam; replaces incomingcleaner.
4125
4126 2000-12-05  James Troup  <james@nocrew.org>
4127
4128         * katie (check_changes): if inside stable and can't find files
4129         from the .changes; assume it's installed in the pool and chdir()
4130         to there.
4131         (check_files): we are not installing for stable installs, so don't
4132         check for overwriting existing files.
4133         (check_dsc): likewise.
4134         (check_dsc): reorder .orig.tar.gz handling so that we search in
4135         the pool first and only then fall back on any .orig.tar.gz in the
4136         cwd; this avoids false positives on the overwrite check when
4137         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4138         (install): if this is a stable install, bail out to
4139         stable_install() immediately.
4140         (install): dsc_files handling was horribly broken. a) we need to
4141         add files from the .dsc and not the .changes (duh), b) we need to
4142         add the .dsc file itself to dsc_files (to be consistent with neve
4143         if for no other reason).
4144         (stable_install): new function; handles installs from inside
4145         proposed-updates to stable.
4146         (acknowledge_new): basename changes_filename before doing
4147         anything.
4148         (process_it): absolutize the changes filename to avoid the
4149         requirement of being in the same directory as the .changes file.
4150         (process_it): save and restore the cwd as stable installs can
4151         potentially jump into the pool to find files.
4152
4153         * jenna: dislocated_files support using claire.
4154
4155         * heidi (process_file): select package field from binaries
4156         explicitly.
4157
4158         * db_access.py (get_files_id): fix cache key used.
4159
4160         * utils.py (build_file_list): fix 'non-US/non-free' case in
4161         section/component splitting.
4162         (move): use os.path.isdir() rather than stat.
4163         (copy): likewise.
4164
4165         * claire.py: new file; stable in non-stable munger.
4166
4167         * tea: new file; simply ensures all files in the DB exist.
4168
4169 2000-12-01  James Troup  <james@nocrew.org>
4170
4171         * katie (check_dsc): use regex_safe().
4172         (check_changes): typo in changes{} key:
4173         s/distributions/distribution/.
4174         (install): use changes["source"], not files[file]["source"] as the
4175         latter may not exist and the former is used elsewhere.  Commit the
4176         SQL transaction earlier.
4177
4178         * utils.py (regex_safe): new function; escapes characters which
4179         have meaning to SQL's regex comparison operator ('~').
4180
4181 2000-11-30  James Troup  <james@nocrew.org>
4182
4183         * katie (install): pool_location is based on source package name,
4184         not binary package.
4185
4186         * utils.py (move): if dest is a directory, append the filename
4187         before chmod-ing.
4188         (copy): ditto.
4189
4190         * katie (check_files): don't allow overwriting of existing .debs.
4191         (check_dsc): don't allow overwriting of existing source files.
4192
4193 2000-11-27  James Troup  <james@nocrew.org>
4194
4195         * katie (check_signature): don't try to load rsaref; it's
4196         obsolete.
4197         (in_override_p): don't try to lookup override entries for packages
4198         with an invalid suite name.
4199         (announce): don't assume the suite name is valid; use Find() to
4200         lookup the mailing list name for announcements.
4201
4202         * utils.py (where_am_i): typo; hostname is in the first element,
4203         not second.
4204
4205         * db_access.py (get_suite_id): return -1 on an unknown suite.
4206
4207 2000-11-26  James Troup  <james@nocrew.org>
4208
4209         * katie (install): fix CopyChanges handling; typo in in checking
4210         Cnf for CopyChanges flag and was calling non-existent function
4211         copy_file.
4212
4213         * utils.py (copy): new function; clone of move without the
4214         unlink().
4215
4216 2000-11-25  James Troup  <james@nocrew.org>
4217
4218         * utils.py (build_file_list): handle non-US prefixes properly
4219         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4220         + 'libs' not 'non-US/libs').
4221         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4222         delays.  This is possibly(/probably) exim speicifc and (like other
4223         sendmail options) needs to be in the config file.
4224
4225 2000-11-24  James Troup  <james@nocrew.org>
4226
4227         * rhona (check_sources): we need file id from dsc_files; not id.
4228         Handle non .dsc source files being re-referenced in dsc_files.
4229
4230         * katie (in_override_p): strip out any 'non-US' prefix.
4231         (check_files): use utils.where_am_i() rather than hardcoding.
4232         (check_files): validate the component.
4233         (install): use utils.where_am_i() rather than hardcoding.
4234         (install): fix mail to go to actual recepient.
4235         (reject): likewise.
4236         (manual_reject): likewise.
4237         (acknowledge_new): likewise.
4238         (announce): likewise.
4239
4240         * db_access.py (get_component_id): ignore case when searching for
4241         the component and don't crash if the component can't be found, but
4242         return -1.
4243         (get_location_id): handle -1 from get_component_id().
4244
4245         * jenna (generate_src_list): don't bring 'suite' into our big
4246         multi-table-joining select as we already know the 'suite_id'.
4247         (generate_bin_list): likewise.
4248
4249         * neve (main): don't quit if not on ftp-master.
4250         (process_packages): remove unused variable 'suite_codename'.
4251
4252         * utils.py (move): actually move the file.
4253         (build_file_list): handle non-US prefixes in the section.
4254
4255         * catherine (main): use which_conf_file().
4256         * charisma (main): likewise.
4257         * heidi (main): likewise.
4258         * jenna (main): likewise.
4259         * katie (main): likewise.
4260         * neve (main): likewise.
4261         * rhona (main): likewise.
4262
4263         * utils.py (where_am_i): new routine; determines the archive as
4264         understood by other 'dak' programs.
4265         (which_conf_file): new routine; determines the conf file to read.
4266
4267 2000-11-17  James Troup  <james@nocrew.org>
4268
4269         * katie (install): fix where .changes files for proposed-updates
4270         go.
4271
4272 2000-11-04  James Troup  <james@nocrew.org>
4273
4274         * jenna (main): handle architecture properly if no
4275         -a/--architecture argument is given, i.e. reset architecture with
4276         the values for the suite for each suite.
4277
4278         * Add apt_pkg.init() to the start of all scripts as it's now
4279         required by python-apt.
4280
4281 2000-10-29  James Troup  <james@nocrew.org>
4282
4283         * jenna (generate_bin_list): take an additional argument 'type'
4284         and use it in the SELECT.
4285         (main): if processing component 'main', process udebs and debs.
4286
4287         * neve (process_packages): set up 'type' in 'binaries' (by
4288         assuming .deb).
4289
4290         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4291         (check_files): set up files[file]["dbtype"].
4292         (install): use files[file]["dbtype"] to set up the 'type' field in
4293         the 'binaries' table.
4294
4295         * init_pool.sql: add a 'type' field to the 'binaries' table to
4296         distinguisgh between ".udeb" and ".deb" files.
4297
4298         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4299         dest ? dirname(dest)" type check instead.
4300
4301         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4302         in the pool without crashing.  Also handle the case of being asked
4303         to look for something other than an .orig.tar.gz in the pool.
4304
4305 2000-10-26  James Troup  <james@nocrew.org>
4306
4307         * katie (install): fix filenames put into files table during
4308         poolification of legacy source.
4309
4310         * utils.py (move): work around a bug in os.path.basename() which
4311         cunningly returns '' if there is a trailing slash on the path
4312         passed to it.
4313
4314         * katie (check_dsc): Remove more cruft.  If we find the
4315         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4316         location, make a note of that so we can fix things in install().
4317         (install): as above.  Move any old source out of legacy locations
4318         so that 'apt-get source' will work.
4319         (process_it): reset the flag that indicates to install that the
4320         source needs moved.
4321
4322         * cron.daily: more.  Nowhere near complete yet though.
4323
4324         * katie (install): don't run os.makedirs, a) utils.move() does
4325         this now, b) we weren't removing the user's umask and were
4326         creating dirs with SNAFU permissions.
4327         (check_dsc): rewrite the .orig.tar.gz handling to take into
4328         account, err, package pools.  i.e. look anywhere in the pool
4329         rather than faffing around with two simple paths.
4330
4331         * neve (process_sources): add the .dsc to dsc_files too.
4332
4333 2000-10-25  James Troup  <james@nocrew.org>
4334
4335         * neve (process_sources): don't duplicate .orig.tar.gz's.
4336
4337 2000-10-23  James Troup  <james@nocrew.org>
4338
4339         * utils.py (re_extract_src_version): moved here.
4340
4341         * neve: move re_extract_src_version to utils.
4342         (process_packages): reflect change.
4343
4344         * katie (install): reflect change.
4345
4346 2000-10-19  James Troup  <james@nocrew.org>
4347
4348         * jenna (generate_src_list): handle locations with null
4349         components.
4350         (generate_bin_list): likewise.
4351