]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
* process_unchecked.py: Add support for automatic BYHAND
[dak.git] / ChangeLog
1 2007-08-28  Anthony Towns  <ajt@debian.org>
2
3         * process_unchecked.py: Add support for automatic BYHAND
4         processing.
5         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
6         processing of tag-overrides.
7
8 2007-06-19  Anthony Towns  <ajt@debian.org>
9
10         * Add nm.debian.org pseudopackage
11
12 2007-06-18  Anthony Towns  <ajt@debian.org>
13
14         * daklib/logging.py: Set umask to not exclude group-writability
15         so we don't get reminded at the start of each month. Thanks to
16         Random J.
17         * dak/override.py: More changes from Herr von Wifflepuck: warn
18         if section of source is different to binary section; restore
19         functionality on source-only overrides; croak if trying to set
20         priority of a source override; never set priority of source
21         overrides; correct typo in logging (s/priority/section/ at
22         one place)
23
24         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
25         * config/debian/cron.daily: auotmatically accept/reject
26         oldstable-proposed-updates based on COMMENTS directory
27
28 2007-06-18  Anthony Towns  <ajt@debian.org>
29
30         * config/debian/apt.conf, config/debian/apt.conf.stable,
31         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
32         (sarge), support for oldstable-proposed-updates, dropping m68k
33         from etch, creating etch-m68k suite, creating lenny.
34
35         * config/debian/vars: update for lenny
36
37         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
38         drop upload limitations, add release postgres user
39         
40         * dak/process_new.py: support for automatically accepting and rejecting
41         packages from proposed-updates holding queues via COMMENTS directory
42         * cron.daily: automatically process COMMENTS-based approvals
43         and rejections for proposed-updates holding queues
44
45         * dak/process_unchecked.py: add support for oldproposedupdates
46         holding queue
47
48         * dak/control_suite.py: allow control-suite to work with etch-m68k
49
50         * dak/generate_releases.py: unlink old Release files before updating
51         them if nlinks > 1 (ie, if two files used to be the same, maybe they
52         shouldn't be when generate-releases is run)
53
54         * dak/generate_releases.py: add a couple of commented lines to make
55         it easier to deal with point releases
56
57         * dak/make_overrides.py: generate overrides for !contrib udebs
58
59         * docs/README.stable-point-release: update docs for doing a
60         point release
61
62 2007-03-05  Anthony Towns  <ajt@debian.org>
63
64         * config/debian/dak.conf: update for 3.1r5.
65         * scripts/debian/ssh-move: add ssh-move script from debbugs
66         * config/debian/cron.unchecked: push version info to debbugs using
67         ssh-move.
68
69 2007-02-14  James Troup  <troup@ries.debian.org>
70
71         * docs/README.config: remove Dinstall::GroupOverrideFilename.
72         * config/debian/dak.conf: likewise.
73         * config/debian-non-US/dak.conf: likewise.
74         * config/debian-security/dak.conf: likewise.
75
76         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
77         experimental differently, just close the bugs and let version
78         tracking sort it out.
79          (nmu_p): remove entire class - now unused.
80          (Upload.__init__): don't use nmu_p.
81
82 2007-02-08  Anthony Towns  <ajt@debian.org>
83
84         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
85         signing key.  Drop maximum index diffs down to 14.
86
87         * config/debian/apt.conf: add udeb support for non-free (testing,
88         unstable) and experimental.
89         * config/debian/dak.conf: likewise.
90
91         * dak/generate_releases.py (main): handle udebs in any component.
92
93         * daklib/queue.py (Upload.build_summaries): handle files without a
94         'type' gracefully.
95
96         * dak/generate_releases.py (print_sha256_files): new function.
97         (main): use it.
98
99         * dak/process_accepted.py (stable_install): fix name of template
100         mail.
101
102         * dak/process_unchecked.py (is_stableupdate): fix invocation of
103         database.get_suite_id().
104
105         * templates/process-new.bxa_notification: Update on request
106         of/after discussion with BIS staff.
107
108         * scripts/debian/mkfilesindices: also handle proposed-updates.
109
110 2007-02-08  Ryan Murray  <rmurray@debian.org>
111
112         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
113         group name for chgrp of mail archives.
114
115         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
116         orig.tar.gz's by picking the first one by file id.
117
118         * dak/override.py (main): limit to binary overrides only for now.
119         (usage): update to match.
120
121         * config/debian/cron.daily: track when we have the accepted lock
122         and clean it up on exit if we have it.  Take/check the
123         cron.unchecked lock just before traping to cleanup on exit.
124         Remove potato override handling.  Remove any dangling symlinks in
125         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
126
127         * config/debian/apt.conf: change default compression scheme for
128         both Sources and Packages to gzip and bzip2 rather than
129         uncompressed and gzip (Packages) and gzip (Sources).  Use old
130         defaults for proposed-updates.
131
132         * dak/control_overrides.py (main): refuse to operate on
133         untouchable suites.
134
135         * config/debian/pseudo-packages.maintainers: drop install,
136         installation, boot-floppy, slink-cd, potato-cd and
137         nonus.debian.org.  Update base.
138         * config/debian/pseudo-packages.description: likewise.
139
140         * daklib/utils.py (re_srchasver): new regex.
141         (parse_changes): use regex to split 'Source (Version)' style
142         Source fields into 'source' and 'source-version'.
143
144         * config/debian/cron.daily: use $base instead of hardcoding path
145         name.
146
147         * scripts/debian/mkfilesindices: source 'vars' file and use it's
148         variables instead of hardcoding path names.
149
150         * config/debian/apt.conf: switch from /org to /srv.
151         * config/debian/apt.conf.buildd: likewise.
152         * config/debian/apt.conf.stable: likewise.
153         * config/debian/cron.daily: likewise.
154         * config/debian/cron.hourly: likewise.
155         * config/debian/cron.monthly: likewise.
156         * config/debian/cron.unchecked: likewise.
157         * config/debian/cron.weekly: likewise.
158         * config/debian/dak.conf: likewise.
159         * config/debian/vars: likewise.
160         * scripts/debian/mkfilesindices: likewise.
161         
162 2007-02-08  James Troup  <james@nocrew.org>
163
164         * dak/process_unchecked.py (check_signed_by_key): new function to
165         ensure .changes files are signed by an authorized uploader.
166         (process_it): use it.
167
168         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
169         to configure per suite/component/architecture binary upload
170         restrictions.
171
172 2006-10-09  James Troup  <james.troup@canonical.com>
173
174         * dak/process_unchecked.py (check_timestamps): change match to
175         search as recent versions of python-apt prefix the string with 'E: '.
176
177 2006-06-26  Ryan Murray  <rmurray@debian.org>
178
179         * dak/process_unchecked.py (check_files): strip optional source version
180         from Source: field in changes file, and ensure what is left is a valid
181         package name.
182
183 2006-06-23  Ryan Murray  <rmurray@debian.org>
184
185         * dak/process_unchecked.py (check_files): also check ProposedUpdates
186         queue for source.
187
188 2006-06-18  Ryan Murray  <rmurray@debian.org>
189
190         * dak/scripts/debian/update-ftpstats: look for dak named processes in
191         the log, too.
192
193         * dak/process_unchecked.py (check_files): only check embargoed and
194         unembargoed queues if the keys are set.
195
196         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
197         and bzip2 for etch.
198
199 2006-06-16  James Troup  <james@nocrew.org>
200
201         * dak/dak.py (init): add new-security-install.
202
203         * dak/new_security_install.py: cleanups and adapt for new naming
204         scheme and other changes.
205
206 2006-06-16  Anthony Towns  <ajt@debian.org>
207
208         * dak/new_security_install.py: initial version imported from
209         klecker.
210
211 2006-06-16  James Troup  <james@nocrew.org>
212
213         [Merged changes from klecker - original author unknown.]
214
215         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
216
217         * dak/security_install.py (do_upload): fix check for oldstable and
218         upload file list handling.
219
220         * dak/process_unchecked.py (check_files): update "check for
221         source" code to also look in Embargoed and Unembargoed queues.
222         (is_unembargo): fix handling of Dir::Queue::Disembargo.
223
224         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
225
226         * config/debian-security/vars (disembargo): add.
227
228         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
229         update.
230         (Process-Unchecked::AcceptedLockFile): add.
231         (Suite::Testing): clean up Version and Description.
232         (SuiteMappings): add silent map from etch-secure to testing.
233
234         * config/debian-security/cron.unchecked: add support for
235         disembargoed queues.
236
237         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
238         files too.
239
240         * config/debian-security/apt.conf: add amd64 to architectures for
241         testing-security.
242
243 2006-06-11  James Troup  <troup@spohr.debian.org>
244
245         * config/debian/cron.daily: invoke process-accepted not
246         process-unchecked.
247
248         * config/debian/vars (scriptsdir): new variable.
249         * config/debian/cron.daily: use it.
250
251         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
252         $base/misc/ instead of versioned $masterdir.  Correct 'dak
253         make-maintainers' invocation to look in $configdir for
254         pseudo-packages.maintainers.
255
256         * daklib/queue.py (Upload.do_reject): use correct name for
257         rejection template.
258
259 2006-06-11  James Troup  <james@nocrew.org>
260
261         * dak/override.py (main): temporarily add content of old X-Katie
262         header back as the PTS apparently filters on it.
263         * dak/process_accepted.py (main): likewise.
264         * dak/process_new.py (main): likewise.
265         * dak/process_unchecked.py (main): likewise.
266         * dak/reject_proposed_updates.py (main): likewise.
267         * dak/rm.py (main): likewise.
268         * daklib/queue.py (Upload.do_reject): likewise.
269
270         * config/debian/cron.unchecked: set -u to error out on undefined
271         variables.  Preset LOCKDAILY to "" accordingly.
272         * config/debian/cron.hourly: likewise.
273         * config/debian/cron.monthly: likewise.
274         * config/debian/cron.weekly: likewise.
275
276         * config/debian/vars (configdir): add new variable pointing to
277         this directory.
278
279         * config/debian/cron.daily: use $configdir inplace of $masterdir
280         when that's what we mean, and don't cd into $masterdir just to run
281         dak scripts as we don't need to do that anymore.
282         * config/debian/cron.hourly: likewise.
283         * config/debian/cron.unchecked: likewise.
284         * config/debian/cron.weekly: likewise.
285
286         * config/debian/dak.conf
287         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
288         user back to list of known users as it's non-trivial to entirely
289         change the owner of a database with postgresql 7.4.
290
291         * daklib/queue.py (Upload.source_exists): use string object
292         methods rather than string module.
293         (Upload.get_anyversion): likewise.
294
295         * daklib/utils.py (validate_changes_file_arg): update filename
296         slicing to cope with new .dak filenames.
297
298         * dak/ls.py (main): add back 'heidi' as a valid argument for
299         -f/--format as people are using it in scripts and breaking that
300         without warning seems rude.
301
302 2006-05-21  James Troup  <james@nocrew.org>
303
304         * dak/rm.py (main): use string .isdigit() rather than
305         utils.str_isnum().
306         * dak/process_new.py (edit_overrides): likewise.
307
308         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
309         string import.
310
311 2006-05-21  James Troup  <james@nocrew.org>
312
313         * dak/check_archive.py (check_indices_files_exist): use list
314         comprehension instead of map().  No longer need to import
315         deprecated string module as a side-effect.
316         * dak/check_overrides.py (process): likewise.
317         (main): likewise.
318         * dak/cruft_report.py (do_obsolete_source): likewise.
319         (main): likewise.
320         * dak/ls.py (main): likewise.
321         * dak/make_suite_file_list.py (write_filelists): likewise.
322         * dak/process_accepted.py (stable_install): likewise.
323         * dak/rm.py (main): likewise.
324         * dak/stats.py (number_of_packages): likewise.
325         * daklib/logging.py (Logger.log): likewise.
326         * daklib/queue.py (Upload.source_exists): likewise.
327         (Upload.cross_suite_version_check): likewise.
328         * daklib/utils.py (parse_args): likewise.
329
330 2006-05-21  James Troup  <james@nocrew.org>
331
332         * daklib/utils.py (process_gpgv_output): new function, split out
333         of check_signature().
334         (check_signature): adapt accordingly.
335         (retrieve_key): new function that will try to retrieve the key
336         that signed a given file from a keyserver.
337         (check_signature): add 'autofetch' argument that if not set
338         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
339         If 'autofetch' is true, invoke retrieve_key().  
340
341         * docs/README.config: document Dinstall::KeyAutoFetch and
342         Dinstall:KeyServer.
343
344 2006-05-20  James Troup  <james@nocrew.org>
345
346         * dak/find_null_maintainers.py (main):
347         s/createtimestamp/createTimestamp/ to make things work with modern
348         slapd.
349
350         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
351         Stable::Version and Stable::Description for 3.1r2.
352
353         * config/debian-non-US/dak.conf: sync with klecker - update
354         version number of 3.0 and MoreInfoURL.
355
356         * docs/README.stable-point-release: Add notes about updating
357         dak.conf and Reject-Proposed-Updates section in particular.
358         s/woody/stable/.  Also need to update README.html.
359
360         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
361
362         * config/debian/apt.conf: Add udeb tree for proposed-updates.
363
364 2006-05-20  Ryan Murray  <rmurray@debian.org>
365
366         * scripts/debian/update-ftpstats: new script to update daily
367         architecture size graph data.
368
369         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
370         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
371         there.
372
373         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
374         before we finish.  Don't push to merkel.
375
376         * dak/process_unchecked.py (check_changes): Also look in
377         ProposedUpdates queue dir.
378         (check_files): likewise.
379
380 2006-05-20  Anthony Towns  <ajt@debian.org>
381
382         * scripts/debian/mkfilesindices: new script to generate file
383         indices used for partial mirroring.
384
385         * config/debian/cron.daily: add progress timestamps.
386
387         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
388         amd64 to testing, unstable and experimental.  Drop sh from
389         experimental.  Move Experimental to dists/experimental.  Add
390         Dir::ProposedUpdates.  Add Architectures::amd64.
391
392         * config/debian/apt.conf: add amd64 to testing, unstable and
393         experimental.  Drop uncompressed Packages files from testing. Drop
394         sh from experimental.  Move experimental to dists/experimental/.
395
396         * config/debian/vars (archs): add amd64.
397
398         * dak/process_unchecked.py (action): Add support for
399         proposed-updates approval queue.
400         (is_stableupdate): new function - checks if the upload is targeted
401         at proposed-updates.
402         (do_stableupdate): likewise - moves upload to proposed-updates
403         holding area.
404
405         * dak/process_new.py (do_new): warn if original or new target
406         suite are invalid.
407
408         * dak/generate_releases.py (print_md5sha_files): less whitespace
409         between the hash and size.
410
411         * dak/generate_index_diffs.py (genchanges): don't say we're not
412         doing anything.  Better formatting of other messages.
413         (main): don't skip experimental and remove some 'doing stuff'
414         prints.
415
416 2006-05-18  James Troup  <james@nocrew.org>
417
418         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
419         query.
420
421         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
422         docstrings, untabify, don't shadow builtins, lowercase non-global
423         variable names, spaces after commas.  Also bail if given any
424         arguments since we don't accept any.
425         * dak/init_db.py: likewise.  Also split large main() into
426         subfunctions and rename get() to sql_get().
427
428         * dak/init_db.py (main): check returned value from
429         database.get_archive_id().
430
431         * dak/dak.py: renamed from shell.py.  Update to support new source
432         layout.  Created init() and usage() functions.  Various
433         pylint-inspired cleanups.  Use daklib utils.warn() and
434         utils.fubar().  Change 'functionality' variable to only have
435         (command, description) and always invoke main() when running the
436         module.  Also support -h.
437
438 2006-05-17  James Troup  <james@nocrew.org>
439
440         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
441         imports of and calls to daklib modules.  Change script name
442         everywhere, i.e. in output, mails, comments and configuration tree
443         + filenames.  Also update references to other renamed scripts,
444         classes and templates.  Use '.dak' instead of '.katie' for the
445         queue info storage files.
446         (Renamed from tea)
447         * dak/check_overrides.py: likewise.  (Renamed from cindy)
448         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
449         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
450         * dak/clean_queues.py: likewise.  (Renamed from shania)
451         * dak/clean_suites.py: likewise.  (Renamed from rhona)
452         * dak/compare_suites.py: likewise.  (Renamed from andrea)
453         * dak/control_overrides.py: likewise.  (Renamed from natalie)
454         * dak/control_suite.py: likewise.  (Renamed from heidi)
455         * dak/cruft_report.py: likewise.  (Renamed from rene)
456         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
457         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
458         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
459         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
460         * dak/import_archive.py: likewise.  (Renamed from neve)
461         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
462         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
463         * dak/init_db.py: likewise. (Renamed from alyson)
464         * dak/init_dirs.py: likewise. (Renamed from rose)
465         * dak/ls.py: likewise. (Renamed from madison)
466         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
467         * dak/make_overrides.py: likewise.  (Renamed from denise)
468         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
469         * dak/mirror_split.py: likewise.  (Renamed from billie)
470         * dak/override.py: likewise.  (Renamed from alicia)
471         * dak/poolize.py: likewise.  (Renamed from catherine)
472         * dak/process_accepted.py: likewise.  (Renamed from kelly)
473         * dak/process_new.py: likewise.  (Renamed from lisa)
474         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
475         * dak/queue_report.py: likewise.  (Renamed from helena)
476         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
477         * dak/rm.py: likewise.  (Renamed from melanie)
478         * dak/security_install.py: likewise.  (Renamed from amber)
479         * dak/split_done.py: likewise.  (Renamed from nina)
480         * dak/stats.py: likewise.  (Renamed from saffron)
481         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
482         * daklib/database.py: likewise.  (Renamed from db_access)
483         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
484         * daklib/utils.py: likewise.
485
486         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
487         doesn't need to notify anyone" string.
488         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
489
490         * dak/process_accepted.py (init): drop -V/--version argument.
491         * dak/process_new.py (init): likewise.
492         * dak/process_unchecked.py (init): likewise.
493         * dak/reject_proposed_updates.py (init): likewise
494
495         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
496
497         * dak/stats.py: in usage() output change STAT to MODE.
498
499 2006-05-15  James Troup  <james@nocrew.org>
500
501         * dak/queue_report.py: remove unused encodings imports.
502
503         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
504         imports.  Initalize 'Cnf' as a global.
505         (BillieDB._internal_recurse): fix 'util.' typo.
506
507         * dak/import_ldap_fingerprints.py (main): drop unused time import and
508         commented out time check for LDAP search.
509
510 2005-12-16  Ryan Murray  <rmurray@debian.org>
511
512         * halle: add support for udebs
513         * kelly: stable_install: add support for binNMU versions
514
515 2005-12-05  Anthony Towns  <aj@erisian.com.au>
516
517         * katie.py: Move accept() autobuilding support into separate function 
518         (queue_build), and generalise to build different queues
519
520         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
521
522         * jennifer: Initial support for enabling embargo handling with the
523         Dinstall::SecurityQueueHandling option.
524         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
525         functions.
526
527         * katie.conf-security: Include embargo options
528         * katie.conf-security: Add Lock dir
529         * init_pool.sql-security: Create disembargo table
530         * init_pool.sql-security: Add constraints for disembargo table
531
532 2005-11-26  Anthony Towns  <aj@erisian.com.au>
533
534         * Merge of changes from klecker, by various people
535
536         * amber: special casing for not passing on amd64 and oldstable updates
537         * amber: security mirror triggering
538         * templates/amber.advisory: updated advisory structure
539         * apt.conf.buildd-security: update for sarge's release
540         * apt.conf-security: update for sarge's release
541         * cron.buildd-security: generalise suite support, update for sarge's release
542         * cron.daily-security: update for sarge's release, add udeb support
543         * vars-security: update for sarge's release
544         * katie.conf-security: update for sarge's release, add amd64 support,
545         update signing key
546
547         * docs/README.names, docs/README.quotes: include the additions
548
549 2005-11-25  Anthony Towns  <aj@erisian.com.au>
550
551         * Changed accepted_autobuild to queue_build everywhere.
552         * Add a queue table.
553         * Add a "queue" field in the queue_build table (currently always 0)
554
555         * jennifer: Restructure to make it easier to support special
556         purpose queues between unchecked and accepted.
557
558 2005-11-25  Anthony Towns  <aj@erisian.com.au>
559
560         * Finishing merge of changes from spohr, by various people still
561
562         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
563         works
564         * jennifer: Re-enable .deb ar format checking
565         * katie.py: Convert to +bX binNMU special casing
566         * rhona: Add some debug output when deleting binaries
567         * cron.daily: Add emilie
568         * cron.unchecked: Add lock files
569
570 2005-11-15  Anthony Towns  <aj@erisian.com.au>
571
572         * Merge of changes from spohr, by various people.
573
574         * tiffani: new script to do patches to Packages, Sources and Contents
575         files for quicker downloads.
576         * ziyi: update to authenticate tiffani generated files
577
578         * dak: new script to provide a single binary with less arbitrary names
579         for access to dak functionality.
580
581         * cindy: script implemented
582
583         * saffron: cope with suites that don't have a Priority specified
584         * heidi: use get_suite_id()
585         * denise: don't hardcode stable and unstable, or limit udebs to unstable
586         * denise: remove override munging for testing (now done by cindy)
587         * helena: expanded help, added new, sort and age options, and fancy headers
588         * jennifer: require description, add a reject for missing dsc file
589         * jennifer: change lock file
590         * kelly: propogation support
591         * lisa: honour accepted lock, use mtime not ctime, add override type_id
592         * madison: don't say "dep-retry"
593         * melanie: bug fix in output (missing %)
594         * natalie: cope with maintainer_override == None; add type_id for overrides
595         * nina: use mtime, not ctime
596
597         * katie.py: propogation bug fixes
598         * logging.py: add debugging support, use | as the logfile separator
599
600         * katie.conf: updated signing key (4F368D5D)
601         * katie.conf: changed lockfile to dinstall.lock
602         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
603         * katie.conf: added tiffani, cindy support
604         * katie.conf: updated to match 3.0r6 release
605         * katie.conf: updated to match sarge's release
606
607         * apt.conf: update for sarge's release
608         * apt.conf.stable: update for sarge's release
609         * apt.conf: bump daily max Contents change to 25MB from 12MB
610
611         * cron.daily: add accepted lock and invoke cindy  
612         * cron.daily: add daily.lock
613         * cron.daily: invoke tiffani
614         * cron.daily: rebuild accepted buildd stuff
615         * cron.daily: save rene-daily output on the web site
616         * cron.daily: disable billie
617         * cron.daily: add stats pr0n
618
619         * cron.hourly: invoke helena
620
621         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
622         * vars: add lockdir, add etch to copyoverrides
623         * Makefile: add -Ipostgresql/server to CXXFLAGS
624
625         * docs/: added README.quotes
626         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
627         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
628
629         * TODO: correct spelling of "conflicts"
630
631 2005-05-28  James Troup  <james@nocrew.org>
632
633         * helena (process_changes_files): use MTIME rather than CTIME (the
634         C's not for 'creation', stupid).
635         * lisa (sort_changes): likewise.
636
637         * jennifer (check_distributions): use has_key rather than an 'in'
638         test which doesn't work with python2.1.  [Probably by AJ]
639
640 2005-03-19  James Troup  <james@nocrew.org>
641
642         * rene (main): use Suite::<suite>::UdebComponents to determine
643         what components have udebs rather than assuming only 'main' does.
644
645 2005-03-18  James Troup  <james@nocrew.org>
646
647         * utils.py (rfc2047_encode): use codecs.lookup() rather than
648         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
649         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
650         <andrew@ubuntu.com>.
651
652 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
653
654         * helena: add -n/--new HTML output option and improved sorting
655         options.
656
657 2005-03-06  Ryan Murray  <rmurray@debian.org>
658
659         * shania(main): use Cnf::Dir::Reject instead of REJECT
660
661 2005-02-08  James Troup  <james@nocrew.org>
662
663         * rene (main): add partial NBS support by checking that binary
664         packages are built by their real parent and not some random
665         stranger.
666         (do_partial_nbs): likewise.
667
668 2005-01-18  James Troup  <james@nocrew.org>
669
670         * katie.py (Katie.build_summaries): avoid leaking file handle when
671         extracting package description.
672         (Katie.force_reject): remember and close each file descriptor we
673         use.
674         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
675         s/reason_file/reason_fd/ because it's a file descriptor.
676         (Katie.check_dsc_against_db): avoid leaking file handle whenever
677         invoking apt_pkg.md5sum().
678
679         * jennifer (check_deb_ar): new function: sanity check the ar
680         contents of a .deb.
681         (check_files): use it.
682         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
683         found.
684         (check_files): accept 'raw-installer' as an alias for 'byhand'.
685
686 2005-01-14  Anthony Towns  <ajt@debian.org>
687
688         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
689
690         * propup stuff (thanks to Andreas Barth)
691         * katie.conf: add stable MustBeOlderThan testing, add -security
692           propup
693         * jennifer: set distribution-version in .katie if propup may be needed
694         * katie.py: add propogation to cross_suite_version_check
695
696 2004-11-27  James Troup  <james@nocrew.org>
697
698         * nina: new script to split monolithic queue/done into date-based
699         hierarchy.
700
701         * rene (usage): document -s/--suite.
702         (add_nbs): use .setdefault().
703         (do_anais): likewise.
704         (do_nbs): don't set a string to "" and then += it.
705         (do_obsolete_source): new function - looks for obsolete source
706         packages (i.e source packages whose binary packages are ALL a)
707         claimed by someone else and b) newer when built from the other
708         source package).
709         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
710         and 'full' check modes.  Check for obsolete source packages.
711         linux-wlan-ng has been fixed - remove hideous bodge.
712
713         * jennifer (check_distributions): support 'reject' suite map type.
714
715         * utils.py (validate_changes_file_arg): s/file/filename/.
716         s/fatal/require_changes/.  If require_changes is -1, ignore errors
717         and return the .changes filename regardless.
718         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
719         (re_no_revision): don't escape '-', it's not a special character.
720         s/\*/+/ as there must be at least one non-dash character after the
721         dash in a revision.  Thanks to Christian Reis for noticing both of
722         these.
723
724         * ashley (main): pass require_changes=-1 to
725         utils.validate_changes_file_arg().
726
727         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
728         Team <debian-kernel@lists.debian.org>'.
729
730         * katie.py (Katie.in_override_p): fix .startswith() usage.
731
732         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
733         (Lauren::MoreInfoURL): update to 3.0r3.
734         (Suite::Stable::Version): likewise.
735         (Suite::Stable::Description): likewise.
736
737         * cron.daily: disable automatic task override generation.
738
739         * cindy (process): restrict "find all packages" queries by
740         component.  Respect Options["No-Action"].
741         (main): add -n/--no-action support.  Only run on unstable.  Rename
742         type to otype (pychecker).
743
744 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
745
746         * katie.conf (Billie::BasicTrees): add all architectures.
747         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
748         'everything'.
749
750         * cron.daily: Update a 'current' symlink when creating the
751         post-daily-cron-job database backup to aid mirroring to merkel.
752         Run billie.
753
754         * billie (BillieTarget.poolish_match): handle .udeb too.
755
756 2004-10-13  Ryan Murray  <rmurray@debian.org>
757
758         * amber (do_upload): Sort changes files in "katie" order so that
759           source always arrives before binary-only rebuilds
760         
761 2004-10-05  James Troup  <james@nocrew.org>
762
763         * jennifer (check_dsc): correct reject message on invalid
764         Maintainer field.
765
766 2004-09-20  James Troup  <james@nocrew.org>
767
768         * alicia: remove unused 'pwd' import.
769
770         * tea (check_override): underline suite name in output properly.
771
772         * rene (main): read a compressed Packages file.
773         * tea (validate_packages): likewise.
774
775         * katie.py (re_fdnic): add 'r' prefix.
776         (re_bin_only_nmu_of_mu): likewise.
777         (re_bin_only_nmu_of_nmu): likewise.
778
779         * madison (main): retrieve component information too and display
780         it if it's not 'main'.
781         * melanie (reverse_depends_check): likewise.
782
783         * utils.py (pp_dep): renamed...
784         (pp_deps): ... to this.
785         * jeri (check_dep): update calls to utils.pp_deps().
786         * melanie (reverse_depends_check): likewise.
787
788         * jennifer (check_changes): move initalization of email variables
789         from here...
790         (process_it): ...to here as we no longer always run
791         check_changes().  Don't bother to initialize
792         changes["architecture"].
793
794         * denise (list): renamed to...
795         (do_list): ...this to avoid name clash with builtin 'list'.
796         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
797         for dictionaries.
798         (main): Likewise for name clash avoidance and also
799         s/override_type/suffix/.  Adjust call to do_list().
800
801 2004-09-01  Ryan Murray  <rmurray@debian.org>
802
803         * tea (check_files): check the pool/ directory instead of dists/
804
805 2004-08-04  James Troup  <james@nocrew.org>
806
807         * jenna (cleanup): use .setdefault() for dictionaries.
808         (write_filelists): likewise.
809
810         (write_filelists): Use utils.split_args() not split() to split
811         command line arguments.
812         (stable_dislocation_p): likewise.
813
814         (write_filelists): Add support for mapping side of suite-based
815         "Arch: all mapping".
816         (do_da_do_da): ensure that if we're not doing all suites that we
817         process enough to be able correct map arch: all packages.
818
819         * utils.py (cant_open_exc): correct exception string,
820         s/read/open/, s/.$//.
821
822         * templates/amber.advisory: update to match reality a little
823         better.
824
825         * melanie (reverse_depends_check): read Packages.gz rather than
826         Packages.
827
828         * jennifer (check_files): check for unknown component before
829         checking for NEWness.
830
831         * katie.py (Katie.in_override_p): use .startswith in favour of a
832         slice.
833
834         * docs/melanie.1.sgml: document -R/--rdep-check.
835
836 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
837
838         * billie (main): Make the verbatim lists include all the README
839           elements.
840         * docs/README.names: Add billie in (correcting oversight)
841
842 2004-07-01  James Troup  <james@nocrew.org>
843
844         * emilie (main): handle woody's case-sensitive python-ldap,
845         s/keyfingerprint/keyFingerPrint/.
846
847 2004-06-25  James Troup  <james@nocrew.org>
848
849         * debian/control (Depends): add dpkg-dev since jennifer uses
850         dpkg-source.
851
852 2004-06-24  James Troup  <james@nocrew.org>
853
854         * melanie (main): s/file/temp_file/ and close file handle before
855         removing the temporary file.
856         (main): don't warn about needing a --carbon-copy if in no-action
857         mode.
858
859         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
860         (main): likewise.
861
862         * test/006/test.py (main): check bracketed email-only form.
863
864         * utils.py (fix_maintainer): if the Maintainer string is bracketed
865         email-only, strip the brackets so we don't end up with
866         <<james@nocrew.org>>.
867
868 2004-06-20  James Troup  <james@nocrew.org>
869
870         * jennifer (process_it): only run check_changes() if
871         check_signature() returns something.  (Likewise)
872
873         * utils.py (changes_compare): if there's no changes["version"] use
874         "0" rather than None.  (Avoids a crash on unsigned changes file.)
875
876 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
877
878         * jeri (pp_dep): moved from here to ...
879         * utils.py (pp_dep): here.
880
881         * melanie (main): add reverse dependency checking.
882
883 2004-06-17  James Troup  <james@nocrew.org>
884
885         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
886         * tea (check_dscs): likewise.
887
888         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
889         change from boolean to a variable with 3 possible values, 0 and 1
890         as before, -1 means don't require a signature.  Makes
891         parse_changes() useful for parsing arbitary RFC822-style files,
892         e.g. 'Release' files.
893         (check_signature): add support for detached signatures by passing
894         the files the signature is for as an optional third argument.
895         s/filename/sig_filename/g.  Add a fourth optional argument to
896         choose the keyring(s) to use.  Don't os.path.basename() the
897         sig_filename before checking it for taint.
898         (re_taint_free): allow '/'.
899
900 2004-06-11  James Troup  <james@nocrew.org>
901
902         * tea (check_files): make override.unreadable optional.
903         (validate_sources): close the Sources file handle.
904
905         * docs/README.first: clarify that 'alyson' and running
906         add_constraints.sql by hand is something you only want to do if
907         you're not running 'neve'.
908
909         * docs/README.config (Location::$LOCATION::Suites): document.
910
911         * db_access.py (do_query): also print out the result of the query.
912
913 2004-06-10  James Troup  <james@nocrew.org>
914
915         * katie.py (Katie.cross_suite_version_check): post-woody versions
916         of python-apt's apt_pkg.VersionCompare() function apparently
917         returns variable integers for less than or greater than results -
918         update our result checking to match.
919         * jenna (resolve_arch_all_vs_any): likewise.
920         * charisma (main): likewise.
921
922 2004-06-09  James Troup  <james@nocrew.org>
923
924         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
925         valid_dsc_p and don't run check_source() if check_dsc() failed.
926         (check_dsc): on fatal failures return 0 so check_source() isn't
927         run (since it makes fatal assumptions about the presence of
928         mandatory .dsc fields).  
929         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
930
931 2004-05-07  James Troup  <james@nocrew.org>
932
933         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
934         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
935
936         * katie.conf (Dir::Override): remove duplicate definition.
937
938         * neve (get_or_set_files_id): add an always-NULL last_used column
939         to output.
940
941 2004-04-27  James Troup  <james@nocrew.org>
942
943         * apt.conf-security (tree "dists/stable/updates"): add
944         ExtraOverride - noticed by Joey Hess (#246050).
945         (tree "dists/testing/updates"): likewise.
946
947 2004-04-20  James Troup  <james@nocrew.org>
948
949         * jennifer (check_files): check for existing .changes or .katie
950         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
951         directories.
952
953 2004-04-19  James Troup  <james@nocrew.org>
954
955         * jennifer (check_source): handle failure to remove the temporary
956          directory (used for source tree extraction) better, specifically:
957          if we fail with -EACCES, chmod -R u+rwx the temporary directory
958          and try again and if that works, REJECT the package.
959
960 2004-04-17  James Troup  <james@nocrew.org>
961
962         * docs/madison.1.sgml: document -b/--binary-type,
963         -g/--greaterorequal and -G/--greaterthan.
964
965         * madison (usage): -b/--binary-type only takes a single argument.
966         Document -g/--greaterorequal and -G/--greaterthan.
967         (main): add support for -g/--greaterorequal and -G/--greaterthan.
968
969 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
970
971         * billie: Cleaned up a load of comments, added /README.non-US to
972           the verbatim matches list.
973
974 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
975
976         * utils.py (size_type): Make it use real binary megabytes and
977           kilobytes, instead of the marketing terms used before.
978
979 2004-04-07  James Troup  <james@nocrew.org>
980
981         * katie.py (Katie.check_dsc_against_db): in the case we're
982         ignoring an identical-to-existing orig.tar.gz remember the path to
983         the existent version in pkg.orig_tar_gz.  Adjust query to grab
984         location.path too to be able to do so.
985
986 2004-04-03  James Troup  <james@nocrew.org>
987
988         * debian/control (Depends): add python2.1-email | python (>= 2.2)
989         needed for new utils.rfc2047_encode() function.
990
991         * utils.py (re_parse_maintainer): allow whitespace inside the
992         email address.
993         (Error): new exception base class.
994         (ParseMaintError): new exception class.
995         (force_to_utf8): new function.
996         (rfc2047_encode): likewise.
997         (fix_maintainer): rework.  use force_to_utf8() to force name and
998         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
999         return an rfc2047 value.  Validate the address to catch missing
1000         email addresses and (some) broken ones.
1001
1002         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1003         by adopting foo2047 return value.
1004         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1005         mandatory changes fields.  Promote changes and maintainer822 to
1006         mandatory fields.
1007         (Katie.update_subst): default maintainer2047 rather than
1008         maintainer822.  User foo2047 rather than foo822 when setting
1009         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1010
1011         * jennifer (check_changes): set default changes["maintainer2047"]
1012         and changes["changedby2047"] values rather than their 822
1013         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1014         to new utils.fix_maintainer() - reject on exception and adopt
1015         foo2047 return value.
1016         (check_dsc): if a mandatory field is missing don't do any further
1017         checks and as a result reduce paranoia about dsc[var] existence.
1018         Validate the maintainer field by calling new
1019         utils.fix_maintainer().
1020
1021         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1022         changes fields.  Promote maintainer822 to a mandatory changes
1023         field.  add "pool name" to files fields.
1024
1025         * test/006/test.py: new file - tests for new
1026         utils.fix_maintainer().
1027
1028 2004-04-01  James Troup  <james@nocrew.org>
1029
1030         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1031
1032         * jennifer (get_changelog_versions): create a symlink mirror of
1033         the source files in the temporary directory.
1034         (check_source): if check_dsc_against_db() couldn't find the
1035         orig.tar.gz bail out.
1036
1037         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1038         part of the upload store the path to it in pkg.orig_tar_gz and if
1039         it can't be found set pkg.orig_tar_gz to -1.
1040
1041         Explicitly return the second value as None in the (usual) case
1042         where we don't have to reprocess.  Remove obsolete diagnostic
1043         logs.
1044
1045         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1046
1047         * utils.py (temp_filename): new helper function that wraps around
1048         tempfile.mktemp().
1049
1050         * katie.py (Katie.do_reject): use it and don't import tempfile.
1051         * lisa (prod_maintainer): likewise.
1052         (edit_note): likewise.
1053         (edit_new): likewise.
1054         * lauren (reject): likewise.
1055         * melanie (main): likewise.
1056         * neve (do_sources): likewise.
1057         * rene (main): likewise.
1058         * tea (validate_sources): likewise.
1059
1060 2004-03-31  James Troup  <james@nocrew.org>
1061
1062         * tea (validate_sources): remove unused 's' temporary variable.
1063
1064 2004-03-15  James Troup  <james@nocrew.org>
1065
1066         * jennifer (check_dsc): check changes["architecture"] for
1067         source before we do anything else.
1068
1069 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1070
1071         * billie: Added
1072         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1073
1074 2004-03-12  James Troup  <james@nocrew.org>
1075
1076         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1077
1078         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1079
1080         * katie.py (Katie.accept): add support for DebBugs Version
1081         Tracking by writing out .versions (generated in jennifer's
1082         get_changelog_versions()) and .debinfo (mapping of binary ->
1083         source) files.
1084
1085         * ashley (main): add dsc["bts changelog"].
1086
1087         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1088
1089         * jennifer (check_diff): obsoleted by check_source(), removed.
1090         (check_source): new function: create a temporary directory and
1091         move into it and call get_changelog_versions().
1092         (get_changelog_versions): new function: extract the source package
1093         and optionally parse debian/changelog to obtain the version
1094         history for the BTS.
1095         (process_it): call check_source() rather than check_diff().
1096
1097 2004-03-08  James Troup  <james@nocrew.org>
1098
1099         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1100         listbar" rather than "if listbar.count(varfoo)"' change on
1101         2004-02-24.
1102
1103 2004-03-05  James Troup  <james@nocrew.org>
1104
1105         * alicia (main): don't warn about not closing bugs - we don't
1106         manage overrides through the BTS.
1107
1108 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1109
1110         * docs/README.config: lots of updates and corrections.
1111         * docs/README.first: likewise.
1112
1113         * docs/README.config: drop unused Dir::Queue::Root.
1114         * katie.conf-non-US: likewise.
1115         * katie.conf: likewise.
1116         * katie.conf-security: likewise.
1117
1118 2004-02-27  James Troup  <james@nocrew.org>
1119
1120         * rose (process_tree): use 'if var in [ list ]' rather than long
1121         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1122         Michlmayr.
1123
1124         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1125         suggested by Martin Michlmayr.
1126         * catherine (poolize): likewise.
1127         * charisma (main): likewise.
1128         * halle (check_changes): likewise.
1129         * heidi (main): likewise.
1130         (process_file): likewise.
1131         * kelly (install): likewise.
1132         (stable_install): likewise.
1133         * utils.py (fix_maintainer): likewise.
1134
1135         * apt.conf: add support for debian-installer in testing-proposed-updates.
1136         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1137         add - set to main.
1138
1139         * mkmaintainers: add "-T15" option to wget of non-US packages file
1140         so that we don't hang cron.daily if non-US is down.
1141
1142         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1143
1144         * templates/jennifer.bug-close: add Source and Source-Version
1145         pseudo-headers that may be used for BTS Version Tracking someday
1146         [ajt@].
1147
1148         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1149         (main): likewise.
1150
1151         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1152
1153 2004-02-25  James Troup  <james@nocrew.org>
1154
1155         * katie.conf (SuiteMappings): don't map testing-security to
1156         proposed-updates.
1157
1158 2004-02-24  James Troup  <james@nocrew.org>
1159
1160         * katie.py (Katie.__init__): remove unused 'values' field.
1161
1162         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1163         rather than 's.count(c) > 0'.
1164
1165         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1166         rather than "if listbar.count(varfoo)".
1167         * halle (check_joey): likewise.
1168         * jeri (check_joey): likewise.
1169         * lisa (edit_index): likewise.
1170         * jenna (stable_dislocation_p): likewise.
1171
1172         * jennifer (main): remove unused global 'nmu'.
1173
1174 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1175
1176         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1177           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1178           the dak tools close bugs.
1179
1180 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1181
1182         * katie.conf (Alicia): Added an Alicia section with email address
1183         * templates/alicia.bug-close: Added
1184         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1185         * alicia (main): Added a -d/--done argument
1186
1187 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1188
1189         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1190
1191 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1192
1193         * lisa (prod_maintainer): Added function to prod the maintainer without
1194           accepting or rejecting the package
1195         * templates/lisa.prod: Added this template for the prodding mail
1196
1197         * .cvsignore: Added neve-files which turns up in new installations
1198
1199 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1200
1201         * alicia (usage): Fixed usage message to offer section and priority
1202           as seperately optional arguments.
1203         * alicia (main): Added a % (arg) interpolation needed when only
1204           one of section or priority is provided and it cannot be found.
1205
1206 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1207
1208         * alicia: Added
1209         * docs/alicia.1.sgml: Added
1210         * docs/Makefile: Added alicia to the list of manpages to build
1211         * docs/README.names: Noted what alicia does
1212         * docs/README.first: Noted where alicia is useful
1213
1214 2004-01-21  James Troup  <james@nocrew.org>
1215
1216         * madison (main): add -b/--binary-type.
1217         (usage): likewise.
1218
1219         * denise (main): generate debian-installer overrides for testing
1220         too.
1221         * apt.conf: add support for debian-installer in testing.
1222         * katie.conf (Suite::Testing::UdebComponents): set to main.
1223
1224         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1225         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1226         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1227
1228         * utils.py (parse_changes): don't process data not inside the
1229         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1230         pointing this out.
1231         * test/005/test.py (main): new test to test for above.
1232
1233 2004-01-04  James Troup  <james@nocrew.org>
1234
1235         * jenna (write_filelists): correct typo, s/Components/Component/
1236         for Options.
1237
1238 2004-01-04  Ryan Murray  <rmurray@debian.org>
1239
1240         * cron.buildd: move update of overrides and Packages file...
1241         * cron.unchecked: to here.
1242         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1243         * katie.conf-security: likewise
1244
1245 2003-11-20  James Troup  <james@nocrew.org>
1246
1247         * jenna (main): don't use utils.try_with_debug(), it produces way
1248         too much output.
1249
1250         * halle (check_changes): don't error out if a .changes refers to a
1251         non-existent package, just warn and skip the file.
1252
1253         * docs/README.stable-point-release: mention halle and .changes
1254         obsoleted by removal through melanie.  Update for 3.0r2.
1255
1256         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1257         (Suite::Stable::Description): update for 3.0r2.
1258         (Lauren::MoreInfoURL): likewise.
1259         * katie.conf-non-US (Suite::Stable::Version): likewise.
1260         (Suite::Stable::Description): likewise.
1261         (Lauren::MoreInfoURL): likewise.
1262
1263         * apt.conf.stable (Default): don't define MaxContentsChange.
1264         * apt.conf.stable-non-US (Default): likewise.
1265
1266         * lauren (reject): hack to work around partial replacement of an
1267         upload, i.e. one or more binaries superseded by another source
1268         package.
1269
1270 2003-11-17  James Troup  <james@nocrew.org>
1271
1272         * pseudo-packages.maintainers: point installation-reports at
1273         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1274         request.
1275
1276         * utils.py (parse_changes): calculate the number of lines once
1277         with len() rather than max().
1278
1279         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1280         files, since check_dsc_against_db() deletes the .orig.tar.gz
1281         entry.
1282
1283 2003-11-13  Ryan Murray  <rmurray@debian.org>
1284
1285         * apt.conf: specify a src override file for debian-installer
1286
1287 2003-11-10  James Troup  <james@nocrew.org>
1288
1289         * fernanda.py (strip_pgp_signature): new function - strips PGP
1290         signature from a file and returns the modified contents of the
1291         file in a string.
1292         (display_changes): use it.
1293         (read_dsc): likewise.
1294
1295 2003-11-09  Ryan Murray  <rmurray@debian.org>
1296
1297         * cron.buildd: export accepted_autobuild table for unstable, and use
1298         it to generate the incoming Packages/Sources rather than having apt
1299         walk the directory.
1300         * apt.conf.buildd: use exported table from cron.buildd to generate
1301         Packages/Sources
1302
1303 2003-11-07  James Troup  <james@nocrew.org>
1304
1305         * kelly: import errno.
1306
1307         * katie.py (Katie.build_summaries): sort override disparities.
1308
1309         * kelly (install): set dsc_component based on the .dsc's component
1310         not a random binaries.
1311
1312 2003-10-29  James Troup  <james@nocrew.org>
1313
1314         * katie.py (Katie.build_summaries): don't assume changes["source"]
1315         exists since it might not.
1316
1317 2003-10-20  James Troup  <james@nocrew.org>
1318
1319         * pseudo-packages.maintainers: update security.d.o to use
1320         team@s.d.o at joy@'s request.
1321
1322 2003-10-17  James Troup  <james@nocrew.org>
1323
1324         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1325
1326 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1327
1328         * tea (chk_bd_process_dir): use .endswith rather than slice.
1329
1330 2003-10-14  James Troup  <james@nocrew.org>
1331
1332         * tea (check_build_depends): new function.
1333         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1334         in the archive.
1335         (main): update for new function.
1336         (usage): likewise.
1337
1338         * katie.py (Katie.do_reject): sanitize variable names,
1339         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1340         os.close() to outside if clause.
1341
1342         * jennifer (check_dsc): check build-depends and
1343         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1344         Fold the ARRAY check into the same code block and tidy up it's
1345         rejection message.
1346         (check_changes): ensure that the Files field is non-empty.
1347         Suggested by Santiago Vila <sanvila@unex.es>
1348         (check_changes): normalize reject messages.
1349         (check_dsc): instead of doing most of the checks inside a for loop
1350         and an if, find the dsc_filename in a short loop over files first
1351         and then do all the checks.  Add check for more than one .dsc in a
1352         .changes which we can't handle.  Normalize reject messages.
1353
1354 2003-10-13  James Troup  <james@nocrew.org>
1355
1356         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1357         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1358
1359         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1360         variables while iterating over 'files'.  Don't regenerate it when
1361         checking for source if source is mentioned.
1362
1363         Reject source only uploads if the config variable
1364         Dinstall::Reject::NoSourceOnly is set.
1365
1366 2003-10-03  James Troup  <james@nocrew.org>
1367
1368         * rene (main): add nasty hardcoded reference to debian-installer
1369         so we detect NBS .udebs.
1370
1371 2003-09-29  James Troup  <james@nocrew.org>
1372
1373         * apt.conf (old-proposed-updates): remove.
1374         * apt.conf-non-US (old-proposed-updates): likewise.
1375
1376 2003-09-24  James Troup  <james@nocrew.org>
1377
1378         * tea (check_files_not_symlinks): new function, ensure files
1379         mentioned in the database aren't symlinks.  Includes code to
1380         update any files that are like this to their real filenames +
1381         location; commented out by though.
1382         (usage): update for new function.
1383         (main): likewise.
1384
1385 2003-09-24  Anthony Towns  <ajt@debian.org>
1386
1387         * vars: external-overrides variable added
1388         * cron.daily: Update testing/unstable Task: overrides from joeyh
1389         managed external source.
1390
1391 2003-09-22  James Troup  <james@nocrew.org>
1392
1393         * kelly (install): if we can't move the .changes into queue/done,
1394         fail don't warn and carry on.  The old behaviour pre-dates NI and
1395         doesn't make much sense now since jennifer checks both
1396         queue/accepted and queue/done for any .changes files it's
1397         processing.
1398
1399         * utils.py (move): don't throw exceptions on existing files or
1400         can't overwrite, instead just fubar out.
1401
1402         * jennifer (check_dsc): also check Build-Depends-Indep for
1403         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1404
1405 2003-09-18  James Troup  <james@nocrew.org>
1406
1407         * katie.py (Katie.close_bugs): only log the bugs we've closed
1408         once.
1409
1410         * kelly (main): log as 'kelly', not 'katie'.
1411
1412 2003-09-16  James Troup  <james@nocrew.org>
1413
1414         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1415
1416         * jennifer (check_changes): normalize reject message for "changes
1417         file already exists" to be %s: <foo>.
1418         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1419         produced by broken dpkg-source in 1.10.11.  Tone down and
1420         normalize rejection message for incompatible 'Format' version
1421         numbers.
1422         (check_diff): likewise tone down and normalize.
1423
1424 2003-09-07  James Troup  <james@nocrew.org>
1425
1426         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1427         don't bomb out on bogus empty lines.
1428         (build_file_list): check for changes["files"] earlier.  use Dict
1429         to create files[name] dictionary.
1430         (send_mail): don't bother validating arguments.
1431         (check_signature): minor improvements to some of the rejection
1432         messages including listing the key id of the key that wasn't found
1433         in the keyring.
1434         (wrap): new function.
1435
1436         * tea: add new check 'validate-indices' that ensures all files
1437         mentioned in indices (Packages, Sources) files do in fact exist.
1438
1439         * catherine (poolize): use a local re_isadeb which handles legacy
1440         (i.e. no architecture) style .deb filenames.
1441
1442         * rosamund: new script.
1443
1444         * rhona (check_binaries): when checking for binary packages not in
1445         a suite, don't bother selecting files that already have a
1446         last_used date.
1447         (check_sources): likewise.
1448
1449         * rhona: change all SQL EXISTS sub-query clauses to use the
1450         postgres suggested convention of "SELECT 1 FROM".
1451         * andrea (main): likewise.
1452         * tea (check_override): likewise.
1453         * catherine (main): likewise.
1454
1455         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1456         entries and in other suites MustBeNewerThan's.
1457         (SuiteMappings): likewise
1458         * katie.conf-non-US: likewise.
1459         * katie.conf-security: likewise.
1460
1461         * apt.conf-security: remove oldstable.
1462         * apt.conf.stable: likewise.
1463         * apt.conf.stable-non-US: likewise.
1464         * cron.buildd-security: likewise.
1465         * cron.daily-security: likewise.
1466         * vars-security (suites): likewise.
1467         * wanna-build/trigger.daily: likewise.
1468
1469         * claire.py (clean_symlink): move...
1470         * utils.py (clean_symlink): here.
1471
1472         * claire.py (find_dislocated_stable): update accordingly.
1473
1474 2003-08-16  Anthony Towns  <ajt@debian.org>
1475
1476         * katie.py (source_exists): expand the list of distributions
1477         the source may exist in to include any suite that's mapped to
1478         the destination suite (even transitively (a->b->c)). This should
1479         unbreak binary uploads to *-proposed-updates.
1480
1481 2003-08-09  Randall Donald  <rdonald@debian.org>
1482
1483         * lisa (recheck): change changes["distribution"].keys() to
1484         Katie.pkg.changes...
1485
1486 2003-08-08  Randall Donald  <rdonald@debian.org>
1487
1488         * katie.py: only tag bugs as fixed-in-experimental for
1489         experimental uploads
1490
1491 2003-07-26  Anthony Towns  <ajt@debian.org>
1492
1493         * katie.py (source_exists): add an extra parameter to limit the
1494         distribution(s) the source must exist in.
1495         * kelly, lisa, jennifer: update to use the new source_exists
1496
1497 2003-07-15  Anthony Towns  <ajt@debian.org>
1498
1499         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1500         checksums for debian-installer stuff even when it's just a symlink to
1501         another suite
1502
1503         * apt.conf: add the FakeDI line
1504
1505 2003-06-09  James Troup  <james@nocrew.org>
1506
1507         * kelly (check): make sure the 'file' we're looking for in 'files'
1508         hasn't been deleted by katie.check_dsc_against_db().
1509
1510 2003-05-07  James Troup  <james@nocrew.org>
1511
1512         * helena (time_pp): fix s/years/year/ typo.
1513
1514 2003-04-29  James Troup  <james@nocrew.org>
1515
1516         * madison (usage): document -c/--component.
1517
1518         * madison (usage): Fix s/seperated/separated/.
1519         * melanie (usage): likewise.
1520         * jenna (usage): likewise.
1521
1522 2003-04-24  James Troup  <james@nocrew.org>
1523
1524         * cron.daily-non-US: if there's nothing for kelly to install, say
1525         so.
1526
1527         * jennifer (check_timestamps): print sys.exc_value as well as
1528         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1529         failed' with 'deb contents' to make it clearer what timestamp(s)
1530         are being checked.
1531
1532 2003-04-15  James Troup  <james@nocrew.org>
1533
1534         * cron.daily-non-US: only run kelly if there are some .changes
1535         files in accepted.
1536
1537         * rene: add -m/--mode argument which can be either daily (default)
1538         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1539         Various changes to make this possible including a poor attempt at
1540         splitting main() up a little.  De-hardcode suite numbers from SQL
1541         queries and return quietly from do_nviu() if experimental doesn't
1542         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1543         is.
1544
1545         * debian/control (Depends): remove python-zlib as it's obsolete.
1546
1547         * charisma (main): don't slice the \n off strings when we're
1548         strip()-ing it anyway.
1549         * heidi (set_suite): likewise.
1550         (process_file): likewise.
1551         * natalie (process_file): likewise.
1552
1553 2003-04-08  James Troup  <james@nocrew.org>
1554
1555         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1556         slow queries by using one LIKE '%foo%' and then matching against
1557         '%s' or '/%s$' in python.  Also only join location when we need it
1558         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1559         query, so 6s for each sourceful package.
1560
1561         * cron.daily: invoke rene and send the report to ftpmaster.
1562         * cron.daily-non-US: likewise.
1563
1564 2003-03-14  James Troup  <james@nocrew.org>
1565
1566         * utils.py (send_mail): default filename to blank.
1567         * amber (make_advisory): adapt.
1568         * jennifer (acknowledge_new): likewise.
1569         * katie.py (Katie.close_bugs): likewise.
1570         (Katie.announce): likewise.
1571         (Katie.accept): likewise.
1572         (Katie.check_override): likewise.
1573         (Katie.do_reject): likewise.
1574         * kelly (do_reject): likewise.
1575         (stable_install): likewise.
1576         * lisa (do_bxa_notification): likewise.
1577         * lauren (reject): likewise.
1578         * melanie (main): likewise.
1579
1580         * rene (add_nbs): check any NBS packages against unstable to see
1581         if they haven't been removed already.
1582
1583         * templates/katie.rejected: remove paragraph about rejected files
1584         since they're o-rwx due to c-i-m and the uploader can't do
1585         anything about them and shania will take care of them anyway.
1586
1587         * madison (usage): update usage example to use comma seperation.
1588         * melanie (usage): likewise.
1589
1590         * utils.py (split_args): new function; splits command line
1591         arguments either by space or comma (whichever is used).  Also has
1592         optional-but-default DWIM spurious space detection to avoid
1593         'command -a i386, m68k' problems.
1594         (parse_args): use it.
1595         * melanie (main): likewise.
1596
1597         * melanie (main): force the admin to tell someone if we're not
1598         doing a rene-led removal (or closing a bug, which counts as
1599         telling someone).
1600
1601 2003-03-05  James Troup  <james@nocrew.org>
1602
1603         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1604         and python sections.
1605         * katie.conf-security (Section): likewise.
1606
1607         * add_constraints.sql: add uid and uid_id_seq to grants.
1608
1609         * lisa (determine_new): also warn about adding overrides to
1610         oldstable.
1611
1612         * madison (main): make the -S/--source-and-binary query obey
1613         -s/--suite restrictions.
1614
1615 2003-03-03  James Troup  <james@nocrew.org>
1616
1617         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1618         exists, warn the user that our output might seem strange.  (People
1619         get confused by multiple versions in a suite which happens
1620         post-kelly but pre-jenna.)
1621
1622 2003-02-21  James Troup  <james@nocrew.org>
1623
1624         * kelly (main): we don't need to worry about StableRejector.
1625
1626         * melanie (main): sort versions with apt_pkg.VersionCompare()
1627         prior to output.
1628
1629         * lauren: new script to manually reject packages from
1630         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1631
1632 2003-02-20  James Troup  <james@nocrew.org>
1633
1634         * kelly (init): remove unused -m/--manual-reject argument.
1635
1636         * katie.py (Katie.force_reject): renamed from force_move to make
1637         it more explicit what this function does.
1638         (Katie.do_reject): update to match.
1639
1640         * utils.py (prefix_multi_line_string): add an optional argument
1641         include_blank_lines which defaults to 0.  If non-zero, blank lines
1642         will be includes in the output.
1643
1644         * katie.py (Katie.do_reject): don't add leading space to each line
1645         of the reject message.  Include blank lines when showing the
1646         message to the user.
1647
1648 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1649
1650         * utils.py (fix_maintainer): replace pointless re.sub() with
1651         simple string format.
1652
1653 2003-02-11  James Troup  <james@nocrew.org>
1654
1655         * lisa (edit_overrides): only strip-to-one-char and upper-case
1656         non-numeric answers.  Fixes editing of items with indices >= 10;
1657         noticed by Randall.
1658         (edit_overrides): correct order of arguments to "not a valid
1659         index" error message.
1660
1661         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1662         remove_duplicate_versions(); thanks to aj for the initial
1663         diagnosis.
1664         (remove_duplicate_versions): correct how we return
1665         dominant_versions.
1666         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1667         a tuple rather than just a tuple.
1668
1669 2003-02-10  James Troup  <james@nocrew.org>
1670
1671         * emilie: new script - sync fingerprint and uid tables with a
1672         debian.org LDAP DB.
1673
1674         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1675         in 'fingerprint'.
1676
1677         * db_access.py (get_or_set_uid_id): new function.
1678
1679         * jennifer (main): update locking to a) not used FCNTL (deprecated
1680         in python >= 2.2) and b) acknowledge upstream's broken
1681         implementation of lockf (see Debian bug #74777), c) try to acquire
1682         the lock non-blocking.
1683         * kelly (main): likewise.
1684
1685         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1686
1687         * madison (main): only append the package to new_packages if it's
1688         not already in there; fixes -S/--source-and-binary for cases where
1689         the source builds a binary package of the same name.
1690
1691 2003-02-10  Anthony Towns  <ajt@debian.org>
1692
1693         * madison (main): use explicit JOIN syntax for
1694         -S/--source-and-binary queries to reduce the query's runtime from
1695         >10 seconds to negligible.
1696
1697 2003-02-08  James Troup  <james@nocrew.org>
1698
1699         * rene (main): in the NVIU output, append items to lists, not
1700         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1701         should be removed.
1702
1703 2003-02-07  James Troup  <james@nocrew.org>
1704
1705         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1706         Sources [aj].
1707
1708         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1709         O. Benham/Adam Heath/.
1710
1711         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1712         (Suite::Stable::Description): update for 3.0r1a.
1713         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1714
1715         * utils.py (gpgv_get_status_output): rename from
1716         get_status_output().
1717
1718         * neve (check_signature): use gpgv_get_status_output and Dict from
1719         utils().  Add missing newline to error message about duplicate tokens.
1720
1721         * saffron (per_arch_space_use): also print space used by source.
1722         (output_format): correct string.join() invocation.
1723
1724         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1725
1726 2003-02-04  James Troup  <james@nocrew.org>
1727
1728         * cron.buildd: correct generation of Packages/Sources and grep out
1729         non-US/non-free as well as non-free.
1730
1731 2003-02-03  Ryan Murray  <rmurray@debian.org>
1732
1733         * cron.buildd: generate quinn-diff output with full Packages/Sources
1734           files to get out-of-date vs. uncompiled right.
1735         * apt.conf.buildd: no longer generate uncompressed files, as they
1736           are generated in cron.buildd instead
1737         * add -i option to quinn-diff to ignore binary-all packages
1738         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1739           aren't in the packages file, the arch that uploaded them will build
1740           them anyways...
1741
1742 2003-01-30  James Troup  <james@nocrew.org>
1743
1744         * rene (main): only print suggested melanie command when there's
1745         some NBS to remove.
1746
1747 2003-01-30  Ryan Murray  <rmurray@debian.org>
1748
1749         * cron.buildd: fix incorrectly inverted lockfile check
1750
1751 2003-01-29  Ryan Murray  <rmurray@debian.org>
1752
1753         * cron.buildd: generate override.sid.all3.src
1754         * apt.conf.buildd: use generated override.sid.all3.src
1755
1756 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1757
1758         * utils.py (get_status_output): moved from jennifer.
1759         (Dict): likewise.
1760         (check_signature): likewise.
1761
1762         * jennifer (get_status_output): moved to utils.py.
1763         (Dict): likewise.
1764         (check_signature): likewise.
1765
1766         * utils.py (check_signature): add an argument to specifiy which
1767         function to call when an error was found.
1768         (check_signature): document this function better.
1769
1770         * jennifer (check_files): pass the reject function as an argument
1771         to utils.check_signature.
1772         (process_it): likewise.
1773
1774 2003-01-20  James Troup  <james@nocrew.org>
1775
1776         * rene (main): lots of changes to improve the output and make it
1777         more useful.
1778
1779         * katie.py (Katie.check_override): make the override messages
1780         clearer (hopefully).
1781
1782 2002-12-26  James Troup  <james@nocrew.org>
1783
1784         * ziyi (usage): document the ability to pass suite(s) as
1785         argument(s).
1786         (main): read apt.conf after checking for -h/--help.
1787
1788         * tea (main): take the check to run as an argument.
1789
1790         * saffron.R: R script to graph daily install runs.
1791
1792         * saffron: new script; various stats functions.
1793
1794         * rhona (main): connect to the database after checking for -h/--help.
1795
1796         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1797
1798         * melanie (main): sort versions with utils.arch_compare_sw().
1799
1800         * madison (usage): alphabetize order of options.
1801         * melanie (usage): likewise.
1802
1803         * kelly (usage): fix usage short description (we aren't dinstall).
1804
1805         * julia (usage): fix usage description and alphabetize order of
1806         options.
1807
1808         * jeri (usage): fix usage short description.
1809
1810         * jennifer (main): move --help and --version checks from here...
1811         (init): to here so that they work with an empty katie.conf.
1812         * kelly: likewise.
1813
1814         * alyson (usage): new function.
1815         (main): use it.
1816         * andrea: likewise.
1817         * ashley: likewise.
1818         * cindy: likewise.
1819         * denise: likewise.
1820         * helena: likewise.
1821         * neve: likewise.
1822         * rene: likewise.
1823         * rose: likewise.
1824         * tea: likewise.
1825
1826         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1827         entry that caused tasks to be omitted from 3.0r1.
1828
1829 2002-12-10  James Troup  <james@nocrew.org>
1830
1831         * jennifer (check_files): sanity check the Depends field to ensure
1832         it's non-empty if present since apt chokes on an empty one.
1833         Thanks to Ryan Murray for the idea.
1834
1835 2002-12-08  James Troup  <james@nocrew.org>
1836
1837         * katie.conf-security (Helena::Directories): new; include accepted
1838         in addition to byhand and new.
1839
1840         * helena (process_changes_files): use utils.arch_compare_sw().
1841         Justify things based on the longest [package, version,
1842         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1843         the commas in architecture and version lists for the same reason.
1844         (main): make directories we process configurable through
1845         Helena::Directories in the config file; if that doesn't exist
1846         default to the old hardcoded values (byhand & new).
1847
1848         * utils.py (arch_compare_sw): moved here from madison.
1849         * madison (main): adjust to compensate.
1850
1851 2002-12-06  James Troup  <james@nocrew.org>
1852
1853         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1854         right filename.
1855
1856 2002-12-05  James Troup  <james@nocrew.org>
1857
1858         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1859
1860 2002-11-28  Randall Donald  <rdonald@debian.org>
1861
1862         * fernanda.py (read_control): fix typo of 'Architecture'.
1863
1864 2002-11-26  James Troup  <james@nocrew.org>
1865
1866         * lisa (check_pkg): call less with '-R' so we see the colour from
1867         Randall's fernanda changes.
1868
1869         * neve (process_sources): if Directory points to a legacy location
1870         but the .dsc isn't there; assume it's broken and look in the pool.
1871         (update_section): new, borroed from alyson.
1872         (do_da_do_da): use it.
1873         (process_packages): add suite_it to the cache key used for
1874         arch_all_cache since otherwise we only add a package to the first
1875         suite it's in and ignore any subsequent ones.
1876
1877         * katie.conf-non-US (Location): fixed to reflect reality (all
1878         suites, except old-proposed-updates (which is legacy-mixed)) are
1879         pool.
1880
1881         * utils.py (try_with_debug): wrapper for print_exc().
1882         * jenna (main): use it.
1883         * neve (main): likewise.
1884
1885 2002-11-25  Randall Donald  <rdonald@debian.org>
1886
1887         * fernanda.py (main): added -R to less command line for raw control
1888         character support to print colours
1889         (check_deb): Instead of running dpkg -I on deb file, call
1890         output_deb_info, the new colourized control reporter.
1891         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1892         of printing out each .dsc line.
1893         (output_deb_info): new function. Outputs each key/value pair from
1894         read_control except in special cases where we highlight section,
1895         maintainer, architecture, depends and recommends.
1896         (create_depends_string): new function. Takes Depends tree and looks
1897         up it's compontent via projectb db, colourizes and constructs a
1898         depends string in original order.
1899         (read_dsc): new function. reads and parses .dsc info via
1900         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1901         colourized.
1902         (read_control): new function. reads and parses control info via
1903         apt_pkg. Depends and Recommends are split in to list structures,
1904         Section and Architecture are colourized. Maintainer is colourized
1905         if it has a localhost.localdomain address.
1906         (split_depends): new function. Creates a list of lists of
1907         dictionaries of depends (package,version relation). Top list is
1908         colected from comma delimited items. Sub lists are | delimited.
1909         (get_comma_list): new function. splits string input among commas
1910         (get_or_list): new function. splits string input among | delimiters
1911         (get_depends_parts): new function. Creates dictionary of package name
1912         and version relation from dependancy string.
1913         Colours for section and depends are per component. Unfound depends
1914         are in bold. Lookups using version info is not supported yet.
1915
1916 2002-11-22  James Troup  <james@nocrew.org>
1917
1918         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1919         'udmsearch'.
1920
1921         * amber (make_advisory): string.atol() is deprecated and hasn't
1922         been ported to string methods.  Use long() instead.
1923
1924         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1925         creating the database since we'll fail badly if it's created with
1926         e.g. UNICODE encoding.
1927
1928         * rose (main): AptCnf is a global.
1929
1930         * neve (get_location_path): new function determines the location
1931         from the the first (left-most) directory of a Filename/Directory.
1932         (process_sources): don't need 'location' anymore.  Use
1933         utils.warn().  Use the Directory: field for each package to find
1934         the .dsc.  Use get_location_path() to determine the location for
1935         each .dsc.
1936         (process_packages): do't need 'location' anymore.  Use
1937         utils.warn().  Use get_location_path().
1938         (do_sources): don't need 'location', drop 'prefix' in favour of
1939         being told the full path to the Sources file, like
1940         process_packages().
1941         (do_da_do_da): main() renamed, so that main can call us in a
1942         try/except.  Adapt for the changes in do_sources() and
1943         process_packages() above.  Assume Sources and Packages file are in
1944         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1945
1946         * katie.conf-security (Location): fixed to reflect reality (all
1947         suites are pool, not legacy).
1948
1949         * utils.py (print_exc): more useful (i.e. much more verbose)
1950         traceback; a recipe from the Python cookbook.
1951         * jenna (main): use it.
1952         * neve (main): likewise.
1953
1954 2002-11-19  James Troup  <james@nocrew.org>
1955
1956         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1957         handling which was FUBAR for multi-suite uploads.  Now we just
1958         make a dictionary of destinations to copy to and iterate over
1959         those.
1960
1961         * fernanda.py (check_deb): run linda as well as lintian.
1962
1963 2002-10-21  James Troup  <james@nocrew.org>
1964
1965         * melanie (main): change X-Melanie to X-Katie and prefix it with
1966         'melanie '.
1967
1968         * lisa (main): prefix X-Katie with 'lisa '.
1969
1970         * jennifer (clean_holding): fix typo in string method changes;
1971         s/file.find(file/file.find(/.
1972
1973         * cron.daily: invoke helena and send the report to ftpmaster.
1974         * cron.daily-non-US: likewise.
1975
1976 2002-10-16  James Troup  <james@nocrew.org>
1977
1978         * kelly (check): call reject() with a blank prefix when parsing
1979         the return of check_dsc_against_db() since it does its own
1980         prefix-ing.
1981
1982         * rose: new script; only handles directory creation initally.
1983
1984         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1985         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1986
1987 2002-10-06  James Troup  <james@nocrew.org>
1988
1989         * rene (main): remove bogus argument handling.
1990
1991         * kelly: katie, renamed.
1992         * cron.daily: adapt for katie being renamed to kelly.
1993         * cron.daily-non-US: likewise.
1994         * amber (main): likewise.
1995
1996         * Changes for python 2.1.
1997
1998         * kelly: time.strftime no longer requires a second argument of
1999         "time.localtime(time.time())".
2000         * logging.py: likewise.
2001         * rhona: likewise.
2002         * shania (init): likewise.
2003
2004         * amber: use augmented assignment.
2005         * catherine (poolize): likewise.
2006         * claire.py (fix_component_section): likewise.
2007         * halle (check_changes): likewise.
2008         * helena: likewise.
2009         * jenna: likewise.
2010         * jennifer: likewise.
2011         * jeri: likewise.
2012         * katie.py: likewise.
2013         * kelly: likewise.
2014         * lisa: likewise.
2015         * madison (main): likewise.
2016         * melanie: likewise.
2017         * natalie: likewise.
2018         * neve: likewise.
2019         * rhona: likewise.
2020         * tea: likewise.
2021         * utils.py: likewise.
2022         * ziyi: likewise.
2023
2024         * amber: use .endswith.
2025         * fernanda.py: likewise.
2026         * halle (main): likewise.
2027         * jennifer: likewise.
2028         * jeri: likewise.
2029         * katie.py: likewise.
2030         * kelly: likewise.
2031         * lisa: likewise.
2032         * neve: likewise.
2033         * shania (main): likewise.
2034         * utils.py: likewise.
2035
2036         * alyson: use string methods.
2037         * amber: likewise.
2038         * andrea: likewise.
2039         * ashley: likewise.
2040         * catherine: likewise.
2041         * charisma: likewise.
2042         * claire.py: likewise.
2043         * db_access.py: likewise.
2044         * denise: likewise.
2045         * halle: likewise.
2046         * heidi: likewise.
2047         * helena: likewise.
2048         * jenna: likewise.
2049         * jennifer: likewise.
2050         * jeri: likewise.
2051         * julia: likewise.
2052         * katie.py: likewise.
2053         * kelly: likewise.
2054         * lisa: likewise.
2055         * logging.py: likewise.
2056         * madison: likewise.
2057         * melanie: likewise.
2058         * natalie: likewise.
2059         * neve: likewise.
2060         * rene: likewise.
2061         * tea: likewise.
2062         * utils.py: likewise.
2063         * ziyi: likewise.
2064
2065 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2066
2067         * utils.py (parse_changes): use <string>.startswith() rather than
2068         string.find().
2069
2070 2002-08-27  Anthony Towns  <ajt@debian.org>
2071
2072         * katie.py (in_override_p): when searching for a source override,
2073         and the dsc query misses, search for both udeb and deb overrides
2074         as well. Should fix the UNACCEPT issues with udebs.
2075
2076 2002-08-24  James Troup  <james@nocrew.org>
2077
2078         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2079         source+binary package finding code which was causing severe
2080         performance degradation with postgres 7.2.
2081
2082 2002-08-14  James Troup  <james@nocrew.org>
2083
2084         * julia (main): use the pwd.getpwall() to get system user info
2085         rather than trying to read a password file.  Add a -n/--no-action
2086         option.
2087
2088         * cron.hourly: julia no longer takes any arguments.
2089         * cron.hourly-non-US: likewise.
2090
2091 2002-08-07  James Troup  <james@nocrew.org>
2092
2093         * katie (install): handle multi-suite uploads when CopyChanges
2094         and/or CopyKatie are in use, ensuring we only copy stuff once.
2095
2096 2002-08-01  Ryan Murray  <rmurray@debian.org>
2097
2098         * wanna-build/trigger.daily: initial commit, with locking
2099         * cron.buildd: add locking against daily run
2100
2101 2002-07-30  James Troup  <james@nocrew.org>
2102
2103         * melanie (main): readd creation of suite_ids_list so melanie is
2104         remotely useful again.
2105
2106         * katie.conf: adopt for woody release; diable
2107         StableDislocationSupport, add oldstable, adjust other suites and
2108         mappings, fix up location.
2109         * katie.conf-non-US: likewise.
2110         * katie.conf-security: likewise.
2111
2112         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2113         stable.
2114         * apt.conf.stable-non-US: likewise.
2115
2116         * apt.conf-security: adapt for woody release; adding oldstable,
2117         oldstable, adjust stable and testing.
2118         * cron.daily-security: likewise.
2119         * cron.buildd-security: likewise.
2120
2121         * apt.conf: adapt for woody release; rename woody-proposed-updates
2122         to testing-proposed-updates and proposed-updates to
2123         old-proposed-updates.
2124         * apt.conf-non-US: likewise.
2125
2126         * vars-non-US (copyoverrides): add sarge.
2127         * vars (copyoverrides): likewise.
2128
2129         * vars-security (suites): add oldstable.
2130
2131 2002-07-22  Ryan Murray  <rmurray@debian.org>
2132
2133         * apt.conf.security-buildd: use suite codenames instead of
2134           distnames.
2135
2136 2002-07-16  James Troup  <james@nocrew.org>
2137
2138         * denise (main): fix filenames for testing override files.
2139
2140 2002-07-14  James Troup  <james@nocrew.org>
2141
2142         * jennifer (process_it): call check_md5sums later so we can check
2143         files in the .dsc too
2144         (check_md5sums): check files in the .dsc too.  Check both md5sum
2145         and size.
2146
2147         * melanie (main): use parse_args() and join_with_commas_and() from
2148         utils.  If there's nothing to do, say so and exit, don't ask for
2149         confirmation etc.
2150
2151         * amber (join_with_commas_and): moved from here to ...
2152         * utils.py (join_with_commas_and): here.
2153
2154 2002-07-13  James Troup  <james@nocrew.org>
2155
2156         * madison (main): use parse_args() from utils.  Support
2157         -c/--component.
2158
2159         * jenna (parse_args): moved from here to ...
2160         * utils.py (parse_args): here.
2161
2162         * katie.conf (Architectures): minor corrections to the description
2163         for arm, mips and mipsel.
2164         * katie.conf-non-US (Architectures): likewise.
2165         * katie.conf-security (Architectures): likewise.
2166
2167         * cron.daily-security: use natalie's new -a/--add functionality to
2168         flesh out the security overrides.
2169
2170 2002-07-12  James Troup  <james@nocrew.org>
2171
2172         * cron.buildd (ARCHS): add arm.
2173
2174         * katie.conf: 2.2r7 was released.
2175         * katie.conf-non-US: likewise.
2176
2177         * utils.py (parse_changes): handle a multi-line field with no
2178         starting line.
2179
2180 2002-06-25  James Troup  <james@nocrew.org>
2181
2182         * templates/amber.advisory (To): add missing email address since
2183         __WHOAMI__ is only a name.
2184
2185         * katie.conf-security (Melane::LogFile): correct to go somewhere
2186         katie has write access to.
2187         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2188         Testing.
2189
2190         * natalie: add support for -a/-add which adds packages only
2191         (ignoring changes and deletions).
2192
2193         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2194         use FindB, not get.
2195
2196 2002-06-22  James Troup  <james@nocrew.org>
2197
2198         * jennifer (check_files): validate the package name and version
2199         field.  If 'Package', 'Version' or 'Architecture' are missing,
2200         don't try any further checks.
2201         (check_dsc): likewise.
2202
2203         * utils.py (re_taint_free): add '~' as a valid character.
2204
2205 2002-06-20  Anthony Towns  <ajt@debian.org>
2206
2207         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2208
2209 2002-06-09  James Troup  <james@nocrew.org>
2210
2211         * jennifer (check_files): reduce useless code.
2212
2213         * cron.daily-security: run symlinks -dr on $ftpdir.
2214
2215         * vars-security (ftpdir): add.
2216
2217 2002-06-08  James Troup  <james@nocrew.org>
2218
2219         * neve (update_override_type): transaction is handled higher up in
2220         main().
2221         (update_priority): likewise.
2222         (process_sources): remove code that makes testing a duplicate of
2223         stable.
2224         (process_packages): likewise.
2225
2226         * templates/amber.advisory: add missing mail headers.
2227
2228         * cron.daily-security: also call apt-ftparchive clean for
2229         apt.conf.buildd-security.
2230         * cron.weekly: likewise.
2231
2232         * amber (do_upload): write out a list of source packages (and
2233         their version) uploaded for testing.
2234         (make_advisory): add more Subst mappings for the mail headers.
2235         (spawn): check for suspicious characters in the command and abort
2236         if their found.
2237
2238 2002-06-07  James Troup  <james@nocrew.org>
2239
2240         * ziyi (main): remove the 'nonus'/'security' hacks and use
2241         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2242         the lower level Release files, even if they don't exist.  fubar
2243         out if we can't open a lower level Release file for writing.
2244
2245         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2246         ziyi.
2247         * katie.conf-security (Dinstall): likewise.
2248
2249         * amber (do_upload): renamed from get_file_list().  Determine the
2250         upload host from the original component.
2251         (init): Add a -n/--no-action option.  Fix how we get changes_files
2252         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2253         sys.argv).  Add an Options global.
2254         (make_advisory): support -n/--no-action.
2255         (spawn): likewise.
2256         (main): likewise.
2257         (usage): document -n/--no-action.
2258
2259         * cron.buildd-security: fix path to Packages-arch-specific in
2260         quinn-diff invocation.
2261
2262         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2263         to proper suite names (i.e. stable, testing) rather than codenames
2264         (potato, woody).
2265         (Dinstall::DefaultSuite): likewise.
2266         (Suite): likewise.
2267         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2268         * vars-security (suites): likewise.
2269         * apt.conf-security: likewise.
2270
2271         * katie.conf-security (Component): add "updates/" prefix.
2272         (Suite::*::Components): likewise.
2273         (ComponentMappings): new; map all {ftp-master,non-US} components
2274         -> updates/<foo>.
2275
2276         * katie.conf-security (Natalie): removed; the options have
2277         defaults and ComponentPosition is used by alyson which doesn't
2278         work on security.d.o.
2279         (Amber): replace UploadHost and UploadDir with ComponentMappings
2280         which is a mapping of components -> URI.
2281         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2282         (SuiteMappings): use "silent-map" in preference to "map".
2283
2284         * cron.unchecked-security: fix call to cron.buildd-security.
2285
2286         * cron.daily-security: map local suite (stable) -> override suite
2287         (potato) when fixing overrides.  Correct component in natalie call
2288         to take into account "updates/" prefix.  Fix cut'n'waste in
2289         override.$dist.all3 generation, the old files weren't being
2290         removed, so they were endlessly growing.
2291
2292         * neve (main): don't use .Find for the CodeName since we require
2293         it.  Location::*::Suites is a ValueList.
2294         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2295         out on expired keys, just warn.
2296         (update_override_type): new function; lifted from alyson.
2297         (update_priority): likewise.
2298         (main): use update_{override_type,priority}().
2299
2300         * jennifer (check_distributions): remove redunant test for
2301         SuiteMappings; ValueList("does-not-exist") returns [] which is
2302         fine.  Add support for a "silent-map" type which doesn't warn
2303         about the mapping to the user.
2304         (check_files): add support for ComponentMappings, similar to
2305         SuiteMappings, but there's no type, just a source and a
2306         destination and the original component is stored in "original
2307         component".
2308         * katie.py (Katie.dump_vars): add "original component" as an
2309         optionsal files[file] dump variable.
2310
2311         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2312         query.  Add support for section-less legacy locations like current
2313         security.debian.org through YetAnotherConfigBoolean
2314         'LegacyStableHasNoSections'.
2315         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2316
2317         * utils.py (real_arch): moved here from ziyi.
2318         * ziyi (real_arch): moved to utils.py.
2319         * ziyi (main): likewise.
2320
2321         * claire.py (find_dislocated_stable): use real_arch() with
2322         filter() to strip out source and all.
2323         * neve (main): likewise.
2324         * rene (main): likewise.
2325         * jeri (parse_packages): likewise.
2326
2327 2002-06-06  James Troup  <james@nocrew.org>
2328
2329         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2330         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2331         doing.
2332
2333 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2334
2335         * jeri (check_joey): check if the line contains two elements
2336         before accessing the second.  Also, strip trailing spaces as well
2337         as the newline.
2338         * halle (check_joey): likewise.
2339
2340 2002-06-05  James Troup  <james@nocrew.org>
2341
2342         * cron.unchecked-security: new file; like cron.unchecked but if
2343         there's nothing to do exit so we don't call cron.buildd-security.
2344
2345         * apt.conf.buildd-security: new file.
2346
2347         * vars (archs): alphabetize.
2348         * vars-non-US (archs): likewise.
2349
2350         * vars-security: add unchecked.
2351
2352         * madison (main): reduce rather bizarrely verbose and purposeless
2353         code to print arches to a simple string.join.
2354
2355         * katie.conf (Suites::Unstable): add UdebComponents, a new
2356         valuelist of suites, used by jenna to flesh out the list of
2357         <suite>_main-debian-installer-binary-<arch>.list files generated.
2358         (Dinstall): add StableDislocationSupport, a new boolean used by
2359         jenna to enable or disable stable dislocation support
2360         (i.e. claire), as true.
2361
2362         * katie.conf (Dinstall): add StableDislocationSupport, a new
2363         boolean used by jenna to enable or disable stable dislocation
2364         support (i.e. claire), as true.
2365         * katie.conf-non-US: likewise.
2366         * katie.conf-security: likewise.
2367
2368         * cron.daily-security: generate .all3 overrides for the buildd
2369         support.  Freshen a local copy of Packages-arch-specific from
2370         buildd.debian.org.
2371
2372         * claire.py (find_dislocated_stable): disable the support for
2373         files in legacy-mixed locations since none of the Debian archives
2374         have any anymore.
2375
2376         * helena: new script; produces a report on NEW and BYHAND
2377         packages.
2378
2379         * jenna: rewritten from scratch to fix speed problems.  Run time
2380         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2381         minutes, 105 seconds are the monster query and 70 odd seconds is
2382         claire.
2383
2384         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2385         irrelevant.
2386
2387 2002-06-05  Ryan Murray  <rmurray@debian.org>
2388
2389         * cron.buildd-security: new file.
2390
2391 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2392
2393         * denise (list): take a file argument and use it.
2394         (main): don't abuse sys.stdout, just write to the file.
2395
2396         * claire.py (usage): Fix misspelling.
2397         (clean_symlink): Simplify.
2398         (find_dislocated_stable): Avoid unnecessary work.
2399
2400 2002-05-29  James Troup  <james@nocrew.org>
2401
2402         * cameron: removed; apt-ftparchive can simply walk the directory.
2403
2404 2002-05-26  Anthony Towns  <ajt@debian.org>
2405
2406         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2407         for the autobuilders.
2408
2409 2002-05-24  Ryan Murray  <rmurray@debian.org>
2410
2411         * cron.buildd: update override files before running apt-ftparchive
2412
2413 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2414
2415         * amber (main): remove extra space in prompt.
2416
2417         * utils.py (validate_changes_file_arg): use original filename in
2418         error messages.
2419
2420         * jeri (check_joey): close file after use.
2421         (parse_packages): likewise.
2422         (main): setup debug option properly.
2423
2424         * melanie (main): remove unused packages variable and simplify the
2425         code to build up con_packages by using repr().
2426
2427 2002-05-23  James Troup  <james@nocrew.org>
2428
2429         * lisa (recheck): when we reject, also return 0 so the package is
2430         skipped.
2431         (sg_compare): fix note sorting.
2432         (recheck): remove the .katie file after rejection.
2433
2434         * katie.py (Katie.accept): accepted auto-build support take 3;
2435         this time adding support for security.  Security needs a) non-pool
2436         files copied rather than symlinked since accepted is readable only
2437         by katie/security and www-data needs to be able to see the files,
2438         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2439         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2440         SecurityAcceptedAutoBuild is a new boolean which controls whether
2441         or not normal or security style is used.  The unstable_accepted
2442         table was renamed to accepted_autobuild and a suite column added.
2443         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2444         didn't have it's last_used/in_accepted flags correctly updated.
2445         * katie (install): likewise.
2446         * rhona (clean_accepted_autobuild): likewise.
2447
2448 2002-05-22  James Troup  <james@nocrew.org>
2449
2450         * lisa (sort_changes): new function; sorts changes properly.
2451         Finally.
2452         (sg_compare): new function; helper for sort_changes().  Sorts by
2453         have note and time of oldest upload.
2454         (indiv_sg_compare): new function; helper for sort_changes().
2455         Sorts by source version, have source and filename.
2456         (main): use sort_changes().
2457         (changes_compare): obsoleted; removed.
2458
2459 2002-05-20  James Troup  <james@nocrew.org>
2460
2461         * rhona (clean_accepted_autobuild): don't die if a file we're
2462         trying to remove doesn't exist.  Makes rhona more friendly to
2463         katie/katie.py crashes/bugs without any undue cost.
2464
2465 2002-05-19  James Troup  <james@nocrew.org>
2466
2467         * lisa (main): if sorting a large number of changes give some
2468         feedback.
2469         (recheck): new function, run the same checks (modulo NEW,
2470         obviously) as katie does, if they fail do the standard
2471         reject/skip/quit dance.
2472         (do_pkg): use it.
2473
2474         * katie (install): don't try to unlink the symlink in the
2475         AcceptedAutoBuild support if the destination is not a symlink (or
2476         doesn't exist).  Avoids unnecessary bombs on previous partial
2477         accepts and will still bomb hard if the file exists and isn't a
2478         symlink.
2479
2480         * utils.py: blah, commands _is_ used when the mail stuff isn't
2481         commented out like it is in my test environment.
2482
2483         * lisa (changes_compare): "has note" overrides everything else.
2484         Use .katie files rather than running parse_changes, faster and
2485         allows "has note" to work.  Correct version compare, it was
2486         reversed.  Ctime check should only kick in if the source packages
2487         are not the same.
2488         (print_new): print out and return any note.  Rename 'ret_code' to
2489         'broken'.
2490         (edit_new): renamed from spawn_editor.  Don't leak file
2491         descriptors.  Clean up error message if editor fails.
2492         (edit_note): new function, allows one to edit notes.
2493         (do_new): add note support, editing and removing.
2494         (init): kill -s/--sort; with notes we always want to use our
2495         sorting method.
2496         (usage): likewise.
2497
2498         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2499         changes field.
2500
2501         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2502         it default to 0.  Adapt tests to assume it's boolean.
2503         * fernanda.py (check_changes): adjust call appropriately.
2504         * halle (check_changes): likewise.
2505         * jennifer (check_changes): likewise.
2506         * jeri (check_changes): likewise.
2507         * shania (flush_orphans): likewise.
2508
2509         * jennifer (check_dsc): pass is_a_dsc by name when calling
2510         build_file_list() for clarity.
2511         * shania (flush_orphans): likewise.
2512         * tea (check_missing_tar_gz_in_dsc): likewise.
2513
2514         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2515         calling parse_changes() for clarity.
2516         * tea (check_dscs): likewise.
2517
2518         * utils.py (parse_changes): make dsc_whitespace_rules default to
2519         not true.
2520         * halle (check_changes): adjust call appropriately.
2521         * jennifer (check_changes): likewise.
2522         * jeri (check_changes): likewise.
2523         * lisa (changes_compare): likewise.
2524         * utils.py (changes_compare): likewise.
2525         * melanie (main): likewise.
2526         * shania (flush_orphans): likewise.
2527         * fernanda.py (check_changes): likewise.
2528
2529 2002-05-18  James Troup  <james@nocrew.org>
2530
2531         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2532         it's not useful and by and large a duplication of information
2533         available in readable format in other files.
2534
2535 2002-05-16  Ryan Murray  <rmurray@debian.org>
2536
2537         * melanie: Dir::TemplatesDir -> Dir::Templates
2538
2539 2002-05-15  Ryan Murray  <rmurray@debian.org>
2540
2541         * cameron: correct the use of os.path.join
2542
2543 2002-05-15  Anthony Towns  <ajt@debian.org>
2544
2545         * ziyi: Update to match the new format for Architectures/Components
2546         in katie.conf.
2547
2548 2002-05-14  James Troup  <james@nocrew.org>
2549
2550         * amber: new script; 'installer' wrapper script for the security
2551         team.
2552
2553         * katie.py (Katie.announce): remove unused 'dsc' local
2554         variable. (pychecker)
2555
2556         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2557
2558         * neve: don't import sys, we don't use it. (pychecker)
2559         (check_signature): fix return type mismatch. (pychecker)
2560
2561         * utils.py: don't import commands, we don't use it.  (pychecker)
2562
2563         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2564
2565         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2566         obsoleted by the change to "othercomponents" handling in jennifer
2567         detailed below.
2568         (Katie.cross_suite_version_check): new function; implements
2569         cross-suite version checking rules specified in the conf file
2570         while also enforcing the standard "must be newer than target
2571         suite" rule.
2572         (Katie.check_binary_against_db): renamed, since it's invoked once
2573         per-binary, "binaries" was inaccurate.  Use
2574         cross_suite_version_check() and don't bother with the "oldfiles"
2575         rubbish as jennifer works out "othercomponents" herself now.
2576         (Katie.check_source_against_db): use cross_suite_version_check().
2577
2578         * katie (check): the version and file overwrite checks
2579         (check_{binary,source,dsc}_against_db) are not per-suite.
2580
2581         * jennifer (check_files): less duplication of
2582         'control.Find("Architecture", "")' by putting it in a local
2583         variable.
2584         (check_files): call check_binary_against_db higher up since it's
2585         not a per-suite check.
2586         (check_files): get "othercomponents" directly rather than having
2587         check_binary_against_db do it for us.
2588
2589         * heidi (main): 'if x:', not 'if x != []:'.
2590         * katie.py (Katie.in_override_p): likewise.
2591         (Katie.check_dsc_against_db): likewise.
2592         * natalie (main): likewise.
2593         * rene (main): likewise.
2594         * ziyi (real_arch): likewise.
2595
2596         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2597         and OverrideType are now value lists, not lists.
2598         * andrea (main): likewise.
2599         * cindy (main): likewise.
2600         * claire.py (find_dislocated_stable): likewise.
2601         * denise (main): likewise.
2602         * jenna (main): likewise.
2603         * jennifer (check_distributions): likewise.
2604         (check_files): likewise.
2605         (check_urgency): likewise (Urgency::Valid).
2606         * jeri (parse_packages): likewise.
2607         * neve (main): likewise (and Location::%s::Suites).
2608         * rene (main): likewise.
2609
2610 2002-05-13  James Troup  <james@nocrew.org>
2611
2612         * katie.py (Katie.check_source_against_db): correct case of reject
2613         message to be consistent with binary checks.
2614
2615         * jennifer (get_status_output): don't leak 2 file descriptors per
2616         invocation.
2617         (check_signature): add missing '\n' to "duplicate status token"
2618         error message.
2619
2620 2002-05-09  James Troup  <james@nocrew.org>
2621
2622         * utils.py (validate_changes_file_arg): new function; validates an
2623         argument which should be a .changes file.
2624         * ashley (main): use it.
2625         * lisa (main): likewise.
2626
2627         * katie.py (Katie.check_dsc_against_db): since there can be more
2628         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2629         entry still exists in files.
2630
2631         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2632         files, since check_dsc_against_db() deletes the .orig.tar.gz
2633         entry.
2634
2635         * cameron: cleanups.
2636
2637         * utils.py (changes_compare): change sort order so that source
2638         name and source version trump 'have source'; this should fix
2639         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2640         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2641         by Ryan.
2642
2643         * lisa (main): allow the arguments to be .katie files too.
2644
2645 2002-05-07  Ryan Murray  <rmurray@debian.org>
2646
2647         * cron.buildd: add s390 to arch list again
2648
2649 2002-05-05  Ryan Murray  <rmurray@debian.org>
2650
2651         * cron.buildd: new script, update w-b database from unstable_accepted
2652         table
2653         * cameron: new script, take list in unstable_accepted and write out
2654         a file list for apt-ftparchive
2655         * apt.conf.buildd: new apt configuration for Packages/Sources for
2656         unstable_accepted
2657         * vars: add s390 to arch list.
2658
2659 2002-05-03  James Troup  <james@nocrew.org>
2660
2661         * neve (main): don't hard code the calling user as that doesn't
2662         work with modern postgres installs.  Fix psql invocation for
2663         init_pool.sql (database name required).  Dont' hard code the
2664         database name.
2665         (process_sources): add support for fingerprint and install_date.
2666         (process_packages): add support for fingerprint.
2667         (do_sources): pass in the directory, fingerprint support needs it.
2668         (get_status_output): borrowed from jennifer.
2669         (reject): likewise.
2670         (check_signature): likewise.
2671
2672         * katie (install): only try to log urgencies if Urgency_Logger is
2673         defined.
2674         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2675         defined; only close Urgency_Logger if it's defined.
2676
2677         * catherine (poolize): adapt for Dir rationalization.
2678         * claire.py (find_dislocated_stable): likewise.
2679         * denise (main): likewise.
2680         * halle (check_joey): likewise.
2681         * jenna: likewise.
2682         * jennifer: likewise.
2683         * jeri: likewise.
2684         * katie.py: likewise.
2685         * katie: likewise.
2686         * lisa (do_bxa_notification): likewise.
2687         * logging.py (Logger.__init__): likewise
2688         * rene (main): likewise.
2689         * rhona (clean): likewise.
2690         * shania (init): likewise.
2691         * tea: likewise.
2692         * ziyi: likewise.
2693
2694         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2695         FindB, not FindI.
2696
2697         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2698         boolean, use FindB, not get.
2699
2700         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2701         .orig.tar.gz's which are an exact (size/md5sum) match.
2702
2703         * ashley (main): really allow *.katie files as arguments too;
2704         noticed by aj.
2705
2706         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2707
2708 2002-05-03  Anthony Towns  <ajt@debian.org>
2709
2710         * ziyi: support for security.
2711
2712 2002-05-02  James Troup  <james@nocrew.org>
2713
2714         * jennifer (accept): call Katie.check_override() unconditional as
2715         no-mail check moved into that function.
2716         (do_byhand): likewise.
2717
2718         * katie.py (Katie.check_override): don't do anything if we're a)
2719         not sending mail or b) the override disparity checks have been
2720         disbled via Dinstall::OverrideDisparityCheck.
2721
2722         * jennifer (check_files): don't hard code Unstable as the suite
2723         used to check for architecture validity; use
2724         Dinstall::DefaultSuite instead, if it exists.
2725         (accept): conditionalize
2726
2727         * katie.py (Katie.update_subst): support global maintainer
2728         override with Dinstall::OverrideMaintainer.
2729
2730         * jennifer (check_distributions): new function, Distribution
2731         validation and mapping.  Uses new SuiteMappings variable from
2732         config file to abstract suite mappings.
2733         (check_changes): call it.
2734
2735         * natalie: renamed; nothing imports or likely will for some time.
2736
2737         * denise (main): remove unused natalie import and init().
2738
2739         * natalie.py (init): removed.
2740         (main): initalize here instead and don't hardcode the database
2741         name.
2742
2743 2002-04-30  James Troup  <james@nocrew.org>
2744
2745         * katie.py (Katie.close_bugs): new function, split out from
2746         announce().
2747         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2748         true.
2749         (Katie.close_bugs): new function, split out
2750         (Katie.close_bugs): return immediately if there are no bugs to
2751         close.
2752
2753         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2754         * katie (do_reject): likewise.
2755         (stable_install): likewise.
2756         * katie.py (Katie.announce): likewise.
2757         (Katie.accept): likewise.
2758         (Katie.check_override): likewise.
2759         (Katie.do_reject): likewise.
2760         * lisa (do_bxa_notification): likewise.
2761         * melanie (main): likewise.
2762
2763         * utils.py (TemplateSubst): change second argument to be a
2764         filename rather than a template since every caller opened a file
2765         on the fly which was ugly and leaked file descriptor.
2766
2767 2002-04-29  James Troup  <james@nocrew.org>
2768
2769         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2770         <hertzog@debian.org> to send 'accepted' announce mails to the
2771         PTS. [#128140]
2772
2773 2002-04-24  James Troup  <james@nocrew.org>
2774
2775         * init_pool.sql (unstable_accepted): add two new fields to
2776         unstable_accepted; in_accepted is a boolean indicating whether or
2777         not the file is in accepted and last_used is a timestamp used by
2778         rhona to determine when to remove symlinks for installed packages.
2779
2780         * katie.py (Katie.accept): auto-build support take 2.  Create
2781         symlinks for all files into a seperate directory.  Add files to
2782         unstable_accepted as paths to the new directory; mark them as
2783         being in accepted for cameron.  Properly conditionalize it on a
2784         configuration variable.
2785
2786         * katie (install): likewise.  Update symlinks to point into the
2787         pool; mark the files for later deletion by rhona and mark them as
2788         not being in accepted for cameron.
2789
2790         * rhona (clean_accepted_autobuild): new function.
2791
2792 2002-04-22  James Troup  <james@nocrew.org>
2793
2794         * jennifer (check_files): handle db_access.get_location_id()
2795         returning -1 properly/better.
2796
2797         * rhona (clean_fingerprints): new function.
2798
2799 2002-04-21  James Troup  <james@nocrew.org>
2800
2801         * utils.py (touch_file): unused; remove.
2802         (plural): likewise.
2803
2804         * jennifer (check_files): close file descriptor used to get the
2805         control file.
2806         (check_md5sums): likewise.
2807         (callback): likewise.
2808
2809         * katie.py (Katie.do_reject): handle manual rejects much better;
2810         call the editor first and get confirmation from the user before
2811         proceeding.
2812
2813         * jennifer (check_signature): prefix_multi_line_string() moved to
2814         utils.
2815
2816         * utils.py (prefix_multi_line_string): moved here from jennifer.
2817
2818 2002-04-20  James Troup  <james@nocrew.org>
2819
2820         * lisa (main): handle non-existent files.
2821
2822         * ashley (main): allow *.katie files as arguments too.
2823
2824 2002-04-19  James Troup  <james@nocrew.org>
2825
2826         * katie.py (Katie.accept): add stuff to help auto-building from
2827         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2828         in the pool), create a symlink to it in the accepted directory and
2829         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2830
2831         * katie (install): undo the "auto-building from accepted" stuff
2832         (i.e. remove the .orig.tar.gz symlink and remove the files from
2833         unstable_accepted table).
2834
2835 2002-04-16  James Troup  <james@nocrew.org>
2836
2837         * jennifer (upload_too_new): fix typo which was causing all
2838         timestamp comparisons to be against the .changes file.  Also move
2839         back to the original directory so we do the comparisons against
2840         accurate timestamps.
2841
2842         * tea (check_missing_tar_gz_in_dsc): new function.
2843
2844         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2845         file mentioned in the .dsc.
2846
2847         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2848         way mails reach debian-{devel-,}changes@l.d.o.
2849
2850 2002-04-02  Ryan Murray  <rmurray@debian.org>
2851
2852         * cron.daily: run shania after rhona
2853         * cron.daily-non-US: likewise.
2854
2855 2002-04-01  James Troup  <james@nocrew.org>
2856
2857         * katie: re-add proposed-updates/stable install support.
2858
2859         * katie.py (Katie.dump_vars): add changes["changes"] as an
2860         optional field; should be mandatory later.
2861
2862 2002-03-31  James Troup  <james@nocrew.org>
2863
2864         * katie (install): support a Suite::<foo>::CopyKatie similar to
2865         CopyChanges.  Done seperately because .katie files don't need to
2866         be mirrored and will probably be copied to another directory as a
2867         result.
2868
2869         * halle (main): add missing debug to options.
2870
2871 2002-03-29  James Troup  <james@nocrew.org>
2872
2873         * madison (main): add a -r/--regex option.
2874
2875 2002-03-26  James Troup  <james@nocrew.org>
2876
2877         * lisa: don't trample on changes["distribution"]; make a copy of
2878         it as changes["suite"] instead and use that.
2879
2880 2002-03-16  Anthony Towns  <ajt@debian.org>
2881
2882         * templates/lisa.bxa_notification: Fix some grammatical errors.
2883         Encourage contact via bxa@ftp-master email address.
2884
2885 2002-03-15  James Troup  <james@nocrew.org>
2886
2887         * jennifer (check_timestamps): remove bogus raise in except.
2888
2889 2002-03-15  Anthony Towns  <ajt@debian.org>
2890
2891         * cron.monthly: rotate mail/archive/bxamail as well as
2892         mail/archive/mail. This is for a complete archive of
2893         correspondence with the BXA.
2894
2895 2002-03-14  Anthony Towns  <ajt@debian.org>
2896
2897         * crypto-in-main changes.
2898
2899         * utils.py (move, copy): add an optional perms= parameter to let you
2900         set the resulting permissions of the moved/copied file
2901         * katie.py (force_move): rejected/morgued files should be unreadable
2902         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2903         should be unreadable.
2904
2905 2002-03-07  Ryan Murray  <rmurray@debian.org>
2906
2907         * katie (install): check for existance of "files id" key as well as
2908         it being set to a valid value.
2909         * katie (install): check for existense and valid value for location
2910         id as well
2911
2912 2002-03-05  Ryan Murray  <rmurray@debian.org>
2913
2914         * katie.py (do_reject): reread the reason file after editing it.
2915
2916 2002-02-25  James Troup  <james@nocrew.org>
2917
2918         * jennifer (check_changes): don't enforce sanity in .changes file
2919         names since it doesn't seem to be possible; pcmica-cs and similar
2920         freak show packages in particular cause real problems.
2921
2922         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2923         each dsc_file since the .orig.tar.gz checking code now uses it as
2924         a boolean.  Fixes bizarro rejections which bogusly claimed
2925         .diff.gz md5sum/size was incorrect.
2926
2927 2002-02-24  James Troup  <james@nocrew.org>
2928
2929         * katie (process_it): reset reject_message.
2930
2931 2002-02-22  James Troup  <james@nocrew.org>
2932
2933         * db_access.py(set_files_id): disable use of
2934         currval('files_id_seq') because it was taking 3 seconds on auric
2935         which is insane (most calls take < 0.01) and simply call
2936         get_files_id() for the return value instead.
2937
2938         * katie.py (Katie.do_query): convenience function; unused by
2939         default, useful for profiling.
2940         * db_access.py (do_query): likewise.
2941
2942         * katie (install): fix insert SQL call when binary has no source.
2943
2944         * lisa (determine_new): auto-correct non-US/main to non-US.
2945         (determine_new): add a warning when adding things to stable.
2946         (edit_index): use our_raw_input().
2947         (edit_overrides): likewise.
2948         (do_new): likewise.  Use re.search() not re.match() since the
2949         default answer may not be the first one.
2950         (do_byhand): likewise.
2951         (do_new): Default to 'S'kip and never 'A'dd.
2952
2953         * jennifer (action): pass prompt to our_raw_input().
2954         * melanie (game_over): likewise.
2955         * katie (action): likewise.
2956
2957         * utils.py (our_raw_input): add an optional prompt argument to
2958         make the function more usable as a drop in replacement for
2959         raw_input().
2960
2961         * jennifer (check_files): correct reject() to not double prefix
2962         when using katie.py based functions.
2963         (check_dsc): likewise.
2964
2965         * katie.py (Katie.reject): prepend a new line if appropriate
2966         rathen than appending one to avoid double new lines when caller
2967         adds one of his own.
2968
2969         * lisa (determine_new): warn if the package is also in other
2970         components.
2971
2972 2002-02-20  James Troup  <james@nocrew.org>
2973
2974         * jennifer (check_files): if .changes file lists "source" in
2975         Architecture field, there must be a .dsc.
2976
2977 2002-02-15  James Troup  <james@nocrew.org>
2978
2979         * ashley (main): add some missing fields.
2980
2981         * katie.py (Katie.check_dsc_against_db): fix to take into account
2982         the fact that the .orig.tar.gz might be in byhand, accepted or
2983         new.  Also fix calling of reject().
2984         (Katie.check_binaries_against_db): fix calling of reject().
2985         (Katie.check_source_against_db): likewise.
2986         (Katie.dump_vars): add missing variables used for bug closures.
2987
2988         * lisa (changes_compare_by_time): sort by reverse time.
2989
2990         * katie.py (Katie.accept): log.
2991         (Katie.dump_vars): missing has_key test for optional changes fields.
2992
2993         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2994         (process_it): traceback goes to stderr, not stdout.
2995         (acknowledge_new): log.
2996         (do_byhand): likewise.
2997
2998         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2999
3000         * add_constraints.sql: add grants for the new fingerprint table.
3001
3002 2002-02-13  James Troup  <james@nocrew.org>
3003
3004         * katie (do_reject): basename the .changes filename before trying
3005         to use it to construct the .reason filename.
3006         (process_it): call Katie.update_subst() so do_reject() DTRT with
3007         the mail template.
3008         (do_reject): setup the mail template correctly.
3009
3010 2002-02-12  James Troup  <james@nocrew.org>
3011
3012         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3013         (check_files): don't abuse global dictionaries.
3014         (Ent): use all variables.
3015         (check_timestamps): don't abuse global dictionaries.
3016
3017         * fernanda.py: renamed to .py so lisa can import it.
3018         (check_dsc): remove unused local variables (pychecker).
3019         (display_changes): split off from check_changes.
3020
3021         * katie: rewritten; most of the functionality moves to jennifer;
3022         what's left is the code to install packages once a day from the
3023         'accepted' directory.
3024
3025         * jennifer: new program, processes packages in 'unchecked'
3026         (i.e. most of the non-install functionality of old katie).
3027
3028         * katie.py: common functions shared between the clique of
3029         jennifer, lisa and katie.
3030
3031         * lisa: new program; handles NEW and BYHAND packages.
3032
3033         * jeri (usage): new function.
3034         (main): use it.
3035         (check_package): remove unused local variable (pychecker).
3036
3037         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3038         binaries and source.  Add install_date to source.
3039
3040         * halle (usage): new function.
3041         (main): use it.  Remove unused options.
3042         (check_changes): remove unused local variable (pychecker).
3043
3044         * add_constraints.sql: add fingerprint references.
3045
3046         * db_access.py (get_or_set_fingerprint_id): new function.
3047
3048         * ashley (main): new program; dumps the contents of a .katie file
3049         to stdout.
3050
3051         * alyson (main): remove option handling since we don't actually
3052         support any.
3053         * cindy (main): likewise.
3054
3055         * remove unnecessary imports and pre-define globals (pychecker).
3056
3057 2002-02-11  Anthony Towns  <ajt@debian.org>
3058
3059         * added installation-report and upgrade-report pseudo-packages
3060
3061 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3062
3063         * katie (update_subst): use Dinstall::TrackingServer.
3064         * melanie (main): likewise.
3065
3066 2002-01-27  James Troup  <james@nocrew.org>
3067
3068         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3069         noticing, jgg@ for fix.
3070
3071 2002-01-19  James Troup  <james@nocrew.org>
3072
3073         * utils.py (extract_component_from_section): handle non-US
3074         non-main properly.
3075
3076 2002-01-12  James Troup  <james@nocrew.org>
3077
3078         * madison: add support for -S/--source-and-binary which displays
3079         information for the source package and all it's binary children.
3080
3081 2002-01-13  Anthony Towns  <ajt@debian.org>
3082
3083         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3084         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3085           and 2002 key ids.
3086         * katie.conf-non-US: Likewise.
3087         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3088           multiple keys automatically. This is probably only useful for
3089           transitioning from an expired (or revoked?) key.
3090
3091 2002-01-08  Ryan Murray  <rmurray@debian.org>
3092
3093         * debian/python-dep: new file that prints out python:Depends for
3094           substvars
3095         * debian/control: use python:Depends, build-depend on python
3096           lower Depends: on postgresql to Suggests:
3097         * debian/rules: determine python version, install to the correct
3098           versioned dir
3099
3100 2001-12-18  Anthony Towns  <ajt@debian.org>
3101
3102         * ziyi: unlink Release files before overwriting them (in case they've
3103           been merged)
3104         * ziyi: always include checksums/sizes for the uncompressed versions
3105           of Sources and Packages, even if they're not present on disk
3106
3107 2001-11-26  Ryan Murray  <rmurray@debian.org>
3108
3109         * ziyi (main): add SigningPubKey config option
3110         * katie.conf: use SigningPubKey config option
3111         * katie.conf-non-US: likewise
3112
3113 2001-11-24  James Troup  <james@nocrew.org>
3114
3115         * katie (acknowledge_new): log newness.
3116
3117 2001-11-24  Anthony Towns  <ajt@debian.org>
3118
3119         * ziyi (real_arch): bail out if some moron forgot to reset
3120         untouchable on stable.
3121         (real_arch): source Release files.
3122
3123 2001-11-19  James Troup  <james@nocrew.org>
3124
3125         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3126         utils.get_conf().
3127         * shania (main): likewise.
3128
3129         * rhona (main): add default options.
3130
3131         * db_access.py (get_archive_id): case independent.
3132
3133         * katie (action): sort files so that ordering is consistent
3134         between mails; noticed/requested by Joey.
3135
3136 2001-11-17  Ryan Murray  <rmurray@debian.org>
3137
3138         * utils.py: add get_conf function, change startup code to read all
3139           config files to the Cnf that get_conf returns
3140           use the component list from the katie conf rather than the hardcoded
3141           list.
3142         * all scripts: use new get_conf function
3143         * shania: fix try/except around changes files
3144         * jenna: only do debian-installer if it is a section in Cnf
3145
3146 2001-11-16  Ryan Murray  <rmurray@debian.org>
3147
3148         * shania (main): Initialize days to a string of a number.
3149                  (main): Initialize Cnf vars before reading in Cnf
3150
3151 2001-11-14  Ryan Murray  <rmurray@debian.org>
3152
3153         * shania (main): Initialize days to a number.
3154
3155 2001-11-04  James Troup  <james@nocrew.org>
3156
3157         * docs/Makefile: use docbook-utils' docbook2man binary.
3158
3159         * Change all "if foo == []" constructs into "if not foo".
3160
3161         * katie (check_changes): when installing into stable from
3162         proposed-updates, remove all non-stable target distributions.
3163         (check_override): don't check for override disparities on stable
3164         installs.
3165         (stable_install): update install_bytes appropriately.
3166         (reject): stable rejection support; i.e. don't remove files when
3167         rejecting files in the pool, rather remove them from the
3168         proposed-update suite instead, rhona will do the rest.
3169         (manual_reject): support for a stable specific template.
3170         (main): setup up stable rejector in subst.
3171
3172 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3173
3174         * debian/control (Build-Depends): docbook2man has been superseded
3175         by docbook-utils.
3176
3177         * neve (main): exit with a more useful error message.
3178         (update_suites): Suite::<suite>::Version, Origin and Description
3179         are not required, so don't fail if they don't exist.
3180
3181         * db_access.py (get_archive_id): return -1 on error rather than
3182         raise an exception.
3183         (get_location_id): likewise.
3184
3185         * madison (main): don't exit on the first not-found package,
3186         rather exit with an appropriate return code after processing all
3187         packages.
3188
3189 2001-11-03  James Troup  <james@nocrew.org>
3190
3191         * claire.py (find_dislocated_stable): add per-architecture
3192         symlinks for dislocated architecture: all debs.
3193
3194 2001-10-19  Anthony Towns  <ajt@debian.org>
3195
3196         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3197
3198 2001-10-10  Anthony Towns  <ajt@debian.org>
3199
3200         * claire.py (fix_component_section): do _not_ assign to None under
3201         any circumstances
3202
3203 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3204
3205         * melanie (main): don't duplicate architectures when removing from
3206         more than one suite.
3207
3208         * heidi (main, process_file, get_list): report suite name not ID.
3209
3210         * naima (nmu_p): be case insensitive.
3211
3212         * naima (action): more list handling clean ups.
3213
3214         * melanie (main): clean up lists handling to use string.join and
3215         IN's.
3216
3217         * madison (main): clean up suite and architecture argument parsing
3218         to use slices less and string.join more.
3219
3220         * utils.py (parse_changes): Use string.find() instead of slices for
3221         string comparisons thereby avoid hardcoding the length of strings.
3222         * ziyi (main): likewise.
3223
3224 2001-10-07  James Troup  <james@nocrew.org>
3225
3226         * Remove mode argument from utils.open_files() calls if it's the
3227         default, i.e. 'r'.
3228
3229 2001-09-27  James Troup  <james@nocrew.org>
3230
3231         * katie (init): new function; options clean up.
3232         (usage): add missing options, remove obsolete ones.
3233         (main): adapt for the two changes above.  If the lock file or
3234         new-ack log file don't exist, create them.  Don't try to open the
3235         new-ack log file except running in new-ack mode.
3236
3237         * alyson (main): initialize all the tables that are based on the
3238         conf file.
3239
3240         * utils.py (touch_file): like touch(1).
3241         (where_am_i): typo.
3242
3243         * catherine (usage): new.
3244         (main): use it.  options cleanup.
3245         * claire.py: likewise.
3246         * fernanda: likewise.
3247         * heidi: likewise.
3248         * jenna: likewise.
3249         * shania: likewise.
3250         * ziyi: likewise.
3251
3252         * andrea: options cleanup.
3253         * charisma: likewise.
3254         * julia: likewise.
3255         * madison: likewise.
3256         * melanie: likewise.
3257         * natalie: likewise.
3258         * rhona: likewise.
3259         * tea: likewise.
3260
3261 2001-09-26  James Troup  <james@nocrew.org>
3262
3263         * utils.py: default to sane config file locations
3264         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3265         or they can point to the real ones through use of a new Config
3266         section.  Based on an old patch by Adam Heath.
3267         (where_am_i): use the new default config stuff.
3268         (which_conf_file): likewise.
3269         (which_apt_conf_file): likewise.
3270
3271         * charisma (main): output defaults to
3272         `Package~Version\tMaintainer'; input can be of either form.  When
3273         parsing the new format do version comparisons, when parsing the
3274         old format assume anything in the extra file wins.  This fixes the
3275         problem of newer non-US packages being overwhelmed by older
3276         versions still in stable on main.
3277
3278 2001-09-17  James Troup  <james@nocrew.org>
3279
3280         * natalie.py (list): use result_join().
3281
3282         * denise (main): result_join() moved to utils.
3283
3284         * utils.py (result_join): move to utils; add an optional seperator
3285         argument.
3286
3287 2001-09-14  James Troup  <james@nocrew.org>
3288
3289         * heidi (set_suite): new function; does --set like natalie does,
3290         i.e. turns it into a sequence of --add's and --remove's
3291         internally.  This is a major win (~20 minute run time > ~20
3292         seconds) in the common, everday (i.e. testing) case.
3293         (get_id): common code used by set_suite() and process_file().
3294         (process_file): call set_suite() and get_id().
3295         (main): add logging support.
3296
3297         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3298         files.
3299
3300         * utils.py (parse_changes): use slices or simple string comparison
3301         in favour of regexes where possible.
3302
3303         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3304         fact that the string VARDATA() points to are not null terminated.
3305
3306         * denise (result_join): new function; like string.join() but
3307         handles None's.
3308         (list): use it.
3309         (main): likewise.
3310
3311         * charisma (main): python-pygresql 7.1 returns None not "".
3312
3313 2001-09-14  Ryan Murray  <rmurray@debian.org>
3314
3315         * natalie.py (list): handle python-pygresql 7.1 returning None.
3316
3317 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3318
3319         * madison (main): return 1 if no package is found.
3320
3321 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3322
3323         * madison (main): better error handling for incorrect
3324         -a/--architecture or -s/--suite arguments.
3325         (usage): new.
3326         (main): use it.
3327
3328 2001-09-05  Ryan Murray  <rmurray@debian.org>
3329
3330         * charisma, madison, katie: remove use of ROUser
3331         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3332
3333 2001-08-26  James Troup  <james@nocrew.org>
3334
3335         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3336         maintained packages at cjwatson@'s request.
3337
3338 2001-08-21  James Troup  <james@nocrew.org>
3339
3340         * madison (main): add -a/--architecture support.
3341
3342         * jenna: use logging instead of being overly verbose on stdout.
3343
3344 2001-08-11  Ryan Murray  <rmurray@debian.org>
3345
3346         * melanie: add functional help option
3347
3348 2001-08-07  Anthony Towns  <ajt@debian.org>
3349
3350         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3351
3352 2001-07-28  James Troup  <james@nocrew.org>
3353
3354         * katie (check_dsc): ensure source version is >> than existing
3355         source in target suite.
3356
3357 2001-07-25  James Troup  <james@nocrew.org>
3358
3359         * natalie.py: add logging support.
3360
3361         * utils.py (open_file): make the second argument optional and
3362         default to read-only.
3363
3364         * rene (main): work around broken source packages that duplicate
3365         arch: all packages with arch: !all packages (no longer allowed
3366         into the archive by katie).
3367
3368 2001-07-13  James Troup  <james@nocrew.org>
3369
3370         * katie (action): don't assume distribution is a dictionary.
3371         (update_subst): don't assume architecture is a dictionary and that
3372         maintainer822 is defined.
3373         (check_changes): recognise nk_format exceptions.
3374         (check_changes): reject on 'testing' only uploads.
3375         (check_files): when checking to ensure all packages are newer
3376         versions check against arch-all packages too.
3377         (check_dsc): enforce the existent of a sane set of mandatory
3378         fields.  Ensure the version number in the .dsc (modulo epoch)
3379         matches the version number in the .changes file.
3380
3381         * utils.py (changes_compare): ignore all exceptions when parsing
3382         the changes files.
3383         (build_file_list): don't UNDEF on a changes file with no format
3384         field.
3385
3386 2001-07-07  James Troup  <james@nocrew.org>
3387
3388         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3389         rather than 'changedbyname' to avoid false negatives on uploads
3390         with an email-address-only Changed-By field.
3391         (check_dsc): don't overwrite reject_message; append to it.
3392         (check_signature): likewise.
3393         (check_changes): likewise.
3394         (announce): condition logging on 'action'.
3395
3396         * logging.py: new logging module.
3397
3398         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3399         sub-tree into a separate (global) variable.
3400         (check_dsc): ensure format is 1.0 to retain backwards
3401         compatability with dpkg-source in potato.
3402         (main): only try to obtain the lock when not running in no-action
3403         mode.
3404         Use the new logging module.
3405
3406         * christina: initial version; only partially usable.
3407
3408 2001-06-28  Anthony Towns  <ajt@debian.org>
3409
3410         * apt.conf: Add ExtraOverrides to auric.
3411
3412 2001-06-25  James Troup  <james@nocrew.org>
3413
3414         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3415         they preferred the name 'Uploaders'.
3416
3417 2001-06-23  James Troup  <james@nocrew.org>
3418
3419         * katie (check_files): fix typo in uncommon rejection message,
3420         s/sourceversion/source version/.
3421
3422         * denise (main): we can't use print because stdout has been
3423         redirected.
3424
3425         * katie (source_exists): new function; moved out of check_files()
3426         and added support for binary-only NMUs of earlier sourceful NMUs.
3427
3428         * rhona (clean): find_next_free has moved.
3429
3430         * utils.py (find_next_free): new function; moved here from rhona.
3431         Change too_many to be an argument with a default value, rather
3432         than a hardcoded variable.
3433
3434         * shania: rewritten to work better; REJECTion reminder mail
3435         handling got lost though.
3436
3437 2001-06-22  James Troup  <james@nocrew.org>
3438
3439         * rhona (main): remove unused override code.
3440
3441         * fernanda (main): remove extraneous \n's from utils.warn calls.
3442         * natalie.py (list): likewise.
3443
3444         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3445         use utils.{warn,fubar} where appropriate.
3446
3447 2001-06-21  James Troup  <james@nocrew.org>
3448
3449         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3450         functionality.
3451         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3452         by the "Maintainers" field in the .dsc file and maintainer groups.
3453         (nmu_p.__init__): read in the list of group maintainer names.
3454         (announce): use nmu_p.
3455
3456 2001-06-20  James Troup  <james@nocrew.org>
3457
3458         * rene (main): hardcode the suite experimental is compared to by
3459         name rather than number.
3460
3461         * katie (check_files): differentiate between doesn't-exist and
3462         permission-denied in "can not read" rejections; requested by edd@.
3463         (check_dsc): use os.path.exists rather than os.access to allow the
3464         above check to kick in.
3465
3466         * heidi (process_file): read all input before doing anything and
3467         use transactions.
3468
3469 2001-06-15  James Troup  <james@nocrew.org>
3470
3471         * fernanda: new script; replaces old 'check' shell script
3472         nastiness.
3473
3474 2001-06-14  James Troup  <james@nocrew.org>
3475
3476         * katie: actually import traceback module to avoid amusing
3477         infinite loop.
3478
3479 2001-06-10  James Troup  <james@nocrew.org>
3480
3481         * utils.py (extract_component_from_section): fix to handle just
3482         'non-free' and 'contrib'.  Also fix to handle non-US in a
3483         completely case insensitive manner as a component.
3484
3485 2001-06-08  James Troup  <james@nocrew.org>
3486
3487         * madison (arch_compare): sort function that sorts 'source' first
3488         then alphabetically.
3489         (main): use it.
3490
3491 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3492
3493         * catherine (poolize): explicitly make poolized_size a long so it
3494         doesn't overflow when poolizing e.g. entire archives.
3495
3496 2001-06-01  James Troup  <james@nocrew.org>
3497
3498         * utils.py (send_mail): throw exceptions rather than exiting.
3499
3500         * katie (process_it): catch exceptions and ignore them.
3501
3502 2001-06-01  Michael Beattie  <mjb@debian.org>
3503
3504         * added update-mailingliststxt and update-readmenonus to update
3505         those files, respectively. modified cron.daily{,-non-US} to
3506         use them.
3507
3508 2001-05-31  Anthony Towns  <ajt@debian.org>
3509
3510         * rhona: make StayOfExecution work.
3511
3512 2001-05-31  James Troup  <james@nocrew.org>
3513
3514         * rhona (find_next_free): fixes to not overwrite files but rename
3515         them by appending .<n> instead.
3516         (clean): use find_next_free and use dated sub-directories in the
3517         morgue.
3518
3519         * utils.py (move): don't overwrite files unless forced to.
3520         (copy): likewise.
3521
3522 2001-05-24  James Troup  <james@nocrew.org>
3523
3524         * katie (check_files): determine the source version here instead
3525         of during install().
3526         (check_files): check for existent source with bin-only NMU
3527         support.
3528         (main): sort the list of changes so that the source-must-exist
3529         check Does The Right Thing(tm).
3530
3531         * utils.py (changes_compare): new function; sorts a list of
3532         changes files by 'have-source', source, version.
3533         (cc_fix_changes): helper function.
3534         (parse_changes): use compiled regexes.
3535         (fix_maintainer): likewise.
3536
3537         * rene (main): warn about packages in experimental that are
3538         superseded by newer versions in unstable.
3539
3540 2001-05-21  James Troup  <james@nocrew.org>
3541
3542         * rene (main): add support for checking for ANAIS (Architecture
3543         Not Allowed In Source) packages.
3544
3545 2001-05-17  James Troup  <james@nocrew.org>
3546
3547         * katie (check_changes): initalize `architecture' dictionary in
3548         changes global so that if we can't parse the changes file for
3549         whatever reason we don't undef later on.
3550
3551         * utils.py (parse_changes): fix handling of multi-line fields
3552         where the first line did have data.
3553
3554 2001-05-05  Anthony Towns  <ajt@debian.org>
3555
3556         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3557         (It should always have been there. Ooopsy.)
3558
3559 2001-05-03  Anthony Towns  <ajt@debian.org>
3560
3561         * jenna: Cleanup packages that move from arch:any to arch:all or
3562         vice-versa.
3563
3564 2001-04-24  Anthony Towns  <ajt@debian.org>
3565
3566         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3567         cope with debian-installer and boot-floppies' md5sum.txt.
3568
3569 2001-04-16  James Troup  <james@nocrew.org>
3570
3571         * katie (check_changes): add missing %s format string argument.
3572         (stable_install): temporary work around for morgue location to
3573         move installed changes files into.
3574         (stable_install): helps if you actually read in the template.
3575         (manual_reject): fix for editing of reject messages which was
3576         using the wrong variable name.
3577
3578         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3579
3580 2001-04-13  James Troup  <james@nocrew.org>
3581
3582         * katie (manual_reject): Cc the installer.
3583         (reject): don't.
3584         (check_changes): remove unused maintainer-determination code.
3585         (update_subst): add support for Changed-By when setting the
3586         *MAINTAINER* variables.
3587
3588         * rene (bar): new function to check for packages on architectures
3589         when they shouldn't be.
3590
3591         * natalie.py (main): use fubar() and warn() from utils.
3592
3593         * utils.py (whoami): new mini-function().
3594         * melanie (main): use it.
3595         * katie (manual_reject): likewise.
3596
3597 2001-04-03  James Troup  <james@nocrew.org>
3598
3599         * katie (action): ignore exceptions from os.path.getmtime() so we
3600         don't crash on non-existent changes files (e.g. when they are
3601         moved between the start of the install run in cron.daily and the
3602         time we get round to processing them).
3603
3604         * madison (main): also list source and accept -s/--suite.
3605
3606         * jenna (generate_src_list): missing \n in error message.
3607
3608         * katie (update_subst): add sane defaults for when changes is
3609         skeletal.
3610
3611 2001-03-29  James Troup  <james@nocrew.org>
3612
3613         * melanie (main): use fubar() and warn() from utils.  Remember who
3614         the maintainer for the removed packages are and display that info
3615         to the user.  Readd support for melanie-specific Bcc-ing that got
3616         lost in the TemplateSubst transition.
3617
3618         * utils.py (fubar): new function.
3619         (warn): like wise.
3620
3621         * db_access.py (get_maintainer): as below.
3622
3623         * charisma (get_maintainer): moved the bulk of this function to
3624         db_access so that melanie can use it too.
3625
3626         * claire.py (find_dislocated_stable): restrict the override join
3627         to those entries where the suite is stable; this avoids problems
3628         with packages which have moved to new sections (e.g. science)
3629         between stable and unstable.
3630
3631 2001-03-24  James Troup  <james@nocrew.org>
3632
3633         * catherine (poolize): new function; not really independent of
3634         main() fully, yet.
3635         (main): use it.
3636
3637         * katie (stable_install): __SUITE__ needs to be space prefixed
3638         because buildd's check for 'INSTALLED$'.
3639
3640 2001-03-22  James Troup  <james@nocrew.org>
3641
3642         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3643
3644         * jenna: rewritten; now does deletions on a per-suite level
3645         instead of a per-suite-component-architecture-type level.  This
3646         allows mutli-component packages to be auto-cleaned (and as a
3647         bonus, reduces the code size and duplication).
3648
3649 2001-03-22  Anthony Towns  <ajt@debian.org>
3650
3651         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3652         instead of just giving a gpg error.
3653
3654 2001-03-21  James Troup  <james@nocrew.org>
3655
3656         * madison (main): use apt_pkg.VersionCompare to sort versions so
3657         that output is correctly sorted for packages like debhlper.
3658         Noticed by ajt@.
3659
3660         * tea (check_source_in_one_dir): actually find problematic source
3661         packages.
3662
3663         * katie (check_dsc): remember the orig.tar.gz's location ID if
3664         it's not in a legacy suite.
3665         (check_diff): we don't use orig_tar_id.
3666         (install): add code to handle sourceful diff-only upload of
3667         packages which change components by copying the .orig.tar.gz into
3668         the new component, if it doesn't already exist there.
3669         (process_it): reset orig_tar_location (as above).
3670
3671         * melanie (main): use template substiution for the bug closing
3672         emails.
3673         (main): don't hardcode bugs.debian.org or packages.debian.org
3674         either; use configuration items.
3675
3676         * katie: likewise.
3677
3678         * natalie.py (init): use None rather than 'localhost' for the
3679         hostname given to pg.connect.
3680
3681         * utils.py (TemplateSubst): new function; lifted from
3682         userdir-ldap.
3683
3684 2001-03-21  Ryan Murray  <rmurray@debian.org>
3685
3686         * katie (announce): fix the case of non-existent
3687         Suite::$SUITE::Announce.
3688
3689 2001-03-20  Ryan Murray  <rmurray@debian.org>
3690
3691         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3692         /usr/.
3693
3694         * alyson (main): use config variable for database name.
3695         * andrea (main): likewise.
3696         * catherine (main): likewise.
3697         * charisma (main): likewise.
3698         * cindy (main): likewise.
3699         * claire.py (main): likewise.
3700         * denise (main): likewise.
3701         * heidi (main): likewise.
3702         * jenna (main): likewise.
3703         * katie (main): likewise.
3704         * madison (main): likewise.
3705         * melanie (main): likewise.
3706         * neve (main): likewise.
3707         * rhona (main): likewise.
3708         * tea (main): likewise.
3709
3710 2001-03-15  James Troup  <james@nocrew.org>
3711
3712         * rhona (check_sources): fixed evil off by one (letter) error
3713         which was causing only .dsc files to be deleted when cleaning
3714         source packages.
3715
3716         * charisma (get_maintainer_from_source): remove really stupid and
3717         gratuitous IN sub-query and replace with normal inner join.
3718         (main): connect as read-only user nobody.
3719
3720         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3721         with EXISTS.
3722         (check_files): likewise; still disabled by default though.
3723         (clean_binaries): add ' seconds' to the mysterious number in the
3724         output.
3725         (clean): likewise.
3726
3727         * tea (check_files): add missing global declaration on db_files.
3728
3729 2001-03-14  James Troup  <james@nocrew.org>
3730
3731         * rhona: rewritten large chunks. Removed a lot of the silly
3732         selecting into dictionaries and replaced it with 'where exists'
3733         based sub queries.  Added support for StayOfExecution.  Fix the
3734         problem with deleting dsc_files too early and disable cleaning of
3735         unattached files.
3736
3737 2001-03-14  Anthony Towns  <ajt@debian.org>
3738
3739         * katie (announce): also check Changed-By when trying to detect
3740         NMUs.
3741
3742 2001-03-06  Anthony Towns  <ajt@debian.org>
3743
3744         * ziyi (main): Generate Release.gpg files as well, using the key from
3745         Dinstall::SigningKey in katie.conf, if present. That key has to be
3746         passwordless, and hence kept fairly secretly.
3747
3748 2001-03-02  James Troup  <james@nocrew.org>
3749
3750         * utils.py (str_isnum): new function; checks to see if the string
3751         is a number.
3752
3753         * shania (main): fix _hideous_ bug which was causing all files > 2
3754         weeks old to be deleted from incoming, even if they were part of a
3755         valid upload.
3756
3757 2001-02-27  James Troup  <james@nocrew.org>
3758
3759         * melanie (main): accept new argument -C/--carbon-copy which
3760         allows arbitarty carbon-copying of the bug closure messages.
3761         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3762         separate variable.
3763
3764 2001-02-27  Anthony Towns  <ajt@debian.org>
3765
3766         * ziyi: new program; generates Release files.
3767
3768 2001-02-25  James Troup  <james@nocrew.org>
3769
3770         * katie (reject): add missing '\n' to error message.
3771         (manual_reject): likewise.
3772         (install): catch exceptions from moving the changes file into DONE
3773         and ignore them.
3774
3775         * tea (check_md5sums): new function.
3776
3777 2001-02-25  Michael Beattie  <mjb@debian.org>
3778
3779         * melanie: use $EDITOR if available.
3780
3781 2001-02-15  James Troup  <james@nocrew.org>
3782
3783         * utils.py (parse_changes): don't crash and burn on empty .changes
3784         files.  Symptoms noticed by mjb@.
3785
3786 2001-02-15  Adam Heath  <doogie@debian.org>
3787
3788         * denise (main): use an absolute path for the output filename.
3789
3790         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3791         compile errors with postgresql-dev >= 7.0.
3792
3793 2001-02-12  James Troup  <james@nocrew.org>
3794
3795         * rene: initial version.
3796
3797         * andrea: initial version.
3798
3799         * catherine (main): remove obsolete assignment of arguments.
3800
3801 2001-02-09  James Troup  <james@nocrew.org>
3802
3803         * catherine: first working version.
3804
3805 2001-02-06  James Troup  <james@nocrew.org>
3806
3807         * katie (check_files): validate the priority field; i.e. ensure it
3808         doesn't contain a '/' (to catch people prepending the priority
3809         with the component rather than the section).
3810         (check_override): don't warn about source packages; the only check
3811         is on section and we have no GUI tools that would use the Section
3812         field for a Sources file.
3813         (announce): use tags rather than severities for NMUs.  Requested
3814         by Josip Rodin <joy@>. [#78035]
3815
3816 2001-02-04  James Troup  <james@nocrew.org>
3817
3818         * tea (check_override): new function; ensures packages in suites
3819         are also in the override file.  Thanks to bod@ for noticing that
3820         such packages existed.
3821
3822         * katie: move file type compiled regular expressions to utils as
3823         catherine uses them too.
3824         (check_changes): always default maintainer822 to the installer
3825         address so that any bail out won't cause undefs later.
3826         (check_files): update file type re's to match above.
3827         (stable_install): likewise.
3828         (reject): handle any except from moving the changes files.  Fixes
3829         crashes on unreadable changes files.
3830
3831         * melanie (main): add an explanation of why things are not removed
3832         from testing.
3833
3834 2001-01-31  James Troup  <james@nocrew.org>
3835
3836         * melanie (main): ignore a) no message, b) removing from stable or
3837         testing when invoked with -n/--no-action.
3838
3839         * katie (check_override): lower section before checking to see if
3840         we're whining about 'non-US' versus 'non-US/main'.
3841
3842         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3843         function so that we can use inside of PostgreSQL.
3844
3845 2001-01-28  James Troup  <james@nocrew.org>
3846
3847         * katie: updated to pass new flag to parse_changes() and deal with
3848         the exception raised on invalid .dsc's if appropriate.
3849         * shania (main): likewise.
3850         * melanie (main): likewise.
3851
3852         * tea (check_dscs): new function to validate all .dsc files in
3853         unstable.
3854
3855         * utils.py (parse_changes): if passed an additional flag, validate
3856         the .dsc file to ensure it's extractable by dpkg-source.
3857         Requested by Ben Collins <bcollins@>.
3858
3859 2001-01-27  James Troup  <james@nocrew.org>
3860
3861         * madison (main): connect to the DB as nobody.
3862
3863         * katie (check_files): remove support for -r/--no-version-check
3864         since it makes no sense under katie (jenna will automatically
3865         remove the (new) older version) and was evil in any event.
3866         (check_changes): add missing new line to rejection message.
3867         (check_dsc): likewise.
3868         (process_it): reset reject_message here.
3869         (main): not here.  Also remove support for -r.
3870
3871 2001-01-26  James Troup  <james@nocrew.org>
3872
3873         * katie (check_override): don't whine about 'non-US/main' versus
3874         'non-US'.
3875
3876 2001-01-26  Michael Beattie  <mjb@debian.org>
3877
3878         * natalie.py (usage): new function.
3879         (main): use it.
3880
3881 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3882
3883         * update-mirrorlists: Update README.non-US too (request from Joy).
3884
3885 2001-01-25  James Troup  <james@nocrew.org>
3886
3887         * katie (reject): catch any exception from utils.move() and just
3888         pass, we previously only caught can't-overwrite errors and not
3889         can't-read ones.
3890
3891         * jenna (generate_src_list): use ORDER BY in selects to avoid
3892         unnecessary changes to Packages files.
3893         (generate_bin_list): likewise.
3894
3895         * utils.py (extract_component_from_section): separated out from
3896         build_file_list() as it's now used by claire too.
3897
3898         * claire.py (find_dislocated_stable): rewrite the query to extract
3899         section information and handle component-less locations properly.
3900         Thanks to ajt@ for the improved queries.
3901         (fix_component_section): new function to fix components and
3902         sections.
3903
3904 2001-01-23  James Troup  <james@nocrew.org>
3905
3906         * katie (check_files): set file type for (u?)debs first thing, so
3907         that if we continue, other functions which rely on file type
3908         existing don't bomb out.  If apt_pkg or apt_inst raise an
3909         exception when parsing the control file, don't try any other
3910         checks, just drop out.
3911         (check_changes): new test to ensure there is actually a target
3912         distribution.
3913
3914 2001-01-22  James Troup  <james@nocrew.org>
3915
3916         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3917         <grin@>.
3918         (check_changes): when mapping to unstable, remember to actually
3919         add unstable to the suite list and not just remove the invalid
3920         suite.
3921
3922 2001-01-21  James Troup  <james@nocrew.org>
3923
3924         * katie (check_files): catch exceptions from debExtractControl()
3925         and reject packages which raise any.
3926
3927 2001-01-19  James Troup  <james@nocrew.org>
3928
3929         * katie (check_signature): basename() file name in rejection
3930         message.
3931
3932 2001-01-18  James Troup  <james@nocrew.org>
3933
3934         * katie (in_override_p): remember the section and priority from
3935         the override file so we can check them against the package later.
3936         (check_override): new function; checks section and priority (for
3937         binaries) from the package against the override file and mails the
3938         maintainer about any disparities.
3939         (install): call check_override after announcing the upload.
3940
3941 2001-01-16  James Troup  <james@nocrew.org>
3942
3943         * utils.py (build_file_list): catch ValueError's from splitting up
3944         the files field and translate it into a parse error.
3945
3946         * tea: add support for finding unreferenced files.
3947
3948         * katie (in_override_p): add support for suite-aliasing so that
3949         proposed-updates uploads work again.
3950         (check_changes): catch parses errors from utils.build_file_list().
3951         (check_dsc): likewise.
3952         (check_diff): yet more dpkg breakage so we require even newer a
3953         version.
3954
3955         * jenna (generate_bin_list): don't do nasty path munging that's no
3956         longer needed.
3957
3958         * denise (main): support for non-US; and rename testing's override
3959         files so they're based on testing's codename.
3960
3961 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3962
3963         * melanie: add to the bug closing message explaining what happens
3964         (or rather doesn't) with bugs against packages that have been
3965         removed.
3966
3967 2001-01-14  James Troup  <james@nocrew.org>
3968
3969         * charisma (main): fix silly off-by-one error; suite priority
3970         checking was done using "less than" rather than "less than or
3971         equal to" which was causing weird hesienbugs with wrong Maintainer
3972         fields.
3973
3974 2001-01-10  James Troup  <james@nocrew.org>
3975
3976         * katie (in_override_p): adapted to use SQL-based overrides.
3977         read_override_file function disappears.
3978
3979         * db_access.py: add new functions get_section_id, get_priority_id
3980         and get_override_type_id.
3981         (get_architecture_id): return -1 if the architecture is not found.
3982
3983         * heidi: switch %d -> %d in all SQL queries.
3984         (get_list): Use string.join where appropriate.
3985
3986         * rhona (in_override_p): don't die if the override file doesn't
3987         exist.
3988         (main): warn if the override file doesn't exist.
3989
3990         * alyson: new script; will eventually sync the config file and the
3991         SQL database.
3992
3993         * natalie.py: new script; manipulates overrides.
3994
3995         * melanie: new script; removes packages from suites.
3996
3997 2001-01-08  James Troup  <james@nocrew.org>
3998
3999         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4000         anything it just changed the symptom.  Recognise the new breakage
4001         and reject them too.
4002
4003 2001-01-07  James Troup  <james@nocrew.org>
4004
4005         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4006         to the .changes file, be sure to set up files[filename]["type"]
4007         too.
4008
4009 2001-01-06  James Troup  <james@nocrew.org>
4010
4011         * katie (check_diff): new function; detects bad diff files
4012         produced by dpkg 1.8.1 and rejects thems.
4013         (process_it): call check_diff().
4014         (check_dsc): gar.  Add support for multiple versions of the
4015         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4016         and size against all versions and use one which matches if
4017         possible and exclude any that don't from being poolized to avoid
4018         file overwrites.  Thanks to broonie@ for providing the example.
4019         (install): skip any files marked as excluded as above.
4020
4021 2001-01-05  James Troup  <james@nocrew.org>
4022
4023         * heidi (process_file): add missing argument to error message.
4024
4025 2001-01-04  James Troup  <james@nocrew.org>
4026
4027         * heidi (main): fix handling of multiple files by reading all
4028         files not just the first file n times (where n = the number of
4029         files passed as arguments).
4030
4031 2001-01-04  Anthony Towns  <ajt@debian.org>
4032
4033         * katie (check_dsc): proper fix for the code which locates the
4034         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4035
4036 2000-12-20  James Troup  <james@nocrew.org>
4037
4038         * rhona: replace IN's with EXISTS's to make DELETE time for
4039         binaries and source sane on auric.  Add a -n/--no-action flag and
4040         make it stop actions if used.  Fixed a bug in binaries deletion
4041         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4042         -V/--version.  Giving timing info on deletion till I'm sure it's
4043         sane.
4044
4045         * katie (check_changes): map testing to unstable.
4046
4047         * madison: new script; shows versions in different architectures.
4048
4049         * katie (check_dsc): ensure size matches as well as md5sum;
4050         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4051         #69702.
4052
4053 2000-12-19  James Troup  <james@nocrew.org>
4054
4055         * katie (reject): ignore the "can't overwrite file" exception from
4056         utils.move() and leave the files where they are.
4057         (reject): doh! os.access() test was reversed so we only tried to
4058         move files which didn't exist... replaced with os.path.exists()
4059         test the right way round.
4060
4061         * utils.py (move): raise an exception if we can't overwrite the
4062         destination file.
4063         (copy): likewise.
4064
4065 2000-12-18  James Troup  <james@nocrew.org>
4066
4067         * rhona: first working version.
4068
4069         * db_access.py (get_files_id): force both sizes to be integers.
4070
4071         * katie (main): use size_type().
4072
4073         * utils.py (size_type): new function; pretty prints a file size.
4074
4075 2000-12-17  James Troup  <james@nocrew.org>
4076
4077         * charisma (main): do version compares so that older packages do
4078         not override newer ones and process source first as source wins
4079         over binaries in terms of who we think of as the Maintainer.
4080
4081 2000-12-15  James Troup  <james@nocrew.org>
4082
4083         * katie (install): use the files id for the .orig.tar.gz from
4084         check_dsc().
4085         (install): limit select for legacy source to a) source in legacy
4086         or legacy-mixed type locations and b) distinct on files.id.
4087         (install): rather than the bizarre insert new, delete old method
4088         for moving legacy source into the pool, use a simple update of
4089         files.
4090         (process_it): initalize some globals before each process.
4091
4092 2000-12-14  James Troup  <james@nocrew.org>
4093
4094         * katie (in_override_p): index on binary_type too since .udeb
4095         overrides are in a different file.
4096         (read_override_file): likewise.
4097         (check_files): correct filename passed to get_files_id().
4098         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4099         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4100         (check_dsc): remember the files id of the .orig.tar.gz, not the
4101         location id.
4102
4103 2000-12-13  James Troup  <james@nocrew.org>
4104
4105         * utils.py (poolify): force the component to lower case except for
4106         non-US.
4107
4108         * katie (in_override_p): handle .udeb-specific override files.
4109         (check_files): pass the binary type to in_override_p().
4110         (check_dsc): remember the location id of the old .orig.tar.gz in
4111         case it's not in the pool.
4112         (install): use location id from dsc_files; which is where
4113         check_dsc() puts it for old .orig.tar.gz files.
4114         (install): install files after all DB work is complete.
4115         (reject): basename() the changes filename.
4116         (manual_reject): likewise.
4117
4118         * shania: new progam; replaces incomingcleaner.
4119
4120 2000-12-05  James Troup  <james@nocrew.org>
4121
4122         * katie (check_changes): if inside stable and can't find files
4123         from the .changes; assume it's installed in the pool and chdir()
4124         to there.
4125         (check_files): we are not installing for stable installs, so don't
4126         check for overwriting existing files.
4127         (check_dsc): likewise.
4128         (check_dsc): reorder .orig.tar.gz handling so that we search in
4129         the pool first and only then fall back on any .orig.tar.gz in the
4130         cwd; this avoids false positives on the overwrite check when
4131         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4132         (install): if this is a stable install, bail out to
4133         stable_install() immediately.
4134         (install): dsc_files handling was horribly broken. a) we need to
4135         add files from the .dsc and not the .changes (duh), b) we need to
4136         add the .dsc file itself to dsc_files (to be consistent with neve
4137         if for no other reason).
4138         (stable_install): new function; handles installs from inside
4139         proposed-updates to stable.
4140         (acknowledge_new): basename changes_filename before doing
4141         anything.
4142         (process_it): absolutize the changes filename to avoid the
4143         requirement of being in the same directory as the .changes file.
4144         (process_it): save and restore the cwd as stable installs can
4145         potentially jump into the pool to find files.
4146
4147         * jenna: dislocated_files support using claire.
4148
4149         * heidi (process_file): select package field from binaries
4150         explicitly.
4151
4152         * db_access.py (get_files_id): fix cache key used.
4153
4154         * utils.py (build_file_list): fix 'non-US/non-free' case in
4155         section/component splitting.
4156         (move): use os.path.isdir() rather than stat.
4157         (copy): likewise.
4158
4159         * claire.py: new file; stable in non-stable munger.
4160
4161         * tea: new file; simply ensures all files in the DB exist.
4162
4163 2000-12-01  James Troup  <james@nocrew.org>
4164
4165         * katie (check_dsc): use regex_safe().
4166         (check_changes): typo in changes{} key:
4167         s/distributions/distribution/.
4168         (install): use changes["source"], not files[file]["source"] as the
4169         latter may not exist and the former is used elsewhere.  Commit the
4170         SQL transaction earlier.
4171
4172         * utils.py (regex_safe): new function; escapes characters which
4173         have meaning to SQL's regex comparison operator ('~').
4174
4175 2000-11-30  James Troup  <james@nocrew.org>
4176
4177         * katie (install): pool_location is based on source package name,
4178         not binary package.
4179
4180         * utils.py (move): if dest is a directory, append the filename
4181         before chmod-ing.
4182         (copy): ditto.
4183
4184         * katie (check_files): don't allow overwriting of existing .debs.
4185         (check_dsc): don't allow overwriting of existing source files.
4186
4187 2000-11-27  James Troup  <james@nocrew.org>
4188
4189         * katie (check_signature): don't try to load rsaref; it's
4190         obsolete.
4191         (in_override_p): don't try to lookup override entries for packages
4192         with an invalid suite name.
4193         (announce): don't assume the suite name is valid; use Find() to
4194         lookup the mailing list name for announcements.
4195
4196         * utils.py (where_am_i): typo; hostname is in the first element,
4197         not second.
4198
4199         * db_access.py (get_suite_id): return -1 on an unknown suite.
4200
4201 2000-11-26  James Troup  <james@nocrew.org>
4202
4203         * katie (install): fix CopyChanges handling; typo in in checking
4204         Cnf for CopyChanges flag and was calling non-existent function
4205         copy_file.
4206
4207         * utils.py (copy): new function; clone of move without the
4208         unlink().
4209
4210 2000-11-25  James Troup  <james@nocrew.org>
4211
4212         * utils.py (build_file_list): handle non-US prefixes properly
4213         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4214         + 'libs' not 'non-US/libs').
4215         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4216         delays.  This is possibly(/probably) exim speicifc and (like other
4217         sendmail options) needs to be in the config file.
4218
4219 2000-11-24  James Troup  <james@nocrew.org>
4220
4221         * rhona (check_sources): we need file id from dsc_files; not id.
4222         Handle non .dsc source files being re-referenced in dsc_files.
4223
4224         * katie (in_override_p): strip out any 'non-US' prefix.
4225         (check_files): use utils.where_am_i() rather than hardcoding.
4226         (check_files): validate the component.
4227         (install): use utils.where_am_i() rather than hardcoding.
4228         (install): fix mail to go to actual recepient.
4229         (reject): likewise.
4230         (manual_reject): likewise.
4231         (acknowledge_new): likewise.
4232         (announce): likewise.
4233
4234         * db_access.py (get_component_id): ignore case when searching for
4235         the component and don't crash if the component can't be found, but
4236         return -1.
4237         (get_location_id): handle -1 from get_component_id().
4238
4239         * jenna (generate_src_list): don't bring 'suite' into our big
4240         multi-table-joining select as we already know the 'suite_id'.
4241         (generate_bin_list): likewise.
4242
4243         * neve (main): don't quit if not on ftp-master.
4244         (process_packages): remove unused variable 'suite_codename'.
4245
4246         * utils.py (move): actually move the file.
4247         (build_file_list): handle non-US prefixes in the section.
4248
4249         * catherine (main): use which_conf_file().
4250         * charisma (main): likewise.
4251         * heidi (main): likewise.
4252         * jenna (main): likewise.
4253         * katie (main): likewise.
4254         * neve (main): likewise.
4255         * rhona (main): likewise.
4256
4257         * utils.py (where_am_i): new routine; determines the archive as
4258         understood by other 'dak' programs.
4259         (which_conf_file): new routine; determines the conf file to read.
4260
4261 2000-11-17  James Troup  <james@nocrew.org>
4262
4263         * katie (install): fix where .changes files for proposed-updates
4264         go.
4265
4266 2000-11-04  James Troup  <james@nocrew.org>
4267
4268         * jenna (main): handle architecture properly if no
4269         -a/--architecture argument is given, i.e. reset architecture with
4270         the values for the suite for each suite.
4271
4272         * Add apt_pkg.init() to the start of all scripts as it's now
4273         required by python-apt.
4274
4275 2000-10-29  James Troup  <james@nocrew.org>
4276
4277         * jenna (generate_bin_list): take an additional argument 'type'
4278         and use it in the SELECT.
4279         (main): if processing component 'main', process udebs and debs.
4280
4281         * neve (process_packages): set up 'type' in 'binaries' (by
4282         assuming .deb).
4283
4284         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4285         (check_files): set up files[file]["dbtype"].
4286         (install): use files[file]["dbtype"] to set up the 'type' field in
4287         the 'binaries' table.
4288
4289         * init_pool.sql: add a 'type' field to the 'binaries' table to
4290         distinguisgh between ".udeb" and ".deb" files.
4291
4292         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4293         dest ? dirname(dest)" type check instead.
4294
4295         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4296         in the pool without crashing.  Also handle the case of being asked
4297         to look for something other than an .orig.tar.gz in the pool.
4298
4299 2000-10-26  James Troup  <james@nocrew.org>
4300
4301         * katie (install): fix filenames put into files table during
4302         poolification of legacy source.
4303
4304         * utils.py (move): work around a bug in os.path.basename() which
4305         cunningly returns '' if there is a trailing slash on the path
4306         passed to it.
4307
4308         * katie (check_dsc): Remove more cruft.  If we find the
4309         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4310         location, make a note of that so we can fix things in install().
4311         (install): as above.  Move any old source out of legacy locations
4312         so that 'apt-get source' will work.
4313         (process_it): reset the flag that indicates to install that the
4314         source needs moved.
4315
4316         * cron.daily: more.  Nowhere near complete yet though.
4317
4318         * katie (install): don't run os.makedirs, a) utils.move() does
4319         this now, b) we weren't removing the user's umask and were
4320         creating dirs with SNAFU permissions.
4321         (check_dsc): rewrite the .orig.tar.gz handling to take into
4322         account, err, package pools.  i.e. look anywhere in the pool
4323         rather than faffing around with two simple paths.
4324
4325         * neve (process_sources): add the .dsc to dsc_files too.
4326
4327 2000-10-25  James Troup  <james@nocrew.org>
4328
4329         * neve (process_sources): don't duplicate .orig.tar.gz's.
4330
4331 2000-10-23  James Troup  <james@nocrew.org>
4332
4333         * utils.py (re_extract_src_version): moved here.
4334
4335         * neve: move re_extract_src_version to utils.
4336         (process_packages): reflect change.
4337
4338         * katie (install): reflect change.
4339
4340 2000-10-19  James Troup  <james@nocrew.org>
4341
4342         * jenna (generate_src_list): handle locations with null
4343         components.
4344         (generate_bin_list): likewise.
4345