]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
* dak/override.py: More changes from Herr von Wifflepuck: warn
[dak.git] / ChangeLog
1 2007-06-18  Anthony Towns  <ajt@debian.org>
2
3         * daklib/logging.py: Set umask to not exclude group-writability
4         so we don't get reminded at the start of each month. Thanks to
5         Random J.
6         * dak/override.py: More changes from Herr von Wifflepuck: warn
7         if section of source is different to binary section; restore
8         functionality on source-only overrides; croak if trying to set
9         priority of a source override; never set priority of source
10         overrides; correct typo in logging (s/priority/section/ at
11         one place)
12
13 2007-06-18  Anthony Towns  <ajt@debian.org>
14
15         * config/debian/apt.conf, config/debian/apt.conf.stable,
16         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
17         (sarge), support for oldstable-proposed-updates, dropping m68k
18         from etch, creating etch-m68k suite, creating lenny.
19
20         * config/debian/vars: update for lenny
21
22         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
23         drop upload limitations, add release postgres user
24         
25         * dak/process_new.py: support for automatically accepting and rejecting
26         packages from proposed-updates holding queues via COMMENTS directory
27         * cron.daily: automatically process COMMENTS-based approvals
28         and rejections for proposed-updates holding queues
29
30         * dak/process_unchecked.py: add support for oldproposedupdates
31         holding queue
32
33         * dak/control_suite.py: allow control-suite to work with etch-m68k
34
35         * dak/generate_releases.py: unlink old Release files before updating
36         them if nlinks > 1 (ie, if two files used to be the same, maybe they
37         shouldn't be when generate-releases is run)
38
39         * dak/generate_releases.py: add a couple of commented lines to make
40         it easier to deal with point releases
41
42         * dak/make_overrides.py: generate overrides for !contrib udebs
43
44         * docs/README.stable-point-release: update docs for doing a
45         point release
46
47 2007-03-05  Anthony Towns  <ajt@debian.org>
48
49         * config/debian/dak.conf: update for 3.1r5.
50         * scripts/debian/ssh-move: add ssh-move script from debbugs
51         * config/debian/cron.unchecked: push version info to debbugs using
52         ssh-move.
53
54 2007-02-14  James Troup  <troup@ries.debian.org>
55
56         * docs/README.config: remove Dinstall::GroupOverrideFilename.
57         * config/debian/dak.conf: likewise.
58         * config/debian-non-US/dak.conf: likewise.
59         * config/debian-security/dak.conf: likewise.
60
61         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
62         experimental differently, just close the bugs and let version
63         tracking sort it out.
64          (nmu_p): remove entire class - now unused.
65          (Upload.__init__): don't use nmu_p.
66
67 2007-02-08  Anthony Towns  <ajt@debian.org>
68
69         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
70         signing key.  Drop maximum index diffs down to 14.
71
72         * config/debian/apt.conf: add udeb support for non-free (testing,
73         unstable) and experimental.
74         * config/debian/dak.conf: likewise.
75
76         * dak/generate_releases.py (main): handle udebs in any component.
77
78         * daklib/queue.py (Upload.build_summaries): handle files without a
79         'type' gracefully.
80
81         * dak/generate_releases.py (print_sha256_files): new function.
82         (main): use it.
83
84         * dak/process_accepted.py (stable_install): fix name of template
85         mail.
86
87         * dak/process_unchecked.py (is_stableupdate): fix invocation of
88         database.get_suite_id().
89
90         * templates/process-new.bxa_notification: Update on request
91         of/after discussion with BIS staff.
92
93         * scripts/debian/mkfilesindices: also handle proposed-updates.
94
95 2007-02-08  Ryan Murray  <rmurray@debian.org>
96
97         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
98         group name for chgrp of mail archives.
99
100         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
101         orig.tar.gz's by picking the first one by file id.
102
103         * dak/override.py (main): limit to binary overrides only for now.
104         (usage): update to match.
105
106         * config/debian/cron.daily: track when we have the accepted lock
107         and clean it up on exit if we have it.  Take/check the
108         cron.unchecked lock just before traping to cleanup on exit.
109         Remove potato override handling.  Remove any dangling symlinks in
110         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
111
112         * config/debian/apt.conf: change default compression scheme for
113         both Sources and Packages to gzip and bzip2 rather than
114         uncompressed and gzip (Packages) and gzip (Sources).  Use old
115         defaults for proposed-updates.
116
117         * dak/control_overrides.py (main): refuse to operate on
118         untouchable suites.
119
120         * config/debian/pseudo-packages.maintainers: drop install,
121         installation, boot-floppy, slink-cd, potato-cd and
122         nonus.debian.org.  Update base.
123         * config/debian/pseudo-packages.description: likewise.
124
125         * daklib/utils.py (re_srchasver): new regex.
126         (parse_changes): use regex to split 'Source (Version)' style
127         Source fields into 'source' and 'source-version'.
128
129         * config/debian/cron.daily: use $base instead of hardcoding path
130         name.
131
132         * scripts/debian/mkfilesindices: source 'vars' file and use it's
133         variables instead of hardcoding path names.
134
135         * config/debian/apt.conf: switch from /org to /srv.
136         * config/debian/apt.conf.buildd: likewise.
137         * config/debian/apt.conf.stable: likewise.
138         * config/debian/cron.daily: likewise.
139         * config/debian/cron.hourly: likewise.
140         * config/debian/cron.monthly: likewise.
141         * config/debian/cron.unchecked: likewise.
142         * config/debian/cron.weekly: likewise.
143         * config/debian/dak.conf: likewise.
144         * config/debian/vars: likewise.
145         * scripts/debian/mkfilesindices: likewise.
146         
147 2007-02-08  James Troup  <james@nocrew.org>
148
149         * dak/process_unchecked.py (check_signed_by_key): new function to
150         ensure .changes files are signed by an authorized uploader.
151         (process_it): use it.
152
153         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
154         to configure per suite/component/architecture binary upload
155         restrictions.
156
157 2006-10-09  James Troup  <james.troup@canonical.com>
158
159         * dak/process_unchecked.py (check_timestamps): change match to
160         search as recent versions of python-apt prefix the string with 'E: '.
161
162 2006-06-26  Ryan Murray  <rmurray@debian.org>
163
164         * dak/process_unchecked.py (check_files): strip optional source version
165         from Source: field in changes file, and ensure what is left is a valid
166         package name.
167
168 2006-06-23  Ryan Murray  <rmurray@debian.org>
169
170         * dak/process_unchecked.py (check_files): also check ProposedUpdates
171         queue for source.
172
173 2006-06-18  Ryan Murray  <rmurray@debian.org>
174
175         * dak/scripts/debian/update-ftpstats: look for dak named processes in
176         the log, too.
177
178         * dak/process_unchecked.py (check_files): only check embargoed and
179         unembargoed queues if the keys are set.
180
181         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
182         and bzip2 for etch.
183
184 2006-06-16  James Troup  <james@nocrew.org>
185
186         * dak/dak.py (init): add new-security-install.
187
188         * dak/new_security_install.py: cleanups and adapt for new naming
189         scheme and other changes.
190
191 2006-06-16  Anthony Towns  <ajt@debian.org>
192
193         * dak/new_security_install.py: initial version imported from
194         klecker.
195
196 2006-06-16  James Troup  <james@nocrew.org>
197
198         [Merged changes from klecker - original author unknown.]
199
200         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
201
202         * dak/security_install.py (do_upload): fix check for oldstable and
203         upload file list handling.
204
205         * dak/process_unchecked.py (check_files): update "check for
206         source" code to also look in Embargoed and Unembargoed queues.
207         (is_unembargo): fix handling of Dir::Queue::Disembargo.
208
209         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
210
211         * config/debian-security/vars (disembargo): add.
212
213         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
214         update.
215         (Process-Unchecked::AcceptedLockFile): add.
216         (Suite::Testing): clean up Version and Description.
217         (SuiteMappings): add silent map from etch-secure to testing.
218
219         * config/debian-security/cron.unchecked: add support for
220         disembargoed queues.
221
222         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
223         files too.
224
225         * config/debian-security/apt.conf: add amd64 to architectures for
226         testing-security.
227
228 2006-06-11  James Troup  <troup@spohr.debian.org>
229
230         * config/debian/cron.daily: invoke process-accepted not
231         process-unchecked.
232
233         * config/debian/vars (scriptsdir): new variable.
234         * config/debian/cron.daily: use it.
235
236         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
237         $base/misc/ instead of versioned $masterdir.  Correct 'dak
238         make-maintainers' invocation to look in $configdir for
239         pseudo-packages.maintainers.
240
241         * daklib/queue.py (Upload.do_reject): use correct name for
242         rejection template.
243
244 2006-06-11  James Troup  <james@nocrew.org>
245
246         * dak/override.py (main): temporarily add content of old X-Katie
247         header back as the PTS apparently filters on it.
248         * dak/process_accepted.py (main): likewise.
249         * dak/process_new.py (main): likewise.
250         * dak/process_unchecked.py (main): likewise.
251         * dak/reject_proposed_updates.py (main): likewise.
252         * dak/rm.py (main): likewise.
253         * daklib/queue.py (Upload.do_reject): likewise.
254
255         * config/debian/cron.unchecked: set -u to error out on undefined
256         variables.  Preset LOCKDAILY to "" accordingly.
257         * config/debian/cron.hourly: likewise.
258         * config/debian/cron.monthly: likewise.
259         * config/debian/cron.weekly: likewise.
260
261         * config/debian/vars (configdir): add new variable pointing to
262         this directory.
263
264         * config/debian/cron.daily: use $configdir inplace of $masterdir
265         when that's what we mean, and don't cd into $masterdir just to run
266         dak scripts as we don't need to do that anymore.
267         * config/debian/cron.hourly: likewise.
268         * config/debian/cron.unchecked: likewise.
269         * config/debian/cron.weekly: likewise.
270
271         * config/debian/dak.conf
272         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
273         user back to list of known users as it's non-trivial to entirely
274         change the owner of a database with postgresql 7.4.
275
276         * daklib/queue.py (Upload.source_exists): use string object
277         methods rather than string module.
278         (Upload.get_anyversion): likewise.
279
280         * daklib/utils.py (validate_changes_file_arg): update filename
281         slicing to cope with new .dak filenames.
282
283         * dak/ls.py (main): add back 'heidi' as a valid argument for
284         -f/--format as people are using it in scripts and breaking that
285         without warning seems rude.
286
287 2006-05-21  James Troup  <james@nocrew.org>
288
289         * dak/rm.py (main): use string .isdigit() rather than
290         utils.str_isnum().
291         * dak/process_new.py (edit_overrides): likewise.
292
293         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
294         string import.
295
296 2006-05-21  James Troup  <james@nocrew.org>
297
298         * dak/check_archive.py (check_indices_files_exist): use list
299         comprehension instead of map().  No longer need to import
300         deprecated string module as a side-effect.
301         * dak/check_overrides.py (process): likewise.
302         (main): likewise.
303         * dak/cruft_report.py (do_obsolete_source): likewise.
304         (main): likewise.
305         * dak/ls.py (main): likewise.
306         * dak/make_suite_file_list.py (write_filelists): likewise.
307         * dak/process_accepted.py (stable_install): likewise.
308         * dak/rm.py (main): likewise.
309         * dak/stats.py (number_of_packages): likewise.
310         * daklib/logging.py (Logger.log): likewise.
311         * daklib/queue.py (Upload.source_exists): likewise.
312         (Upload.cross_suite_version_check): likewise.
313         * daklib/utils.py (parse_args): likewise.
314
315 2006-05-21  James Troup  <james@nocrew.org>
316
317         * daklib/utils.py (process_gpgv_output): new function, split out
318         of check_signature().
319         (check_signature): adapt accordingly.
320         (retrieve_key): new function that will try to retrieve the key
321         that signed a given file from a keyserver.
322         (check_signature): add 'autofetch' argument that if not set
323         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
324         If 'autofetch' is true, invoke retrieve_key().  
325
326         * docs/README.config: document Dinstall::KeyAutoFetch and
327         Dinstall:KeyServer.
328
329 2006-05-20  James Troup  <james@nocrew.org>
330
331         * dak/find_null_maintainers.py (main):
332         s/createtimestamp/createTimestamp/ to make things work with modern
333         slapd.
334
335         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
336         Stable::Version and Stable::Description for 3.1r2.
337
338         * config/debian-non-US/dak.conf: sync with klecker - update
339         version number of 3.0 and MoreInfoURL.
340
341         * docs/README.stable-point-release: Add notes about updating
342         dak.conf and Reject-Proposed-Updates section in particular.
343         s/woody/stable/.  Also need to update README.html.
344
345         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
346
347         * config/debian/apt.conf: Add udeb tree for proposed-updates.
348
349 2006-05-20  Ryan Murray  <rmurray@debian.org>
350
351         * scripts/debian/update-ftpstats: new script to update daily
352         architecture size graph data.
353
354         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
355         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
356         there.
357
358         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
359         before we finish.  Don't push to merkel.
360
361         * dak/process_unchecked.py (check_changes): Also look in
362         ProposedUpdates queue dir.
363         (check_files): likewise.
364
365 2006-05-20  Anthony Towns  <ajt@debian.org>
366
367         * scripts/debian/mkfilesindices: new script to generate file
368         indices used for partial mirroring.
369
370         * config/debian/cron.daily: add progress timestamps.
371
372         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
373         amd64 to testing, unstable and experimental.  Drop sh from
374         experimental.  Move Experimental to dists/experimental.  Add
375         Dir::ProposedUpdates.  Add Architectures::amd64.
376
377         * config/debian/apt.conf: add amd64 to testing, unstable and
378         experimental.  Drop uncompressed Packages files from testing. Drop
379         sh from experimental.  Move experimental to dists/experimental/.
380
381         * config/debian/vars (archs): add amd64.
382
383         * dak/process_unchecked.py (action): Add support for
384         proposed-updates approval queue.
385         (is_stableupdate): new function - checks if the upload is targeted
386         at proposed-updates.
387         (do_stableupdate): likewise - moves upload to proposed-updates
388         holding area.
389
390         * dak/process_new.py (do_new): warn if original or new target
391         suite are invalid.
392
393         * dak/generate_releases.py (print_md5sha_files): less whitespace
394         between the hash and size.
395
396         * dak/generate_index_diffs.py (genchanges): don't say we're not
397         doing anything.  Better formatting of other messages.
398         (main): don't skip experimental and remove some 'doing stuff'
399         prints.
400
401 2006-05-18  James Troup  <james@nocrew.org>
402
403         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
404         query.
405
406         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
407         docstrings, untabify, don't shadow builtins, lowercase non-global
408         variable names, spaces after commas.  Also bail if given any
409         arguments since we don't accept any.
410         * dak/init_db.py: likewise.  Also split large main() into
411         subfunctions and rename get() to sql_get().
412
413         * dak/init_db.py (main): check returned value from
414         database.get_archive_id().
415
416         * dak/dak.py: renamed from shell.py.  Update to support new source
417         layout.  Created init() and usage() functions.  Various
418         pylint-inspired cleanups.  Use daklib utils.warn() and
419         utils.fubar().  Change 'functionality' variable to only have
420         (command, description) and always invoke main() when running the
421         module.  Also support -h.
422
423 2006-05-17  James Troup  <james@nocrew.org>
424
425         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
426         imports of and calls to daklib modules.  Change script name
427         everywhere, i.e. in output, mails, comments and configuration tree
428         + filenames.  Also update references to other renamed scripts,
429         classes and templates.  Use '.dak' instead of '.katie' for the
430         queue info storage files.
431         (Renamed from tea)
432         * dak/check_overrides.py: likewise.  (Renamed from cindy)
433         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
434         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
435         * dak/clean_queues.py: likewise.  (Renamed from shania)
436         * dak/clean_suites.py: likewise.  (Renamed from rhona)
437         * dak/compare_suites.py: likewise.  (Renamed from andrea)
438         * dak/control_overrides.py: likewise.  (Renamed from natalie)
439         * dak/control_suite.py: likewise.  (Renamed from heidi)
440         * dak/cruft_report.py: likewise.  (Renamed from rene)
441         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
442         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
443         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
444         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
445         * dak/import_archive.py: likewise.  (Renamed from neve)
446         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
447         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
448         * dak/init_db.py: likewise. (Renamed from alyson)
449         * dak/init_dirs.py: likewise. (Renamed from rose)
450         * dak/ls.py: likewise. (Renamed from madison)
451         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
452         * dak/make_overrides.py: likewise.  (Renamed from denise)
453         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
454         * dak/mirror_split.py: likewise.  (Renamed from billie)
455         * dak/override.py: likewise.  (Renamed from alicia)
456         * dak/poolize.py: likewise.  (Renamed from catherine)
457         * dak/process_accepted.py: likewise.  (Renamed from kelly)
458         * dak/process_new.py: likewise.  (Renamed from lisa)
459         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
460         * dak/queue_report.py: likewise.  (Renamed from helena)
461         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
462         * dak/rm.py: likewise.  (Renamed from melanie)
463         * dak/security_install.py: likewise.  (Renamed from amber)
464         * dak/split_done.py: likewise.  (Renamed from nina)
465         * dak/stats.py: likewise.  (Renamed from saffron)
466         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
467         * daklib/database.py: likewise.  (Renamed from db_access)
468         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
469         * daklib/utils.py: likewise.
470
471         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
472         doesn't need to notify anyone" string.
473         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
474
475         * dak/process_accepted.py (init): drop -V/--version argument.
476         * dak/process_new.py (init): likewise.
477         * dak/process_unchecked.py (init): likewise.
478         * dak/reject_proposed_updates.py (init): likewise
479
480         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
481
482         * dak/stats.py: in usage() output change STAT to MODE.
483
484 2006-05-15  James Troup  <james@nocrew.org>
485
486         * dak/queue_report.py: remove unused encodings imports.
487
488         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
489         imports.  Initalize 'Cnf' as a global.
490         (BillieDB._internal_recurse): fix 'util.' typo.
491
492         * dak/import_ldap_fingerprints.py (main): drop unused time import and
493         commented out time check for LDAP search.
494
495 2005-12-16  Ryan Murray  <rmurray@debian.org>
496
497         * halle: add support for udebs
498         * kelly: stable_install: add support for binNMU versions
499
500 2005-12-05  Anthony Towns  <aj@erisian.com.au>
501
502         * katie.py: Move accept() autobuilding support into separate function 
503         (queue_build), and generalise to build different queues
504
505         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
506
507         * jennifer: Initial support for enabling embargo handling with the
508         Dinstall::SecurityQueueHandling option.
509         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
510         functions.
511
512         * katie.conf-security: Include embargo options
513         * katie.conf-security: Add Lock dir
514         * init_pool.sql-security: Create disembargo table
515         * init_pool.sql-security: Add constraints for disembargo table
516
517 2005-11-26  Anthony Towns  <aj@erisian.com.au>
518
519         * Merge of changes from klecker, by various people
520
521         * amber: special casing for not passing on amd64 and oldstable updates
522         * amber: security mirror triggering
523         * templates/amber.advisory: updated advisory structure
524         * apt.conf.buildd-security: update for sarge's release
525         * apt.conf-security: update for sarge's release
526         * cron.buildd-security: generalise suite support, update for sarge's release
527         * cron.daily-security: update for sarge's release, add udeb support
528         * vars-security: update for sarge's release
529         * katie.conf-security: update for sarge's release, add amd64 support,
530         update signing key
531
532         * docs/README.names, docs/README.quotes: include the additions
533
534 2005-11-25  Anthony Towns  <aj@erisian.com.au>
535
536         * Changed accepted_autobuild to queue_build everywhere.
537         * Add a queue table.
538         * Add a "queue" field in the queue_build table (currently always 0)
539
540         * jennifer: Restructure to make it easier to support special
541         purpose queues between unchecked and accepted.
542
543 2005-11-25  Anthony Towns  <aj@erisian.com.au>
544
545         * Finishing merge of changes from spohr, by various people still
546
547         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
548         works
549         * jennifer: Re-enable .deb ar format checking
550         * katie.py: Convert to +bX binNMU special casing
551         * rhona: Add some debug output when deleting binaries
552         * cron.daily: Add emilie
553         * cron.unchecked: Add lock files
554
555 2005-11-15  Anthony Towns  <aj@erisian.com.au>
556
557         * Merge of changes from spohr, by various people.
558
559         * tiffani: new script to do patches to Packages, Sources and Contents
560         files for quicker downloads.
561         * ziyi: update to authenticate tiffani generated files
562
563         * dak: new script to provide a single binary with less arbitrary names
564         for access to dak functionality.
565
566         * cindy: script implemented
567
568         * saffron: cope with suites that don't have a Priority specified
569         * heidi: use get_suite_id()
570         * denise: don't hardcode stable and unstable, or limit udebs to unstable
571         * denise: remove override munging for testing (now done by cindy)
572         * helena: expanded help, added new, sort and age options, and fancy headers
573         * jennifer: require description, add a reject for missing dsc file
574         * jennifer: change lock file
575         * kelly: propogation support
576         * lisa: honour accepted lock, use mtime not ctime, add override type_id
577         * madison: don't say "dep-retry"
578         * melanie: bug fix in output (missing %)
579         * natalie: cope with maintainer_override == None; add type_id for overrides
580         * nina: use mtime, not ctime
581
582         * katie.py: propogation bug fixes
583         * logging.py: add debugging support, use | as the logfile separator
584
585         * katie.conf: updated signing key (4F368D5D)
586         * katie.conf: changed lockfile to dinstall.lock
587         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
588         * katie.conf: added tiffani, cindy support
589         * katie.conf: updated to match 3.0r6 release
590         * katie.conf: updated to match sarge's release
591
592         * apt.conf: update for sarge's release
593         * apt.conf.stable: update for sarge's release
594         * apt.conf: bump daily max Contents change to 25MB from 12MB
595
596         * cron.daily: add accepted lock and invoke cindy  
597         * cron.daily: add daily.lock
598         * cron.daily: invoke tiffani
599         * cron.daily: rebuild accepted buildd stuff
600         * cron.daily: save rene-daily output on the web site
601         * cron.daily: disable billie
602         * cron.daily: add stats pr0n
603
604         * cron.hourly: invoke helena
605
606         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
607         * vars: add lockdir, add etch to copyoverrides
608         * Makefile: add -Ipostgresql/server to CXXFLAGS
609
610         * docs/: added README.quotes
611         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
612         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
613
614         * TODO: correct spelling of "conflicts"
615
616 2005-05-28  James Troup  <james@nocrew.org>
617
618         * helena (process_changes_files): use MTIME rather than CTIME (the
619         C's not for 'creation', stupid).
620         * lisa (sort_changes): likewise.
621
622         * jennifer (check_distributions): use has_key rather than an 'in'
623         test which doesn't work with python2.1.  [Probably by AJ]
624
625 2005-03-19  James Troup  <james@nocrew.org>
626
627         * rene (main): use Suite::<suite>::UdebComponents to determine
628         what components have udebs rather than assuming only 'main' does.
629
630 2005-03-18  James Troup  <james@nocrew.org>
631
632         * utils.py (rfc2047_encode): use codecs.lookup() rather than
633         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
634         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
635         <andrew@ubuntu.com>.
636
637 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
638
639         * helena: add -n/--new HTML output option and improved sorting
640         options.
641
642 2005-03-06  Ryan Murray  <rmurray@debian.org>
643
644         * shania(main): use Cnf::Dir::Reject instead of REJECT
645
646 2005-02-08  James Troup  <james@nocrew.org>
647
648         * rene (main): add partial NBS support by checking that binary
649         packages are built by their real parent and not some random
650         stranger.
651         (do_partial_nbs): likewise.
652
653 2005-01-18  James Troup  <james@nocrew.org>
654
655         * katie.py (Katie.build_summaries): avoid leaking file handle when
656         extracting package description.
657         (Katie.force_reject): remember and close each file descriptor we
658         use.
659         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
660         s/reason_file/reason_fd/ because it's a file descriptor.
661         (Katie.check_dsc_against_db): avoid leaking file handle whenever
662         invoking apt_pkg.md5sum().
663
664         * jennifer (check_deb_ar): new function: sanity check the ar
665         contents of a .deb.
666         (check_files): use it.
667         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
668         found.
669         (check_files): accept 'raw-installer' as an alias for 'byhand'.
670
671 2005-01-14  Anthony Towns  <ajt@debian.org>
672
673         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
674
675         * propup stuff (thanks to Andreas Barth)
676         * katie.conf: add stable MustBeOlderThan testing, add -security
677           propup
678         * jennifer: set distribution-version in .katie if propup may be needed
679         * katie.py: add propogation to cross_suite_version_check
680
681 2004-11-27  James Troup  <james@nocrew.org>
682
683         * nina: new script to split monolithic queue/done into date-based
684         hierarchy.
685
686         * rene (usage): document -s/--suite.
687         (add_nbs): use .setdefault().
688         (do_anais): likewise.
689         (do_nbs): don't set a string to "" and then += it.
690         (do_obsolete_source): new function - looks for obsolete source
691         packages (i.e source packages whose binary packages are ALL a)
692         claimed by someone else and b) newer when built from the other
693         source package).
694         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
695         and 'full' check modes.  Check for obsolete source packages.
696         linux-wlan-ng has been fixed - remove hideous bodge.
697
698         * jennifer (check_distributions): support 'reject' suite map type.
699
700         * utils.py (validate_changes_file_arg): s/file/filename/.
701         s/fatal/require_changes/.  If require_changes is -1, ignore errors
702         and return the .changes filename regardless.
703         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
704         (re_no_revision): don't escape '-', it's not a special character.
705         s/\*/+/ as there must be at least one non-dash character after the
706         dash in a revision.  Thanks to Christian Reis for noticing both of
707         these.
708
709         * ashley (main): pass require_changes=-1 to
710         utils.validate_changes_file_arg().
711
712         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
713         Team <debian-kernel@lists.debian.org>'.
714
715         * katie.py (Katie.in_override_p): fix .startswith() usage.
716
717         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
718         (Lauren::MoreInfoURL): update to 3.0r3.
719         (Suite::Stable::Version): likewise.
720         (Suite::Stable::Description): likewise.
721
722         * cron.daily: disable automatic task override generation.
723
724         * cindy (process): restrict "find all packages" queries by
725         component.  Respect Options["No-Action"].
726         (main): add -n/--no-action support.  Only run on unstable.  Rename
727         type to otype (pychecker).
728
729 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
730
731         * katie.conf (Billie::BasicTrees): add all architectures.
732         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
733         'everything'.
734
735         * cron.daily: Update a 'current' symlink when creating the
736         post-daily-cron-job database backup to aid mirroring to merkel.
737         Run billie.
738
739         * billie (BillieTarget.poolish_match): handle .udeb too.
740
741 2004-10-13  Ryan Murray  <rmurray@debian.org>
742
743         * amber (do_upload): Sort changes files in "katie" order so that
744           source always arrives before binary-only rebuilds
745         
746 2004-10-05  James Troup  <james@nocrew.org>
747
748         * jennifer (check_dsc): correct reject message on invalid
749         Maintainer field.
750
751 2004-09-20  James Troup  <james@nocrew.org>
752
753         * alicia: remove unused 'pwd' import.
754
755         * tea (check_override): underline suite name in output properly.
756
757         * rene (main): read a compressed Packages file.
758         * tea (validate_packages): likewise.
759
760         * katie.py (re_fdnic): add 'r' prefix.
761         (re_bin_only_nmu_of_mu): likewise.
762         (re_bin_only_nmu_of_nmu): likewise.
763
764         * madison (main): retrieve component information too and display
765         it if it's not 'main'.
766         * melanie (reverse_depends_check): likewise.
767
768         * utils.py (pp_dep): renamed...
769         (pp_deps): ... to this.
770         * jeri (check_dep): update calls to utils.pp_deps().
771         * melanie (reverse_depends_check): likewise.
772
773         * jennifer (check_changes): move initalization of email variables
774         from here...
775         (process_it): ...to here as we no longer always run
776         check_changes().  Don't bother to initialize
777         changes["architecture"].
778
779         * denise (list): renamed to...
780         (do_list): ...this to avoid name clash with builtin 'list'.
781         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
782         for dictionaries.
783         (main): Likewise for name clash avoidance and also
784         s/override_type/suffix/.  Adjust call to do_list().
785
786 2004-09-01  Ryan Murray  <rmurray@debian.org>
787
788         * tea (check_files): check the pool/ directory instead of dists/
789
790 2004-08-04  James Troup  <james@nocrew.org>
791
792         * jenna (cleanup): use .setdefault() for dictionaries.
793         (write_filelists): likewise.
794
795         (write_filelists): Use utils.split_args() not split() to split
796         command line arguments.
797         (stable_dislocation_p): likewise.
798
799         (write_filelists): Add support for mapping side of suite-based
800         "Arch: all mapping".
801         (do_da_do_da): ensure that if we're not doing all suites that we
802         process enough to be able correct map arch: all packages.
803
804         * utils.py (cant_open_exc): correct exception string,
805         s/read/open/, s/.$//.
806
807         * templates/amber.advisory: update to match reality a little
808         better.
809
810         * melanie (reverse_depends_check): read Packages.gz rather than
811         Packages.
812
813         * jennifer (check_files): check for unknown component before
814         checking for NEWness.
815
816         * katie.py (Katie.in_override_p): use .startswith in favour of a
817         slice.
818
819         * docs/melanie.1.sgml: document -R/--rdep-check.
820
821 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
822
823         * billie (main): Make the verbatim lists include all the README
824           elements.
825         * docs/README.names: Add billie in (correcting oversight)
826
827 2004-07-01  James Troup  <james@nocrew.org>
828
829         * emilie (main): handle woody's case-sensitive python-ldap,
830         s/keyfingerprint/keyFingerPrint/.
831
832 2004-06-25  James Troup  <james@nocrew.org>
833
834         * debian/control (Depends): add dpkg-dev since jennifer uses
835         dpkg-source.
836
837 2004-06-24  James Troup  <james@nocrew.org>
838
839         * melanie (main): s/file/temp_file/ and close file handle before
840         removing the temporary file.
841         (main): don't warn about needing a --carbon-copy if in no-action
842         mode.
843
844         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
845         (main): likewise.
846
847         * test/006/test.py (main): check bracketed email-only form.
848
849         * utils.py (fix_maintainer): if the Maintainer string is bracketed
850         email-only, strip the brackets so we don't end up with
851         <<james@nocrew.org>>.
852
853 2004-06-20  James Troup  <james@nocrew.org>
854
855         * jennifer (process_it): only run check_changes() if
856         check_signature() returns something.  (Likewise)
857
858         * utils.py (changes_compare): if there's no changes["version"] use
859         "0" rather than None.  (Avoids a crash on unsigned changes file.)
860
861 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
862
863         * jeri (pp_dep): moved from here to ...
864         * utils.py (pp_dep): here.
865
866         * melanie (main): add reverse dependency checking.
867
868 2004-06-17  James Troup  <james@nocrew.org>
869
870         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
871         * tea (check_dscs): likewise.
872
873         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
874         change from boolean to a variable with 3 possible values, 0 and 1
875         as before, -1 means don't require a signature.  Makes
876         parse_changes() useful for parsing arbitary RFC822-style files,
877         e.g. 'Release' files.
878         (check_signature): add support for detached signatures by passing
879         the files the signature is for as an optional third argument.
880         s/filename/sig_filename/g.  Add a fourth optional argument to
881         choose the keyring(s) to use.  Don't os.path.basename() the
882         sig_filename before checking it for taint.
883         (re_taint_free): allow '/'.
884
885 2004-06-11  James Troup  <james@nocrew.org>
886
887         * tea (check_files): make override.unreadable optional.
888         (validate_sources): close the Sources file handle.
889
890         * docs/README.first: clarify that 'alyson' and running
891         add_constraints.sql by hand is something you only want to do if
892         you're not running 'neve'.
893
894         * docs/README.config (Location::$LOCATION::Suites): document.
895
896         * db_access.py (do_query): also print out the result of the query.
897
898 2004-06-10  James Troup  <james@nocrew.org>
899
900         * katie.py (Katie.cross_suite_version_check): post-woody versions
901         of python-apt's apt_pkg.VersionCompare() function apparently
902         returns variable integers for less than or greater than results -
903         update our result checking to match.
904         * jenna (resolve_arch_all_vs_any): likewise.
905         * charisma (main): likewise.
906
907 2004-06-09  James Troup  <james@nocrew.org>
908
909         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
910         valid_dsc_p and don't run check_source() if check_dsc() failed.
911         (check_dsc): on fatal failures return 0 so check_source() isn't
912         run (since it makes fatal assumptions about the presence of
913         mandatory .dsc fields).  
914         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
915
916 2004-05-07  James Troup  <james@nocrew.org>
917
918         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
919         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
920
921         * katie.conf (Dir::Override): remove duplicate definition.
922
923         * neve (get_or_set_files_id): add an always-NULL last_used column
924         to output.
925
926 2004-04-27  James Troup  <james@nocrew.org>
927
928         * apt.conf-security (tree "dists/stable/updates"): add
929         ExtraOverride - noticed by Joey Hess (#246050).
930         (tree "dists/testing/updates"): likewise.
931
932 2004-04-20  James Troup  <james@nocrew.org>
933
934         * jennifer (check_files): check for existing .changes or .katie
935         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
936         directories.
937
938 2004-04-19  James Troup  <james@nocrew.org>
939
940         * jennifer (check_source): handle failure to remove the temporary
941          directory (used for source tree extraction) better, specifically:
942          if we fail with -EACCES, chmod -R u+rwx the temporary directory
943          and try again and if that works, REJECT the package.
944
945 2004-04-17  James Troup  <james@nocrew.org>
946
947         * docs/madison.1.sgml: document -b/--binary-type,
948         -g/--greaterorequal and -G/--greaterthan.
949
950         * madison (usage): -b/--binary-type only takes a single argument.
951         Document -g/--greaterorequal and -G/--greaterthan.
952         (main): add support for -g/--greaterorequal and -G/--greaterthan.
953
954 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
955
956         * billie: Cleaned up a load of comments, added /README.non-US to
957           the verbatim matches list.
958
959 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
960
961         * utils.py (size_type): Make it use real binary megabytes and
962           kilobytes, instead of the marketing terms used before.
963
964 2004-04-07  James Troup  <james@nocrew.org>
965
966         * katie.py (Katie.check_dsc_against_db): in the case we're
967         ignoring an identical-to-existing orig.tar.gz remember the path to
968         the existent version in pkg.orig_tar_gz.  Adjust query to grab
969         location.path too to be able to do so.
970
971 2004-04-03  James Troup  <james@nocrew.org>
972
973         * debian/control (Depends): add python2.1-email | python (>= 2.2)
974         needed for new utils.rfc2047_encode() function.
975
976         * utils.py (re_parse_maintainer): allow whitespace inside the
977         email address.
978         (Error): new exception base class.
979         (ParseMaintError): new exception class.
980         (force_to_utf8): new function.
981         (rfc2047_encode): likewise.
982         (fix_maintainer): rework.  use force_to_utf8() to force name and
983         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
984         return an rfc2047 value.  Validate the address to catch missing
985         email addresses and (some) broken ones.
986
987         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
988         by adopting foo2047 return value.
989         (Katie.dump_vars): add changedby2047 and maintainer2047 as
990         mandatory changes fields.  Promote changes and maintainer822 to
991         mandatory fields.
992         (Katie.update_subst): default maintainer2047 rather than
993         maintainer822.  User foo2047 rather than foo822 when setting
994         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
995
996         * jennifer (check_changes): set default changes["maintainer2047"]
997         and changes["changedby2047"] values rather than their 822
998         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
999         to new utils.fix_maintainer() - reject on exception and adopt
1000         foo2047 return value.
1001         (check_dsc): if a mandatory field is missing don't do any further
1002         checks and as a result reduce paranoia about dsc[var] existence.
1003         Validate the maintainer field by calling new
1004         utils.fix_maintainer().
1005
1006         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1007         changes fields.  Promote maintainer822 to a mandatory changes
1008         field.  add "pool name" to files fields.
1009
1010         * test/006/test.py: new file - tests for new
1011         utils.fix_maintainer().
1012
1013 2004-04-01  James Troup  <james@nocrew.org>
1014
1015         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1016
1017         * jennifer (get_changelog_versions): create a symlink mirror of
1018         the source files in the temporary directory.
1019         (check_source): if check_dsc_against_db() couldn't find the
1020         orig.tar.gz bail out.
1021
1022         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1023         part of the upload store the path to it in pkg.orig_tar_gz and if
1024         it can't be found set pkg.orig_tar_gz to -1.
1025
1026         Explicitly return the second value as None in the (usual) case
1027         where we don't have to reprocess.  Remove obsolete diagnostic
1028         logs.
1029
1030         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1031
1032         * utils.py (temp_filename): new helper function that wraps around
1033         tempfile.mktemp().
1034
1035         * katie.py (Katie.do_reject): use it and don't import tempfile.
1036         * lisa (prod_maintainer): likewise.
1037         (edit_note): likewise.
1038         (edit_new): likewise.
1039         * lauren (reject): likewise.
1040         * melanie (main): likewise.
1041         * neve (do_sources): likewise.
1042         * rene (main): likewise.
1043         * tea (validate_sources): likewise.
1044
1045 2004-03-31  James Troup  <james@nocrew.org>
1046
1047         * tea (validate_sources): remove unused 's' temporary variable.
1048
1049 2004-03-15  James Troup  <james@nocrew.org>
1050
1051         * jennifer (check_dsc): check changes["architecture"] for
1052         source before we do anything else.
1053
1054 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1055
1056         * billie: Added
1057         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1058
1059 2004-03-12  James Troup  <james@nocrew.org>
1060
1061         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1062
1063         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1064
1065         * katie.py (Katie.accept): add support for DebBugs Version
1066         Tracking by writing out .versions (generated in jennifer's
1067         get_changelog_versions()) and .debinfo (mapping of binary ->
1068         source) files.
1069
1070         * ashley (main): add dsc["bts changelog"].
1071
1072         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1073
1074         * jennifer (check_diff): obsoleted by check_source(), removed.
1075         (check_source): new function: create a temporary directory and
1076         move into it and call get_changelog_versions().
1077         (get_changelog_versions): new function: extract the source package
1078         and optionally parse debian/changelog to obtain the version
1079         history for the BTS.
1080         (process_it): call check_source() rather than check_diff().
1081
1082 2004-03-08  James Troup  <james@nocrew.org>
1083
1084         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1085         listbar" rather than "if listbar.count(varfoo)"' change on
1086         2004-02-24.
1087
1088 2004-03-05  James Troup  <james@nocrew.org>
1089
1090         * alicia (main): don't warn about not closing bugs - we don't
1091         manage overrides through the BTS.
1092
1093 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1094
1095         * docs/README.config: lots of updates and corrections.
1096         * docs/README.first: likewise.
1097
1098         * docs/README.config: drop unused Dir::Queue::Root.
1099         * katie.conf-non-US: likewise.
1100         * katie.conf: likewise.
1101         * katie.conf-security: likewise.
1102
1103 2004-02-27  James Troup  <james@nocrew.org>
1104
1105         * rose (process_tree): use 'if var in [ list ]' rather than long
1106         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1107         Michlmayr.
1108
1109         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1110         suggested by Martin Michlmayr.
1111         * catherine (poolize): likewise.
1112         * charisma (main): likewise.
1113         * halle (check_changes): likewise.
1114         * heidi (main): likewise.
1115         (process_file): likewise.
1116         * kelly (install): likewise.
1117         (stable_install): likewise.
1118         * utils.py (fix_maintainer): likewise.
1119
1120         * apt.conf: add support for debian-installer in testing-proposed-updates.
1121         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1122         add - set to main.
1123
1124         * mkmaintainers: add "-T15" option to wget of non-US packages file
1125         so that we don't hang cron.daily if non-US is down.
1126
1127         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1128
1129         * templates/jennifer.bug-close: add Source and Source-Version
1130         pseudo-headers that may be used for BTS Version Tracking someday
1131         [ajt@].
1132
1133         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1134         (main): likewise.
1135
1136         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1137
1138 2004-02-25  James Troup  <james@nocrew.org>
1139
1140         * katie.conf (SuiteMappings): don't map testing-security to
1141         proposed-updates.
1142
1143 2004-02-24  James Troup  <james@nocrew.org>
1144
1145         * katie.py (Katie.__init__): remove unused 'values' field.
1146
1147         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1148         rather than 's.count(c) > 0'.
1149
1150         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1151         rather than "if listbar.count(varfoo)".
1152         * halle (check_joey): likewise.
1153         * jeri (check_joey): likewise.
1154         * lisa (edit_index): likewise.
1155         * jenna (stable_dislocation_p): likewise.
1156
1157         * jennifer (main): remove unused global 'nmu'.
1158
1159 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1160
1161         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1162           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1163           the dak tools close bugs.
1164
1165 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1166
1167         * katie.conf (Alicia): Added an Alicia section with email address
1168         * templates/alicia.bug-close: Added
1169         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1170         * alicia (main): Added a -d/--done argument
1171
1172 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1173
1174         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1175
1176 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1177
1178         * lisa (prod_maintainer): Added function to prod the maintainer without
1179           accepting or rejecting the package
1180         * templates/lisa.prod: Added this template for the prodding mail
1181
1182         * .cvsignore: Added neve-files which turns up in new installations
1183
1184 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1185
1186         * alicia (usage): Fixed usage message to offer section and priority
1187           as seperately optional arguments.
1188         * alicia (main): Added a % (arg) interpolation needed when only
1189           one of section or priority is provided and it cannot be found.
1190
1191 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1192
1193         * alicia: Added
1194         * docs/alicia.1.sgml: Added
1195         * docs/Makefile: Added alicia to the list of manpages to build
1196         * docs/README.names: Noted what alicia does
1197         * docs/README.first: Noted where alicia is useful
1198
1199 2004-01-21  James Troup  <james@nocrew.org>
1200
1201         * madison (main): add -b/--binary-type.
1202         (usage): likewise.
1203
1204         * denise (main): generate debian-installer overrides for testing
1205         too.
1206         * apt.conf: add support for debian-installer in testing.
1207         * katie.conf (Suite::Testing::UdebComponents): set to main.
1208
1209         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1210         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1211         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1212
1213         * utils.py (parse_changes): don't process data not inside the
1214         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1215         pointing this out.
1216         * test/005/test.py (main): new test to test for above.
1217
1218 2004-01-04  James Troup  <james@nocrew.org>
1219
1220         * jenna (write_filelists): correct typo, s/Components/Component/
1221         for Options.
1222
1223 2004-01-04  Ryan Murray  <rmurray@debian.org>
1224
1225         * cron.buildd: move update of overrides and Packages file...
1226         * cron.unchecked: to here.
1227         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1228         * katie.conf-security: likewise
1229
1230 2003-11-20  James Troup  <james@nocrew.org>
1231
1232         * jenna (main): don't use utils.try_with_debug(), it produces way
1233         too much output.
1234
1235         * halle (check_changes): don't error out if a .changes refers to a
1236         non-existent package, just warn and skip the file.
1237
1238         * docs/README.stable-point-release: mention halle and .changes
1239         obsoleted by removal through melanie.  Update for 3.0r2.
1240
1241         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1242         (Suite::Stable::Description): update for 3.0r2.
1243         (Lauren::MoreInfoURL): likewise.
1244         * katie.conf-non-US (Suite::Stable::Version): likewise.
1245         (Suite::Stable::Description): likewise.
1246         (Lauren::MoreInfoURL): likewise.
1247
1248         * apt.conf.stable (Default): don't define MaxContentsChange.
1249         * apt.conf.stable-non-US (Default): likewise.
1250
1251         * lauren (reject): hack to work around partial replacement of an
1252         upload, i.e. one or more binaries superseded by another source
1253         package.
1254
1255 2003-11-17  James Troup  <james@nocrew.org>
1256
1257         * pseudo-packages.maintainers: point installation-reports at
1258         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1259         request.
1260
1261         * utils.py (parse_changes): calculate the number of lines once
1262         with len() rather than max().
1263
1264         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1265         files, since check_dsc_against_db() deletes the .orig.tar.gz
1266         entry.
1267
1268 2003-11-13  Ryan Murray  <rmurray@debian.org>
1269
1270         * apt.conf: specify a src override file for debian-installer
1271
1272 2003-11-10  James Troup  <james@nocrew.org>
1273
1274         * fernanda.py (strip_pgp_signature): new function - strips PGP
1275         signature from a file and returns the modified contents of the
1276         file in a string.
1277         (display_changes): use it.
1278         (read_dsc): likewise.
1279
1280 2003-11-09  Ryan Murray  <rmurray@debian.org>
1281
1282         * cron.buildd: export accepted_autobuild table for unstable, and use
1283         it to generate the incoming Packages/Sources rather than having apt
1284         walk the directory.
1285         * apt.conf.buildd: use exported table from cron.buildd to generate
1286         Packages/Sources
1287
1288 2003-11-07  James Troup  <james@nocrew.org>
1289
1290         * kelly: import errno.
1291
1292         * katie.py (Katie.build_summaries): sort override disparities.
1293
1294         * kelly (install): set dsc_component based on the .dsc's component
1295         not a random binaries.
1296
1297 2003-10-29  James Troup  <james@nocrew.org>
1298
1299         * katie.py (Katie.build_summaries): don't assume changes["source"]
1300         exists since it might not.
1301
1302 2003-10-20  James Troup  <james@nocrew.org>
1303
1304         * pseudo-packages.maintainers: update security.d.o to use
1305         team@s.d.o at joy@'s request.
1306
1307 2003-10-17  James Troup  <james@nocrew.org>
1308
1309         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1310
1311 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1312
1313         * tea (chk_bd_process_dir): use .endswith rather than slice.
1314
1315 2003-10-14  James Troup  <james@nocrew.org>
1316
1317         * tea (check_build_depends): new function.
1318         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1319         in the archive.
1320         (main): update for new function.
1321         (usage): likewise.
1322
1323         * katie.py (Katie.do_reject): sanitize variable names,
1324         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1325         os.close() to outside if clause.
1326
1327         * jennifer (check_dsc): check build-depends and
1328         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1329         Fold the ARRAY check into the same code block and tidy up it's
1330         rejection message.
1331         (check_changes): ensure that the Files field is non-empty.
1332         Suggested by Santiago Vila <sanvila@unex.es>
1333         (check_changes): normalize reject messages.
1334         (check_dsc): instead of doing most of the checks inside a for loop
1335         and an if, find the dsc_filename in a short loop over files first
1336         and then do all the checks.  Add check for more than one .dsc in a
1337         .changes which we can't handle.  Normalize reject messages.
1338
1339 2003-10-13  James Troup  <james@nocrew.org>
1340
1341         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1342         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1343
1344         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1345         variables while iterating over 'files'.  Don't regenerate it when
1346         checking for source if source is mentioned.
1347
1348         Reject source only uploads if the config variable
1349         Dinstall::Reject::NoSourceOnly is set.
1350
1351 2003-10-03  James Troup  <james@nocrew.org>
1352
1353         * rene (main): add nasty hardcoded reference to debian-installer
1354         so we detect NBS .udebs.
1355
1356 2003-09-29  James Troup  <james@nocrew.org>
1357
1358         * apt.conf (old-proposed-updates): remove.
1359         * apt.conf-non-US (old-proposed-updates): likewise.
1360
1361 2003-09-24  James Troup  <james@nocrew.org>
1362
1363         * tea (check_files_not_symlinks): new function, ensure files
1364         mentioned in the database aren't symlinks.  Includes code to
1365         update any files that are like this to their real filenames +
1366         location; commented out by though.
1367         (usage): update for new function.
1368         (main): likewise.
1369
1370 2003-09-24  Anthony Towns  <ajt@debian.org>
1371
1372         * vars: external-overrides variable added
1373         * cron.daily: Update testing/unstable Task: overrides from joeyh
1374         managed external source.
1375
1376 2003-09-22  James Troup  <james@nocrew.org>
1377
1378         * kelly (install): if we can't move the .changes into queue/done,
1379         fail don't warn and carry on.  The old behaviour pre-dates NI and
1380         doesn't make much sense now since jennifer checks both
1381         queue/accepted and queue/done for any .changes files it's
1382         processing.
1383
1384         * utils.py (move): don't throw exceptions on existing files or
1385         can't overwrite, instead just fubar out.
1386
1387         * jennifer (check_dsc): also check Build-Depends-Indep for
1388         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1389
1390 2003-09-18  James Troup  <james@nocrew.org>
1391
1392         * katie.py (Katie.close_bugs): only log the bugs we've closed
1393         once.
1394
1395         * kelly (main): log as 'kelly', not 'katie'.
1396
1397 2003-09-16  James Troup  <james@nocrew.org>
1398
1399         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1400
1401         * jennifer (check_changes): normalize reject message for "changes
1402         file already exists" to be %s: <foo>.
1403         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1404         produced by broken dpkg-source in 1.10.11.  Tone down and
1405         normalize rejection message for incompatible 'Format' version
1406         numbers.
1407         (check_diff): likewise tone down and normalize.
1408
1409 2003-09-07  James Troup  <james@nocrew.org>
1410
1411         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1412         don't bomb out on bogus empty lines.
1413         (build_file_list): check for changes["files"] earlier.  use Dict
1414         to create files[name] dictionary.
1415         (send_mail): don't bother validating arguments.
1416         (check_signature): minor improvements to some of the rejection
1417         messages including listing the key id of the key that wasn't found
1418         in the keyring.
1419         (wrap): new function.
1420
1421         * tea: add new check 'validate-indices' that ensures all files
1422         mentioned in indices (Packages, Sources) files do in fact exist.
1423
1424         * catherine (poolize): use a local re_isadeb which handles legacy
1425         (i.e. no architecture) style .deb filenames.
1426
1427         * rosamund: new script.
1428
1429         * rhona (check_binaries): when checking for binary packages not in
1430         a suite, don't bother selecting files that already have a
1431         last_used date.
1432         (check_sources): likewise.
1433
1434         * rhona: change all SQL EXISTS sub-query clauses to use the
1435         postgres suggested convention of "SELECT 1 FROM".
1436         * andrea (main): likewise.
1437         * tea (check_override): likewise.
1438         * catherine (main): likewise.
1439
1440         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1441         entries and in other suites MustBeNewerThan's.
1442         (SuiteMappings): likewise
1443         * katie.conf-non-US: likewise.
1444         * katie.conf-security: likewise.
1445
1446         * apt.conf-security: remove oldstable.
1447         * apt.conf.stable: likewise.
1448         * apt.conf.stable-non-US: likewise.
1449         * cron.buildd-security: likewise.
1450         * cron.daily-security: likewise.
1451         * vars-security (suites): likewise.
1452         * wanna-build/trigger.daily: likewise.
1453
1454         * claire.py (clean_symlink): move...
1455         * utils.py (clean_symlink): here.
1456
1457         * claire.py (find_dislocated_stable): update accordingly.
1458
1459 2003-08-16  Anthony Towns  <ajt@debian.org>
1460
1461         * katie.py (source_exists): expand the list of distributions
1462         the source may exist in to include any suite that's mapped to
1463         the destination suite (even transitively (a->b->c)). This should
1464         unbreak binary uploads to *-proposed-updates.
1465
1466 2003-08-09  Randall Donald  <rdonald@debian.org>
1467
1468         * lisa (recheck): change changes["distribution"].keys() to
1469         Katie.pkg.changes...
1470
1471 2003-08-08  Randall Donald  <rdonald@debian.org>
1472
1473         * katie.py: only tag bugs as fixed-in-experimental for
1474         experimental uploads
1475
1476 2003-07-26  Anthony Towns  <ajt@debian.org>
1477
1478         * katie.py (source_exists): add an extra parameter to limit the
1479         distribution(s) the source must exist in.
1480         * kelly, lisa, jennifer: update to use the new source_exists
1481
1482 2003-07-15  Anthony Towns  <ajt@debian.org>
1483
1484         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1485         checksums for debian-installer stuff even when it's just a symlink to
1486         another suite
1487
1488         * apt.conf: add the FakeDI line
1489
1490 2003-06-09  James Troup  <james@nocrew.org>
1491
1492         * kelly (check): make sure the 'file' we're looking for in 'files'
1493         hasn't been deleted by katie.check_dsc_against_db().
1494
1495 2003-05-07  James Troup  <james@nocrew.org>
1496
1497         * helena (time_pp): fix s/years/year/ typo.
1498
1499 2003-04-29  James Troup  <james@nocrew.org>
1500
1501         * madison (usage): document -c/--component.
1502
1503         * madison (usage): Fix s/seperated/separated/.
1504         * melanie (usage): likewise.
1505         * jenna (usage): likewise.
1506
1507 2003-04-24  James Troup  <james@nocrew.org>
1508
1509         * cron.daily-non-US: if there's nothing for kelly to install, say
1510         so.
1511
1512         * jennifer (check_timestamps): print sys.exc_value as well as
1513         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1514         failed' with 'deb contents' to make it clearer what timestamp(s)
1515         are being checked.
1516
1517 2003-04-15  James Troup  <james@nocrew.org>
1518
1519         * cron.daily-non-US: only run kelly if there are some .changes
1520         files in accepted.
1521
1522         * rene: add -m/--mode argument which can be either daily (default)
1523         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1524         Various changes to make this possible including a poor attempt at
1525         splitting main() up a little.  De-hardcode suite numbers from SQL
1526         queries and return quietly from do_nviu() if experimental doesn't
1527         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1528         is.
1529
1530         * debian/control (Depends): remove python-zlib as it's obsolete.
1531
1532         * charisma (main): don't slice the \n off strings when we're
1533         strip()-ing it anyway.
1534         * heidi (set_suite): likewise.
1535         (process_file): likewise.
1536         * natalie (process_file): likewise.
1537
1538 2003-04-08  James Troup  <james@nocrew.org>
1539
1540         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1541         slow queries by using one LIKE '%foo%' and then matching against
1542         '%s' or '/%s$' in python.  Also only join location when we need it
1543         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1544         query, so 6s for each sourceful package.
1545
1546         * cron.daily: invoke rene and send the report to ftpmaster.
1547         * cron.daily-non-US: likewise.
1548
1549 2003-03-14  James Troup  <james@nocrew.org>
1550
1551         * utils.py (send_mail): default filename to blank.
1552         * amber (make_advisory): adapt.
1553         * jennifer (acknowledge_new): likewise.
1554         * katie.py (Katie.close_bugs): likewise.
1555         (Katie.announce): likewise.
1556         (Katie.accept): likewise.
1557         (Katie.check_override): likewise.
1558         (Katie.do_reject): likewise.
1559         * kelly (do_reject): likewise.
1560         (stable_install): likewise.
1561         * lisa (do_bxa_notification): likewise.
1562         * lauren (reject): likewise.
1563         * melanie (main): likewise.
1564
1565         * rene (add_nbs): check any NBS packages against unstable to see
1566         if they haven't been removed already.
1567
1568         * templates/katie.rejected: remove paragraph about rejected files
1569         since they're o-rwx due to c-i-m and the uploader can't do
1570         anything about them and shania will take care of them anyway.
1571
1572         * madison (usage): update usage example to use comma seperation.
1573         * melanie (usage): likewise.
1574
1575         * utils.py (split_args): new function; splits command line
1576         arguments either by space or comma (whichever is used).  Also has
1577         optional-but-default DWIM spurious space detection to avoid
1578         'command -a i386, m68k' problems.
1579         (parse_args): use it.
1580         * melanie (main): likewise.
1581
1582         * melanie (main): force the admin to tell someone if we're not
1583         doing a rene-led removal (or closing a bug, which counts as
1584         telling someone).
1585
1586 2003-03-05  James Troup  <james@nocrew.org>
1587
1588         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1589         and python sections.
1590         * katie.conf-security (Section): likewise.
1591
1592         * add_constraints.sql: add uid and uid_id_seq to grants.
1593
1594         * lisa (determine_new): also warn about adding overrides to
1595         oldstable.
1596
1597         * madison (main): make the -S/--source-and-binary query obey
1598         -s/--suite restrictions.
1599
1600 2003-03-03  James Troup  <james@nocrew.org>
1601
1602         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1603         exists, warn the user that our output might seem strange.  (People
1604         get confused by multiple versions in a suite which happens
1605         post-kelly but pre-jenna.)
1606
1607 2003-02-21  James Troup  <james@nocrew.org>
1608
1609         * kelly (main): we don't need to worry about StableRejector.
1610
1611         * melanie (main): sort versions with apt_pkg.VersionCompare()
1612         prior to output.
1613
1614         * lauren: new script to manually reject packages from
1615         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1616
1617 2003-02-20  James Troup  <james@nocrew.org>
1618
1619         * kelly (init): remove unused -m/--manual-reject argument.
1620
1621         * katie.py (Katie.force_reject): renamed from force_move to make
1622         it more explicit what this function does.
1623         (Katie.do_reject): update to match.
1624
1625         * utils.py (prefix_multi_line_string): add an optional argument
1626         include_blank_lines which defaults to 0.  If non-zero, blank lines
1627         will be includes in the output.
1628
1629         * katie.py (Katie.do_reject): don't add leading space to each line
1630         of the reject message.  Include blank lines when showing the
1631         message to the user.
1632
1633 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1634
1635         * utils.py (fix_maintainer): replace pointless re.sub() with
1636         simple string format.
1637
1638 2003-02-11  James Troup  <james@nocrew.org>
1639
1640         * lisa (edit_overrides): only strip-to-one-char and upper-case
1641         non-numeric answers.  Fixes editing of items with indices >= 10;
1642         noticed by Randall.
1643         (edit_overrides): correct order of arguments to "not a valid
1644         index" error message.
1645
1646         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1647         remove_duplicate_versions(); thanks to aj for the initial
1648         diagnosis.
1649         (remove_duplicate_versions): correct how we return
1650         dominant_versions.
1651         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1652         a tuple rather than just a tuple.
1653
1654 2003-02-10  James Troup  <james@nocrew.org>
1655
1656         * emilie: new script - sync fingerprint and uid tables with a
1657         debian.org LDAP DB.
1658
1659         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1660         in 'fingerprint'.
1661
1662         * db_access.py (get_or_set_uid_id): new function.
1663
1664         * jennifer (main): update locking to a) not used FCNTL (deprecated
1665         in python >= 2.2) and b) acknowledge upstream's broken
1666         implementation of lockf (see Debian bug #74777), c) try to acquire
1667         the lock non-blocking.
1668         * kelly (main): likewise.
1669
1670         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1671
1672         * madison (main): only append the package to new_packages if it's
1673         not already in there; fixes -S/--source-and-binary for cases where
1674         the source builds a binary package of the same name.
1675
1676 2003-02-10  Anthony Towns  <ajt@debian.org>
1677
1678         * madison (main): use explicit JOIN syntax for
1679         -S/--source-and-binary queries to reduce the query's runtime from
1680         >10 seconds to negligible.
1681
1682 2003-02-08  James Troup  <james@nocrew.org>
1683
1684         * rene (main): in the NVIU output, append items to lists, not
1685         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1686         should be removed.
1687
1688 2003-02-07  James Troup  <james@nocrew.org>
1689
1690         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1691         Sources [aj].
1692
1693         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1694         O. Benham/Adam Heath/.
1695
1696         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1697         (Suite::Stable::Description): update for 3.0r1a.
1698         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1699
1700         * utils.py (gpgv_get_status_output): rename from
1701         get_status_output().
1702
1703         * neve (check_signature): use gpgv_get_status_output and Dict from
1704         utils().  Add missing newline to error message about duplicate tokens.
1705
1706         * saffron (per_arch_space_use): also print space used by source.
1707         (output_format): correct string.join() invocation.
1708
1709         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1710
1711 2003-02-04  James Troup  <james@nocrew.org>
1712
1713         * cron.buildd: correct generation of Packages/Sources and grep out
1714         non-US/non-free as well as non-free.
1715
1716 2003-02-03  Ryan Murray  <rmurray@debian.org>
1717
1718         * cron.buildd: generate quinn-diff output with full Packages/Sources
1719           files to get out-of-date vs. uncompiled right.
1720         * apt.conf.buildd: no longer generate uncompressed files, as they
1721           are generated in cron.buildd instead
1722         * add -i option to quinn-diff to ignore binary-all packages
1723         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1724           aren't in the packages file, the arch that uploaded them will build
1725           them anyways...
1726
1727 2003-01-30  James Troup  <james@nocrew.org>
1728
1729         * rene (main): only print suggested melanie command when there's
1730         some NBS to remove.
1731
1732 2003-01-30  Ryan Murray  <rmurray@debian.org>
1733
1734         * cron.buildd: fix incorrectly inverted lockfile check
1735
1736 2003-01-29  Ryan Murray  <rmurray@debian.org>
1737
1738         * cron.buildd: generate override.sid.all3.src
1739         * apt.conf.buildd: use generated override.sid.all3.src
1740
1741 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1742
1743         * utils.py (get_status_output): moved from jennifer.
1744         (Dict): likewise.
1745         (check_signature): likewise.
1746
1747         * jennifer (get_status_output): moved to utils.py.
1748         (Dict): likewise.
1749         (check_signature): likewise.
1750
1751         * utils.py (check_signature): add an argument to specifiy which
1752         function to call when an error was found.
1753         (check_signature): document this function better.
1754
1755         * jennifer (check_files): pass the reject function as an argument
1756         to utils.check_signature.
1757         (process_it): likewise.
1758
1759 2003-01-20  James Troup  <james@nocrew.org>
1760
1761         * rene (main): lots of changes to improve the output and make it
1762         more useful.
1763
1764         * katie.py (Katie.check_override): make the override messages
1765         clearer (hopefully).
1766
1767 2002-12-26  James Troup  <james@nocrew.org>
1768
1769         * ziyi (usage): document the ability to pass suite(s) as
1770         argument(s).
1771         (main): read apt.conf after checking for -h/--help.
1772
1773         * tea (main): take the check to run as an argument.
1774
1775         * saffron.R: R script to graph daily install runs.
1776
1777         * saffron: new script; various stats functions.
1778
1779         * rhona (main): connect to the database after checking for -h/--help.
1780
1781         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1782
1783         * melanie (main): sort versions with utils.arch_compare_sw().
1784
1785         * madison (usage): alphabetize order of options.
1786         * melanie (usage): likewise.
1787
1788         * kelly (usage): fix usage short description (we aren't dinstall).
1789
1790         * julia (usage): fix usage description and alphabetize order of
1791         options.
1792
1793         * jeri (usage): fix usage short description.
1794
1795         * jennifer (main): move --help and --version checks from here...
1796         (init): to here so that they work with an empty katie.conf.
1797         * kelly: likewise.
1798
1799         * alyson (usage): new function.
1800         (main): use it.
1801         * andrea: likewise.
1802         * ashley: likewise.
1803         * cindy: likewise.
1804         * denise: likewise.
1805         * helena: likewise.
1806         * neve: likewise.
1807         * rene: likewise.
1808         * rose: likewise.
1809         * tea: likewise.
1810
1811         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1812         entry that caused tasks to be omitted from 3.0r1.
1813
1814 2002-12-10  James Troup  <james@nocrew.org>
1815
1816         * jennifer (check_files): sanity check the Depends field to ensure
1817         it's non-empty if present since apt chokes on an empty one.
1818         Thanks to Ryan Murray for the idea.
1819
1820 2002-12-08  James Troup  <james@nocrew.org>
1821
1822         * katie.conf-security (Helena::Directories): new; include accepted
1823         in addition to byhand and new.
1824
1825         * helena (process_changes_files): use utils.arch_compare_sw().
1826         Justify things based on the longest [package, version,
1827         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1828         the commas in architecture and version lists for the same reason.
1829         (main): make directories we process configurable through
1830         Helena::Directories in the config file; if that doesn't exist
1831         default to the old hardcoded values (byhand & new).
1832
1833         * utils.py (arch_compare_sw): moved here from madison.
1834         * madison (main): adjust to compensate.
1835
1836 2002-12-06  James Troup  <james@nocrew.org>
1837
1838         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1839         right filename.
1840
1841 2002-12-05  James Troup  <james@nocrew.org>
1842
1843         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1844
1845 2002-11-28  Randall Donald  <rdonald@debian.org>
1846
1847         * fernanda.py (read_control): fix typo of 'Architecture'.
1848
1849 2002-11-26  James Troup  <james@nocrew.org>
1850
1851         * lisa (check_pkg): call less with '-R' so we see the colour from
1852         Randall's fernanda changes.
1853
1854         * neve (process_sources): if Directory points to a legacy location
1855         but the .dsc isn't there; assume it's broken and look in the pool.
1856         (update_section): new, borroed from alyson.
1857         (do_da_do_da): use it.
1858         (process_packages): add suite_it to the cache key used for
1859         arch_all_cache since otherwise we only add a package to the first
1860         suite it's in and ignore any subsequent ones.
1861
1862         * katie.conf-non-US (Location): fixed to reflect reality (all
1863         suites, except old-proposed-updates (which is legacy-mixed)) are
1864         pool.
1865
1866         * utils.py (try_with_debug): wrapper for print_exc().
1867         * jenna (main): use it.
1868         * neve (main): likewise.
1869
1870 2002-11-25  Randall Donald  <rdonald@debian.org>
1871
1872         * fernanda.py (main): added -R to less command line for raw control
1873         character support to print colours
1874         (check_deb): Instead of running dpkg -I on deb file, call
1875         output_deb_info, the new colourized control reporter.
1876         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1877         of printing out each .dsc line.
1878         (output_deb_info): new function. Outputs each key/value pair from
1879         read_control except in special cases where we highlight section,
1880         maintainer, architecture, depends and recommends.
1881         (create_depends_string): new function. Takes Depends tree and looks
1882         up it's compontent via projectb db, colourizes and constructs a
1883         depends string in original order.
1884         (read_dsc): new function. reads and parses .dsc info via
1885         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1886         colourized.
1887         (read_control): new function. reads and parses control info via
1888         apt_pkg. Depends and Recommends are split in to list structures,
1889         Section and Architecture are colourized. Maintainer is colourized
1890         if it has a localhost.localdomain address.
1891         (split_depends): new function. Creates a list of lists of
1892         dictionaries of depends (package,version relation). Top list is
1893         colected from comma delimited items. Sub lists are | delimited.
1894         (get_comma_list): new function. splits string input among commas
1895         (get_or_list): new function. splits string input among | delimiters
1896         (get_depends_parts): new function. Creates dictionary of package name
1897         and version relation from dependancy string.
1898         Colours for section and depends are per component. Unfound depends
1899         are in bold. Lookups using version info is not supported yet.
1900
1901 2002-11-22  James Troup  <james@nocrew.org>
1902
1903         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1904         'udmsearch'.
1905
1906         * amber (make_advisory): string.atol() is deprecated and hasn't
1907         been ported to string methods.  Use long() instead.
1908
1909         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1910         creating the database since we'll fail badly if it's created with
1911         e.g. UNICODE encoding.
1912
1913         * rose (main): AptCnf is a global.
1914
1915         * neve (get_location_path): new function determines the location
1916         from the the first (left-most) directory of a Filename/Directory.
1917         (process_sources): don't need 'location' anymore.  Use
1918         utils.warn().  Use the Directory: field for each package to find
1919         the .dsc.  Use get_location_path() to determine the location for
1920         each .dsc.
1921         (process_packages): do't need 'location' anymore.  Use
1922         utils.warn().  Use get_location_path().
1923         (do_sources): don't need 'location', drop 'prefix' in favour of
1924         being told the full path to the Sources file, like
1925         process_packages().
1926         (do_da_do_da): main() renamed, so that main can call us in a
1927         try/except.  Adapt for the changes in do_sources() and
1928         process_packages() above.  Assume Sources and Packages file are in
1929         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1930
1931         * katie.conf-security (Location): fixed to reflect reality (all
1932         suites are pool, not legacy).
1933
1934         * utils.py (print_exc): more useful (i.e. much more verbose)
1935         traceback; a recipe from the Python cookbook.
1936         * jenna (main): use it.
1937         * neve (main): likewise.
1938
1939 2002-11-19  James Troup  <james@nocrew.org>
1940
1941         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1942         handling which was FUBAR for multi-suite uploads.  Now we just
1943         make a dictionary of destinations to copy to and iterate over
1944         those.
1945
1946         * fernanda.py (check_deb): run linda as well as lintian.
1947
1948 2002-10-21  James Troup  <james@nocrew.org>
1949
1950         * melanie (main): change X-Melanie to X-Katie and prefix it with
1951         'melanie '.
1952
1953         * lisa (main): prefix X-Katie with 'lisa '.
1954
1955         * jennifer (clean_holding): fix typo in string method changes;
1956         s/file.find(file/file.find(/.
1957
1958         * cron.daily: invoke helena and send the report to ftpmaster.
1959         * cron.daily-non-US: likewise.
1960
1961 2002-10-16  James Troup  <james@nocrew.org>
1962
1963         * kelly (check): call reject() with a blank prefix when parsing
1964         the return of check_dsc_against_db() since it does its own
1965         prefix-ing.
1966
1967         * rose: new script; only handles directory creation initally.
1968
1969         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1970         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1971
1972 2002-10-06  James Troup  <james@nocrew.org>
1973
1974         * rene (main): remove bogus argument handling.
1975
1976         * kelly: katie, renamed.
1977         * cron.daily: adapt for katie being renamed to kelly.
1978         * cron.daily-non-US: likewise.
1979         * amber (main): likewise.
1980
1981         * Changes for python 2.1.
1982
1983         * kelly: time.strftime no longer requires a second argument of
1984         "time.localtime(time.time())".
1985         * logging.py: likewise.
1986         * rhona: likewise.
1987         * shania (init): likewise.
1988
1989         * amber: use augmented assignment.
1990         * catherine (poolize): likewise.
1991         * claire.py (fix_component_section): likewise.
1992         * halle (check_changes): likewise.
1993         * helena: likewise.
1994         * jenna: likewise.
1995         * jennifer: likewise.
1996         * jeri: likewise.
1997         * katie.py: likewise.
1998         * kelly: likewise.
1999         * lisa: likewise.
2000         * madison (main): likewise.
2001         * melanie: likewise.
2002         * natalie: likewise.
2003         * neve: likewise.
2004         * rhona: likewise.
2005         * tea: likewise.
2006         * utils.py: likewise.
2007         * ziyi: likewise.
2008
2009         * amber: use .endswith.
2010         * fernanda.py: likewise.
2011         * halle (main): likewise.
2012         * jennifer: likewise.
2013         * jeri: likewise.
2014         * katie.py: likewise.
2015         * kelly: likewise.
2016         * lisa: likewise.
2017         * neve: likewise.
2018         * shania (main): likewise.
2019         * utils.py: likewise.
2020
2021         * alyson: use string methods.
2022         * amber: likewise.
2023         * andrea: likewise.
2024         * ashley: likewise.
2025         * catherine: likewise.
2026         * charisma: likewise.
2027         * claire.py: likewise.
2028         * db_access.py: likewise.
2029         * denise: likewise.
2030         * halle: likewise.
2031         * heidi: likewise.
2032         * helena: likewise.
2033         * jenna: likewise.
2034         * jennifer: likewise.
2035         * jeri: likewise.
2036         * julia: likewise.
2037         * katie.py: likewise.
2038         * kelly: likewise.
2039         * lisa: likewise.
2040         * logging.py: likewise.
2041         * madison: likewise.
2042         * melanie: likewise.
2043         * natalie: likewise.
2044         * neve: likewise.
2045         * rene: likewise.
2046         * tea: likewise.
2047         * utils.py: likewise.
2048         * ziyi: likewise.
2049
2050 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2051
2052         * utils.py (parse_changes): use <string>.startswith() rather than
2053         string.find().
2054
2055 2002-08-27  Anthony Towns  <ajt@debian.org>
2056
2057         * katie.py (in_override_p): when searching for a source override,
2058         and the dsc query misses, search for both udeb and deb overrides
2059         as well. Should fix the UNACCEPT issues with udebs.
2060
2061 2002-08-24  James Troup  <james@nocrew.org>
2062
2063         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2064         source+binary package finding code which was causing severe
2065         performance degradation with postgres 7.2.
2066
2067 2002-08-14  James Troup  <james@nocrew.org>
2068
2069         * julia (main): use the pwd.getpwall() to get system user info
2070         rather than trying to read a password file.  Add a -n/--no-action
2071         option.
2072
2073         * cron.hourly: julia no longer takes any arguments.
2074         * cron.hourly-non-US: likewise.
2075
2076 2002-08-07  James Troup  <james@nocrew.org>
2077
2078         * katie (install): handle multi-suite uploads when CopyChanges
2079         and/or CopyKatie are in use, ensuring we only copy stuff once.
2080
2081 2002-08-01  Ryan Murray  <rmurray@debian.org>
2082
2083         * wanna-build/trigger.daily: initial commit, with locking
2084         * cron.buildd: add locking against daily run
2085
2086 2002-07-30  James Troup  <james@nocrew.org>
2087
2088         * melanie (main): readd creation of suite_ids_list so melanie is
2089         remotely useful again.
2090
2091         * katie.conf: adopt for woody release; diable
2092         StableDislocationSupport, add oldstable, adjust other suites and
2093         mappings, fix up location.
2094         * katie.conf-non-US: likewise.
2095         * katie.conf-security: likewise.
2096
2097         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2098         stable.
2099         * apt.conf.stable-non-US: likewise.
2100
2101         * apt.conf-security: adapt for woody release; adding oldstable,
2102         oldstable, adjust stable and testing.
2103         * cron.daily-security: likewise.
2104         * cron.buildd-security: likewise.
2105
2106         * apt.conf: adapt for woody release; rename woody-proposed-updates
2107         to testing-proposed-updates and proposed-updates to
2108         old-proposed-updates.
2109         * apt.conf-non-US: likewise.
2110
2111         * vars-non-US (copyoverrides): add sarge.
2112         * vars (copyoverrides): likewise.
2113
2114         * vars-security (suites): add oldstable.
2115
2116 2002-07-22  Ryan Murray  <rmurray@debian.org>
2117
2118         * apt.conf.security-buildd: use suite codenames instead of
2119           distnames.
2120
2121 2002-07-16  James Troup  <james@nocrew.org>
2122
2123         * denise (main): fix filenames for testing override files.
2124
2125 2002-07-14  James Troup  <james@nocrew.org>
2126
2127         * jennifer (process_it): call check_md5sums later so we can check
2128         files in the .dsc too
2129         (check_md5sums): check files in the .dsc too.  Check both md5sum
2130         and size.
2131
2132         * melanie (main): use parse_args() and join_with_commas_and() from
2133         utils.  If there's nothing to do, say so and exit, don't ask for
2134         confirmation etc.
2135
2136         * amber (join_with_commas_and): moved from here to ...
2137         * utils.py (join_with_commas_and): here.
2138
2139 2002-07-13  James Troup  <james@nocrew.org>
2140
2141         * madison (main): use parse_args() from utils.  Support
2142         -c/--component.
2143
2144         * jenna (parse_args): moved from here to ...
2145         * utils.py (parse_args): here.
2146
2147         * katie.conf (Architectures): minor corrections to the description
2148         for arm, mips and mipsel.
2149         * katie.conf-non-US (Architectures): likewise.
2150         * katie.conf-security (Architectures): likewise.
2151
2152         * cron.daily-security: use natalie's new -a/--add functionality to
2153         flesh out the security overrides.
2154
2155 2002-07-12  James Troup  <james@nocrew.org>
2156
2157         * cron.buildd (ARCHS): add arm.
2158
2159         * katie.conf: 2.2r7 was released.
2160         * katie.conf-non-US: likewise.
2161
2162         * utils.py (parse_changes): handle a multi-line field with no
2163         starting line.
2164
2165 2002-06-25  James Troup  <james@nocrew.org>
2166
2167         * templates/amber.advisory (To): add missing email address since
2168         __WHOAMI__ is only a name.
2169
2170         * katie.conf-security (Melane::LogFile): correct to go somewhere
2171         katie has write access to.
2172         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2173         Testing.
2174
2175         * natalie: add support for -a/-add which adds packages only
2176         (ignoring changes and deletions).
2177
2178         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2179         use FindB, not get.
2180
2181 2002-06-22  James Troup  <james@nocrew.org>
2182
2183         * jennifer (check_files): validate the package name and version
2184         field.  If 'Package', 'Version' or 'Architecture' are missing,
2185         don't try any further checks.
2186         (check_dsc): likewise.
2187
2188         * utils.py (re_taint_free): add '~' as a valid character.
2189
2190 2002-06-20  Anthony Towns  <ajt@debian.org>
2191
2192         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2193
2194 2002-06-09  James Troup  <james@nocrew.org>
2195
2196         * jennifer (check_files): reduce useless code.
2197
2198         * cron.daily-security: run symlinks -dr on $ftpdir.
2199
2200         * vars-security (ftpdir): add.
2201
2202 2002-06-08  James Troup  <james@nocrew.org>
2203
2204         * neve (update_override_type): transaction is handled higher up in
2205         main().
2206         (update_priority): likewise.
2207         (process_sources): remove code that makes testing a duplicate of
2208         stable.
2209         (process_packages): likewise.
2210
2211         * templates/amber.advisory: add missing mail headers.
2212
2213         * cron.daily-security: also call apt-ftparchive clean for
2214         apt.conf.buildd-security.
2215         * cron.weekly: likewise.
2216
2217         * amber (do_upload): write out a list of source packages (and
2218         their version) uploaded for testing.
2219         (make_advisory): add more Subst mappings for the mail headers.
2220         (spawn): check for suspicious characters in the command and abort
2221         if their found.
2222
2223 2002-06-07  James Troup  <james@nocrew.org>
2224
2225         * ziyi (main): remove the 'nonus'/'security' hacks and use
2226         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2227         the lower level Release files, even if they don't exist.  fubar
2228         out if we can't open a lower level Release file for writing.
2229
2230         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2231         ziyi.
2232         * katie.conf-security (Dinstall): likewise.
2233
2234         * amber (do_upload): renamed from get_file_list().  Determine the
2235         upload host from the original component.
2236         (init): Add a -n/--no-action option.  Fix how we get changes_files
2237         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2238         sys.argv).  Add an Options global.
2239         (make_advisory): support -n/--no-action.
2240         (spawn): likewise.
2241         (main): likewise.
2242         (usage): document -n/--no-action.
2243
2244         * cron.buildd-security: fix path to Packages-arch-specific in
2245         quinn-diff invocation.
2246
2247         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2248         to proper suite names (i.e. stable, testing) rather than codenames
2249         (potato, woody).
2250         (Dinstall::DefaultSuite): likewise.
2251         (Suite): likewise.
2252         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2253         * vars-security (suites): likewise.
2254         * apt.conf-security: likewise.
2255
2256         * katie.conf-security (Component): add "updates/" prefix.
2257         (Suite::*::Components): likewise.
2258         (ComponentMappings): new; map all {ftp-master,non-US} components
2259         -> updates/<foo>.
2260
2261         * katie.conf-security (Natalie): removed; the options have
2262         defaults and ComponentPosition is used by alyson which doesn't
2263         work on security.d.o.
2264         (Amber): replace UploadHost and UploadDir with ComponentMappings
2265         which is a mapping of components -> URI.
2266         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2267         (SuiteMappings): use "silent-map" in preference to "map".
2268
2269         * cron.unchecked-security: fix call to cron.buildd-security.
2270
2271         * cron.daily-security: map local suite (stable) -> override suite
2272         (potato) when fixing overrides.  Correct component in natalie call
2273         to take into account "updates/" prefix.  Fix cut'n'waste in
2274         override.$dist.all3 generation, the old files weren't being
2275         removed, so they were endlessly growing.
2276
2277         * neve (main): don't use .Find for the CodeName since we require
2278         it.  Location::*::Suites is a ValueList.
2279         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2280         out on expired keys, just warn.
2281         (update_override_type): new function; lifted from alyson.
2282         (update_priority): likewise.
2283         (main): use update_{override_type,priority}().
2284
2285         * jennifer (check_distributions): remove redunant test for
2286         SuiteMappings; ValueList("does-not-exist") returns [] which is
2287         fine.  Add support for a "silent-map" type which doesn't warn
2288         about the mapping to the user.
2289         (check_files): add support for ComponentMappings, similar to
2290         SuiteMappings, but there's no type, just a source and a
2291         destination and the original component is stored in "original
2292         component".
2293         * katie.py (Katie.dump_vars): add "original component" as an
2294         optionsal files[file] dump variable.
2295
2296         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2297         query.  Add support for section-less legacy locations like current
2298         security.debian.org through YetAnotherConfigBoolean
2299         'LegacyStableHasNoSections'.
2300         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2301
2302         * utils.py (real_arch): moved here from ziyi.
2303         * ziyi (real_arch): moved to utils.py.
2304         * ziyi (main): likewise.
2305
2306         * claire.py (find_dislocated_stable): use real_arch() with
2307         filter() to strip out source and all.
2308         * neve (main): likewise.
2309         * rene (main): likewise.
2310         * jeri (parse_packages): likewise.
2311
2312 2002-06-06  James Troup  <james@nocrew.org>
2313
2314         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2315         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2316         doing.
2317
2318 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2319
2320         * jeri (check_joey): check if the line contains two elements
2321         before accessing the second.  Also, strip trailing spaces as well
2322         as the newline.
2323         * halle (check_joey): likewise.
2324
2325 2002-06-05  James Troup  <james@nocrew.org>
2326
2327         * cron.unchecked-security: new file; like cron.unchecked but if
2328         there's nothing to do exit so we don't call cron.buildd-security.
2329
2330         * apt.conf.buildd-security: new file.
2331
2332         * vars (archs): alphabetize.
2333         * vars-non-US (archs): likewise.
2334
2335         * vars-security: add unchecked.
2336
2337         * madison (main): reduce rather bizarrely verbose and purposeless
2338         code to print arches to a simple string.join.
2339
2340         * katie.conf (Suites::Unstable): add UdebComponents, a new
2341         valuelist of suites, used by jenna to flesh out the list of
2342         <suite>_main-debian-installer-binary-<arch>.list files generated.
2343         (Dinstall): add StableDislocationSupport, a new boolean used by
2344         jenna to enable or disable stable dislocation support
2345         (i.e. claire), as true.
2346
2347         * katie.conf (Dinstall): add StableDislocationSupport, a new
2348         boolean used by jenna to enable or disable stable dislocation
2349         support (i.e. claire), as true.
2350         * katie.conf-non-US: likewise.
2351         * katie.conf-security: likewise.
2352
2353         * cron.daily-security: generate .all3 overrides for the buildd
2354         support.  Freshen a local copy of Packages-arch-specific from
2355         buildd.debian.org.
2356
2357         * claire.py (find_dislocated_stable): disable the support for
2358         files in legacy-mixed locations since none of the Debian archives
2359         have any anymore.
2360
2361         * helena: new script; produces a report on NEW and BYHAND
2362         packages.
2363
2364         * jenna: rewritten from scratch to fix speed problems.  Run time
2365         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2366         minutes, 105 seconds are the monster query and 70 odd seconds is
2367         claire.
2368
2369         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2370         irrelevant.
2371
2372 2002-06-05  Ryan Murray  <rmurray@debian.org>
2373
2374         * cron.buildd-security: new file.
2375
2376 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2377
2378         * denise (list): take a file argument and use it.
2379         (main): don't abuse sys.stdout, just write to the file.
2380
2381         * claire.py (usage): Fix misspelling.
2382         (clean_symlink): Simplify.
2383         (find_dislocated_stable): Avoid unnecessary work.
2384
2385 2002-05-29  James Troup  <james@nocrew.org>
2386
2387         * cameron: removed; apt-ftparchive can simply walk the directory.
2388
2389 2002-05-26  Anthony Towns  <ajt@debian.org>
2390
2391         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2392         for the autobuilders.
2393
2394 2002-05-24  Ryan Murray  <rmurray@debian.org>
2395
2396         * cron.buildd: update override files before running apt-ftparchive
2397
2398 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2399
2400         * amber (main): remove extra space in prompt.
2401
2402         * utils.py (validate_changes_file_arg): use original filename in
2403         error messages.
2404
2405         * jeri (check_joey): close file after use.
2406         (parse_packages): likewise.
2407         (main): setup debug option properly.
2408
2409         * melanie (main): remove unused packages variable and simplify the
2410         code to build up con_packages by using repr().
2411
2412 2002-05-23  James Troup  <james@nocrew.org>
2413
2414         * lisa (recheck): when we reject, also return 0 so the package is
2415         skipped.
2416         (sg_compare): fix note sorting.
2417         (recheck): remove the .katie file after rejection.
2418
2419         * katie.py (Katie.accept): accepted auto-build support take 3;
2420         this time adding support for security.  Security needs a) non-pool
2421         files copied rather than symlinked since accepted is readable only
2422         by katie/security and www-data needs to be able to see the files,
2423         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2424         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2425         SecurityAcceptedAutoBuild is a new boolean which controls whether
2426         or not normal or security style is used.  The unstable_accepted
2427         table was renamed to accepted_autobuild and a suite column added.
2428         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2429         didn't have it's last_used/in_accepted flags correctly updated.
2430         * katie (install): likewise.
2431         * rhona (clean_accepted_autobuild): likewise.
2432
2433 2002-05-22  James Troup  <james@nocrew.org>
2434
2435         * lisa (sort_changes): new function; sorts changes properly.
2436         Finally.
2437         (sg_compare): new function; helper for sort_changes().  Sorts by
2438         have note and time of oldest upload.
2439         (indiv_sg_compare): new function; helper for sort_changes().
2440         Sorts by source version, have source and filename.
2441         (main): use sort_changes().
2442         (changes_compare): obsoleted; removed.
2443
2444 2002-05-20  James Troup  <james@nocrew.org>
2445
2446         * rhona (clean_accepted_autobuild): don't die if a file we're
2447         trying to remove doesn't exist.  Makes rhona more friendly to
2448         katie/katie.py crashes/bugs without any undue cost.
2449
2450 2002-05-19  James Troup  <james@nocrew.org>
2451
2452         * lisa (main): if sorting a large number of changes give some
2453         feedback.
2454         (recheck): new function, run the same checks (modulo NEW,
2455         obviously) as katie does, if they fail do the standard
2456         reject/skip/quit dance.
2457         (do_pkg): use it.
2458
2459         * katie (install): don't try to unlink the symlink in the
2460         AcceptedAutoBuild support if the destination is not a symlink (or
2461         doesn't exist).  Avoids unnecessary bombs on previous partial
2462         accepts and will still bomb hard if the file exists and isn't a
2463         symlink.
2464
2465         * utils.py: blah, commands _is_ used when the mail stuff isn't
2466         commented out like it is in my test environment.
2467
2468         * lisa (changes_compare): "has note" overrides everything else.
2469         Use .katie files rather than running parse_changes, faster and
2470         allows "has note" to work.  Correct version compare, it was
2471         reversed.  Ctime check should only kick in if the source packages
2472         are not the same.
2473         (print_new): print out and return any note.  Rename 'ret_code' to
2474         'broken'.
2475         (edit_new): renamed from spawn_editor.  Don't leak file
2476         descriptors.  Clean up error message if editor fails.
2477         (edit_note): new function, allows one to edit notes.
2478         (do_new): add note support, editing and removing.
2479         (init): kill -s/--sort; with notes we always want to use our
2480         sorting method.
2481         (usage): likewise.
2482
2483         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2484         changes field.
2485
2486         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2487         it default to 0.  Adapt tests to assume it's boolean.
2488         * fernanda.py (check_changes): adjust call appropriately.
2489         * halle (check_changes): likewise.
2490         * jennifer (check_changes): likewise.
2491         * jeri (check_changes): likewise.
2492         * shania (flush_orphans): likewise.
2493
2494         * jennifer (check_dsc): pass is_a_dsc by name when calling
2495         build_file_list() for clarity.
2496         * shania (flush_orphans): likewise.
2497         * tea (check_missing_tar_gz_in_dsc): likewise.
2498
2499         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2500         calling parse_changes() for clarity.
2501         * tea (check_dscs): likewise.
2502
2503         * utils.py (parse_changes): make dsc_whitespace_rules default to
2504         not true.
2505         * halle (check_changes): adjust call appropriately.
2506         * jennifer (check_changes): likewise.
2507         * jeri (check_changes): likewise.
2508         * lisa (changes_compare): likewise.
2509         * utils.py (changes_compare): likewise.
2510         * melanie (main): likewise.
2511         * shania (flush_orphans): likewise.
2512         * fernanda.py (check_changes): likewise.
2513
2514 2002-05-18  James Troup  <james@nocrew.org>
2515
2516         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2517         it's not useful and by and large a duplication of information
2518         available in readable format in other files.
2519
2520 2002-05-16  Ryan Murray  <rmurray@debian.org>
2521
2522         * melanie: Dir::TemplatesDir -> Dir::Templates
2523
2524 2002-05-15  Ryan Murray  <rmurray@debian.org>
2525
2526         * cameron: correct the use of os.path.join
2527
2528 2002-05-15  Anthony Towns  <ajt@debian.org>
2529
2530         * ziyi: Update to match the new format for Architectures/Components
2531         in katie.conf.
2532
2533 2002-05-14  James Troup  <james@nocrew.org>
2534
2535         * amber: new script; 'installer' wrapper script for the security
2536         team.
2537
2538         * katie.py (Katie.announce): remove unused 'dsc' local
2539         variable. (pychecker)
2540
2541         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2542
2543         * neve: don't import sys, we don't use it. (pychecker)
2544         (check_signature): fix return type mismatch. (pychecker)
2545
2546         * utils.py: don't import commands, we don't use it.  (pychecker)
2547
2548         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2549
2550         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2551         obsoleted by the change to "othercomponents" handling in jennifer
2552         detailed below.
2553         (Katie.cross_suite_version_check): new function; implements
2554         cross-suite version checking rules specified in the conf file
2555         while also enforcing the standard "must be newer than target
2556         suite" rule.
2557         (Katie.check_binary_against_db): renamed, since it's invoked once
2558         per-binary, "binaries" was inaccurate.  Use
2559         cross_suite_version_check() and don't bother with the "oldfiles"
2560         rubbish as jennifer works out "othercomponents" herself now.
2561         (Katie.check_source_against_db): use cross_suite_version_check().
2562
2563         * katie (check): the version and file overwrite checks
2564         (check_{binary,source,dsc}_against_db) are not per-suite.
2565
2566         * jennifer (check_files): less duplication of
2567         'control.Find("Architecture", "")' by putting it in a local
2568         variable.
2569         (check_files): call check_binary_against_db higher up since it's
2570         not a per-suite check.
2571         (check_files): get "othercomponents" directly rather than having
2572         check_binary_against_db do it for us.
2573
2574         * heidi (main): 'if x:', not 'if x != []:'.
2575         * katie.py (Katie.in_override_p): likewise.
2576         (Katie.check_dsc_against_db): likewise.
2577         * natalie (main): likewise.
2578         * rene (main): likewise.
2579         * ziyi (real_arch): likewise.
2580
2581         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2582         and OverrideType are now value lists, not lists.
2583         * andrea (main): likewise.
2584         * cindy (main): likewise.
2585         * claire.py (find_dislocated_stable): likewise.
2586         * denise (main): likewise.
2587         * jenna (main): likewise.
2588         * jennifer (check_distributions): likewise.
2589         (check_files): likewise.
2590         (check_urgency): likewise (Urgency::Valid).
2591         * jeri (parse_packages): likewise.
2592         * neve (main): likewise (and Location::%s::Suites).
2593         * rene (main): likewise.
2594
2595 2002-05-13  James Troup  <james@nocrew.org>
2596
2597         * katie.py (Katie.check_source_against_db): correct case of reject
2598         message to be consistent with binary checks.
2599
2600         * jennifer (get_status_output): don't leak 2 file descriptors per
2601         invocation.
2602         (check_signature): add missing '\n' to "duplicate status token"
2603         error message.
2604
2605 2002-05-09  James Troup  <james@nocrew.org>
2606
2607         * utils.py (validate_changes_file_arg): new function; validates an
2608         argument which should be a .changes file.
2609         * ashley (main): use it.
2610         * lisa (main): likewise.
2611
2612         * katie.py (Katie.check_dsc_against_db): since there can be more
2613         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2614         entry still exists in files.
2615
2616         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2617         files, since check_dsc_against_db() deletes the .orig.tar.gz
2618         entry.
2619
2620         * cameron: cleanups.
2621
2622         * utils.py (changes_compare): change sort order so that source
2623         name and source version trump 'have source'; this should fix
2624         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2625         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2626         by Ryan.
2627
2628         * lisa (main): allow the arguments to be .katie files too.
2629
2630 2002-05-07  Ryan Murray  <rmurray@debian.org>
2631
2632         * cron.buildd: add s390 to arch list again
2633
2634 2002-05-05  Ryan Murray  <rmurray@debian.org>
2635
2636         * cron.buildd: new script, update w-b database from unstable_accepted
2637         table
2638         * cameron: new script, take list in unstable_accepted and write out
2639         a file list for apt-ftparchive
2640         * apt.conf.buildd: new apt configuration for Packages/Sources for
2641         unstable_accepted
2642         * vars: add s390 to arch list.
2643
2644 2002-05-03  James Troup  <james@nocrew.org>
2645
2646         * neve (main): don't hard code the calling user as that doesn't
2647         work with modern postgres installs.  Fix psql invocation for
2648         init_pool.sql (database name required).  Dont' hard code the
2649         database name.
2650         (process_sources): add support for fingerprint and install_date.
2651         (process_packages): add support for fingerprint.
2652         (do_sources): pass in the directory, fingerprint support needs it.
2653         (get_status_output): borrowed from jennifer.
2654         (reject): likewise.
2655         (check_signature): likewise.
2656
2657         * katie (install): only try to log urgencies if Urgency_Logger is
2658         defined.
2659         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2660         defined; only close Urgency_Logger if it's defined.
2661
2662         * catherine (poolize): adapt for Dir rationalization.
2663         * claire.py (find_dislocated_stable): likewise.
2664         * denise (main): likewise.
2665         * halle (check_joey): likewise.
2666         * jenna: likewise.
2667         * jennifer: likewise.
2668         * jeri: likewise.
2669         * katie.py: likewise.
2670         * katie: likewise.
2671         * lisa (do_bxa_notification): likewise.
2672         * logging.py (Logger.__init__): likewise
2673         * rene (main): likewise.
2674         * rhona (clean): likewise.
2675         * shania (init): likewise.
2676         * tea: likewise.
2677         * ziyi: likewise.
2678
2679         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2680         FindB, not FindI.
2681
2682         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2683         boolean, use FindB, not get.
2684
2685         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2686         .orig.tar.gz's which are an exact (size/md5sum) match.
2687
2688         * ashley (main): really allow *.katie files as arguments too;
2689         noticed by aj.
2690
2691         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2692
2693 2002-05-03  Anthony Towns  <ajt@debian.org>
2694
2695         * ziyi: support for security.
2696
2697 2002-05-02  James Troup  <james@nocrew.org>
2698
2699         * jennifer (accept): call Katie.check_override() unconditional as
2700         no-mail check moved into that function.
2701         (do_byhand): likewise.
2702
2703         * katie.py (Katie.check_override): don't do anything if we're a)
2704         not sending mail or b) the override disparity checks have been
2705         disbled via Dinstall::OverrideDisparityCheck.
2706
2707         * jennifer (check_files): don't hard code Unstable as the suite
2708         used to check for architecture validity; use
2709         Dinstall::DefaultSuite instead, if it exists.
2710         (accept): conditionalize
2711
2712         * katie.py (Katie.update_subst): support global maintainer
2713         override with Dinstall::OverrideMaintainer.
2714
2715         * jennifer (check_distributions): new function, Distribution
2716         validation and mapping.  Uses new SuiteMappings variable from
2717         config file to abstract suite mappings.
2718         (check_changes): call it.
2719
2720         * natalie: renamed; nothing imports or likely will for some time.
2721
2722         * denise (main): remove unused natalie import and init().
2723
2724         * natalie.py (init): removed.
2725         (main): initalize here instead and don't hardcode the database
2726         name.
2727
2728 2002-04-30  James Troup  <james@nocrew.org>
2729
2730         * katie.py (Katie.close_bugs): new function, split out from
2731         announce().
2732         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2733         true.
2734         (Katie.close_bugs): new function, split out
2735         (Katie.close_bugs): return immediately if there are no bugs to
2736         close.
2737
2738         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2739         * katie (do_reject): likewise.
2740         (stable_install): likewise.
2741         * katie.py (Katie.announce): likewise.
2742         (Katie.accept): likewise.
2743         (Katie.check_override): likewise.
2744         (Katie.do_reject): likewise.
2745         * lisa (do_bxa_notification): likewise.
2746         * melanie (main): likewise.
2747
2748         * utils.py (TemplateSubst): change second argument to be a
2749         filename rather than a template since every caller opened a file
2750         on the fly which was ugly and leaked file descriptor.
2751
2752 2002-04-29  James Troup  <james@nocrew.org>
2753
2754         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2755         <hertzog@debian.org> to send 'accepted' announce mails to the
2756         PTS. [#128140]
2757
2758 2002-04-24  James Troup  <james@nocrew.org>
2759
2760         * init_pool.sql (unstable_accepted): add two new fields to
2761         unstable_accepted; in_accepted is a boolean indicating whether or
2762         not the file is in accepted and last_used is a timestamp used by
2763         rhona to determine when to remove symlinks for installed packages.
2764
2765         * katie.py (Katie.accept): auto-build support take 2.  Create
2766         symlinks for all files into a seperate directory.  Add files to
2767         unstable_accepted as paths to the new directory; mark them as
2768         being in accepted for cameron.  Properly conditionalize it on a
2769         configuration variable.
2770
2771         * katie (install): likewise.  Update symlinks to point into the
2772         pool; mark the files for later deletion by rhona and mark them as
2773         not being in accepted for cameron.
2774
2775         * rhona (clean_accepted_autobuild): new function.
2776
2777 2002-04-22  James Troup  <james@nocrew.org>
2778
2779         * jennifer (check_files): handle db_access.get_location_id()
2780         returning -1 properly/better.
2781
2782         * rhona (clean_fingerprints): new function.
2783
2784 2002-04-21  James Troup  <james@nocrew.org>
2785
2786         * utils.py (touch_file): unused; remove.
2787         (plural): likewise.
2788
2789         * jennifer (check_files): close file descriptor used to get the
2790         control file.
2791         (check_md5sums): likewise.
2792         (callback): likewise.
2793
2794         * katie.py (Katie.do_reject): handle manual rejects much better;
2795         call the editor first and get confirmation from the user before
2796         proceeding.
2797
2798         * jennifer (check_signature): prefix_multi_line_string() moved to
2799         utils.
2800
2801         * utils.py (prefix_multi_line_string): moved here from jennifer.
2802
2803 2002-04-20  James Troup  <james@nocrew.org>
2804
2805         * lisa (main): handle non-existent files.
2806
2807         * ashley (main): allow *.katie files as arguments too.
2808
2809 2002-04-19  James Troup  <james@nocrew.org>
2810
2811         * katie.py (Katie.accept): add stuff to help auto-building from
2812         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2813         in the pool), create a symlink to it in the accepted directory and
2814         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2815
2816         * katie (install): undo the "auto-building from accepted" stuff
2817         (i.e. remove the .orig.tar.gz symlink and remove the files from
2818         unstable_accepted table).
2819
2820 2002-04-16  James Troup  <james@nocrew.org>
2821
2822         * jennifer (upload_too_new): fix typo which was causing all
2823         timestamp comparisons to be against the .changes file.  Also move
2824         back to the original directory so we do the comparisons against
2825         accurate timestamps.
2826
2827         * tea (check_missing_tar_gz_in_dsc): new function.
2828
2829         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2830         file mentioned in the .dsc.
2831
2832         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2833         way mails reach debian-{devel-,}changes@l.d.o.
2834
2835 2002-04-02  Ryan Murray  <rmurray@debian.org>
2836
2837         * cron.daily: run shania after rhona
2838         * cron.daily-non-US: likewise.
2839
2840 2002-04-01  James Troup  <james@nocrew.org>
2841
2842         * katie: re-add proposed-updates/stable install support.
2843
2844         * katie.py (Katie.dump_vars): add changes["changes"] as an
2845         optional field; should be mandatory later.
2846
2847 2002-03-31  James Troup  <james@nocrew.org>
2848
2849         * katie (install): support a Suite::<foo>::CopyKatie similar to
2850         CopyChanges.  Done seperately because .katie files don't need to
2851         be mirrored and will probably be copied to another directory as a
2852         result.
2853
2854         * halle (main): add missing debug to options.
2855
2856 2002-03-29  James Troup  <james@nocrew.org>
2857
2858         * madison (main): add a -r/--regex option.
2859
2860 2002-03-26  James Troup  <james@nocrew.org>
2861
2862         * lisa: don't trample on changes["distribution"]; make a copy of
2863         it as changes["suite"] instead and use that.
2864
2865 2002-03-16  Anthony Towns  <ajt@debian.org>
2866
2867         * templates/lisa.bxa_notification: Fix some grammatical errors.
2868         Encourage contact via bxa@ftp-master email address.
2869
2870 2002-03-15  James Troup  <james@nocrew.org>
2871
2872         * jennifer (check_timestamps): remove bogus raise in except.
2873
2874 2002-03-15  Anthony Towns  <ajt@debian.org>
2875
2876         * cron.monthly: rotate mail/archive/bxamail as well as
2877         mail/archive/mail. This is for a complete archive of
2878         correspondence with the BXA.
2879
2880 2002-03-14  Anthony Towns  <ajt@debian.org>
2881
2882         * crypto-in-main changes.
2883
2884         * utils.py (move, copy): add an optional perms= parameter to let you
2885         set the resulting permissions of the moved/copied file
2886         * katie.py (force_move): rejected/morgued files should be unreadable
2887         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2888         should be unreadable.
2889
2890 2002-03-07  Ryan Murray  <rmurray@debian.org>
2891
2892         * katie (install): check for existance of "files id" key as well as
2893         it being set to a valid value.
2894         * katie (install): check for existense and valid value for location
2895         id as well
2896
2897 2002-03-05  Ryan Murray  <rmurray@debian.org>
2898
2899         * katie.py (do_reject): reread the reason file after editing it.
2900
2901 2002-02-25  James Troup  <james@nocrew.org>
2902
2903         * jennifer (check_changes): don't enforce sanity in .changes file
2904         names since it doesn't seem to be possible; pcmica-cs and similar
2905         freak show packages in particular cause real problems.
2906
2907         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2908         each dsc_file since the .orig.tar.gz checking code now uses it as
2909         a boolean.  Fixes bizarro rejections which bogusly claimed
2910         .diff.gz md5sum/size was incorrect.
2911
2912 2002-02-24  James Troup  <james@nocrew.org>
2913
2914         * katie (process_it): reset reject_message.
2915
2916 2002-02-22  James Troup  <james@nocrew.org>
2917
2918         * db_access.py(set_files_id): disable use of
2919         currval('files_id_seq') because it was taking 3 seconds on auric
2920         which is insane (most calls take < 0.01) and simply call
2921         get_files_id() for the return value instead.
2922
2923         * katie.py (Katie.do_query): convenience function; unused by
2924         default, useful for profiling.
2925         * db_access.py (do_query): likewise.
2926
2927         * katie (install): fix insert SQL call when binary has no source.
2928
2929         * lisa (determine_new): auto-correct non-US/main to non-US.
2930         (determine_new): add a warning when adding things to stable.
2931         (edit_index): use our_raw_input().
2932         (edit_overrides): likewise.
2933         (do_new): likewise.  Use re.search() not re.match() since the
2934         default answer may not be the first one.
2935         (do_byhand): likewise.
2936         (do_new): Default to 'S'kip and never 'A'dd.
2937
2938         * jennifer (action): pass prompt to our_raw_input().
2939         * melanie (game_over): likewise.
2940         * katie (action): likewise.
2941
2942         * utils.py (our_raw_input): add an optional prompt argument to
2943         make the function more usable as a drop in replacement for
2944         raw_input().
2945
2946         * jennifer (check_files): correct reject() to not double prefix
2947         when using katie.py based functions.
2948         (check_dsc): likewise.
2949
2950         * katie.py (Katie.reject): prepend a new line if appropriate
2951         rathen than appending one to avoid double new lines when caller
2952         adds one of his own.
2953
2954         * lisa (determine_new): warn if the package is also in other
2955         components.
2956
2957 2002-02-20  James Troup  <james@nocrew.org>
2958
2959         * jennifer (check_files): if .changes file lists "source" in
2960         Architecture field, there must be a .dsc.
2961
2962 2002-02-15  James Troup  <james@nocrew.org>
2963
2964         * ashley (main): add some missing fields.
2965
2966         * katie.py (Katie.check_dsc_against_db): fix to take into account
2967         the fact that the .orig.tar.gz might be in byhand, accepted or
2968         new.  Also fix calling of reject().
2969         (Katie.check_binaries_against_db): fix calling of reject().
2970         (Katie.check_source_against_db): likewise.
2971         (Katie.dump_vars): add missing variables used for bug closures.
2972
2973         * lisa (changes_compare_by_time): sort by reverse time.
2974
2975         * katie.py (Katie.accept): log.
2976         (Katie.dump_vars): missing has_key test for optional changes fields.
2977
2978         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2979         (process_it): traceback goes to stderr, not stdout.
2980         (acknowledge_new): log.
2981         (do_byhand): likewise.
2982
2983         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2984
2985         * add_constraints.sql: add grants for the new fingerprint table.
2986
2987 2002-02-13  James Troup  <james@nocrew.org>
2988
2989         * katie (do_reject): basename the .changes filename before trying
2990         to use it to construct the .reason filename.
2991         (process_it): call Katie.update_subst() so do_reject() DTRT with
2992         the mail template.
2993         (do_reject): setup the mail template correctly.
2994
2995 2002-02-12  James Troup  <james@nocrew.org>
2996
2997         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2998         (check_files): don't abuse global dictionaries.
2999         (Ent): use all variables.
3000         (check_timestamps): don't abuse global dictionaries.
3001
3002         * fernanda.py: renamed to .py so lisa can import it.
3003         (check_dsc): remove unused local variables (pychecker).
3004         (display_changes): split off from check_changes.
3005
3006         * katie: rewritten; most of the functionality moves to jennifer;
3007         what's left is the code to install packages once a day from the
3008         'accepted' directory.
3009
3010         * jennifer: new program, processes packages in 'unchecked'
3011         (i.e. most of the non-install functionality of old katie).
3012
3013         * katie.py: common functions shared between the clique of
3014         jennifer, lisa and katie.
3015
3016         * lisa: new program; handles NEW and BYHAND packages.
3017
3018         * jeri (usage): new function.
3019         (main): use it.
3020         (check_package): remove unused local variable (pychecker).
3021
3022         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3023         binaries and source.  Add install_date to source.
3024
3025         * halle (usage): new function.
3026         (main): use it.  Remove unused options.
3027         (check_changes): remove unused local variable (pychecker).
3028
3029         * add_constraints.sql: add fingerprint references.
3030
3031         * db_access.py (get_or_set_fingerprint_id): new function.
3032
3033         * ashley (main): new program; dumps the contents of a .katie file
3034         to stdout.
3035
3036         * alyson (main): remove option handling since we don't actually
3037         support any.
3038         * cindy (main): likewise.
3039
3040         * remove unnecessary imports and pre-define globals (pychecker).
3041
3042 2002-02-11  Anthony Towns  <ajt@debian.org>
3043
3044         * added installation-report and upgrade-report pseudo-packages
3045
3046 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3047
3048         * katie (update_subst): use Dinstall::TrackingServer.
3049         * melanie (main): likewise.
3050
3051 2002-01-27  James Troup  <james@nocrew.org>
3052
3053         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3054         noticing, jgg@ for fix.
3055
3056 2002-01-19  James Troup  <james@nocrew.org>
3057
3058         * utils.py (extract_component_from_section): handle non-US
3059         non-main properly.
3060
3061 2002-01-12  James Troup  <james@nocrew.org>
3062
3063         * madison: add support for -S/--source-and-binary which displays
3064         information for the source package and all it's binary children.
3065
3066 2002-01-13  Anthony Towns  <ajt@debian.org>
3067
3068         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3069         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3070           and 2002 key ids.
3071         * katie.conf-non-US: Likewise.
3072         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3073           multiple keys automatically. This is probably only useful for
3074           transitioning from an expired (or revoked?) key.
3075
3076 2002-01-08  Ryan Murray  <rmurray@debian.org>
3077
3078         * debian/python-dep: new file that prints out python:Depends for
3079           substvars
3080         * debian/control: use python:Depends, build-depend on python
3081           lower Depends: on postgresql to Suggests:
3082         * debian/rules: determine python version, install to the correct
3083           versioned dir
3084
3085 2001-12-18  Anthony Towns  <ajt@debian.org>
3086
3087         * ziyi: unlink Release files before overwriting them (in case they've
3088           been merged)
3089         * ziyi: always include checksums/sizes for the uncompressed versions
3090           of Sources and Packages, even if they're not present on disk
3091
3092 2001-11-26  Ryan Murray  <rmurray@debian.org>
3093
3094         * ziyi (main): add SigningPubKey config option
3095         * katie.conf: use SigningPubKey config option
3096         * katie.conf-non-US: likewise
3097
3098 2001-11-24  James Troup  <james@nocrew.org>
3099
3100         * katie (acknowledge_new): log newness.
3101
3102 2001-11-24  Anthony Towns  <ajt@debian.org>
3103
3104         * ziyi (real_arch): bail out if some moron forgot to reset
3105         untouchable on stable.
3106         (real_arch): source Release files.
3107
3108 2001-11-19  James Troup  <james@nocrew.org>
3109
3110         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3111         utils.get_conf().
3112         * shania (main): likewise.
3113
3114         * rhona (main): add default options.
3115
3116         * db_access.py (get_archive_id): case independent.
3117
3118         * katie (action): sort files so that ordering is consistent
3119         between mails; noticed/requested by Joey.
3120
3121 2001-11-17  Ryan Murray  <rmurray@debian.org>
3122
3123         * utils.py: add get_conf function, change startup code to read all
3124           config files to the Cnf that get_conf returns
3125           use the component list from the katie conf rather than the hardcoded
3126           list.
3127         * all scripts: use new get_conf function
3128         * shania: fix try/except around changes files
3129         * jenna: only do debian-installer if it is a section in Cnf
3130
3131 2001-11-16  Ryan Murray  <rmurray@debian.org>
3132
3133         * shania (main): Initialize days to a string of a number.
3134                  (main): Initialize Cnf vars before reading in Cnf
3135
3136 2001-11-14  Ryan Murray  <rmurray@debian.org>
3137
3138         * shania (main): Initialize days to a number.
3139
3140 2001-11-04  James Troup  <james@nocrew.org>
3141
3142         * docs/Makefile: use docbook-utils' docbook2man binary.
3143
3144         * Change all "if foo == []" constructs into "if not foo".
3145
3146         * katie (check_changes): when installing into stable from
3147         proposed-updates, remove all non-stable target distributions.
3148         (check_override): don't check for override disparities on stable
3149         installs.
3150         (stable_install): update install_bytes appropriately.
3151         (reject): stable rejection support; i.e. don't remove files when
3152         rejecting files in the pool, rather remove them from the
3153         proposed-update suite instead, rhona will do the rest.
3154         (manual_reject): support for a stable specific template.
3155         (main): setup up stable rejector in subst.
3156
3157 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3158
3159         * debian/control (Build-Depends): docbook2man has been superseded
3160         by docbook-utils.
3161
3162         * neve (main): exit with a more useful error message.
3163         (update_suites): Suite::<suite>::Version, Origin and Description
3164         are not required, so don't fail if they don't exist.
3165
3166         * db_access.py (get_archive_id): return -1 on error rather than
3167         raise an exception.
3168         (get_location_id): likewise.
3169
3170         * madison (main): don't exit on the first not-found package,
3171         rather exit with an appropriate return code after processing all
3172         packages.
3173
3174 2001-11-03  James Troup  <james@nocrew.org>
3175
3176         * claire.py (find_dislocated_stable): add per-architecture
3177         symlinks for dislocated architecture: all debs.
3178
3179 2001-10-19  Anthony Towns  <ajt@debian.org>
3180
3181         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3182
3183 2001-10-10  Anthony Towns  <ajt@debian.org>
3184
3185         * claire.py (fix_component_section): do _not_ assign to None under
3186         any circumstances
3187
3188 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3189
3190         * melanie (main): don't duplicate architectures when removing from
3191         more than one suite.
3192
3193         * heidi (main, process_file, get_list): report suite name not ID.
3194
3195         * naima (nmu_p): be case insensitive.
3196
3197         * naima (action): more list handling clean ups.
3198
3199         * melanie (main): clean up lists handling to use string.join and
3200         IN's.
3201
3202         * madison (main): clean up suite and architecture argument parsing
3203         to use slices less and string.join more.
3204
3205         * utils.py (parse_changes): Use string.find() instead of slices for
3206         string comparisons thereby avoid hardcoding the length of strings.
3207         * ziyi (main): likewise.
3208
3209 2001-10-07  James Troup  <james@nocrew.org>
3210
3211         * Remove mode argument from utils.open_files() calls if it's the
3212         default, i.e. 'r'.
3213
3214 2001-09-27  James Troup  <james@nocrew.org>
3215
3216         * katie (init): new function; options clean up.
3217         (usage): add missing options, remove obsolete ones.
3218         (main): adapt for the two changes above.  If the lock file or
3219         new-ack log file don't exist, create them.  Don't try to open the
3220         new-ack log file except running in new-ack mode.
3221
3222         * alyson (main): initialize all the tables that are based on the
3223         conf file.
3224
3225         * utils.py (touch_file): like touch(1).
3226         (where_am_i): typo.
3227
3228         * catherine (usage): new.
3229         (main): use it.  options cleanup.
3230         * claire.py: likewise.
3231         * fernanda: likewise.
3232         * heidi: likewise.
3233         * jenna: likewise.
3234         * shania: likewise.
3235         * ziyi: likewise.
3236
3237         * andrea: options cleanup.
3238         * charisma: likewise.
3239         * julia: likewise.
3240         * madison: likewise.
3241         * melanie: likewise.
3242         * natalie: likewise.
3243         * rhona: likewise.
3244         * tea: likewise.
3245
3246 2001-09-26  James Troup  <james@nocrew.org>
3247
3248         * utils.py: default to sane config file locations
3249         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3250         or they can point to the real ones through use of a new Config
3251         section.  Based on an old patch by Adam Heath.
3252         (where_am_i): use the new default config stuff.
3253         (which_conf_file): likewise.
3254         (which_apt_conf_file): likewise.
3255
3256         * charisma (main): output defaults to
3257         `Package~Version\tMaintainer'; input can be of either form.  When
3258         parsing the new format do version comparisons, when parsing the
3259         old format assume anything in the extra file wins.  This fixes the
3260         problem of newer non-US packages being overwhelmed by older
3261         versions still in stable on main.
3262
3263 2001-09-17  James Troup  <james@nocrew.org>
3264
3265         * natalie.py (list): use result_join().
3266
3267         * denise (main): result_join() moved to utils.
3268
3269         * utils.py (result_join): move to utils; add an optional seperator
3270         argument.
3271
3272 2001-09-14  James Troup  <james@nocrew.org>
3273
3274         * heidi (set_suite): new function; does --set like natalie does,
3275         i.e. turns it into a sequence of --add's and --remove's
3276         internally.  This is a major win (~20 minute run time > ~20
3277         seconds) in the common, everday (i.e. testing) case.
3278         (get_id): common code used by set_suite() and process_file().
3279         (process_file): call set_suite() and get_id().
3280         (main): add logging support.
3281
3282         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3283         files.
3284
3285         * utils.py (parse_changes): use slices or simple string comparison
3286         in favour of regexes where possible.
3287
3288         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3289         fact that the string VARDATA() points to are not null terminated.
3290
3291         * denise (result_join): new function; like string.join() but
3292         handles None's.
3293         (list): use it.
3294         (main): likewise.
3295
3296         * charisma (main): python-pygresql 7.1 returns None not "".
3297
3298 2001-09-14  Ryan Murray  <rmurray@debian.org>
3299
3300         * natalie.py (list): handle python-pygresql 7.1 returning None.
3301
3302 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3303
3304         * madison (main): return 1 if no package is found.
3305
3306 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3307
3308         * madison (main): better error handling for incorrect
3309         -a/--architecture or -s/--suite arguments.
3310         (usage): new.
3311         (main): use it.
3312
3313 2001-09-05  Ryan Murray  <rmurray@debian.org>
3314
3315         * charisma, madison, katie: remove use of ROUser
3316         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3317
3318 2001-08-26  James Troup  <james@nocrew.org>
3319
3320         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3321         maintained packages at cjwatson@'s request.
3322
3323 2001-08-21  James Troup  <james@nocrew.org>
3324
3325         * madison (main): add -a/--architecture support.
3326
3327         * jenna: use logging instead of being overly verbose on stdout.
3328
3329 2001-08-11  Ryan Murray  <rmurray@debian.org>
3330
3331         * melanie: add functional help option
3332
3333 2001-08-07  Anthony Towns  <ajt@debian.org>
3334
3335         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3336
3337 2001-07-28  James Troup  <james@nocrew.org>
3338
3339         * katie (check_dsc): ensure source version is >> than existing
3340         source in target suite.
3341
3342 2001-07-25  James Troup  <james@nocrew.org>
3343
3344         * natalie.py: add logging support.
3345
3346         * utils.py (open_file): make the second argument optional and
3347         default to read-only.
3348
3349         * rene (main): work around broken source packages that duplicate
3350         arch: all packages with arch: !all packages (no longer allowed
3351         into the archive by katie).
3352
3353 2001-07-13  James Troup  <james@nocrew.org>
3354
3355         * katie (action): don't assume distribution is a dictionary.
3356         (update_subst): don't assume architecture is a dictionary and that
3357         maintainer822 is defined.
3358         (check_changes): recognise nk_format exceptions.
3359         (check_changes): reject on 'testing' only uploads.
3360         (check_files): when checking to ensure all packages are newer
3361         versions check against arch-all packages too.
3362         (check_dsc): enforce the existent of a sane set of mandatory
3363         fields.  Ensure the version number in the .dsc (modulo epoch)
3364         matches the version number in the .changes file.
3365
3366         * utils.py (changes_compare): ignore all exceptions when parsing
3367         the changes files.
3368         (build_file_list): don't UNDEF on a changes file with no format
3369         field.
3370
3371 2001-07-07  James Troup  <james@nocrew.org>
3372
3373         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3374         rather than 'changedbyname' to avoid false negatives on uploads
3375         with an email-address-only Changed-By field.
3376         (check_dsc): don't overwrite reject_message; append to it.
3377         (check_signature): likewise.
3378         (check_changes): likewise.
3379         (announce): condition logging on 'action'.
3380
3381         * logging.py: new logging module.
3382
3383         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3384         sub-tree into a separate (global) variable.
3385         (check_dsc): ensure format is 1.0 to retain backwards
3386         compatability with dpkg-source in potato.
3387         (main): only try to obtain the lock when not running in no-action
3388         mode.
3389         Use the new logging module.
3390
3391         * christina: initial version; only partially usable.
3392
3393 2001-06-28  Anthony Towns  <ajt@debian.org>
3394
3395         * apt.conf: Add ExtraOverrides to auric.
3396
3397 2001-06-25  James Troup  <james@nocrew.org>
3398
3399         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3400         they preferred the name 'Uploaders'.
3401
3402 2001-06-23  James Troup  <james@nocrew.org>
3403
3404         * katie (check_files): fix typo in uncommon rejection message,
3405         s/sourceversion/source version/.
3406
3407         * denise (main): we can't use print because stdout has been
3408         redirected.
3409
3410         * katie (source_exists): new function; moved out of check_files()
3411         and added support for binary-only NMUs of earlier sourceful NMUs.
3412
3413         * rhona (clean): find_next_free has moved.
3414
3415         * utils.py (find_next_free): new function; moved here from rhona.
3416         Change too_many to be an argument with a default value, rather
3417         than a hardcoded variable.
3418
3419         * shania: rewritten to work better; REJECTion reminder mail
3420         handling got lost though.
3421
3422 2001-06-22  James Troup  <james@nocrew.org>
3423
3424         * rhona (main): remove unused override code.
3425
3426         * fernanda (main): remove extraneous \n's from utils.warn calls.
3427         * natalie.py (list): likewise.
3428
3429         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3430         use utils.{warn,fubar} where appropriate.
3431
3432 2001-06-21  James Troup  <james@nocrew.org>
3433
3434         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3435         functionality.
3436         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3437         by the "Maintainers" field in the .dsc file and maintainer groups.
3438         (nmu_p.__init__): read in the list of group maintainer names.
3439         (announce): use nmu_p.
3440
3441 2001-06-20  James Troup  <james@nocrew.org>
3442
3443         * rene (main): hardcode the suite experimental is compared to by
3444         name rather than number.
3445
3446         * katie (check_files): differentiate between doesn't-exist and
3447         permission-denied in "can not read" rejections; requested by edd@.
3448         (check_dsc): use os.path.exists rather than os.access to allow the
3449         above check to kick in.
3450
3451         * heidi (process_file): read all input before doing anything and
3452         use transactions.
3453
3454 2001-06-15  James Troup  <james@nocrew.org>
3455
3456         * fernanda: new script; replaces old 'check' shell script
3457         nastiness.
3458
3459 2001-06-14  James Troup  <james@nocrew.org>
3460
3461         * katie: actually import traceback module to avoid amusing
3462         infinite loop.
3463
3464 2001-06-10  James Troup  <james@nocrew.org>
3465
3466         * utils.py (extract_component_from_section): fix to handle just
3467         'non-free' and 'contrib'.  Also fix to handle non-US in a
3468         completely case insensitive manner as a component.
3469
3470 2001-06-08  James Troup  <james@nocrew.org>
3471
3472         * madison (arch_compare): sort function that sorts 'source' first
3473         then alphabetically.
3474         (main): use it.
3475
3476 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3477
3478         * catherine (poolize): explicitly make poolized_size a long so it
3479         doesn't overflow when poolizing e.g. entire archives.
3480
3481 2001-06-01  James Troup  <james@nocrew.org>
3482
3483         * utils.py (send_mail): throw exceptions rather than exiting.
3484
3485         * katie (process_it): catch exceptions and ignore them.
3486
3487 2001-06-01  Michael Beattie  <mjb@debian.org>
3488
3489         * added update-mailingliststxt and update-readmenonus to update
3490         those files, respectively. modified cron.daily{,-non-US} to
3491         use them.
3492
3493 2001-05-31  Anthony Towns  <ajt@debian.org>
3494
3495         * rhona: make StayOfExecution work.
3496
3497 2001-05-31  James Troup  <james@nocrew.org>
3498
3499         * rhona (find_next_free): fixes to not overwrite files but rename
3500         them by appending .<n> instead.
3501         (clean): use find_next_free and use dated sub-directories in the
3502         morgue.
3503
3504         * utils.py (move): don't overwrite files unless forced to.
3505         (copy): likewise.
3506
3507 2001-05-24  James Troup  <james@nocrew.org>
3508
3509         * katie (check_files): determine the source version here instead
3510         of during install().
3511         (check_files): check for existent source with bin-only NMU
3512         support.
3513         (main): sort the list of changes so that the source-must-exist
3514         check Does The Right Thing(tm).
3515
3516         * utils.py (changes_compare): new function; sorts a list of
3517         changes files by 'have-source', source, version.
3518         (cc_fix_changes): helper function.
3519         (parse_changes): use compiled regexes.
3520         (fix_maintainer): likewise.
3521
3522         * rene (main): warn about packages in experimental that are
3523         superseded by newer versions in unstable.
3524
3525 2001-05-21  James Troup  <james@nocrew.org>
3526
3527         * rene (main): add support for checking for ANAIS (Architecture
3528         Not Allowed In Source) packages.
3529
3530 2001-05-17  James Troup  <james@nocrew.org>
3531
3532         * katie (check_changes): initalize `architecture' dictionary in
3533         changes global so that if we can't parse the changes file for
3534         whatever reason we don't undef later on.
3535
3536         * utils.py (parse_changes): fix handling of multi-line fields
3537         where the first line did have data.
3538
3539 2001-05-05  Anthony Towns  <ajt@debian.org>
3540
3541         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3542         (It should always have been there. Ooopsy.)
3543
3544 2001-05-03  Anthony Towns  <ajt@debian.org>
3545
3546         * jenna: Cleanup packages that move from arch:any to arch:all or
3547         vice-versa.
3548
3549 2001-04-24  Anthony Towns  <ajt@debian.org>
3550
3551         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3552         cope with debian-installer and boot-floppies' md5sum.txt.
3553
3554 2001-04-16  James Troup  <james@nocrew.org>
3555
3556         * katie (check_changes): add missing %s format string argument.
3557         (stable_install): temporary work around for morgue location to
3558         move installed changes files into.
3559         (stable_install): helps if you actually read in the template.
3560         (manual_reject): fix for editing of reject messages which was
3561         using the wrong variable name.
3562
3563         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3564
3565 2001-04-13  James Troup  <james@nocrew.org>
3566
3567         * katie (manual_reject): Cc the installer.
3568         (reject): don't.
3569         (check_changes): remove unused maintainer-determination code.
3570         (update_subst): add support for Changed-By when setting the
3571         *MAINTAINER* variables.
3572
3573         * rene (bar): new function to check for packages on architectures
3574         when they shouldn't be.
3575
3576         * natalie.py (main): use fubar() and warn() from utils.
3577
3578         * utils.py (whoami): new mini-function().
3579         * melanie (main): use it.
3580         * katie (manual_reject): likewise.
3581
3582 2001-04-03  James Troup  <james@nocrew.org>
3583
3584         * katie (action): ignore exceptions from os.path.getmtime() so we
3585         don't crash on non-existent changes files (e.g. when they are
3586         moved between the start of the install run in cron.daily and the
3587         time we get round to processing them).
3588
3589         * madison (main): also list source and accept -s/--suite.
3590
3591         * jenna (generate_src_list): missing \n in error message.
3592
3593         * katie (update_subst): add sane defaults for when changes is
3594         skeletal.
3595
3596 2001-03-29  James Troup  <james@nocrew.org>
3597
3598         * melanie (main): use fubar() and warn() from utils.  Remember who
3599         the maintainer for the removed packages are and display that info
3600         to the user.  Readd support for melanie-specific Bcc-ing that got
3601         lost in the TemplateSubst transition.
3602
3603         * utils.py (fubar): new function.
3604         (warn): like wise.
3605
3606         * db_access.py (get_maintainer): as below.
3607
3608         * charisma (get_maintainer): moved the bulk of this function to
3609         db_access so that melanie can use it too.
3610
3611         * claire.py (find_dislocated_stable): restrict the override join
3612         to those entries where the suite is stable; this avoids problems
3613         with packages which have moved to new sections (e.g. science)
3614         between stable and unstable.
3615
3616 2001-03-24  James Troup  <james@nocrew.org>
3617
3618         * catherine (poolize): new function; not really independent of
3619         main() fully, yet.
3620         (main): use it.
3621
3622         * katie (stable_install): __SUITE__ needs to be space prefixed
3623         because buildd's check for 'INSTALLED$'.
3624
3625 2001-03-22  James Troup  <james@nocrew.org>
3626
3627         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3628
3629         * jenna: rewritten; now does deletions on a per-suite level
3630         instead of a per-suite-component-architecture-type level.  This
3631         allows mutli-component packages to be auto-cleaned (and as a
3632         bonus, reduces the code size and duplication).
3633
3634 2001-03-22  Anthony Towns  <ajt@debian.org>
3635
3636         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3637         instead of just giving a gpg error.
3638
3639 2001-03-21  James Troup  <james@nocrew.org>
3640
3641         * madison (main): use apt_pkg.VersionCompare to sort versions so
3642         that output is correctly sorted for packages like debhlper.
3643         Noticed by ajt@.
3644
3645         * tea (check_source_in_one_dir): actually find problematic source
3646         packages.
3647
3648         * katie (check_dsc): remember the orig.tar.gz's location ID if
3649         it's not in a legacy suite.
3650         (check_diff): we don't use orig_tar_id.
3651         (install): add code to handle sourceful diff-only upload of
3652         packages which change components by copying the .orig.tar.gz into
3653         the new component, if it doesn't already exist there.
3654         (process_it): reset orig_tar_location (as above).
3655
3656         * melanie (main): use template substiution for the bug closing
3657         emails.
3658         (main): don't hardcode bugs.debian.org or packages.debian.org
3659         either; use configuration items.
3660
3661         * katie: likewise.
3662
3663         * natalie.py (init): use None rather than 'localhost' for the
3664         hostname given to pg.connect.
3665
3666         * utils.py (TemplateSubst): new function; lifted from
3667         userdir-ldap.
3668
3669 2001-03-21  Ryan Murray  <rmurray@debian.org>
3670
3671         * katie (announce): fix the case of non-existent
3672         Suite::$SUITE::Announce.
3673
3674 2001-03-20  Ryan Murray  <rmurray@debian.org>
3675
3676         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3677         /usr/.
3678
3679         * alyson (main): use config variable for database name.
3680         * andrea (main): likewise.
3681         * catherine (main): likewise.
3682         * charisma (main): likewise.
3683         * cindy (main): likewise.
3684         * claire.py (main): likewise.
3685         * denise (main): likewise.
3686         * heidi (main): likewise.
3687         * jenna (main): likewise.
3688         * katie (main): likewise.
3689         * madison (main): likewise.
3690         * melanie (main): likewise.
3691         * neve (main): likewise.
3692         * rhona (main): likewise.
3693         * tea (main): likewise.
3694
3695 2001-03-15  James Troup  <james@nocrew.org>
3696
3697         * rhona (check_sources): fixed evil off by one (letter) error
3698         which was causing only .dsc files to be deleted when cleaning
3699         source packages.
3700
3701         * charisma (get_maintainer_from_source): remove really stupid and
3702         gratuitous IN sub-query and replace with normal inner join.
3703         (main): connect as read-only user nobody.
3704
3705         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3706         with EXISTS.
3707         (check_files): likewise; still disabled by default though.
3708         (clean_binaries): add ' seconds' to the mysterious number in the
3709         output.
3710         (clean): likewise.
3711
3712         * tea (check_files): add missing global declaration on db_files.
3713
3714 2001-03-14  James Troup  <james@nocrew.org>
3715
3716         * rhona: rewritten large chunks. Removed a lot of the silly
3717         selecting into dictionaries and replaced it with 'where exists'
3718         based sub queries.  Added support for StayOfExecution.  Fix the
3719         problem with deleting dsc_files too early and disable cleaning of
3720         unattached files.
3721
3722 2001-03-14  Anthony Towns  <ajt@debian.org>
3723
3724         * katie (announce): also check Changed-By when trying to detect
3725         NMUs.
3726
3727 2001-03-06  Anthony Towns  <ajt@debian.org>
3728
3729         * ziyi (main): Generate Release.gpg files as well, using the key from
3730         Dinstall::SigningKey in katie.conf, if present. That key has to be
3731         passwordless, and hence kept fairly secretly.
3732
3733 2001-03-02  James Troup  <james@nocrew.org>
3734
3735         * utils.py (str_isnum): new function; checks to see if the string
3736         is a number.
3737
3738         * shania (main): fix _hideous_ bug which was causing all files > 2
3739         weeks old to be deleted from incoming, even if they were part of a
3740         valid upload.
3741
3742 2001-02-27  James Troup  <james@nocrew.org>
3743
3744         * melanie (main): accept new argument -C/--carbon-copy which
3745         allows arbitarty carbon-copying of the bug closure messages.
3746         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3747         separate variable.
3748
3749 2001-02-27  Anthony Towns  <ajt@debian.org>
3750
3751         * ziyi: new program; generates Release files.
3752
3753 2001-02-25  James Troup  <james@nocrew.org>
3754
3755         * katie (reject): add missing '\n' to error message.
3756         (manual_reject): likewise.
3757         (install): catch exceptions from moving the changes file into DONE
3758         and ignore them.
3759
3760         * tea (check_md5sums): new function.
3761
3762 2001-02-25  Michael Beattie  <mjb@debian.org>
3763
3764         * melanie: use $EDITOR if available.
3765
3766 2001-02-15  James Troup  <james@nocrew.org>
3767
3768         * utils.py (parse_changes): don't crash and burn on empty .changes
3769         files.  Symptoms noticed by mjb@.
3770
3771 2001-02-15  Adam Heath  <doogie@debian.org>
3772
3773         * denise (main): use an absolute path for the output filename.
3774
3775         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3776         compile errors with postgresql-dev >= 7.0.
3777
3778 2001-02-12  James Troup  <james@nocrew.org>
3779
3780         * rene: initial version.
3781
3782         * andrea: initial version.
3783
3784         * catherine (main): remove obsolete assignment of arguments.
3785
3786 2001-02-09  James Troup  <james@nocrew.org>
3787
3788         * catherine: first working version.
3789
3790 2001-02-06  James Troup  <james@nocrew.org>
3791
3792         * katie (check_files): validate the priority field; i.e. ensure it
3793         doesn't contain a '/' (to catch people prepending the priority
3794         with the component rather than the section).
3795         (check_override): don't warn about source packages; the only check
3796         is on section and we have no GUI tools that would use the Section
3797         field for a Sources file.
3798         (announce): use tags rather than severities for NMUs.  Requested
3799         by Josip Rodin <joy@>. [#78035]
3800
3801 2001-02-04  James Troup  <james@nocrew.org>
3802
3803         * tea (check_override): new function; ensures packages in suites
3804         are also in the override file.  Thanks to bod@ for noticing that
3805         such packages existed.
3806
3807         * katie: move file type compiled regular expressions to utils as
3808         catherine uses them too.
3809         (check_changes): always default maintainer822 to the installer
3810         address so that any bail out won't cause undefs later.
3811         (check_files): update file type re's to match above.
3812         (stable_install): likewise.
3813         (reject): handle any except from moving the changes files.  Fixes
3814         crashes on unreadable changes files.
3815
3816         * melanie (main): add an explanation of why things are not removed
3817         from testing.
3818
3819 2001-01-31  James Troup  <james@nocrew.org>
3820
3821         * melanie (main): ignore a) no message, b) removing from stable or
3822         testing when invoked with -n/--no-action.
3823
3824         * katie (check_override): lower section before checking to see if
3825         we're whining about 'non-US' versus 'non-US/main'.
3826
3827         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3828         function so that we can use inside of PostgreSQL.
3829
3830 2001-01-28  James Troup  <james@nocrew.org>
3831
3832         * katie: updated to pass new flag to parse_changes() and deal with
3833         the exception raised on invalid .dsc's if appropriate.
3834         * shania (main): likewise.
3835         * melanie (main): likewise.
3836
3837         * tea (check_dscs): new function to validate all .dsc files in
3838         unstable.
3839
3840         * utils.py (parse_changes): if passed an additional flag, validate
3841         the .dsc file to ensure it's extractable by dpkg-source.
3842         Requested by Ben Collins <bcollins@>.
3843
3844 2001-01-27  James Troup  <james@nocrew.org>
3845
3846         * madison (main): connect to the DB as nobody.
3847
3848         * katie (check_files): remove support for -r/--no-version-check
3849         since it makes no sense under katie (jenna will automatically
3850         remove the (new) older version) and was evil in any event.
3851         (check_changes): add missing new line to rejection message.
3852         (check_dsc): likewise.
3853         (process_it): reset reject_message here.
3854         (main): not here.  Also remove support for -r.
3855
3856 2001-01-26  James Troup  <james@nocrew.org>
3857
3858         * katie (check_override): don't whine about 'non-US/main' versus
3859         'non-US'.
3860
3861 2001-01-26  Michael Beattie  <mjb@debian.org>
3862
3863         * natalie.py (usage): new function.
3864         (main): use it.
3865
3866 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3867
3868         * update-mirrorlists: Update README.non-US too (request from Joy).
3869
3870 2001-01-25  James Troup  <james@nocrew.org>
3871
3872         * katie (reject): catch any exception from utils.move() and just
3873         pass, we previously only caught can't-overwrite errors and not
3874         can't-read ones.
3875
3876         * jenna (generate_src_list): use ORDER BY in selects to avoid
3877         unnecessary changes to Packages files.
3878         (generate_bin_list): likewise.
3879
3880         * utils.py (extract_component_from_section): separated out from
3881         build_file_list() as it's now used by claire too.
3882
3883         * claire.py (find_dislocated_stable): rewrite the query to extract
3884         section information and handle component-less locations properly.
3885         Thanks to ajt@ for the improved queries.
3886         (fix_component_section): new function to fix components and
3887         sections.
3888
3889 2001-01-23  James Troup  <james@nocrew.org>
3890
3891         * katie (check_files): set file type for (u?)debs first thing, so
3892         that if we continue, other functions which rely on file type
3893         existing don't bomb out.  If apt_pkg or apt_inst raise an
3894         exception when parsing the control file, don't try any other
3895         checks, just drop out.
3896         (check_changes): new test to ensure there is actually a target
3897         distribution.
3898
3899 2001-01-22  James Troup  <james@nocrew.org>
3900
3901         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3902         <grin@>.
3903         (check_changes): when mapping to unstable, remember to actually
3904         add unstable to the suite list and not just remove the invalid
3905         suite.
3906
3907 2001-01-21  James Troup  <james@nocrew.org>
3908
3909         * katie (check_files): catch exceptions from debExtractControl()
3910         and reject packages which raise any.
3911
3912 2001-01-19  James Troup  <james@nocrew.org>
3913
3914         * katie (check_signature): basename() file name in rejection
3915         message.
3916
3917 2001-01-18  James Troup  <james@nocrew.org>
3918
3919         * katie (in_override_p): remember the section and priority from
3920         the override file so we can check them against the package later.
3921         (check_override): new function; checks section and priority (for
3922         binaries) from the package against the override file and mails the
3923         maintainer about any disparities.
3924         (install): call check_override after announcing the upload.
3925
3926 2001-01-16  James Troup  <james@nocrew.org>
3927
3928         * utils.py (build_file_list): catch ValueError's from splitting up
3929         the files field and translate it into a parse error.
3930
3931         * tea: add support for finding unreferenced files.
3932
3933         * katie (in_override_p): add support for suite-aliasing so that
3934         proposed-updates uploads work again.
3935         (check_changes): catch parses errors from utils.build_file_list().
3936         (check_dsc): likewise.
3937         (check_diff): yet more dpkg breakage so we require even newer a
3938         version.
3939
3940         * jenna (generate_bin_list): don't do nasty path munging that's no
3941         longer needed.
3942
3943         * denise (main): support for non-US; and rename testing's override
3944         files so they're based on testing's codename.
3945
3946 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3947
3948         * melanie: add to the bug closing message explaining what happens
3949         (or rather doesn't) with bugs against packages that have been
3950         removed.
3951
3952 2001-01-14  James Troup  <james@nocrew.org>
3953
3954         * charisma (main): fix silly off-by-one error; suite priority
3955         checking was done using "less than" rather than "less than or
3956         equal to" which was causing weird hesienbugs with wrong Maintainer
3957         fields.
3958
3959 2001-01-10  James Troup  <james@nocrew.org>
3960
3961         * katie (in_override_p): adapted to use SQL-based overrides.
3962         read_override_file function disappears.
3963
3964         * db_access.py: add new functions get_section_id, get_priority_id
3965         and get_override_type_id.
3966         (get_architecture_id): return -1 if the architecture is not found.
3967
3968         * heidi: switch %d -> %d in all SQL queries.
3969         (get_list): Use string.join where appropriate.
3970
3971         * rhona (in_override_p): don't die if the override file doesn't
3972         exist.
3973         (main): warn if the override file doesn't exist.
3974
3975         * alyson: new script; will eventually sync the config file and the
3976         SQL database.
3977
3978         * natalie.py: new script; manipulates overrides.
3979
3980         * melanie: new script; removes packages from suites.
3981
3982 2001-01-08  James Troup  <james@nocrew.org>
3983
3984         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3985         anything it just changed the symptom.  Recognise the new breakage
3986         and reject them too.
3987
3988 2001-01-07  James Troup  <james@nocrew.org>
3989
3990         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3991         to the .changes file, be sure to set up files[filename]["type"]
3992         too.
3993
3994 2001-01-06  James Troup  <james@nocrew.org>
3995
3996         * katie (check_diff): new function; detects bad diff files
3997         produced by dpkg 1.8.1 and rejects thems.
3998         (process_it): call check_diff().
3999         (check_dsc): gar.  Add support for multiple versions of the
4000         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4001         and size against all versions and use one which matches if
4002         possible and exclude any that don't from being poolized to avoid
4003         file overwrites.  Thanks to broonie@ for providing the example.
4004         (install): skip any files marked as excluded as above.
4005
4006 2001-01-05  James Troup  <james@nocrew.org>
4007
4008         * heidi (process_file): add missing argument to error message.
4009
4010 2001-01-04  James Troup  <james@nocrew.org>
4011
4012         * heidi (main): fix handling of multiple files by reading all
4013         files not just the first file n times (where n = the number of
4014         files passed as arguments).
4015
4016 2001-01-04  Anthony Towns  <ajt@debian.org>
4017
4018         * katie (check_dsc): proper fix for the code which locates the
4019         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4020
4021 2000-12-20  James Troup  <james@nocrew.org>
4022
4023         * rhona: replace IN's with EXISTS's to make DELETE time for
4024         binaries and source sane on auric.  Add a -n/--no-action flag and
4025         make it stop actions if used.  Fixed a bug in binaries deletion
4026         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4027         -V/--version.  Giving timing info on deletion till I'm sure it's
4028         sane.
4029
4030         * katie (check_changes): map testing to unstable.
4031
4032         * madison: new script; shows versions in different architectures.
4033
4034         * katie (check_dsc): ensure size matches as well as md5sum;
4035         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4036         #69702.
4037
4038 2000-12-19  James Troup  <james@nocrew.org>
4039
4040         * katie (reject): ignore the "can't overwrite file" exception from
4041         utils.move() and leave the files where they are.
4042         (reject): doh! os.access() test was reversed so we only tried to
4043         move files which didn't exist... replaced with os.path.exists()
4044         test the right way round.
4045
4046         * utils.py (move): raise an exception if we can't overwrite the
4047         destination file.
4048         (copy): likewise.
4049
4050 2000-12-18  James Troup  <james@nocrew.org>
4051
4052         * rhona: first working version.
4053
4054         * db_access.py (get_files_id): force both sizes to be integers.
4055
4056         * katie (main): use size_type().
4057
4058         * utils.py (size_type): new function; pretty prints a file size.
4059
4060 2000-12-17  James Troup  <james@nocrew.org>
4061
4062         * charisma (main): do version compares so that older packages do
4063         not override newer ones and process source first as source wins
4064         over binaries in terms of who we think of as the Maintainer.
4065
4066 2000-12-15  James Troup  <james@nocrew.org>
4067
4068         * katie (install): use the files id for the .orig.tar.gz from
4069         check_dsc().
4070         (install): limit select for legacy source to a) source in legacy
4071         or legacy-mixed type locations and b) distinct on files.id.
4072         (install): rather than the bizarre insert new, delete old method
4073         for moving legacy source into the pool, use a simple update of
4074         files.
4075         (process_it): initalize some globals before each process.
4076
4077 2000-12-14  James Troup  <james@nocrew.org>
4078
4079         * katie (in_override_p): index on binary_type too since .udeb
4080         overrides are in a different file.
4081         (read_override_file): likewise.
4082         (check_files): correct filename passed to get_files_id().
4083         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4084         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4085         (check_dsc): remember the files id of the .orig.tar.gz, not the
4086         location id.
4087
4088 2000-12-13  James Troup  <james@nocrew.org>
4089
4090         * utils.py (poolify): force the component to lower case except for
4091         non-US.
4092
4093         * katie (in_override_p): handle .udeb-specific override files.
4094         (check_files): pass the binary type to in_override_p().
4095         (check_dsc): remember the location id of the old .orig.tar.gz in
4096         case it's not in the pool.
4097         (install): use location id from dsc_files; which is where
4098         check_dsc() puts it for old .orig.tar.gz files.
4099         (install): install files after all DB work is complete.
4100         (reject): basename() the changes filename.
4101         (manual_reject): likewise.
4102
4103         * shania: new progam; replaces incomingcleaner.
4104
4105 2000-12-05  James Troup  <james@nocrew.org>
4106
4107         * katie (check_changes): if inside stable and can't find files
4108         from the .changes; assume it's installed in the pool and chdir()
4109         to there.
4110         (check_files): we are not installing for stable installs, so don't
4111         check for overwriting existing files.
4112         (check_dsc): likewise.
4113         (check_dsc): reorder .orig.tar.gz handling so that we search in
4114         the pool first and only then fall back on any .orig.tar.gz in the
4115         cwd; this avoids false positives on the overwrite check when
4116         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4117         (install): if this is a stable install, bail out to
4118         stable_install() immediately.
4119         (install): dsc_files handling was horribly broken. a) we need to
4120         add files from the .dsc and not the .changes (duh), b) we need to
4121         add the .dsc file itself to dsc_files (to be consistent with neve
4122         if for no other reason).
4123         (stable_install): new function; handles installs from inside
4124         proposed-updates to stable.
4125         (acknowledge_new): basename changes_filename before doing
4126         anything.
4127         (process_it): absolutize the changes filename to avoid the
4128         requirement of being in the same directory as the .changes file.
4129         (process_it): save and restore the cwd as stable installs can
4130         potentially jump into the pool to find files.
4131
4132         * jenna: dislocated_files support using claire.
4133
4134         * heidi (process_file): select package field from binaries
4135         explicitly.
4136
4137         * db_access.py (get_files_id): fix cache key used.
4138
4139         * utils.py (build_file_list): fix 'non-US/non-free' case in
4140         section/component splitting.
4141         (move): use os.path.isdir() rather than stat.
4142         (copy): likewise.
4143
4144         * claire.py: new file; stable in non-stable munger.
4145
4146         * tea: new file; simply ensures all files in the DB exist.
4147
4148 2000-12-01  James Troup  <james@nocrew.org>
4149
4150         * katie (check_dsc): use regex_safe().
4151         (check_changes): typo in changes{} key:
4152         s/distributions/distribution/.
4153         (install): use changes["source"], not files[file]["source"] as the
4154         latter may not exist and the former is used elsewhere.  Commit the
4155         SQL transaction earlier.
4156
4157         * utils.py (regex_safe): new function; escapes characters which
4158         have meaning to SQL's regex comparison operator ('~').
4159
4160 2000-11-30  James Troup  <james@nocrew.org>
4161
4162         * katie (install): pool_location is based on source package name,
4163         not binary package.
4164
4165         * utils.py (move): if dest is a directory, append the filename
4166         before chmod-ing.
4167         (copy): ditto.
4168
4169         * katie (check_files): don't allow overwriting of existing .debs.
4170         (check_dsc): don't allow overwriting of existing source files.
4171
4172 2000-11-27  James Troup  <james@nocrew.org>
4173
4174         * katie (check_signature): don't try to load rsaref; it's
4175         obsolete.
4176         (in_override_p): don't try to lookup override entries for packages
4177         with an invalid suite name.
4178         (announce): don't assume the suite name is valid; use Find() to
4179         lookup the mailing list name for announcements.
4180
4181         * utils.py (where_am_i): typo; hostname is in the first element,
4182         not second.
4183
4184         * db_access.py (get_suite_id): return -1 on an unknown suite.
4185
4186 2000-11-26  James Troup  <james@nocrew.org>
4187
4188         * katie (install): fix CopyChanges handling; typo in in checking
4189         Cnf for CopyChanges flag and was calling non-existent function
4190         copy_file.
4191
4192         * utils.py (copy): new function; clone of move without the
4193         unlink().
4194
4195 2000-11-25  James Troup  <james@nocrew.org>
4196
4197         * utils.py (build_file_list): handle non-US prefixes properly
4198         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4199         + 'libs' not 'non-US/libs').
4200         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4201         delays.  This is possibly(/probably) exim speicifc and (like other
4202         sendmail options) needs to be in the config file.
4203
4204 2000-11-24  James Troup  <james@nocrew.org>
4205
4206         * rhona (check_sources): we need file id from dsc_files; not id.
4207         Handle non .dsc source files being re-referenced in dsc_files.
4208
4209         * katie (in_override_p): strip out any 'non-US' prefix.
4210         (check_files): use utils.where_am_i() rather than hardcoding.
4211         (check_files): validate the component.
4212         (install): use utils.where_am_i() rather than hardcoding.
4213         (install): fix mail to go to actual recepient.
4214         (reject): likewise.
4215         (manual_reject): likewise.
4216         (acknowledge_new): likewise.
4217         (announce): likewise.
4218
4219         * db_access.py (get_component_id): ignore case when searching for
4220         the component and don't crash if the component can't be found, but
4221         return -1.
4222         (get_location_id): handle -1 from get_component_id().
4223
4224         * jenna (generate_src_list): don't bring 'suite' into our big
4225         multi-table-joining select as we already know the 'suite_id'.
4226         (generate_bin_list): likewise.
4227
4228         * neve (main): don't quit if not on ftp-master.
4229         (process_packages): remove unused variable 'suite_codename'.
4230
4231         * utils.py (move): actually move the file.
4232         (build_file_list): handle non-US prefixes in the section.
4233
4234         * catherine (main): use which_conf_file().
4235         * charisma (main): likewise.
4236         * heidi (main): likewise.
4237         * jenna (main): likewise.
4238         * katie (main): likewise.
4239         * neve (main): likewise.
4240         * rhona (main): likewise.
4241
4242         * utils.py (where_am_i): new routine; determines the archive as
4243         understood by other 'dak' programs.
4244         (which_conf_file): new routine; determines the conf file to read.
4245
4246 2000-11-17  James Troup  <james@nocrew.org>
4247
4248         * katie (install): fix where .changes files for proposed-updates
4249         go.
4250
4251 2000-11-04  James Troup  <james@nocrew.org>
4252
4253         * jenna (main): handle architecture properly if no
4254         -a/--architecture argument is given, i.e. reset architecture with
4255         the values for the suite for each suite.
4256
4257         * Add apt_pkg.init() to the start of all scripts as it's now
4258         required by python-apt.
4259
4260 2000-10-29  James Troup  <james@nocrew.org>
4261
4262         * jenna (generate_bin_list): take an additional argument 'type'
4263         and use it in the SELECT.
4264         (main): if processing component 'main', process udebs and debs.
4265
4266         * neve (process_packages): set up 'type' in 'binaries' (by
4267         assuming .deb).
4268
4269         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4270         (check_files): set up files[file]["dbtype"].
4271         (install): use files[file]["dbtype"] to set up the 'type' field in
4272         the 'binaries' table.
4273
4274         * init_pool.sql: add a 'type' field to the 'binaries' table to
4275         distinguisgh between ".udeb" and ".deb" files.
4276
4277         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4278         dest ? dirname(dest)" type check instead.
4279
4280         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4281         in the pool without crashing.  Also handle the case of being asked
4282         to look for something other than an .orig.tar.gz in the pool.
4283
4284 2000-10-26  James Troup  <james@nocrew.org>
4285
4286         * katie (install): fix filenames put into files table during
4287         poolification of legacy source.
4288
4289         * utils.py (move): work around a bug in os.path.basename() which
4290         cunningly returns '' if there is a trailing slash on the path
4291         passed to it.
4292
4293         * katie (check_dsc): Remove more cruft.  If we find the
4294         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4295         location, make a note of that so we can fix things in install().
4296         (install): as above.  Move any old source out of legacy locations
4297         so that 'apt-get source' will work.
4298         (process_it): reset the flag that indicates to install that the
4299         source needs moved.
4300
4301         * cron.daily: more.  Nowhere near complete yet though.
4302
4303         * katie (install): don't run os.makedirs, a) utils.move() does
4304         this now, b) we weren't removing the user's umask and were
4305         creating dirs with SNAFU permissions.
4306         (check_dsc): rewrite the .orig.tar.gz handling to take into
4307         account, err, package pools.  i.e. look anywhere in the pool
4308         rather than faffing around with two simple paths.
4309
4310         * neve (process_sources): add the .dsc to dsc_files too.
4311
4312 2000-10-25  James Troup  <james@nocrew.org>
4313
4314         * neve (process_sources): don't duplicate .orig.tar.gz's.
4315
4316 2000-10-23  James Troup  <james@nocrew.org>
4317
4318         * utils.py (re_extract_src_version): moved here.
4319
4320         * neve: move re_extract_src_version to utils.
4321         (process_packages): reflect change.
4322
4323         * katie (install): reflect change.
4324
4325 2000-10-19  James Troup  <james@nocrew.org>
4326
4327         * jenna (generate_src_list): handle locations with null
4328         components.
4329         (generate_bin_list): likewise.
4330