]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Add back 'heidi' as a valid argument for -f/--format in dak ls.
[dak.git] / ChangeLog
1 2006-06-11  James Troup  <james@nocrew.org>
2
3         * dak/ls.py (main): add back 'heidi' as a valid argument for
4         -f/--format as people are using it in scripts and breaking that
5         without warning seems rude.
6
7 2006-05-21  James Troup  <james@nocrew.org>
8
9         * dak/rm.py (main): use string .isdigit() rather than
10         utils.str_isnum().
11         * dak/process_new.py (edit_overrides): likewise.
12
13         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
14         string import.
15
16 2006-05-21  James Troup  <james@nocrew.org>
17
18         * dak/check_archive.py (check_indices_files_exist): use list
19         comprehension instead of map().  No longer need to import
20         deprecated string module as a side-effect.
21         * dak/check_overrides.py (process): likewise.
22         (main): likewise.
23         * dak/cruft_report.py (do_obsolete_source): likewise.
24         (main): likewise.
25         * dak/ls.py (main): likewise.
26         * dak/make_suite_file_list.py (write_filelists): likewise.
27         * dak/process_accepted.py (stable_install): likewise.
28         * dak/rm.py (main): likewise.
29         * dak/stats.py (number_of_packages): likewise.
30         * daklib/logging.py (Logger.log): likewise.
31         * daklib/queue.py (Upload.source_exists): likewise.
32         (Upload.cross_suite_version_check): likewise.
33         * daklib/utils.py (parse_args): likewise.
34
35 2006-05-21  James Troup  <james@nocrew.org>
36
37         * daklib/utils.py (process_gpgv_output): new function, split out
38         of check_signature().
39         (check_signature): adapt accordingly.
40         (retrieve_key): new function that will try to retrieve the key
41         that signed a given file from a keyserver.
42         (check_signature): add 'autofetch' argument that if not set
43         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
44         If 'autofetch' is true, invoke retrieve_key().  
45
46         * docs/README.config: document Dinstall::KeyAutoFetch and
47         Dinstall:KeyServer.
48
49 2006-05-20  James Troup  <james@nocrew.org>
50
51         * dak/find_null_maintainers.py (main):
52         s/createtimestamp/createTimestamp/ to make things work with modern
53         slapd.
54
55         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
56         Stable::Version and Stable::Description for 3.1r2.
57
58         * config/debian-non-US/dak.conf: sync with klecker - update
59         version number of 3.0 and MoreInfoURL.
60
61         * docs/README.stable-point-release: Add notes about updating
62         dak.conf and Reject-Proposed-Updates section in particular.
63         s/woody/stable/.  Also need to update README.html.
64
65         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
66
67         * config/debian/apt.conf: Add udeb tree for proposed-updates.
68
69 2006-05-20  Ryan Murray  <rmurray@debian.org>
70
71         * scripts/debian/update-ftpstats: new script to update daily
72         architecture size graph data.
73
74         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
75         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
76         there.
77
78         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
79         before we finish.  Don't push to merkel.
80
81         * dak/process_unchecked.py (check_changes): Also look in
82         ProposedUpdates queue dir.
83         (check_files): likewise.
84
85 2006-05-20  Anthony Towns  <ajt@debian.org>
86
87         * scripts/debian/mkfilesindices: new script to generate file
88         indices used for partial mirroring.
89
90         * config/debian/cron.daily: add progress timestamps.
91
92         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
93         amd64 to testing, unstable and experimental.  Drop sh from
94         experimental.  Move Experimental to dists/experimental.  Add
95         Dir::ProposedUpdates.  Add Architectures::amd64.
96
97         * config/debian/apt.conf: add amd64 to testing, unstable and
98         experimental.  Drop uncompressed Packages files from testing. Drop
99         sh from experimental.  Move experimental to dists/experimental/.
100
101         * config/debian/vars (archs): add amd64.
102
103         * dak/process_unchecked.py (action): Add support for
104         proposed-updates approval queue.
105         (is_stableupdate): new function - checks if the upload is targeted
106         at proposed-updates.
107         (do_stableupdate): likewise - moves upload to proposed-updates
108         holding area.
109
110         * dak/process_new.py (do_new): warn if original or new target
111         suite are invalid.
112
113         * dak/generate_releases.py (print_md5sha_files): less whitespace
114         between the hash and size.
115
116         * dak/generate_index_diffs.py (genchanges): don't say we're not
117         doing anything.  Better formatting of other messages.
118         (main): don't skip experimental and remove some 'doing stuff'
119         prints.
120
121 2006-05-18  James Troup  <james@nocrew.org>
122
123         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
124         query.
125
126         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
127         docstrings, untabify, don't shadow builtins, lowercase non-global
128         variable names, spaces after commas.  Also bail if given any
129         arguments since we don't accept any.
130         * dak/init_db.py: likewise.  Also split large main() into
131         subfunctions and rename get() to sql_get().
132
133         * dak/init_db.py (main): check returned value from
134         database.get_archive_id().
135
136         * dak/dak.py: renamed from shell.py.  Update to support new source
137         layout.  Created init() and usage() functions.  Various
138         pylint-inspired cleanups.  Use daklib utils.warn() and
139         utils.fubar().  Change 'functionality' variable to only have
140         (command, description) and always invoke main() when running the
141         module.  Also support -h.
142
143 2006-05-17  James Troup  <james@nocrew.org>
144
145         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
146         imports of and calls to daklib modules.  Change script name
147         everywhere, i.e. in output, mails, comments and configuration tree
148         + filenames.  Also update references to other renamed scripts,
149         classes and templates.  Use '.dak' instead of '.katie' for the
150         queue info storage files.
151         (Renamed from tea)
152         * dak/check_overrides.py: likewise.  (Renamed from cindy)
153         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
154         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
155         * dak/clean_queues.py: likewise.  (Renamed from shania)
156         * dak/clean_suites.py: likewise.  (Renamed from rhona)
157         * dak/compare_suites.py: likewise.  (Renamed from andrea)
158         * dak/control_overrides.py: likewise.  (Renamed from natalie)
159         * dak/control_suite.py: likewise.  (Renamed from heidi)
160         * dak/cruft_report.py: likewise.  (Renamed from rene)
161         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
162         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
163         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
164         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
165         * dak/import_archive.py: likewise.  (Renamed from neve)
166         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
167         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
168         * dak/init_db.py: likewise. (Renamed from alyson)
169         * dak/init_dirs.py: likewise. (Renamed from rose)
170         * dak/ls.py: likewise. (Renamed from madison)
171         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
172         * dak/make_overrides.py: likewise.  (Renamed from denise)
173         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
174         * dak/mirror_split.py: likewise.  (Renamed from billie)
175         * dak/override.py: likewise.  (Renamed from alicia)
176         * dak/poolize.py: likewise.  (Renamed from catherine)
177         * dak/process_accepted.py: likewise.  (Renamed from kelly)
178         * dak/process_new.py: likewise.  (Renamed from lisa)
179         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
180         * dak/queue_report.py: likewise.  (Renamed from helena)
181         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
182         * dak/rm.py: likewise.  (Renamed from melanie)
183         * dak/security_install.py: likewise.  (Renamed from amber)
184         * dak/split_done.py: likewise.  (Renamed from nina)
185         * dak/stats.py: likewise.  (Renamed from saffron)
186         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
187         * daklib/database.py: likewise.  (Renamed from db_access)
188         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
189         * daklib/utils.py: likewise.
190
191         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
192         doesn't need to notify anyone" string.
193         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
194
195         * dak/process_accepted.py (init): drop -V/--version argument.
196         * dak/process_new.py (init): likewise.
197         * dak/process_unchecked.py (init): likewise.
198         * dak/reject_proposed_updates.py (init): likewise
199
200         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
201
202         * dak/stats.py: in usage() output change STAT to MODE.
203
204 2006-05-15  James Troup  <james@nocrew.org>
205
206         * dak/queue_report.py: remove unused encodings imports.
207
208         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
209         imports.  Initalize 'Cnf' as a global.
210         (BillieDB._internal_recurse): fix 'util.' typo.
211
212         * dak/import_ldap_fingerprints.py (main): drop unused time import and
213         commented out time check for LDAP search.
214
215 2005-12-16  Ryan Murray  <rmurray@debian.org>
216
217         * halle: add support for udebs
218         * kelly: stable_install: add support for binNMU versions
219
220 2005-12-05  Anthony Towns  <aj@erisian.com.au>
221
222         * katie.py: Move accept() autobuilding support into separate function 
223         (queue_build), and generalise to build different queues
224
225         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
226
227         * jennifer: Initial support for enabling embargo handling with the
228         Dinstall::SecurityQueueHandling option.
229         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
230         functions.
231
232         * katie.conf-security: Include embargo options
233         * katie.conf-security: Add Lock dir
234         * init_pool.sql-security: Create disembargo table
235         * init_pool.sql-security: Add constraints for disembargo table
236
237 2005-11-26  Anthony Towns  <aj@erisian.com.au>
238
239         * Merge of changes from klecker, by various people
240
241         * amber: special casing for not passing on amd64 and oldstable updates
242         * amber: security mirror triggering
243         * templates/amber.advisory: updated advisory structure
244         * apt.conf.buildd-security: update for sarge's release
245         * apt.conf-security: update for sarge's release
246         * cron.buildd-security: generalise suite support, update for sarge's release
247         * cron.daily-security: update for sarge's release, add udeb support
248         * vars-security: update for sarge's release
249         * katie.conf-security: update for sarge's release, add amd64 support,
250         update signing key
251
252         * docs/README.names, docs/README.quotes: include the additions
253
254 2005-11-25  Anthony Towns  <aj@erisian.com.au>
255
256         * Changed accepted_autobuild to queue_build everywhere.
257         * Add a queue table.
258         * Add a "queue" field in the queue_build table (currently always 0)
259
260         * jennifer: Restructure to make it easier to support special
261         purpose queues between unchecked and accepted.
262
263 2005-11-25  Anthony Towns  <aj@erisian.com.au>
264
265         * Finishing merge of changes from spohr, by various people still
266
267         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
268         works
269         * jennifer: Re-enable .deb ar format checking
270         * katie.py: Convert to +bX binNMU special casing
271         * rhona: Add some debug output when deleting binaries
272         * cron.daily: Add emilie
273         * cron.unchecked: Add lock files
274
275 2005-11-15  Anthony Towns  <aj@erisian.com.au>
276
277         * Merge of changes from spohr, by various people.
278
279         * tiffani: new script to do patches to Packages, Sources and Contents
280         files for quicker downloads.
281         * ziyi: update to authenticate tiffani generated files
282
283         * dak: new script to provide a single binary with less arbitrary names
284         for access to dak functionality.
285
286         * cindy: script implemented
287
288         * saffron: cope with suites that don't have a Priority specified
289         * heidi: use get_suite_id()
290         * denise: don't hardcode stable and unstable, or limit udebs to unstable
291         * denise: remove override munging for testing (now done by cindy)
292         * helena: expanded help, added new, sort and age options, and fancy headers
293         * jennifer: require description, add a reject for missing dsc file
294         * jennifer: change lock file
295         * kelly: propogation support
296         * lisa: honour accepted lock, use mtime not ctime, add override type_id
297         * madison: don't say "dep-retry"
298         * melanie: bug fix in output (missing %)
299         * natalie: cope with maintainer_override == None; add type_id for overrides
300         * nina: use mtime, not ctime
301
302         * katie.py: propogation bug fixes
303         * logging.py: add debugging support, use | as the logfile separator
304
305         * katie.conf: updated signing key (4F368D5D)
306         * katie.conf: changed lockfile to dinstall.lock
307         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
308         * katie.conf: added tiffani, cindy support
309         * katie.conf: updated to match 3.0r6 release
310         * katie.conf: updated to match sarge's release
311
312         * apt.conf: update for sarge's release
313         * apt.conf.stable: update for sarge's release
314         * apt.conf: bump daily max Contents change to 25MB from 12MB
315
316         * cron.daily: add accepted lock and invoke cindy  
317         * cron.daily: add daily.lock
318         * cron.daily: invoke tiffani
319         * cron.daily: rebuild accepted buildd stuff
320         * cron.daily: save rene-daily output on the web site
321         * cron.daily: disable billie
322         * cron.daily: add stats pr0n
323
324         * cron.hourly: invoke helena
325
326         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
327         * vars: add lockdir, add etch to copyoverrides
328         * Makefile: add -Ipostgresql/server to CXXFLAGS
329
330         * docs/: added README.quotes
331         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
332         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
333
334         * TODO: correct spelling of "conflicts"
335
336 2005-05-28  James Troup  <james@nocrew.org>
337
338         * helena (process_changes_files): use MTIME rather than CTIME (the
339         C's not for 'creation', stupid).
340         * lisa (sort_changes): likewise.
341
342         * jennifer (check_distributions): use has_key rather than an 'in'
343         test which doesn't work with python2.1.  [Probably by AJ]
344
345 2005-03-19  James Troup  <james@nocrew.org>
346
347         * rene (main): use Suite::<suite>::UdebComponents to determine
348         what components have udebs rather than assuming only 'main' does.
349
350 2005-03-18  James Troup  <james@nocrew.org>
351
352         * utils.py (rfc2047_encode): use codecs.lookup() rather than
353         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
354         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
355         <andrew@ubuntu.com>.
356
357 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
358
359         * helena: add -n/--new HTML output option and improved sorting
360         options.
361
362 2005-03-06  Ryan Murray  <rmurray@debian.org>
363
364         * shania(main): use Cnf::Dir::Reject instead of REJECT
365
366 2005-02-08  James Troup  <james@nocrew.org>
367
368         * rene (main): add partial NBS support by checking that binary
369         packages are built by their real parent and not some random
370         stranger.
371         (do_partial_nbs): likewise.
372
373 2005-01-18  James Troup  <james@nocrew.org>
374
375         * katie.py (Katie.build_summaries): avoid leaking file handle when
376         extracting package description.
377         (Katie.force_reject): remember and close each file descriptor we
378         use.
379         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
380         s/reason_file/reason_fd/ because it's a file descriptor.
381         (Katie.check_dsc_against_db): avoid leaking file handle whenever
382         invoking apt_pkg.md5sum().
383
384         * jennifer (check_deb_ar): new function: sanity check the ar
385         contents of a .deb.
386         (check_files): use it.
387         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
388         found.
389         (check_files): accept 'raw-installer' as an alias for 'byhand'.
390
391 2005-01-14  Anthony Towns  <ajt@debian.org>
392
393         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
394
395         * propup stuff (thanks to Andreas Barth)
396         * katie.conf: add stable MustBeOlderThan testing, add -security
397           propup
398         * jennifer: set distribution-version in .katie if propup may be needed
399         * katie.py: add propogation to cross_suite_version_check
400
401 2004-11-27  James Troup  <james@nocrew.org>
402
403         * nina: new script to split monolithic queue/done into date-based
404         hierarchy.
405
406         * rene (usage): document -s/--suite.
407         (add_nbs): use .setdefault().
408         (do_anais): likewise.
409         (do_nbs): don't set a string to "" and then += it.
410         (do_obsolete_source): new function - looks for obsolete source
411         packages (i.e source packages whose binary packages are ALL a)
412         claimed by someone else and b) newer when built from the other
413         source package).
414         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
415         and 'full' check modes.  Check for obsolete source packages.
416         linux-wlan-ng has been fixed - remove hideous bodge.
417
418         * jennifer (check_distributions): support 'reject' suite map type.
419
420         * utils.py (validate_changes_file_arg): s/file/filename/.
421         s/fatal/require_changes/.  If require_changes is -1, ignore errors
422         and return the .changes filename regardless.
423         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
424         (re_no_revision): don't escape '-', it's not a special character.
425         s/\*/+/ as there must be at least one non-dash character after the
426         dash in a revision.  Thanks to Christian Reis for noticing both of
427         these.
428
429         * ashley (main): pass require_changes=-1 to
430         utils.validate_changes_file_arg().
431
432         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
433         Team <debian-kernel@lists.debian.org>'.
434
435         * katie.py (Katie.in_override_p): fix .startswith() usage.
436
437         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
438         (Lauren::MoreInfoURL): update to 3.0r3.
439         (Suite::Stable::Version): likewise.
440         (Suite::Stable::Description): likewise.
441
442         * cron.daily: disable automatic task override generation.
443
444         * cindy (process): restrict "find all packages" queries by
445         component.  Respect Options["No-Action"].
446         (main): add -n/--no-action support.  Only run on unstable.  Rename
447         type to otype (pychecker).
448
449 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
450
451         * katie.conf (Billie::BasicTrees): add all architectures.
452         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
453         'everything'.
454
455         * cron.daily: Update a 'current' symlink when creating the
456         post-daily-cron-job database backup to aid mirroring to merkel.
457         Run billie.
458
459         * billie (BillieTarget.poolish_match): handle .udeb too.
460
461 2004-10-13  Ryan Murray  <rmurray@debian.org>
462
463         * amber (do_upload): Sort changes files in "katie" order so that
464           source always arrives before binary-only rebuilds
465         
466 2004-10-05  James Troup  <james@nocrew.org>
467
468         * jennifer (check_dsc): correct reject message on invalid
469         Maintainer field.
470
471 2004-09-20  James Troup  <james@nocrew.org>
472
473         * alicia: remove unused 'pwd' import.
474
475         * tea (check_override): underline suite name in output properly.
476
477         * rene (main): read a compressed Packages file.
478         * tea (validate_packages): likewise.
479
480         * katie.py (re_fdnic): add 'r' prefix.
481         (re_bin_only_nmu_of_mu): likewise.
482         (re_bin_only_nmu_of_nmu): likewise.
483
484         * madison (main): retrieve component information too and display
485         it if it's not 'main'.
486         * melanie (reverse_depends_check): likewise.
487
488         * utils.py (pp_dep): renamed...
489         (pp_deps): ... to this.
490         * jeri (check_dep): update calls to utils.pp_deps().
491         * melanie (reverse_depends_check): likewise.
492
493         * jennifer (check_changes): move initalization of email variables
494         from here...
495         (process_it): ...to here as we no longer always run
496         check_changes().  Don't bother to initialize
497         changes["architecture"].
498
499         * denise (list): renamed to...
500         (do_list): ...this to avoid name clash with builtin 'list'.
501         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
502         for dictionaries.
503         (main): Likewise for name clash avoidance and also
504         s/override_type/suffix/.  Adjust call to do_list().
505
506 2004-09-01  Ryan Murray  <rmurray@debian.org>
507
508         * tea (check_files): check the pool/ directory instead of dists/
509
510 2004-08-04  James Troup  <james@nocrew.org>
511
512         * jenna (cleanup): use .setdefault() for dictionaries.
513         (write_filelists): likewise.
514
515         (write_filelists): Use utils.split_args() not split() to split
516         command line arguments.
517         (stable_dislocation_p): likewise.
518
519         (write_filelists): Add support for mapping side of suite-based
520         "Arch: all mapping".
521         (do_da_do_da): ensure that if we're not doing all suites that we
522         process enough to be able correct map arch: all packages.
523
524         * utils.py (cant_open_exc): correct exception string,
525         s/read/open/, s/.$//.
526
527         * templates/amber.advisory: update to match reality a little
528         better.
529
530         * melanie (reverse_depends_check): read Packages.gz rather than
531         Packages.
532
533         * jennifer (check_files): check for unknown component before
534         checking for NEWness.
535
536         * katie.py (Katie.in_override_p): use .startswith in favour of a
537         slice.
538
539         * docs/melanie.1.sgml: document -R/--rdep-check.
540
541 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
542
543         * billie (main): Make the verbatim lists include all the README
544           elements.
545         * docs/README.names: Add billie in (correcting oversight)
546
547 2004-07-01  James Troup  <james@nocrew.org>
548
549         * emilie (main): handle woody's case-sensitive python-ldap,
550         s/keyfingerprint/keyFingerPrint/.
551
552 2004-06-25  James Troup  <james@nocrew.org>
553
554         * debian/control (Depends): add dpkg-dev since jennifer uses
555         dpkg-source.
556
557 2004-06-24  James Troup  <james@nocrew.org>
558
559         * melanie (main): s/file/temp_file/ and close file handle before
560         removing the temporary file.
561         (main): don't warn about needing a --carbon-copy if in no-action
562         mode.
563
564         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
565         (main): likewise.
566
567         * test/006/test.py (main): check bracketed email-only form.
568
569         * utils.py (fix_maintainer): if the Maintainer string is bracketed
570         email-only, strip the brackets so we don't end up with
571         <<james@nocrew.org>>.
572
573 2004-06-20  James Troup  <james@nocrew.org>
574
575         * jennifer (process_it): only run check_changes() if
576         check_signature() returns something.  (Likewise)
577
578         * utils.py (changes_compare): if there's no changes["version"] use
579         "0" rather than None.  (Avoids a crash on unsigned changes file.)
580
581 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
582
583         * jeri (pp_dep): moved from here to ...
584         * utils.py (pp_dep): here.
585
586         * melanie (main): add reverse dependency checking.
587
588 2004-06-17  James Troup  <james@nocrew.org>
589
590         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
591         * tea (check_dscs): likewise.
592
593         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
594         change from boolean to a variable with 3 possible values, 0 and 1
595         as before, -1 means don't require a signature.  Makes
596         parse_changes() useful for parsing arbitary RFC822-style files,
597         e.g. 'Release' files.
598         (check_signature): add support for detached signatures by passing
599         the files the signature is for as an optional third argument.
600         s/filename/sig_filename/g.  Add a fourth optional argument to
601         choose the keyring(s) to use.  Don't os.path.basename() the
602         sig_filename before checking it for taint.
603         (re_taint_free): allow '/'.
604
605 2004-06-11  James Troup  <james@nocrew.org>
606
607         * tea (check_files): make override.unreadable optional.
608         (validate_sources): close the Sources file handle.
609
610         * docs/README.first: clarify that 'alyson' and running
611         add_constraints.sql by hand is something you only want to do if
612         you're not running 'neve'.
613
614         * docs/README.config (Location::$LOCATION::Suites): document.
615
616         * db_access.py (do_query): also print out the result of the query.
617
618 2004-06-10  James Troup  <james@nocrew.org>
619
620         * katie.py (Katie.cross_suite_version_check): post-woody versions
621         of python-apt's apt_pkg.VersionCompare() function apparently
622         returns variable integers for less than or greater than results -
623         update our result checking to match.
624         * jenna (resolve_arch_all_vs_any): likewise.
625         * charisma (main): likewise.
626
627 2004-06-09  James Troup  <james@nocrew.org>
628
629         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
630         valid_dsc_p and don't run check_source() if check_dsc() failed.
631         (check_dsc): on fatal failures return 0 so check_source() isn't
632         run (since it makes fatal assumptions about the presence of
633         mandatory .dsc fields).  
634         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
635
636 2004-05-07  James Troup  <james@nocrew.org>
637
638         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
639         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
640
641         * katie.conf (Dir::Override): remove duplicate definition.
642
643         * neve (get_or_set_files_id): add an always-NULL last_used column
644         to output.
645
646 2004-04-27  James Troup  <james@nocrew.org>
647
648         * apt.conf-security (tree "dists/stable/updates"): add
649         ExtraOverride - noticed by Joey Hess (#246050).
650         (tree "dists/testing/updates"): likewise.
651
652 2004-04-20  James Troup  <james@nocrew.org>
653
654         * jennifer (check_files): check for existing .changes or .katie
655         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
656         directories.
657
658 2004-04-19  James Troup  <james@nocrew.org>
659
660         * jennifer (check_source): handle failure to remove the temporary
661          directory (used for source tree extraction) better, specifically:
662          if we fail with -EACCES, chmod -R u+rwx the temporary directory
663          and try again and if that works, REJECT the package.
664
665 2004-04-17  James Troup  <james@nocrew.org>
666
667         * docs/madison.1.sgml: document -b/--binary-type,
668         -g/--greaterorequal and -G/--greaterthan.
669
670         * madison (usage): -b/--binary-type only takes a single argument.
671         Document -g/--greaterorequal and -G/--greaterthan.
672         (main): add support for -g/--greaterorequal and -G/--greaterthan.
673
674 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
675
676         * billie: Cleaned up a load of comments, added /README.non-US to
677           the verbatim matches list.
678
679 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
680
681         * utils.py (size_type): Make it use real binary megabytes and
682           kilobytes, instead of the marketing terms used before.
683
684 2004-04-07  James Troup  <james@nocrew.org>
685
686         * katie.py (Katie.check_dsc_against_db): in the case we're
687         ignoring an identical-to-existing orig.tar.gz remember the path to
688         the existent version in pkg.orig_tar_gz.  Adjust query to grab
689         location.path too to be able to do so.
690
691 2004-04-03  James Troup  <james@nocrew.org>
692
693         * debian/control (Depends): add python2.1-email | python (>= 2.2)
694         needed for new utils.rfc2047_encode() function.
695
696         * utils.py (re_parse_maintainer): allow whitespace inside the
697         email address.
698         (Error): new exception base class.
699         (ParseMaintError): new exception class.
700         (force_to_utf8): new function.
701         (rfc2047_encode): likewise.
702         (fix_maintainer): rework.  use force_to_utf8() to force name and
703         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
704         return an rfc2047 value.  Validate the address to catch missing
705         email addresses and (some) broken ones.
706
707         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
708         by adopting foo2047 return value.
709         (Katie.dump_vars): add changedby2047 and maintainer2047 as
710         mandatory changes fields.  Promote changes and maintainer822 to
711         mandatory fields.
712         (Katie.update_subst): default maintainer2047 rather than
713         maintainer822.  User foo2047 rather than foo822 when setting
714         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
715
716         * jennifer (check_changes): set default changes["maintainer2047"]
717         and changes["changedby2047"] values rather than their 822
718         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
719         to new utils.fix_maintainer() - reject on exception and adopt
720         foo2047 return value.
721         (check_dsc): if a mandatory field is missing don't do any further
722         checks and as a result reduce paranoia about dsc[var] existence.
723         Validate the maintainer field by calling new
724         utils.fix_maintainer().
725
726         * ashley (main): add changedby2047 and maintainer2047 to mandatory
727         changes fields.  Promote maintainer822 to a mandatory changes
728         field.  add "pool name" to files fields.
729
730         * test/006/test.py: new file - tests for new
731         utils.fix_maintainer().
732
733 2004-04-01  James Troup  <james@nocrew.org>
734
735         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
736
737         * jennifer (get_changelog_versions): create a symlink mirror of
738         the source files in the temporary directory.
739         (check_source): if check_dsc_against_db() couldn't find the
740         orig.tar.gz bail out.
741
742         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
743         part of the upload store the path to it in pkg.orig_tar_gz and if
744         it can't be found set pkg.orig_tar_gz to -1.
745
746         Explicitly return the second value as None in the (usual) case
747         where we don't have to reprocess.  Remove obsolete diagnostic
748         logs.
749
750         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
751
752         * utils.py (temp_filename): new helper function that wraps around
753         tempfile.mktemp().
754
755         * katie.py (Katie.do_reject): use it and don't import tempfile.
756         * lisa (prod_maintainer): likewise.
757         (edit_note): likewise.
758         (edit_new): likewise.
759         * lauren (reject): likewise.
760         * melanie (main): likewise.
761         * neve (do_sources): likewise.
762         * rene (main): likewise.
763         * tea (validate_sources): likewise.
764
765 2004-03-31  James Troup  <james@nocrew.org>
766
767         * tea (validate_sources): remove unused 's' temporary variable.
768
769 2004-03-15  James Troup  <james@nocrew.org>
770
771         * jennifer (check_dsc): check changes["architecture"] for
772         source before we do anything else.
773
774 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
775
776         * billie: Added
777         * katie.conf (Billie): Added sample Billie stanza to katie.conf
778
779 2004-03-12  James Troup  <james@nocrew.org>
780
781         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
782
783         * katie.conf (Dir::Queue::BTSVersionTrack): define.
784
785         * katie.py (Katie.accept): add support for DebBugs Version
786         Tracking by writing out .versions (generated in jennifer's
787         get_changelog_versions()) and .debinfo (mapping of binary ->
788         source) files.
789
790         * ashley (main): add dsc["bts changelog"].
791
792         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
793
794         * jennifer (check_diff): obsoleted by check_source(), removed.
795         (check_source): new function: create a temporary directory and
796         move into it and call get_changelog_versions().
797         (get_changelog_versions): new function: extract the source package
798         and optionally parse debian/changelog to obtain the version
799         history for the BTS.
800         (process_it): call check_source() rather than check_diff().
801
802 2004-03-08  James Troup  <james@nocrew.org>
803
804         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
805         listbar" rather than "if listbar.count(varfoo)"' change on
806         2004-02-24.
807
808 2004-03-05  James Troup  <james@nocrew.org>
809
810         * alicia (main): don't warn about not closing bugs - we don't
811         manage overrides through the BTS.
812
813 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
814
815         * docs/README.config: lots of updates and corrections.
816         * docs/README.first: likewise.
817
818         * docs/README.config: drop unused Dir::Queue::Root.
819         * katie.conf-non-US: likewise.
820         * katie.conf: likewise.
821         * katie.conf-security: likewise.
822
823 2004-02-27  James Troup  <james@nocrew.org>
824
825         * rose (process_tree): use 'if var in [ list ]' rather than long
826         'if var == foo or var == bar or var == baz'.  Suggested by Martin
827         Michlmayr.
828
829         * jennifer (check_files): reduce 'if var != None' to 'if var' as
830         suggested by Martin Michlmayr.
831         * catherine (poolize): likewise.
832         * charisma (main): likewise.
833         * halle (check_changes): likewise.
834         * heidi (main): likewise.
835         (process_file): likewise.
836         * kelly (install): likewise.
837         (stable_install): likewise.
838         * utils.py (fix_maintainer): likewise.
839
840         * apt.conf: add support for debian-installer in testing-proposed-updates.
841         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
842         add - set to main.
843
844         * mkmaintainers: add "-T15" option to wget of non-US packages file
845         so that we don't hang cron.daily if non-US is down.
846
847         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
848
849         * templates/jennifer.bug-close: add Source and Source-Version
850         pseudo-headers that may be used for BTS Version Tracking someday
851         [ajt@].
852
853         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
854         (main): likewise.
855
856         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
857
858 2004-02-25  James Troup  <james@nocrew.org>
859
860         * katie.conf (SuiteMappings): don't map testing-security to
861         proposed-updates.
862
863 2004-02-24  James Troup  <james@nocrew.org>
864
865         * katie.py (Katie.__init__): remove unused 'values' field.
866
867         * utils.py (extract_component_from_section): use 's.find(c) != -1'
868         rather than 's.count(c) > 0'.
869
870         * katie.py (Katie.source_exists): use "if varfoo in listbar"
871         rather than "if listbar.count(varfoo)".
872         * halle (check_joey): likewise.
873         * jeri (check_joey): likewise.
874         * lisa (edit_index): likewise.
875         * jenna (stable_dislocation_p): likewise.
876
877         * jennifer (main): remove unused global 'nmu'.
878
879 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
880
881         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
882           to be ftpmaster@ftp-master.debian.org to bring it into line with how
883           the dak tools close bugs.
884
885 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
886
887         * katie.conf (Alicia): Added an Alicia section with email address
888         * templates/alicia.bug-close: Added
889         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
890         * alicia (main): Added a -d/--done argument
891
892 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
893
894         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
895
896 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
897
898         * lisa (prod_maintainer): Added function to prod the maintainer without
899           accepting or rejecting the package
900         * templates/lisa.prod: Added this template for the prodding mail
901
902         * .cvsignore: Added neve-files which turns up in new installations
903
904 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
905
906         * alicia (usage): Fixed usage message to offer section and priority
907           as seperately optional arguments.
908         * alicia (main): Added a % (arg) interpolation needed when only
909           one of section or priority is provided and it cannot be found.
910
911 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
912
913         * alicia: Added
914         * docs/alicia.1.sgml: Added
915         * docs/Makefile: Added alicia to the list of manpages to build
916         * docs/README.names: Noted what alicia does
917         * docs/README.first: Noted where alicia is useful
918
919 2004-01-21  James Troup  <james@nocrew.org>
920
921         * madison (main): add -b/--binary-type.
922         (usage): likewise.
923
924         * denise (main): generate debian-installer overrides for testing
925         too.
926         * apt.conf: add support for debian-installer in testing.
927         * katie.conf (Suite::Testing::UdebComponents): set to main.
928
929         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
930         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
931         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
932
933         * utils.py (parse_changes): don't process data not inside the
934         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
935         pointing this out.
936         * test/005/test.py (main): new test to test for above.
937
938 2004-01-04  James Troup  <james@nocrew.org>
939
940         * jenna (write_filelists): correct typo, s/Components/Component/
941         for Options.
942
943 2004-01-04  Ryan Murray  <rmurray@debian.org>
944
945         * cron.buildd: move update of overrides and Packages file...
946         * cron.unchecked: to here.
947         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
948         * katie.conf-security: likewise
949
950 2003-11-20  James Troup  <james@nocrew.org>
951
952         * jenna (main): don't use utils.try_with_debug(), it produces way
953         too much output.
954
955         * halle (check_changes): don't error out if a .changes refers to a
956         non-existent package, just warn and skip the file.
957
958         * docs/README.stable-point-release: mention halle and .changes
959         obsoleted by removal through melanie.  Update for 3.0r2.
960
961         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
962         (Suite::Stable::Description): update for 3.0r2.
963         (Lauren::MoreInfoURL): likewise.
964         * katie.conf-non-US (Suite::Stable::Version): likewise.
965         (Suite::Stable::Description): likewise.
966         (Lauren::MoreInfoURL): likewise.
967
968         * apt.conf.stable (Default): don't define MaxContentsChange.
969         * apt.conf.stable-non-US (Default): likewise.
970
971         * lauren (reject): hack to work around partial replacement of an
972         upload, i.e. one or more binaries superseded by another source
973         package.
974
975 2003-11-17  James Troup  <james@nocrew.org>
976
977         * pseudo-packages.maintainers: point installation-reports at
978         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
979         request.
980
981         * utils.py (parse_changes): calculate the number of lines once
982         with len() rather than max().
983
984         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
985         files, since check_dsc_against_db() deletes the .orig.tar.gz
986         entry.
987
988 2003-11-13  Ryan Murray  <rmurray@debian.org>
989
990         * apt.conf: specify a src override file for debian-installer
991
992 2003-11-10  James Troup  <james@nocrew.org>
993
994         * fernanda.py (strip_pgp_signature): new function - strips PGP
995         signature from a file and returns the modified contents of the
996         file in a string.
997         (display_changes): use it.
998         (read_dsc): likewise.
999
1000 2003-11-09  Ryan Murray  <rmurray@debian.org>
1001
1002         * cron.buildd: export accepted_autobuild table for unstable, and use
1003         it to generate the incoming Packages/Sources rather than having apt
1004         walk the directory.
1005         * apt.conf.buildd: use exported table from cron.buildd to generate
1006         Packages/Sources
1007
1008 2003-11-07  James Troup  <james@nocrew.org>
1009
1010         * kelly: import errno.
1011
1012         * katie.py (Katie.build_summaries): sort override disparities.
1013
1014         * kelly (install): set dsc_component based on the .dsc's component
1015         not a random binaries.
1016
1017 2003-10-29  James Troup  <james@nocrew.org>
1018
1019         * katie.py (Katie.build_summaries): don't assume changes["source"]
1020         exists since it might not.
1021
1022 2003-10-20  James Troup  <james@nocrew.org>
1023
1024         * pseudo-packages.maintainers: update security.d.o to use
1025         team@s.d.o at joy@'s request.
1026
1027 2003-10-17  James Troup  <james@nocrew.org>
1028
1029         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1030
1031 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1032
1033         * tea (chk_bd_process_dir): use .endswith rather than slice.
1034
1035 2003-10-14  James Troup  <james@nocrew.org>
1036
1037         * tea (check_build_depends): new function.
1038         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1039         in the archive.
1040         (main): update for new function.
1041         (usage): likewise.
1042
1043         * katie.py (Katie.do_reject): sanitize variable names,
1044         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1045         os.close() to outside if clause.
1046
1047         * jennifer (check_dsc): check build-depends and
1048         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1049         Fold the ARRAY check into the same code block and tidy up it's
1050         rejection message.
1051         (check_changes): ensure that the Files field is non-empty.
1052         Suggested by Santiago Vila <sanvila@unex.es>
1053         (check_changes): normalize reject messages.
1054         (check_dsc): instead of doing most of the checks inside a for loop
1055         and an if, find the dsc_filename in a short loop over files first
1056         and then do all the checks.  Add check for more than one .dsc in a
1057         .changes which we can't handle.  Normalize reject messages.
1058
1059 2003-10-13  James Troup  <james@nocrew.org>
1060
1061         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1062         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1063
1064         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1065         variables while iterating over 'files'.  Don't regenerate it when
1066         checking for source if source is mentioned.
1067
1068         Reject source only uploads if the config variable
1069         Dinstall::Reject::NoSourceOnly is set.
1070
1071 2003-10-03  James Troup  <james@nocrew.org>
1072
1073         * rene (main): add nasty hardcoded reference to debian-installer
1074         so we detect NBS .udebs.
1075
1076 2003-09-29  James Troup  <james@nocrew.org>
1077
1078         * apt.conf (old-proposed-updates): remove.
1079         * apt.conf-non-US (old-proposed-updates): likewise.
1080
1081 2003-09-24  James Troup  <james@nocrew.org>
1082
1083         * tea (check_files_not_symlinks): new function, ensure files
1084         mentioned in the database aren't symlinks.  Includes code to
1085         update any files that are like this to their real filenames +
1086         location; commented out by though.
1087         (usage): update for new function.
1088         (main): likewise.
1089
1090 2003-09-24  Anthony Towns  <ajt@debian.org>
1091
1092         * vars: external-overrides variable added
1093         * cron.daily: Update testing/unstable Task: overrides from joeyh
1094         managed external source.
1095
1096 2003-09-22  James Troup  <james@nocrew.org>
1097
1098         * kelly (install): if we can't move the .changes into queue/done,
1099         fail don't warn and carry on.  The old behaviour pre-dates NI and
1100         doesn't make much sense now since jennifer checks both
1101         queue/accepted and queue/done for any .changes files it's
1102         processing.
1103
1104         * utils.py (move): don't throw exceptions on existing files or
1105         can't overwrite, instead just fubar out.
1106
1107         * jennifer (check_dsc): also check Build-Depends-Indep for
1108         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1109
1110 2003-09-18  James Troup  <james@nocrew.org>
1111
1112         * katie.py (Katie.close_bugs): only log the bugs we've closed
1113         once.
1114
1115         * kelly (main): log as 'kelly', not 'katie'.
1116
1117 2003-09-16  James Troup  <james@nocrew.org>
1118
1119         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1120
1121         * jennifer (check_changes): normalize reject message for "changes
1122         file already exists" to be %s: <foo>.
1123         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1124         produced by broken dpkg-source in 1.10.11.  Tone down and
1125         normalize rejection message for incompatible 'Format' version
1126         numbers.
1127         (check_diff): likewise tone down and normalize.
1128
1129 2003-09-07  James Troup  <james@nocrew.org>
1130
1131         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1132         don't bomb out on bogus empty lines.
1133         (build_file_list): check for changes["files"] earlier.  use Dict
1134         to create files[name] dictionary.
1135         (send_mail): don't bother validating arguments.
1136         (check_signature): minor improvements to some of the rejection
1137         messages including listing the key id of the key that wasn't found
1138         in the keyring.
1139         (wrap): new function.
1140
1141         * tea: add new check 'validate-indices' that ensures all files
1142         mentioned in indices (Packages, Sources) files do in fact exist.
1143
1144         * catherine (poolize): use a local re_isadeb which handles legacy
1145         (i.e. no architecture) style .deb filenames.
1146
1147         * rosamund: new script.
1148
1149         * rhona (check_binaries): when checking for binary packages not in
1150         a suite, don't bother selecting files that already have a
1151         last_used date.
1152         (check_sources): likewise.
1153
1154         * rhona: change all SQL EXISTS sub-query clauses to use the
1155         postgres suggested convention of "SELECT 1 FROM".
1156         * andrea (main): likewise.
1157         * tea (check_override): likewise.
1158         * catherine (main): likewise.
1159
1160         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1161         entries and in other suites MustBeNewerThan's.
1162         (SuiteMappings): likewise
1163         * katie.conf-non-US: likewise.
1164         * katie.conf-security: likewise.
1165
1166         * apt.conf-security: remove oldstable.
1167         * apt.conf.stable: likewise.
1168         * apt.conf.stable-non-US: likewise.
1169         * cron.buildd-security: likewise.
1170         * cron.daily-security: likewise.
1171         * vars-security (suites): likewise.
1172         * wanna-build/trigger.daily: likewise.
1173
1174         * claire.py (clean_symlink): move...
1175         * utils.py (clean_symlink): here.
1176
1177         * claire.py (find_dislocated_stable): update accordingly.
1178
1179 2003-08-16  Anthony Towns  <ajt@debian.org>
1180
1181         * katie.py (source_exists): expand the list of distributions
1182         the source may exist in to include any suite that's mapped to
1183         the destination suite (even transitively (a->b->c)). This should
1184         unbreak binary uploads to *-proposed-updates.
1185
1186 2003-08-09  Randall Donald  <rdonald@debian.org>
1187
1188         * lisa (recheck): change changes["distribution"].keys() to
1189         Katie.pkg.changes...
1190
1191 2003-08-08  Randall Donald  <rdonald@debian.org>
1192
1193         * katie.py: only tag bugs as fixed-in-experimental for
1194         experimental uploads
1195
1196 2003-07-26  Anthony Towns  <ajt@debian.org>
1197
1198         * katie.py (source_exists): add an extra parameter to limit the
1199         distribution(s) the source must exist in.
1200         * kelly, lisa, jennifer: update to use the new source_exists
1201
1202 2003-07-15  Anthony Towns  <ajt@debian.org>
1203
1204         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1205         checksums for debian-installer stuff even when it's just a symlink to
1206         another suite
1207
1208         * apt.conf: add the FakeDI line
1209
1210 2003-06-09  James Troup  <james@nocrew.org>
1211
1212         * kelly (check): make sure the 'file' we're looking for in 'files'
1213         hasn't been deleted by katie.check_dsc_against_db().
1214
1215 2003-05-07  James Troup  <james@nocrew.org>
1216
1217         * helena (time_pp): fix s/years/year/ typo.
1218
1219 2003-04-29  James Troup  <james@nocrew.org>
1220
1221         * madison (usage): document -c/--component.
1222
1223         * madison (usage): Fix s/seperated/separated/.
1224         * melanie (usage): likewise.
1225         * jenna (usage): likewise.
1226
1227 2003-04-24  James Troup  <james@nocrew.org>
1228
1229         * cron.daily-non-US: if there's nothing for kelly to install, say
1230         so.
1231
1232         * jennifer (check_timestamps): print sys.exc_value as well as
1233         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1234         failed' with 'deb contents' to make it clearer what timestamp(s)
1235         are being checked.
1236
1237 2003-04-15  James Troup  <james@nocrew.org>
1238
1239         * cron.daily-non-US: only run kelly if there are some .changes
1240         files in accepted.
1241
1242         * rene: add -m/--mode argument which can be either daily (default)
1243         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1244         Various changes to make this possible including a poor attempt at
1245         splitting main() up a little.  De-hardcode suite numbers from SQL
1246         queries and return quietly from do_nviu() if experimental doesn't
1247         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1248         is.
1249
1250         * debian/control (Depends): remove python-zlib as it's obsolete.
1251
1252         * charisma (main): don't slice the \n off strings when we're
1253         strip()-ing it anyway.
1254         * heidi (set_suite): likewise.
1255         (process_file): likewise.
1256         * natalie (process_file): likewise.
1257
1258 2003-04-08  James Troup  <james@nocrew.org>
1259
1260         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1261         slow queries by using one LIKE '%foo%' and then matching against
1262         '%s' or '/%s$' in python.  Also only join location when we need it
1263         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1264         query, so 6s for each sourceful package.
1265
1266         * cron.daily: invoke rene and send the report to ftpmaster.
1267         * cron.daily-non-US: likewise.
1268
1269 2003-03-14  James Troup  <james@nocrew.org>
1270
1271         * utils.py (send_mail): default filename to blank.
1272         * amber (make_advisory): adapt.
1273         * jennifer (acknowledge_new): likewise.
1274         * katie.py (Katie.close_bugs): likewise.
1275         (Katie.announce): likewise.
1276         (Katie.accept): likewise.
1277         (Katie.check_override): likewise.
1278         (Katie.do_reject): likewise.
1279         * kelly (do_reject): likewise.
1280         (stable_install): likewise.
1281         * lisa (do_bxa_notification): likewise.
1282         * lauren (reject): likewise.
1283         * melanie (main): likewise.
1284
1285         * rene (add_nbs): check any NBS packages against unstable to see
1286         if they haven't been removed already.
1287
1288         * templates/katie.rejected: remove paragraph about rejected files
1289         since they're o-rwx due to c-i-m and the uploader can't do
1290         anything about them and shania will take care of them anyway.
1291
1292         * madison (usage): update usage example to use comma seperation.
1293         * melanie (usage): likewise.
1294
1295         * utils.py (split_args): new function; splits command line
1296         arguments either by space or comma (whichever is used).  Also has
1297         optional-but-default DWIM spurious space detection to avoid
1298         'command -a i386, m68k' problems.
1299         (parse_args): use it.
1300         * melanie (main): likewise.
1301
1302         * melanie (main): force the admin to tell someone if we're not
1303         doing a rene-led removal (or closing a bug, which counts as
1304         telling someone).
1305
1306 2003-03-05  James Troup  <james@nocrew.org>
1307
1308         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1309         and python sections.
1310         * katie.conf-security (Section): likewise.
1311
1312         * add_constraints.sql: add uid and uid_id_seq to grants.
1313
1314         * lisa (determine_new): also warn about adding overrides to
1315         oldstable.
1316
1317         * madison (main): make the -S/--source-and-binary query obey
1318         -s/--suite restrictions.
1319
1320 2003-03-03  James Troup  <james@nocrew.org>
1321
1322         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1323         exists, warn the user that our output might seem strange.  (People
1324         get confused by multiple versions in a suite which happens
1325         post-kelly but pre-jenna.)
1326
1327 2003-02-21  James Troup  <james@nocrew.org>
1328
1329         * kelly (main): we don't need to worry about StableRejector.
1330
1331         * melanie (main): sort versions with apt_pkg.VersionCompare()
1332         prior to output.
1333
1334         * lauren: new script to manually reject packages from
1335         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1336
1337 2003-02-20  James Troup  <james@nocrew.org>
1338
1339         * kelly (init): remove unused -m/--manual-reject argument.
1340
1341         * katie.py (Katie.force_reject): renamed from force_move to make
1342         it more explicit what this function does.
1343         (Katie.do_reject): update to match.
1344
1345         * utils.py (prefix_multi_line_string): add an optional argument
1346         include_blank_lines which defaults to 0.  If non-zero, blank lines
1347         will be includes in the output.
1348
1349         * katie.py (Katie.do_reject): don't add leading space to each line
1350         of the reject message.  Include blank lines when showing the
1351         message to the user.
1352
1353 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1354
1355         * utils.py (fix_maintainer): replace pointless re.sub() with
1356         simple string format.
1357
1358 2003-02-11  James Troup  <james@nocrew.org>
1359
1360         * lisa (edit_overrides): only strip-to-one-char and upper-case
1361         non-numeric answers.  Fixes editing of items with indices >= 10;
1362         noticed by Randall.
1363         (edit_overrides): correct order of arguments to "not a valid
1364         index" error message.
1365
1366         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1367         remove_duplicate_versions(); thanks to aj for the initial
1368         diagnosis.
1369         (remove_duplicate_versions): correct how we return
1370         dominant_versions.
1371         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1372         a tuple rather than just a tuple.
1373
1374 2003-02-10  James Troup  <james@nocrew.org>
1375
1376         * emilie: new script - sync fingerprint and uid tables with a
1377         debian.org LDAP DB.
1378
1379         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1380         in 'fingerprint'.
1381
1382         * db_access.py (get_or_set_uid_id): new function.
1383
1384         * jennifer (main): update locking to a) not used FCNTL (deprecated
1385         in python >= 2.2) and b) acknowledge upstream's broken
1386         implementation of lockf (see Debian bug #74777), c) try to acquire
1387         the lock non-blocking.
1388         * kelly (main): likewise.
1389
1390         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1391
1392         * madison (main): only append the package to new_packages if it's
1393         not already in there; fixes -S/--source-and-binary for cases where
1394         the source builds a binary package of the same name.
1395
1396 2003-02-10  Anthony Towns  <ajt@debian.org>
1397
1398         * madison (main): use explicit JOIN syntax for
1399         -S/--source-and-binary queries to reduce the query's runtime from
1400         >10 seconds to negligible.
1401
1402 2003-02-08  James Troup  <james@nocrew.org>
1403
1404         * rene (main): in the NVIU output, append items to lists, not
1405         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1406         should be removed.
1407
1408 2003-02-07  James Troup  <james@nocrew.org>
1409
1410         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1411         Sources [aj].
1412
1413         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1414         O. Benham/Adam Heath/.
1415
1416         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1417         (Suite::Stable::Description): update for 3.0r1a.
1418         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1419
1420         * utils.py (gpgv_get_status_output): rename from
1421         get_status_output().
1422
1423         * neve (check_signature): use gpgv_get_status_output and Dict from
1424         utils().  Add missing newline to error message about duplicate tokens.
1425
1426         * saffron (per_arch_space_use): also print space used by source.
1427         (output_format): correct string.join() invocation.
1428
1429         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1430
1431 2003-02-04  James Troup  <james@nocrew.org>
1432
1433         * cron.buildd: correct generation of Packages/Sources and grep out
1434         non-US/non-free as well as non-free.
1435
1436 2003-02-03  Ryan Murray  <rmurray@debian.org>
1437
1438         * cron.buildd: generate quinn-diff output with full Packages/Sources
1439           files to get out-of-date vs. uncompiled right.
1440         * apt.conf.buildd: no longer generate uncompressed files, as they
1441           are generated in cron.buildd instead
1442         * add -i option to quinn-diff to ignore binary-all packages
1443         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1444           aren't in the packages file, the arch that uploaded them will build
1445           them anyways...
1446
1447 2003-01-30  James Troup  <james@nocrew.org>
1448
1449         * rene (main): only print suggested melanie command when there's
1450         some NBS to remove.
1451
1452 2003-01-30  Ryan Murray  <rmurray@debian.org>
1453
1454         * cron.buildd: fix incorrectly inverted lockfile check
1455
1456 2003-01-29  Ryan Murray  <rmurray@debian.org>
1457
1458         * cron.buildd: generate override.sid.all3.src
1459         * apt.conf.buildd: use generated override.sid.all3.src
1460
1461 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1462
1463         * utils.py (get_status_output): moved from jennifer.
1464         (Dict): likewise.
1465         (check_signature): likewise.
1466
1467         * jennifer (get_status_output): moved to utils.py.
1468         (Dict): likewise.
1469         (check_signature): likewise.
1470
1471         * utils.py (check_signature): add an argument to specifiy which
1472         function to call when an error was found.
1473         (check_signature): document this function better.
1474
1475         * jennifer (check_files): pass the reject function as an argument
1476         to utils.check_signature.
1477         (process_it): likewise.
1478
1479 2003-01-20  James Troup  <james@nocrew.org>
1480
1481         * rene (main): lots of changes to improve the output and make it
1482         more useful.
1483
1484         * katie.py (Katie.check_override): make the override messages
1485         clearer (hopefully).
1486
1487 2002-12-26  James Troup  <james@nocrew.org>
1488
1489         * ziyi (usage): document the ability to pass suite(s) as
1490         argument(s).
1491         (main): read apt.conf after checking for -h/--help.
1492
1493         * tea (main): take the check to run as an argument.
1494
1495         * saffron.R: R script to graph daily install runs.
1496
1497         * saffron: new script; various stats functions.
1498
1499         * rhona (main): connect to the database after checking for -h/--help.
1500
1501         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1502
1503         * melanie (main): sort versions with utils.arch_compare_sw().
1504
1505         * madison (usage): alphabetize order of options.
1506         * melanie (usage): likewise.
1507
1508         * kelly (usage): fix usage short description (we aren't dinstall).
1509
1510         * julia (usage): fix usage description and alphabetize order of
1511         options.
1512
1513         * jeri (usage): fix usage short description.
1514
1515         * jennifer (main): move --help and --version checks from here...
1516         (init): to here so that they work with an empty katie.conf.
1517         * kelly: likewise.
1518
1519         * alyson (usage): new function.
1520         (main): use it.
1521         * andrea: likewise.
1522         * ashley: likewise.
1523         * cindy: likewise.
1524         * denise: likewise.
1525         * helena: likewise.
1526         * neve: likewise.
1527         * rene: likewise.
1528         * rose: likewise.
1529         * tea: likewise.
1530
1531         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1532         entry that caused tasks to be omitted from 3.0r1.
1533
1534 2002-12-10  James Troup  <james@nocrew.org>
1535
1536         * jennifer (check_files): sanity check the Depends field to ensure
1537         it's non-empty if present since apt chokes on an empty one.
1538         Thanks to Ryan Murray for the idea.
1539
1540 2002-12-08  James Troup  <james@nocrew.org>
1541
1542         * katie.conf-security (Helena::Directories): new; include accepted
1543         in addition to byhand and new.
1544
1545         * helena (process_changes_files): use utils.arch_compare_sw().
1546         Justify things based on the longest [package, version,
1547         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1548         the commas in architecture and version lists for the same reason.
1549         (main): make directories we process configurable through
1550         Helena::Directories in the config file; if that doesn't exist
1551         default to the old hardcoded values (byhand & new).
1552
1553         * utils.py (arch_compare_sw): moved here from madison.
1554         * madison (main): adjust to compensate.
1555
1556 2002-12-06  James Troup  <james@nocrew.org>
1557
1558         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1559         right filename.
1560
1561 2002-12-05  James Troup  <james@nocrew.org>
1562
1563         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1564
1565 2002-11-28  Randall Donald  <rdonald@debian.org>
1566
1567         * fernanda.py (read_control): fix typo of 'Architecture'.
1568
1569 2002-11-26  James Troup  <james@nocrew.org>
1570
1571         * lisa (check_pkg): call less with '-R' so we see the colour from
1572         Randall's fernanda changes.
1573
1574         * neve (process_sources): if Directory points to a legacy location
1575         but the .dsc isn't there; assume it's broken and look in the pool.
1576         (update_section): new, borroed from alyson.
1577         (do_da_do_da): use it.
1578         (process_packages): add suite_it to the cache key used for
1579         arch_all_cache since otherwise we only add a package to the first
1580         suite it's in and ignore any subsequent ones.
1581
1582         * katie.conf-non-US (Location): fixed to reflect reality (all
1583         suites, except old-proposed-updates (which is legacy-mixed)) are
1584         pool.
1585
1586         * utils.py (try_with_debug): wrapper for print_exc().
1587         * jenna (main): use it.
1588         * neve (main): likewise.
1589
1590 2002-11-25  Randall Donald  <rdonald@debian.org>
1591
1592         * fernanda.py (main): added -R to less command line for raw control
1593         character support to print colours
1594         (check_deb): Instead of running dpkg -I on deb file, call
1595         output_deb_info, the new colourized control reporter.
1596         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1597         of printing out each .dsc line.
1598         (output_deb_info): new function. Outputs each key/value pair from
1599         read_control except in special cases where we highlight section,
1600         maintainer, architecture, depends and recommends.
1601         (create_depends_string): new function. Takes Depends tree and looks
1602         up it's compontent via projectb db, colourizes and constructs a
1603         depends string in original order.
1604         (read_dsc): new function. reads and parses .dsc info via
1605         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1606         colourized.
1607         (read_control): new function. reads and parses control info via
1608         apt_pkg. Depends and Recommends are split in to list structures,
1609         Section and Architecture are colourized. Maintainer is colourized
1610         if it has a localhost.localdomain address.
1611         (split_depends): new function. Creates a list of lists of
1612         dictionaries of depends (package,version relation). Top list is
1613         colected from comma delimited items. Sub lists are | delimited.
1614         (get_comma_list): new function. splits string input among commas
1615         (get_or_list): new function. splits string input among | delimiters
1616         (get_depends_parts): new function. Creates dictionary of package name
1617         and version relation from dependancy string.
1618         Colours for section and depends are per component. Unfound depends
1619         are in bold. Lookups using version info is not supported yet.
1620
1621 2002-11-22  James Troup  <james@nocrew.org>
1622
1623         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1624         'udmsearch'.
1625
1626         * amber (make_advisory): string.atol() is deprecated and hasn't
1627         been ported to string methods.  Use long() instead.
1628
1629         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1630         creating the database since we'll fail badly if it's created with
1631         e.g. UNICODE encoding.
1632
1633         * rose (main): AptCnf is a global.
1634
1635         * neve (get_location_path): new function determines the location
1636         from the the first (left-most) directory of a Filename/Directory.
1637         (process_sources): don't need 'location' anymore.  Use
1638         utils.warn().  Use the Directory: field for each package to find
1639         the .dsc.  Use get_location_path() to determine the location for
1640         each .dsc.
1641         (process_packages): do't need 'location' anymore.  Use
1642         utils.warn().  Use get_location_path().
1643         (do_sources): don't need 'location', drop 'prefix' in favour of
1644         being told the full path to the Sources file, like
1645         process_packages().
1646         (do_da_do_da): main() renamed, so that main can call us in a
1647         try/except.  Adapt for the changes in do_sources() and
1648         process_packages() above.  Assume Sources and Packages file are in
1649         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1650
1651         * katie.conf-security (Location): fixed to reflect reality (all
1652         suites are pool, not legacy).
1653
1654         * utils.py (print_exc): more useful (i.e. much more verbose)
1655         traceback; a recipe from the Python cookbook.
1656         * jenna (main): use it.
1657         * neve (main): likewise.
1658
1659 2002-11-19  James Troup  <james@nocrew.org>
1660
1661         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1662         handling which was FUBAR for multi-suite uploads.  Now we just
1663         make a dictionary of destinations to copy to and iterate over
1664         those.
1665
1666         * fernanda.py (check_deb): run linda as well as lintian.
1667
1668 2002-10-21  James Troup  <james@nocrew.org>
1669
1670         * melanie (main): change X-Melanie to X-Katie and prefix it with
1671         'melanie '.
1672
1673         * lisa (main): prefix X-Katie with 'lisa '.
1674
1675         * jennifer (clean_holding): fix typo in string method changes;
1676         s/file.find(file/file.find(/.
1677
1678         * cron.daily: invoke helena and send the report to ftpmaster.
1679         * cron.daily-non-US: likewise.
1680
1681 2002-10-16  James Troup  <james@nocrew.org>
1682
1683         * kelly (check): call reject() with a blank prefix when parsing
1684         the return of check_dsc_against_db() since it does its own
1685         prefix-ing.
1686
1687         * rose: new script; only handles directory creation initally.
1688
1689         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1690         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1691
1692 2002-10-06  James Troup  <james@nocrew.org>
1693
1694         * rene (main): remove bogus argument handling.
1695
1696         * kelly: katie, renamed.
1697         * cron.daily: adapt for katie being renamed to kelly.
1698         * cron.daily-non-US: likewise.
1699         * amber (main): likewise.
1700
1701         * Changes for python 2.1.
1702
1703         * kelly: time.strftime no longer requires a second argument of
1704         "time.localtime(time.time())".
1705         * logging.py: likewise.
1706         * rhona: likewise.
1707         * shania (init): likewise.
1708
1709         * amber: use augmented assignment.
1710         * catherine (poolize): likewise.
1711         * claire.py (fix_component_section): likewise.
1712         * halle (check_changes): likewise.
1713         * helena: likewise.
1714         * jenna: likewise.
1715         * jennifer: likewise.
1716         * jeri: likewise.
1717         * katie.py: likewise.
1718         * kelly: likewise.
1719         * lisa: likewise.
1720         * madison (main): likewise.
1721         * melanie: likewise.
1722         * natalie: likewise.
1723         * neve: likewise.
1724         * rhona: likewise.
1725         * tea: likewise.
1726         * utils.py: likewise.
1727         * ziyi: likewise.
1728
1729         * amber: use .endswith.
1730         * fernanda.py: likewise.
1731         * halle (main): likewise.
1732         * jennifer: likewise.
1733         * jeri: likewise.
1734         * katie.py: likewise.
1735         * kelly: likewise.
1736         * lisa: likewise.
1737         * neve: likewise.
1738         * shania (main): likewise.
1739         * utils.py: likewise.
1740
1741         * alyson: use string methods.
1742         * amber: likewise.
1743         * andrea: likewise.
1744         * ashley: likewise.
1745         * catherine: likewise.
1746         * charisma: likewise.
1747         * claire.py: likewise.
1748         * db_access.py: likewise.
1749         * denise: likewise.
1750         * halle: likewise.
1751         * heidi: likewise.
1752         * helena: likewise.
1753         * jenna: likewise.
1754         * jennifer: likewise.
1755         * jeri: likewise.
1756         * julia: likewise.
1757         * katie.py: likewise.
1758         * kelly: likewise.
1759         * lisa: likewise.
1760         * logging.py: likewise.
1761         * madison: likewise.
1762         * melanie: likewise.
1763         * natalie: likewise.
1764         * neve: likewise.
1765         * rene: likewise.
1766         * tea: likewise.
1767         * utils.py: likewise.
1768         * ziyi: likewise.
1769
1770 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1771
1772         * utils.py (parse_changes): use <string>.startswith() rather than
1773         string.find().
1774
1775 2002-08-27  Anthony Towns  <ajt@debian.org>
1776
1777         * katie.py (in_override_p): when searching for a source override,
1778         and the dsc query misses, search for both udeb and deb overrides
1779         as well. Should fix the UNACCEPT issues with udebs.
1780
1781 2002-08-24  James Troup  <james@nocrew.org>
1782
1783         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1784         source+binary package finding code which was causing severe
1785         performance degradation with postgres 7.2.
1786
1787 2002-08-14  James Troup  <james@nocrew.org>
1788
1789         * julia (main): use the pwd.getpwall() to get system user info
1790         rather than trying to read a password file.  Add a -n/--no-action
1791         option.
1792
1793         * cron.hourly: julia no longer takes any arguments.
1794         * cron.hourly-non-US: likewise.
1795
1796 2002-08-07  James Troup  <james@nocrew.org>
1797
1798         * katie (install): handle multi-suite uploads when CopyChanges
1799         and/or CopyKatie are in use, ensuring we only copy stuff once.
1800
1801 2002-08-01  Ryan Murray  <rmurray@debian.org>
1802
1803         * wanna-build/trigger.daily: initial commit, with locking
1804         * cron.buildd: add locking against daily run
1805
1806 2002-07-30  James Troup  <james@nocrew.org>
1807
1808         * melanie (main): readd creation of suite_ids_list so melanie is
1809         remotely useful again.
1810
1811         * katie.conf: adopt for woody release; diable
1812         StableDislocationSupport, add oldstable, adjust other suites and
1813         mappings, fix up location.
1814         * katie.conf-non-US: likewise.
1815         * katie.conf-security: likewise.
1816
1817         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1818         stable.
1819         * apt.conf.stable-non-US: likewise.
1820
1821         * apt.conf-security: adapt for woody release; adding oldstable,
1822         oldstable, adjust stable and testing.
1823         * cron.daily-security: likewise.
1824         * cron.buildd-security: likewise.
1825
1826         * apt.conf: adapt for woody release; rename woody-proposed-updates
1827         to testing-proposed-updates and proposed-updates to
1828         old-proposed-updates.
1829         * apt.conf-non-US: likewise.
1830
1831         * vars-non-US (copyoverrides): add sarge.
1832         * vars (copyoverrides): likewise.
1833
1834         * vars-security (suites): add oldstable.
1835
1836 2002-07-22  Ryan Murray  <rmurray@debian.org>
1837
1838         * apt.conf.security-buildd: use suite codenames instead of
1839           distnames.
1840
1841 2002-07-16  James Troup  <james@nocrew.org>
1842
1843         * denise (main): fix filenames for testing override files.
1844
1845 2002-07-14  James Troup  <james@nocrew.org>
1846
1847         * jennifer (process_it): call check_md5sums later so we can check
1848         files in the .dsc too
1849         (check_md5sums): check files in the .dsc too.  Check both md5sum
1850         and size.
1851
1852         * melanie (main): use parse_args() and join_with_commas_and() from
1853         utils.  If there's nothing to do, say so and exit, don't ask for
1854         confirmation etc.
1855
1856         * amber (join_with_commas_and): moved from here to ...
1857         * utils.py (join_with_commas_and): here.
1858
1859 2002-07-13  James Troup  <james@nocrew.org>
1860
1861         * madison (main): use parse_args() from utils.  Support
1862         -c/--component.
1863
1864         * jenna (parse_args): moved from here to ...
1865         * utils.py (parse_args): here.
1866
1867         * katie.conf (Architectures): minor corrections to the description
1868         for arm, mips and mipsel.
1869         * katie.conf-non-US (Architectures): likewise.
1870         * katie.conf-security (Architectures): likewise.
1871
1872         * cron.daily-security: use natalie's new -a/--add functionality to
1873         flesh out the security overrides.
1874
1875 2002-07-12  James Troup  <james@nocrew.org>
1876
1877         * cron.buildd (ARCHS): add arm.
1878
1879         * katie.conf: 2.2r7 was released.
1880         * katie.conf-non-US: likewise.
1881
1882         * utils.py (parse_changes): handle a multi-line field with no
1883         starting line.
1884
1885 2002-06-25  James Troup  <james@nocrew.org>
1886
1887         * templates/amber.advisory (To): add missing email address since
1888         __WHOAMI__ is only a name.
1889
1890         * katie.conf-security (Melane::LogFile): correct to go somewhere
1891         katie has write access to.
1892         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1893         Testing.
1894
1895         * natalie: add support for -a/-add which adds packages only
1896         (ignoring changes and deletions).
1897
1898         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1899         use FindB, not get.
1900
1901 2002-06-22  James Troup  <james@nocrew.org>
1902
1903         * jennifer (check_files): validate the package name and version
1904         field.  If 'Package', 'Version' or 'Architecture' are missing,
1905         don't try any further checks.
1906         (check_dsc): likewise.
1907
1908         * utils.py (re_taint_free): add '~' as a valid character.
1909
1910 2002-06-20  Anthony Towns  <ajt@debian.org>
1911
1912         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1913
1914 2002-06-09  James Troup  <james@nocrew.org>
1915
1916         * jennifer (check_files): reduce useless code.
1917
1918         * cron.daily-security: run symlinks -dr on $ftpdir.
1919
1920         * vars-security (ftpdir): add.
1921
1922 2002-06-08  James Troup  <james@nocrew.org>
1923
1924         * neve (update_override_type): transaction is handled higher up in
1925         main().
1926         (update_priority): likewise.
1927         (process_sources): remove code that makes testing a duplicate of
1928         stable.
1929         (process_packages): likewise.
1930
1931         * templates/amber.advisory: add missing mail headers.
1932
1933         * cron.daily-security: also call apt-ftparchive clean for
1934         apt.conf.buildd-security.
1935         * cron.weekly: likewise.
1936
1937         * amber (do_upload): write out a list of source packages (and
1938         their version) uploaded for testing.
1939         (make_advisory): add more Subst mappings for the mail headers.
1940         (spawn): check for suspicious characters in the command and abort
1941         if their found.
1942
1943 2002-06-07  James Troup  <james@nocrew.org>
1944
1945         * ziyi (main): remove the 'nonus'/'security' hacks and use
1946         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1947         the lower level Release files, even if they don't exist.  fubar
1948         out if we can't open a lower level Release file for writing.
1949
1950         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1951         ziyi.
1952         * katie.conf-security (Dinstall): likewise.
1953
1954         * amber (do_upload): renamed from get_file_list().  Determine the
1955         upload host from the original component.
1956         (init): Add a -n/--no-action option.  Fix how we get changes_files
1957         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1958         sys.argv).  Add an Options global.
1959         (make_advisory): support -n/--no-action.
1960         (spawn): likewise.
1961         (main): likewise.
1962         (usage): document -n/--no-action.
1963
1964         * cron.buildd-security: fix path to Packages-arch-specific in
1965         quinn-diff invocation.
1966
1967         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1968         to proper suite names (i.e. stable, testing) rather than codenames
1969         (potato, woody).
1970         (Dinstall::DefaultSuite): likewise.
1971         (Suite): likewise.
1972         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1973         * vars-security (suites): likewise.
1974         * apt.conf-security: likewise.
1975
1976         * katie.conf-security (Component): add "updates/" prefix.
1977         (Suite::*::Components): likewise.
1978         (ComponentMappings): new; map all {ftp-master,non-US} components
1979         -> updates/<foo>.
1980
1981         * katie.conf-security (Natalie): removed; the options have
1982         defaults and ComponentPosition is used by alyson which doesn't
1983         work on security.d.o.
1984         (Amber): replace UploadHost and UploadDir with ComponentMappings
1985         which is a mapping of components -> URI.
1986         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1987         (SuiteMappings): use "silent-map" in preference to "map".
1988
1989         * cron.unchecked-security: fix call to cron.buildd-security.
1990
1991         * cron.daily-security: map local suite (stable) -> override suite
1992         (potato) when fixing overrides.  Correct component in natalie call
1993         to take into account "updates/" prefix.  Fix cut'n'waste in
1994         override.$dist.all3 generation, the old files weren't being
1995         removed, so they were endlessly growing.
1996
1997         * neve (main): don't use .Find for the CodeName since we require
1998         it.  Location::*::Suites is a ValueList.
1999         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2000         out on expired keys, just warn.
2001         (update_override_type): new function; lifted from alyson.
2002         (update_priority): likewise.
2003         (main): use update_{override_type,priority}().
2004
2005         * jennifer (check_distributions): remove redunant test for
2006         SuiteMappings; ValueList("does-not-exist") returns [] which is
2007         fine.  Add support for a "silent-map" type which doesn't warn
2008         about the mapping to the user.
2009         (check_files): add support for ComponentMappings, similar to
2010         SuiteMappings, but there's no type, just a source and a
2011         destination and the original component is stored in "original
2012         component".
2013         * katie.py (Katie.dump_vars): add "original component" as an
2014         optionsal files[file] dump variable.
2015
2016         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2017         query.  Add support for section-less legacy locations like current
2018         security.debian.org through YetAnotherConfigBoolean
2019         'LegacyStableHasNoSections'.
2020         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2021
2022         * utils.py (real_arch): moved here from ziyi.
2023         * ziyi (real_arch): moved to utils.py.
2024         * ziyi (main): likewise.
2025
2026         * claire.py (find_dislocated_stable): use real_arch() with
2027         filter() to strip out source and all.
2028         * neve (main): likewise.
2029         * rene (main): likewise.
2030         * jeri (parse_packages): likewise.
2031
2032 2002-06-06  James Troup  <james@nocrew.org>
2033
2034         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2035         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2036         doing.
2037
2038 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2039
2040         * jeri (check_joey): check if the line contains two elements
2041         before accessing the second.  Also, strip trailing spaces as well
2042         as the newline.
2043         * halle (check_joey): likewise.
2044
2045 2002-06-05  James Troup  <james@nocrew.org>
2046
2047         * cron.unchecked-security: new file; like cron.unchecked but if
2048         there's nothing to do exit so we don't call cron.buildd-security.
2049
2050         * apt.conf.buildd-security: new file.
2051
2052         * vars (archs): alphabetize.
2053         * vars-non-US (archs): likewise.
2054
2055         * vars-security: add unchecked.
2056
2057         * madison (main): reduce rather bizarrely verbose and purposeless
2058         code to print arches to a simple string.join.
2059
2060         * katie.conf (Suites::Unstable): add UdebComponents, a new
2061         valuelist of suites, used by jenna to flesh out the list of
2062         <suite>_main-debian-installer-binary-<arch>.list files generated.
2063         (Dinstall): add StableDislocationSupport, a new boolean used by
2064         jenna to enable or disable stable dislocation support
2065         (i.e. claire), as true.
2066
2067         * katie.conf (Dinstall): add StableDislocationSupport, a new
2068         boolean used by jenna to enable or disable stable dislocation
2069         support (i.e. claire), as true.
2070         * katie.conf-non-US: likewise.
2071         * katie.conf-security: likewise.
2072
2073         * cron.daily-security: generate .all3 overrides for the buildd
2074         support.  Freshen a local copy of Packages-arch-specific from
2075         buildd.debian.org.
2076
2077         * claire.py (find_dislocated_stable): disable the support for
2078         files in legacy-mixed locations since none of the Debian archives
2079         have any anymore.
2080
2081         * helena: new script; produces a report on NEW and BYHAND
2082         packages.
2083
2084         * jenna: rewritten from scratch to fix speed problems.  Run time
2085         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2086         minutes, 105 seconds are the monster query and 70 odd seconds is
2087         claire.
2088
2089         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2090         irrelevant.
2091
2092 2002-06-05  Ryan Murray  <rmurray@debian.org>
2093
2094         * cron.buildd-security: new file.
2095
2096 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2097
2098         * denise (list): take a file argument and use it.
2099         (main): don't abuse sys.stdout, just write to the file.
2100
2101         * claire.py (usage): Fix misspelling.
2102         (clean_symlink): Simplify.
2103         (find_dislocated_stable): Avoid unnecessary work.
2104
2105 2002-05-29  James Troup  <james@nocrew.org>
2106
2107         * cameron: removed; apt-ftparchive can simply walk the directory.
2108
2109 2002-05-26  Anthony Towns  <ajt@debian.org>
2110
2111         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2112         for the autobuilders.
2113
2114 2002-05-24  Ryan Murray  <rmurray@debian.org>
2115
2116         * cron.buildd: update override files before running apt-ftparchive
2117
2118 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2119
2120         * amber (main): remove extra space in prompt.
2121
2122         * utils.py (validate_changes_file_arg): use original filename in
2123         error messages.
2124
2125         * jeri (check_joey): close file after use.
2126         (parse_packages): likewise.
2127         (main): setup debug option properly.
2128
2129         * melanie (main): remove unused packages variable and simplify the
2130         code to build up con_packages by using repr().
2131
2132 2002-05-23  James Troup  <james@nocrew.org>
2133
2134         * lisa (recheck): when we reject, also return 0 so the package is
2135         skipped.
2136         (sg_compare): fix note sorting.
2137         (recheck): remove the .katie file after rejection.
2138
2139         * katie.py (Katie.accept): accepted auto-build support take 3;
2140         this time adding support for security.  Security needs a) non-pool
2141         files copied rather than symlinked since accepted is readable only
2142         by katie/security and www-data needs to be able to see the files,
2143         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2144         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2145         SecurityAcceptedAutoBuild is a new boolean which controls whether
2146         or not normal or security style is used.  The unstable_accepted
2147         table was renamed to accepted_autobuild and a suite column added.
2148         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2149         didn't have it's last_used/in_accepted flags correctly updated.
2150         * katie (install): likewise.
2151         * rhona (clean_accepted_autobuild): likewise.
2152
2153 2002-05-22  James Troup  <james@nocrew.org>
2154
2155         * lisa (sort_changes): new function; sorts changes properly.
2156         Finally.
2157         (sg_compare): new function; helper for sort_changes().  Sorts by
2158         have note and time of oldest upload.
2159         (indiv_sg_compare): new function; helper for sort_changes().
2160         Sorts by source version, have source and filename.
2161         (main): use sort_changes().
2162         (changes_compare): obsoleted; removed.
2163
2164 2002-05-20  James Troup  <james@nocrew.org>
2165
2166         * rhona (clean_accepted_autobuild): don't die if a file we're
2167         trying to remove doesn't exist.  Makes rhona more friendly to
2168         katie/katie.py crashes/bugs without any undue cost.
2169
2170 2002-05-19  James Troup  <james@nocrew.org>
2171
2172         * lisa (main): if sorting a large number of changes give some
2173         feedback.
2174         (recheck): new function, run the same checks (modulo NEW,
2175         obviously) as katie does, if they fail do the standard
2176         reject/skip/quit dance.
2177         (do_pkg): use it.
2178
2179         * katie (install): don't try to unlink the symlink in the
2180         AcceptedAutoBuild support if the destination is not a symlink (or
2181         doesn't exist).  Avoids unnecessary bombs on previous partial
2182         accepts and will still bomb hard if the file exists and isn't a
2183         symlink.
2184
2185         * utils.py: blah, commands _is_ used when the mail stuff isn't
2186         commented out like it is in my test environment.
2187
2188         * lisa (changes_compare): "has note" overrides everything else.
2189         Use .katie files rather than running parse_changes, faster and
2190         allows "has note" to work.  Correct version compare, it was
2191         reversed.  Ctime check should only kick in if the source packages
2192         are not the same.
2193         (print_new): print out and return any note.  Rename 'ret_code' to
2194         'broken'.
2195         (edit_new): renamed from spawn_editor.  Don't leak file
2196         descriptors.  Clean up error message if editor fails.
2197         (edit_note): new function, allows one to edit notes.
2198         (do_new): add note support, editing and removing.
2199         (init): kill -s/--sort; with notes we always want to use our
2200         sorting method.
2201         (usage): likewise.
2202
2203         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2204         changes field.
2205
2206         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2207         it default to 0.  Adapt tests to assume it's boolean.
2208         * fernanda.py (check_changes): adjust call appropriately.
2209         * halle (check_changes): likewise.
2210         * jennifer (check_changes): likewise.
2211         * jeri (check_changes): likewise.
2212         * shania (flush_orphans): likewise.
2213
2214         * jennifer (check_dsc): pass is_a_dsc by name when calling
2215         build_file_list() for clarity.
2216         * shania (flush_orphans): likewise.
2217         * tea (check_missing_tar_gz_in_dsc): likewise.
2218
2219         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2220         calling parse_changes() for clarity.
2221         * tea (check_dscs): likewise.
2222
2223         * utils.py (parse_changes): make dsc_whitespace_rules default to
2224         not true.
2225         * halle (check_changes): adjust call appropriately.
2226         * jennifer (check_changes): likewise.
2227         * jeri (check_changes): likewise.
2228         * lisa (changes_compare): likewise.
2229         * utils.py (changes_compare): likewise.
2230         * melanie (main): likewise.
2231         * shania (flush_orphans): likewise.
2232         * fernanda.py (check_changes): likewise.
2233
2234 2002-05-18  James Troup  <james@nocrew.org>
2235
2236         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2237         it's not useful and by and large a duplication of information
2238         available in readable format in other files.
2239
2240 2002-05-16  Ryan Murray  <rmurray@debian.org>
2241
2242         * melanie: Dir::TemplatesDir -> Dir::Templates
2243
2244 2002-05-15  Ryan Murray  <rmurray@debian.org>
2245
2246         * cameron: correct the use of os.path.join
2247
2248 2002-05-15  Anthony Towns  <ajt@debian.org>
2249
2250         * ziyi: Update to match the new format for Architectures/Components
2251         in katie.conf.
2252
2253 2002-05-14  James Troup  <james@nocrew.org>
2254
2255         * amber: new script; 'installer' wrapper script for the security
2256         team.
2257
2258         * katie.py (Katie.announce): remove unused 'dsc' local
2259         variable. (pychecker)
2260
2261         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2262
2263         * neve: don't import sys, we don't use it. (pychecker)
2264         (check_signature): fix return type mismatch. (pychecker)
2265
2266         * utils.py: don't import commands, we don't use it.  (pychecker)
2267
2268         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2269
2270         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2271         obsoleted by the change to "othercomponents" handling in jennifer
2272         detailed below.
2273         (Katie.cross_suite_version_check): new function; implements
2274         cross-suite version checking rules specified in the conf file
2275         while also enforcing the standard "must be newer than target
2276         suite" rule.
2277         (Katie.check_binary_against_db): renamed, since it's invoked once
2278         per-binary, "binaries" was inaccurate.  Use
2279         cross_suite_version_check() and don't bother with the "oldfiles"
2280         rubbish as jennifer works out "othercomponents" herself now.
2281         (Katie.check_source_against_db): use cross_suite_version_check().
2282
2283         * katie (check): the version and file overwrite checks
2284         (check_{binary,source,dsc}_against_db) are not per-suite.
2285
2286         * jennifer (check_files): less duplication of
2287         'control.Find("Architecture", "")' by putting it in a local
2288         variable.
2289         (check_files): call check_binary_against_db higher up since it's
2290         not a per-suite check.
2291         (check_files): get "othercomponents" directly rather than having
2292         check_binary_against_db do it for us.
2293
2294         * heidi (main): 'if x:', not 'if x != []:'.
2295         * katie.py (Katie.in_override_p): likewise.
2296         (Katie.check_dsc_against_db): likewise.
2297         * natalie (main): likewise.
2298         * rene (main): likewise.
2299         * ziyi (real_arch): likewise.
2300
2301         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2302         and OverrideType are now value lists, not lists.
2303         * andrea (main): likewise.
2304         * cindy (main): likewise.
2305         * claire.py (find_dislocated_stable): likewise.
2306         * denise (main): likewise.
2307         * jenna (main): likewise.
2308         * jennifer (check_distributions): likewise.
2309         (check_files): likewise.
2310         (check_urgency): likewise (Urgency::Valid).
2311         * jeri (parse_packages): likewise.
2312         * neve (main): likewise (and Location::%s::Suites).
2313         * rene (main): likewise.
2314
2315 2002-05-13  James Troup  <james@nocrew.org>
2316
2317         * katie.py (Katie.check_source_against_db): correct case of reject
2318         message to be consistent with binary checks.
2319
2320         * jennifer (get_status_output): don't leak 2 file descriptors per
2321         invocation.
2322         (check_signature): add missing '\n' to "duplicate status token"
2323         error message.
2324
2325 2002-05-09  James Troup  <james@nocrew.org>
2326
2327         * utils.py (validate_changes_file_arg): new function; validates an
2328         argument which should be a .changes file.
2329         * ashley (main): use it.
2330         * lisa (main): likewise.
2331
2332         * katie.py (Katie.check_dsc_against_db): since there can be more
2333         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2334         entry still exists in files.
2335
2336         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2337         files, since check_dsc_against_db() deletes the .orig.tar.gz
2338         entry.
2339
2340         * cameron: cleanups.
2341
2342         * utils.py (changes_compare): change sort order so that source
2343         name and source version trump 'have source'; this should fix
2344         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2345         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2346         by Ryan.
2347
2348         * lisa (main): allow the arguments to be .katie files too.
2349
2350 2002-05-07  Ryan Murray  <rmurray@debian.org>
2351
2352         * cron.buildd: add s390 to arch list again
2353
2354 2002-05-05  Ryan Murray  <rmurray@debian.org>
2355
2356         * cron.buildd: new script, update w-b database from unstable_accepted
2357         table
2358         * cameron: new script, take list in unstable_accepted and write out
2359         a file list for apt-ftparchive
2360         * apt.conf.buildd: new apt configuration for Packages/Sources for
2361         unstable_accepted
2362         * vars: add s390 to arch list.
2363
2364 2002-05-03  James Troup  <james@nocrew.org>
2365
2366         * neve (main): don't hard code the calling user as that doesn't
2367         work with modern postgres installs.  Fix psql invocation for
2368         init_pool.sql (database name required).  Dont' hard code the
2369         database name.
2370         (process_sources): add support for fingerprint and install_date.
2371         (process_packages): add support for fingerprint.
2372         (do_sources): pass in the directory, fingerprint support needs it.
2373         (get_status_output): borrowed from jennifer.
2374         (reject): likewise.
2375         (check_signature): likewise.
2376
2377         * katie (install): only try to log urgencies if Urgency_Logger is
2378         defined.
2379         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2380         defined; only close Urgency_Logger if it's defined.
2381
2382         * catherine (poolize): adapt for Dir rationalization.
2383         * claire.py (find_dislocated_stable): likewise.
2384         * denise (main): likewise.
2385         * halle (check_joey): likewise.
2386         * jenna: likewise.
2387         * jennifer: likewise.
2388         * jeri: likewise.
2389         * katie.py: likewise.
2390         * katie: likewise.
2391         * lisa (do_bxa_notification): likewise.
2392         * logging.py (Logger.__init__): likewise
2393         * rene (main): likewise.
2394         * rhona (clean): likewise.
2395         * shania (init): likewise.
2396         * tea: likewise.
2397         * ziyi: likewise.
2398
2399         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2400         FindB, not FindI.
2401
2402         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2403         boolean, use FindB, not get.
2404
2405         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2406         .orig.tar.gz's which are an exact (size/md5sum) match.
2407
2408         * ashley (main): really allow *.katie files as arguments too;
2409         noticed by aj.
2410
2411         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2412
2413 2002-05-03  Anthony Towns  <ajt@debian.org>
2414
2415         * ziyi: support for security.
2416
2417 2002-05-02  James Troup  <james@nocrew.org>
2418
2419         * jennifer (accept): call Katie.check_override() unconditional as
2420         no-mail check moved into that function.
2421         (do_byhand): likewise.
2422
2423         * katie.py (Katie.check_override): don't do anything if we're a)
2424         not sending mail or b) the override disparity checks have been
2425         disbled via Dinstall::OverrideDisparityCheck.
2426
2427         * jennifer (check_files): don't hard code Unstable as the suite
2428         used to check for architecture validity; use
2429         Dinstall::DefaultSuite instead, if it exists.
2430         (accept): conditionalize
2431
2432         * katie.py (Katie.update_subst): support global maintainer
2433         override with Dinstall::OverrideMaintainer.
2434
2435         * jennifer (check_distributions): new function, Distribution
2436         validation and mapping.  Uses new SuiteMappings variable from
2437         config file to abstract suite mappings.
2438         (check_changes): call it.
2439
2440         * natalie: renamed; nothing imports or likely will for some time.
2441
2442         * denise (main): remove unused natalie import and init().
2443
2444         * natalie.py (init): removed.
2445         (main): initalize here instead and don't hardcode the database
2446         name.
2447
2448 2002-04-30  James Troup  <james@nocrew.org>
2449
2450         * katie.py (Katie.close_bugs): new function, split out from
2451         announce().
2452         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2453         true.
2454         (Katie.close_bugs): new function, split out
2455         (Katie.close_bugs): return immediately if there are no bugs to
2456         close.
2457
2458         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2459         * katie (do_reject): likewise.
2460         (stable_install): likewise.
2461         * katie.py (Katie.announce): likewise.
2462         (Katie.accept): likewise.
2463         (Katie.check_override): likewise.
2464         (Katie.do_reject): likewise.
2465         * lisa (do_bxa_notification): likewise.
2466         * melanie (main): likewise.
2467
2468         * utils.py (TemplateSubst): change second argument to be a
2469         filename rather than a template since every caller opened a file
2470         on the fly which was ugly and leaked file descriptor.
2471
2472 2002-04-29  James Troup  <james@nocrew.org>
2473
2474         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2475         <hertzog@debian.org> to send 'accepted' announce mails to the
2476         PTS. [#128140]
2477
2478 2002-04-24  James Troup  <james@nocrew.org>
2479
2480         * init_pool.sql (unstable_accepted): add two new fields to
2481         unstable_accepted; in_accepted is a boolean indicating whether or
2482         not the file is in accepted and last_used is a timestamp used by
2483         rhona to determine when to remove symlinks for installed packages.
2484
2485         * katie.py (Katie.accept): auto-build support take 2.  Create
2486         symlinks for all files into a seperate directory.  Add files to
2487         unstable_accepted as paths to the new directory; mark them as
2488         being in accepted for cameron.  Properly conditionalize it on a
2489         configuration variable.
2490
2491         * katie (install): likewise.  Update symlinks to point into the
2492         pool; mark the files for later deletion by rhona and mark them as
2493         not being in accepted for cameron.
2494
2495         * rhona (clean_accepted_autobuild): new function.
2496
2497 2002-04-22  James Troup  <james@nocrew.org>
2498
2499         * jennifer (check_files): handle db_access.get_location_id()
2500         returning -1 properly/better.
2501
2502         * rhona (clean_fingerprints): new function.
2503
2504 2002-04-21  James Troup  <james@nocrew.org>
2505
2506         * utils.py (touch_file): unused; remove.
2507         (plural): likewise.
2508
2509         * jennifer (check_files): close file descriptor used to get the
2510         control file.
2511         (check_md5sums): likewise.
2512         (callback): likewise.
2513
2514         * katie.py (Katie.do_reject): handle manual rejects much better;
2515         call the editor first and get confirmation from the user before
2516         proceeding.
2517
2518         * jennifer (check_signature): prefix_multi_line_string() moved to
2519         utils.
2520
2521         * utils.py (prefix_multi_line_string): moved here from jennifer.
2522
2523 2002-04-20  James Troup  <james@nocrew.org>
2524
2525         * lisa (main): handle non-existent files.
2526
2527         * ashley (main): allow *.katie files as arguments too.
2528
2529 2002-04-19  James Troup  <james@nocrew.org>
2530
2531         * katie.py (Katie.accept): add stuff to help auto-building from
2532         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2533         in the pool), create a symlink to it in the accepted directory and
2534         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2535
2536         * katie (install): undo the "auto-building from accepted" stuff
2537         (i.e. remove the .orig.tar.gz symlink and remove the files from
2538         unstable_accepted table).
2539
2540 2002-04-16  James Troup  <james@nocrew.org>
2541
2542         * jennifer (upload_too_new): fix typo which was causing all
2543         timestamp comparisons to be against the .changes file.  Also move
2544         back to the original directory so we do the comparisons against
2545         accurate timestamps.
2546
2547         * tea (check_missing_tar_gz_in_dsc): new function.
2548
2549         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2550         file mentioned in the .dsc.
2551
2552         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2553         way mails reach debian-{devel-,}changes@l.d.o.
2554
2555 2002-04-02  Ryan Murray  <rmurray@debian.org>
2556
2557         * cron.daily: run shania after rhona
2558         * cron.daily-non-US: likewise.
2559
2560 2002-04-01  James Troup  <james@nocrew.org>
2561
2562         * katie: re-add proposed-updates/stable install support.
2563
2564         * katie.py (Katie.dump_vars): add changes["changes"] as an
2565         optional field; should be mandatory later.
2566
2567 2002-03-31  James Troup  <james@nocrew.org>
2568
2569         * katie (install): support a Suite::<foo>::CopyKatie similar to
2570         CopyChanges.  Done seperately because .katie files don't need to
2571         be mirrored and will probably be copied to another directory as a
2572         result.
2573
2574         * halle (main): add missing debug to options.
2575
2576 2002-03-29  James Troup  <james@nocrew.org>
2577
2578         * madison (main): add a -r/--regex option.
2579
2580 2002-03-26  James Troup  <james@nocrew.org>
2581
2582         * lisa: don't trample on changes["distribution"]; make a copy of
2583         it as changes["suite"] instead and use that.
2584
2585 2002-03-16  Anthony Towns  <ajt@debian.org>
2586
2587         * templates/lisa.bxa_notification: Fix some grammatical errors.
2588         Encourage contact via bxa@ftp-master email address.
2589
2590 2002-03-15  James Troup  <james@nocrew.org>
2591
2592         * jennifer (check_timestamps): remove bogus raise in except.
2593
2594 2002-03-15  Anthony Towns  <ajt@debian.org>
2595
2596         * cron.monthly: rotate mail/archive/bxamail as well as
2597         mail/archive/mail. This is for a complete archive of
2598         correspondence with the BXA.
2599
2600 2002-03-14  Anthony Towns  <ajt@debian.org>
2601
2602         * crypto-in-main changes.
2603
2604         * utils.py (move, copy): add an optional perms= parameter to let you
2605         set the resulting permissions of the moved/copied file
2606         * katie.py (force_move): rejected/morgued files should be unreadable
2607         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2608         should be unreadable.
2609
2610 2002-03-07  Ryan Murray  <rmurray@debian.org>
2611
2612         * katie (install): check for existance of "files id" key as well as
2613         it being set to a valid value.
2614         * katie (install): check for existense and valid value for location
2615         id as well
2616
2617 2002-03-05  Ryan Murray  <rmurray@debian.org>
2618
2619         * katie.py (do_reject): reread the reason file after editing it.
2620
2621 2002-02-25  James Troup  <james@nocrew.org>
2622
2623         * jennifer (check_changes): don't enforce sanity in .changes file
2624         names since it doesn't seem to be possible; pcmica-cs and similar
2625         freak show packages in particular cause real problems.
2626
2627         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2628         each dsc_file since the .orig.tar.gz checking code now uses it as
2629         a boolean.  Fixes bizarro rejections which bogusly claimed
2630         .diff.gz md5sum/size was incorrect.
2631
2632 2002-02-24  James Troup  <james@nocrew.org>
2633
2634         * katie (process_it): reset reject_message.
2635
2636 2002-02-22  James Troup  <james@nocrew.org>
2637
2638         * db_access.py(set_files_id): disable use of
2639         currval('files_id_seq') because it was taking 3 seconds on auric
2640         which is insane (most calls take < 0.01) and simply call
2641         get_files_id() for the return value instead.
2642
2643         * katie.py (Katie.do_query): convenience function; unused by
2644         default, useful for profiling.
2645         * db_access.py (do_query): likewise.
2646
2647         * katie (install): fix insert SQL call when binary has no source.
2648
2649         * lisa (determine_new): auto-correct non-US/main to non-US.
2650         (determine_new): add a warning when adding things to stable.
2651         (edit_index): use our_raw_input().
2652         (edit_overrides): likewise.
2653         (do_new): likewise.  Use re.search() not re.match() since the
2654         default answer may not be the first one.
2655         (do_byhand): likewise.
2656         (do_new): Default to 'S'kip and never 'A'dd.
2657
2658         * jennifer (action): pass prompt to our_raw_input().
2659         * melanie (game_over): likewise.
2660         * katie (action): likewise.
2661
2662         * utils.py (our_raw_input): add an optional prompt argument to
2663         make the function more usable as a drop in replacement for
2664         raw_input().
2665
2666         * jennifer (check_files): correct reject() to not double prefix
2667         when using katie.py based functions.
2668         (check_dsc): likewise.
2669
2670         * katie.py (Katie.reject): prepend a new line if appropriate
2671         rathen than appending one to avoid double new lines when caller
2672         adds one of his own.
2673
2674         * lisa (determine_new): warn if the package is also in other
2675         components.
2676
2677 2002-02-20  James Troup  <james@nocrew.org>
2678
2679         * jennifer (check_files): if .changes file lists "source" in
2680         Architecture field, there must be a .dsc.
2681
2682 2002-02-15  James Troup  <james@nocrew.org>
2683
2684         * ashley (main): add some missing fields.
2685
2686         * katie.py (Katie.check_dsc_against_db): fix to take into account
2687         the fact that the .orig.tar.gz might be in byhand, accepted or
2688         new.  Also fix calling of reject().
2689         (Katie.check_binaries_against_db): fix calling of reject().
2690         (Katie.check_source_against_db): likewise.
2691         (Katie.dump_vars): add missing variables used for bug closures.
2692
2693         * lisa (changes_compare_by_time): sort by reverse time.
2694
2695         * katie.py (Katie.accept): log.
2696         (Katie.dump_vars): missing has_key test for optional changes fields.
2697
2698         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2699         (process_it): traceback goes to stderr, not stdout.
2700         (acknowledge_new): log.
2701         (do_byhand): likewise.
2702
2703         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2704
2705         * add_constraints.sql: add grants for the new fingerprint table.
2706
2707 2002-02-13  James Troup  <james@nocrew.org>
2708
2709         * katie (do_reject): basename the .changes filename before trying
2710         to use it to construct the .reason filename.
2711         (process_it): call Katie.update_subst() so do_reject() DTRT with
2712         the mail template.
2713         (do_reject): setup the mail template correctly.
2714
2715 2002-02-12  James Troup  <james@nocrew.org>
2716
2717         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2718         (check_files): don't abuse global dictionaries.
2719         (Ent): use all variables.
2720         (check_timestamps): don't abuse global dictionaries.
2721
2722         * fernanda.py: renamed to .py so lisa can import it.
2723         (check_dsc): remove unused local variables (pychecker).
2724         (display_changes): split off from check_changes.
2725
2726         * katie: rewritten; most of the functionality moves to jennifer;
2727         what's left is the code to install packages once a day from the
2728         'accepted' directory.
2729
2730         * jennifer: new program, processes packages in 'unchecked'
2731         (i.e. most of the non-install functionality of old katie).
2732
2733         * katie.py: common functions shared between the clique of
2734         jennifer, lisa and katie.
2735
2736         * lisa: new program; handles NEW and BYHAND packages.
2737
2738         * jeri (usage): new function.
2739         (main): use it.
2740         (check_package): remove unused local variable (pychecker).
2741
2742         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2743         binaries and source.  Add install_date to source.
2744
2745         * halle (usage): new function.
2746         (main): use it.  Remove unused options.
2747         (check_changes): remove unused local variable (pychecker).
2748
2749         * add_constraints.sql: add fingerprint references.
2750
2751         * db_access.py (get_or_set_fingerprint_id): new function.
2752
2753         * ashley (main): new program; dumps the contents of a .katie file
2754         to stdout.
2755
2756         * alyson (main): remove option handling since we don't actually
2757         support any.
2758         * cindy (main): likewise.
2759
2760         * remove unnecessary imports and pre-define globals (pychecker).
2761
2762 2002-02-11  Anthony Towns  <ajt@debian.org>
2763
2764         * added installation-report and upgrade-report pseudo-packages
2765
2766 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2767
2768         * katie (update_subst): use Dinstall::TrackingServer.
2769         * melanie (main): likewise.
2770
2771 2002-01-27  James Troup  <james@nocrew.org>
2772
2773         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2774         noticing, jgg@ for fix.
2775
2776 2002-01-19  James Troup  <james@nocrew.org>
2777
2778         * utils.py (extract_component_from_section): handle non-US
2779         non-main properly.
2780
2781 2002-01-12  James Troup  <james@nocrew.org>
2782
2783         * madison: add support for -S/--source-and-binary which displays
2784         information for the source package and all it's binary children.
2785
2786 2002-01-13  Anthony Towns  <ajt@debian.org>
2787
2788         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2789         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2790           and 2002 key ids.
2791         * katie.conf-non-US: Likewise.
2792         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2793           multiple keys automatically. This is probably only useful for
2794           transitioning from an expired (or revoked?) key.
2795
2796 2002-01-08  Ryan Murray  <rmurray@debian.org>
2797
2798         * debian/python-dep: new file that prints out python:Depends for
2799           substvars
2800         * debian/control: use python:Depends, build-depend on python
2801           lower Depends: on postgresql to Suggests:
2802         * debian/rules: determine python version, install to the correct
2803           versioned dir
2804
2805 2001-12-18  Anthony Towns  <ajt@debian.org>
2806
2807         * ziyi: unlink Release files before overwriting them (in case they've
2808           been merged)
2809         * ziyi: always include checksums/sizes for the uncompressed versions
2810           of Sources and Packages, even if they're not present on disk
2811
2812 2001-11-26  Ryan Murray  <rmurray@debian.org>
2813
2814         * ziyi (main): add SigningPubKey config option
2815         * katie.conf: use SigningPubKey config option
2816         * katie.conf-non-US: likewise
2817
2818 2001-11-24  James Troup  <james@nocrew.org>
2819
2820         * katie (acknowledge_new): log newness.
2821
2822 2001-11-24  Anthony Towns  <ajt@debian.org>
2823
2824         * ziyi (real_arch): bail out if some moron forgot to reset
2825         untouchable on stable.
2826         (real_arch): source Release files.
2827
2828 2001-11-19  James Troup  <james@nocrew.org>
2829
2830         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2831         utils.get_conf().
2832         * shania (main): likewise.
2833
2834         * rhona (main): add default options.
2835
2836         * db_access.py (get_archive_id): case independent.
2837
2838         * katie (action): sort files so that ordering is consistent
2839         between mails; noticed/requested by Joey.
2840
2841 2001-11-17  Ryan Murray  <rmurray@debian.org>
2842
2843         * utils.py: add get_conf function, change startup code to read all
2844           config files to the Cnf that get_conf returns
2845           use the component list from the katie conf rather than the hardcoded
2846           list.
2847         * all scripts: use new get_conf function
2848         * shania: fix try/except around changes files
2849         * jenna: only do debian-installer if it is a section in Cnf
2850
2851 2001-11-16  Ryan Murray  <rmurray@debian.org>
2852
2853         * shania (main): Initialize days to a string of a number.
2854                  (main): Initialize Cnf vars before reading in Cnf
2855
2856 2001-11-14  Ryan Murray  <rmurray@debian.org>
2857
2858         * shania (main): Initialize days to a number.
2859
2860 2001-11-04  James Troup  <james@nocrew.org>
2861
2862         * docs/Makefile: use docbook-utils' docbook2man binary.
2863
2864         * Change all "if foo == []" constructs into "if not foo".
2865
2866         * katie (check_changes): when installing into stable from
2867         proposed-updates, remove all non-stable target distributions.
2868         (check_override): don't check for override disparities on stable
2869         installs.
2870         (stable_install): update install_bytes appropriately.
2871         (reject): stable rejection support; i.e. don't remove files when
2872         rejecting files in the pool, rather remove them from the
2873         proposed-update suite instead, rhona will do the rest.
2874         (manual_reject): support for a stable specific template.
2875         (main): setup up stable rejector in subst.
2876
2877 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2878
2879         * debian/control (Build-Depends): docbook2man has been superseded
2880         by docbook-utils.
2881
2882         * neve (main): exit with a more useful error message.
2883         (update_suites): Suite::<suite>::Version, Origin and Description
2884         are not required, so don't fail if they don't exist.
2885
2886         * db_access.py (get_archive_id): return -1 on error rather than
2887         raise an exception.
2888         (get_location_id): likewise.
2889
2890         * madison (main): don't exit on the first not-found package,
2891         rather exit with an appropriate return code after processing all
2892         packages.
2893
2894 2001-11-03  James Troup  <james@nocrew.org>
2895
2896         * claire.py (find_dislocated_stable): add per-architecture
2897         symlinks for dislocated architecture: all debs.
2898
2899 2001-10-19  Anthony Towns  <ajt@debian.org>
2900
2901         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2902
2903 2001-10-10  Anthony Towns  <ajt@debian.org>
2904
2905         * claire.py (fix_component_section): do _not_ assign to None under
2906         any circumstances
2907
2908 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2909
2910         * melanie (main): don't duplicate architectures when removing from
2911         more than one suite.
2912
2913         * heidi (main, process_file, get_list): report suite name not ID.
2914
2915         * naima (nmu_p): be case insensitive.
2916
2917         * naima (action): more list handling clean ups.
2918
2919         * melanie (main): clean up lists handling to use string.join and
2920         IN's.
2921
2922         * madison (main): clean up suite and architecture argument parsing
2923         to use slices less and string.join more.
2924
2925         * utils.py (parse_changes): Use string.find() instead of slices for
2926         string comparisons thereby avoid hardcoding the length of strings.
2927         * ziyi (main): likewise.
2928
2929 2001-10-07  James Troup  <james@nocrew.org>
2930
2931         * Remove mode argument from utils.open_files() calls if it's the
2932         default, i.e. 'r'.
2933
2934 2001-09-27  James Troup  <james@nocrew.org>
2935
2936         * katie (init): new function; options clean up.
2937         (usage): add missing options, remove obsolete ones.
2938         (main): adapt for the two changes above.  If the lock file or
2939         new-ack log file don't exist, create them.  Don't try to open the
2940         new-ack log file except running in new-ack mode.
2941
2942         * alyson (main): initialize all the tables that are based on the
2943         conf file.
2944
2945         * utils.py (touch_file): like touch(1).
2946         (where_am_i): typo.
2947
2948         * catherine (usage): new.
2949         (main): use it.  options cleanup.
2950         * claire.py: likewise.
2951         * fernanda: likewise.
2952         * heidi: likewise.
2953         * jenna: likewise.
2954         * shania: likewise.
2955         * ziyi: likewise.
2956
2957         * andrea: options cleanup.
2958         * charisma: likewise.
2959         * julia: likewise.
2960         * madison: likewise.
2961         * melanie: likewise.
2962         * natalie: likewise.
2963         * rhona: likewise.
2964         * tea: likewise.
2965
2966 2001-09-26  James Troup  <james@nocrew.org>
2967
2968         * utils.py: default to sane config file locations
2969         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2970         or they can point to the real ones through use of a new Config
2971         section.  Based on an old patch by Adam Heath.
2972         (where_am_i): use the new default config stuff.
2973         (which_conf_file): likewise.
2974         (which_apt_conf_file): likewise.
2975
2976         * charisma (main): output defaults to
2977         `Package~Version\tMaintainer'; input can be of either form.  When
2978         parsing the new format do version comparisons, when parsing the
2979         old format assume anything in the extra file wins.  This fixes the
2980         problem of newer non-US packages being overwhelmed by older
2981         versions still in stable on main.
2982
2983 2001-09-17  James Troup  <james@nocrew.org>
2984
2985         * natalie.py (list): use result_join().
2986
2987         * denise (main): result_join() moved to utils.
2988
2989         * utils.py (result_join): move to utils; add an optional seperator
2990         argument.
2991
2992 2001-09-14  James Troup  <james@nocrew.org>
2993
2994         * heidi (set_suite): new function; does --set like natalie does,
2995         i.e. turns it into a sequence of --add's and --remove's
2996         internally.  This is a major win (~20 minute run time > ~20
2997         seconds) in the common, everday (i.e. testing) case.
2998         (get_id): common code used by set_suite() and process_file().
2999         (process_file): call set_suite() and get_id().
3000         (main): add logging support.
3001
3002         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3003         files.
3004
3005         * utils.py (parse_changes): use slices or simple string comparison
3006         in favour of regexes where possible.
3007
3008         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3009         fact that the string VARDATA() points to are not null terminated.
3010
3011         * denise (result_join): new function; like string.join() but
3012         handles None's.
3013         (list): use it.
3014         (main): likewise.
3015
3016         * charisma (main): python-pygresql 7.1 returns None not "".
3017
3018 2001-09-14  Ryan Murray  <rmurray@debian.org>
3019
3020         * natalie.py (list): handle python-pygresql 7.1 returning None.
3021
3022 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3023
3024         * madison (main): return 1 if no package is found.
3025
3026 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3027
3028         * madison (main): better error handling for incorrect
3029         -a/--architecture or -s/--suite arguments.
3030         (usage): new.
3031         (main): use it.
3032
3033 2001-09-05  Ryan Murray  <rmurray@debian.org>
3034
3035         * charisma, madison, katie: remove use of ROUser
3036         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3037
3038 2001-08-26  James Troup  <james@nocrew.org>
3039
3040         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3041         maintained packages at cjwatson@'s request.
3042
3043 2001-08-21  James Troup  <james@nocrew.org>
3044
3045         * madison (main): add -a/--architecture support.
3046
3047         * jenna: use logging instead of being overly verbose on stdout.
3048
3049 2001-08-11  Ryan Murray  <rmurray@debian.org>
3050
3051         * melanie: add functional help option
3052
3053 2001-08-07  Anthony Towns  <ajt@debian.org>
3054
3055         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3056
3057 2001-07-28  James Troup  <james@nocrew.org>
3058
3059         * katie (check_dsc): ensure source version is >> than existing
3060         source in target suite.
3061
3062 2001-07-25  James Troup  <james@nocrew.org>
3063
3064         * natalie.py: add logging support.
3065
3066         * utils.py (open_file): make the second argument optional and
3067         default to read-only.
3068
3069         * rene (main): work around broken source packages that duplicate
3070         arch: all packages with arch: !all packages (no longer allowed
3071         into the archive by katie).
3072
3073 2001-07-13  James Troup  <james@nocrew.org>
3074
3075         * katie (action): don't assume distribution is a dictionary.
3076         (update_subst): don't assume architecture is a dictionary and that
3077         maintainer822 is defined.
3078         (check_changes): recognise nk_format exceptions.
3079         (check_changes): reject on 'testing' only uploads.
3080         (check_files): when checking to ensure all packages are newer
3081         versions check against arch-all packages too.
3082         (check_dsc): enforce the existent of a sane set of mandatory
3083         fields.  Ensure the version number in the .dsc (modulo epoch)
3084         matches the version number in the .changes file.
3085
3086         * utils.py (changes_compare): ignore all exceptions when parsing
3087         the changes files.
3088         (build_file_list): don't UNDEF on a changes file with no format
3089         field.
3090
3091 2001-07-07  James Troup  <james@nocrew.org>
3092
3093         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3094         rather than 'changedbyname' to avoid false negatives on uploads
3095         with an email-address-only Changed-By field.
3096         (check_dsc): don't overwrite reject_message; append to it.
3097         (check_signature): likewise.
3098         (check_changes): likewise.
3099         (announce): condition logging on 'action'.
3100
3101         * logging.py: new logging module.
3102
3103         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3104         sub-tree into a separate (global) variable.
3105         (check_dsc): ensure format is 1.0 to retain backwards
3106         compatability with dpkg-source in potato.
3107         (main): only try to obtain the lock when not running in no-action
3108         mode.
3109         Use the new logging module.
3110
3111         * christina: initial version; only partially usable.
3112
3113 2001-06-28  Anthony Towns  <ajt@debian.org>
3114
3115         * apt.conf: Add ExtraOverrides to auric.
3116
3117 2001-06-25  James Troup  <james@nocrew.org>
3118
3119         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3120         they preferred the name 'Uploaders'.
3121
3122 2001-06-23  James Troup  <james@nocrew.org>
3123
3124         * katie (check_files): fix typo in uncommon rejection message,
3125         s/sourceversion/source version/.
3126
3127         * denise (main): we can't use print because stdout has been
3128         redirected.
3129
3130         * katie (source_exists): new function; moved out of check_files()
3131         and added support for binary-only NMUs of earlier sourceful NMUs.
3132
3133         * rhona (clean): find_next_free has moved.
3134
3135         * utils.py (find_next_free): new function; moved here from rhona.
3136         Change too_many to be an argument with a default value, rather
3137         than a hardcoded variable.
3138
3139         * shania: rewritten to work better; REJECTion reminder mail
3140         handling got lost though.
3141
3142 2001-06-22  James Troup  <james@nocrew.org>
3143
3144         * rhona (main): remove unused override code.
3145
3146         * fernanda (main): remove extraneous \n's from utils.warn calls.
3147         * natalie.py (list): likewise.
3148
3149         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3150         use utils.{warn,fubar} where appropriate.
3151
3152 2001-06-21  James Troup  <james@nocrew.org>
3153
3154         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3155         functionality.
3156         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3157         by the "Maintainers" field in the .dsc file and maintainer groups.
3158         (nmu_p.__init__): read in the list of group maintainer names.
3159         (announce): use nmu_p.
3160
3161 2001-06-20  James Troup  <james@nocrew.org>
3162
3163         * rene (main): hardcode the suite experimental is compared to by
3164         name rather than number.
3165
3166         * katie (check_files): differentiate between doesn't-exist and
3167         permission-denied in "can not read" rejections; requested by edd@.
3168         (check_dsc): use os.path.exists rather than os.access to allow the
3169         above check to kick in.
3170
3171         * heidi (process_file): read all input before doing anything and
3172         use transactions.
3173
3174 2001-06-15  James Troup  <james@nocrew.org>
3175
3176         * fernanda: new script; replaces old 'check' shell script
3177         nastiness.
3178
3179 2001-06-14  James Troup  <james@nocrew.org>
3180
3181         * katie: actually import traceback module to avoid amusing
3182         infinite loop.
3183
3184 2001-06-10  James Troup  <james@nocrew.org>
3185
3186         * utils.py (extract_component_from_section): fix to handle just
3187         'non-free' and 'contrib'.  Also fix to handle non-US in a
3188         completely case insensitive manner as a component.
3189
3190 2001-06-08  James Troup  <james@nocrew.org>
3191
3192         * madison (arch_compare): sort function that sorts 'source' first
3193         then alphabetically.
3194         (main): use it.
3195
3196 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3197
3198         * catherine (poolize): explicitly make poolized_size a long so it
3199         doesn't overflow when poolizing e.g. entire archives.
3200
3201 2001-06-01  James Troup  <james@nocrew.org>
3202
3203         * utils.py (send_mail): throw exceptions rather than exiting.
3204
3205         * katie (process_it): catch exceptions and ignore them.
3206
3207 2001-06-01  Michael Beattie  <mjb@debian.org>
3208
3209         * added update-mailingliststxt and update-readmenonus to update
3210         those files, respectively. modified cron.daily{,-non-US} to
3211         use them.
3212
3213 2001-05-31  Anthony Towns  <ajt@debian.org>
3214
3215         * rhona: make StayOfExecution work.
3216
3217 2001-05-31  James Troup  <james@nocrew.org>
3218
3219         * rhona (find_next_free): fixes to not overwrite files but rename
3220         them by appending .<n> instead.
3221         (clean): use find_next_free and use dated sub-directories in the
3222         morgue.
3223
3224         * utils.py (move): don't overwrite files unless forced to.
3225         (copy): likewise.
3226
3227 2001-05-24  James Troup  <james@nocrew.org>
3228
3229         * katie (check_files): determine the source version here instead
3230         of during install().
3231         (check_files): check for existent source with bin-only NMU
3232         support.
3233         (main): sort the list of changes so that the source-must-exist
3234         check Does The Right Thing(tm).
3235
3236         * utils.py (changes_compare): new function; sorts a list of
3237         changes files by 'have-source', source, version.
3238         (cc_fix_changes): helper function.
3239         (parse_changes): use compiled regexes.
3240         (fix_maintainer): likewise.
3241
3242         * rene (main): warn about packages in experimental that are
3243         superseded by newer versions in unstable.
3244
3245 2001-05-21  James Troup  <james@nocrew.org>
3246
3247         * rene (main): add support for checking for ANAIS (Architecture
3248         Not Allowed In Source) packages.
3249
3250 2001-05-17  James Troup  <james@nocrew.org>
3251
3252         * katie (check_changes): initalize `architecture' dictionary in
3253         changes global so that if we can't parse the changes file for
3254         whatever reason we don't undef later on.
3255
3256         * utils.py (parse_changes): fix handling of multi-line fields
3257         where the first line did have data.
3258
3259 2001-05-05  Anthony Towns  <ajt@debian.org>
3260
3261         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3262         (It should always have been there. Ooopsy.)
3263
3264 2001-05-03  Anthony Towns  <ajt@debian.org>
3265
3266         * jenna: Cleanup packages that move from arch:any to arch:all or
3267         vice-versa.
3268
3269 2001-04-24  Anthony Towns  <ajt@debian.org>
3270
3271         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3272         cope with debian-installer and boot-floppies' md5sum.txt.
3273
3274 2001-04-16  James Troup  <james@nocrew.org>
3275
3276         * katie (check_changes): add missing %s format string argument.
3277         (stable_install): temporary work around for morgue location to
3278         move installed changes files into.
3279         (stable_install): helps if you actually read in the template.
3280         (manual_reject): fix for editing of reject messages which was
3281         using the wrong variable name.
3282
3283         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3284
3285 2001-04-13  James Troup  <james@nocrew.org>
3286
3287         * katie (manual_reject): Cc the installer.
3288         (reject): don't.
3289         (check_changes): remove unused maintainer-determination code.
3290         (update_subst): add support for Changed-By when setting the
3291         *MAINTAINER* variables.
3292
3293         * rene (bar): new function to check for packages on architectures
3294         when they shouldn't be.
3295
3296         * natalie.py (main): use fubar() and warn() from utils.
3297
3298         * utils.py (whoami): new mini-function().
3299         * melanie (main): use it.
3300         * katie (manual_reject): likewise.
3301
3302 2001-04-03  James Troup  <james@nocrew.org>
3303
3304         * katie (action): ignore exceptions from os.path.getmtime() so we
3305         don't crash on non-existent changes files (e.g. when they are
3306         moved between the start of the install run in cron.daily and the
3307         time we get round to processing them).
3308
3309         * madison (main): also list source and accept -s/--suite.
3310
3311         * jenna (generate_src_list): missing \n in error message.
3312
3313         * katie (update_subst): add sane defaults for when changes is
3314         skeletal.
3315
3316 2001-03-29  James Troup  <james@nocrew.org>
3317
3318         * melanie (main): use fubar() and warn() from utils.  Remember who
3319         the maintainer for the removed packages are and display that info
3320         to the user.  Readd support for melanie-specific Bcc-ing that got
3321         lost in the TemplateSubst transition.
3322
3323         * utils.py (fubar): new function.
3324         (warn): like wise.
3325
3326         * db_access.py (get_maintainer): as below.
3327
3328         * charisma (get_maintainer): moved the bulk of this function to
3329         db_access so that melanie can use it too.
3330
3331         * claire.py (find_dislocated_stable): restrict the override join
3332         to those entries where the suite is stable; this avoids problems
3333         with packages which have moved to new sections (e.g. science)
3334         between stable and unstable.
3335
3336 2001-03-24  James Troup  <james@nocrew.org>
3337
3338         * catherine (poolize): new function; not really independent of
3339         main() fully, yet.
3340         (main): use it.
3341
3342         * katie (stable_install): __SUITE__ needs to be space prefixed
3343         because buildd's check for 'INSTALLED$'.
3344
3345 2001-03-22  James Troup  <james@nocrew.org>
3346
3347         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3348
3349         * jenna: rewritten; now does deletions on a per-suite level
3350         instead of a per-suite-component-architecture-type level.  This
3351         allows mutli-component packages to be auto-cleaned (and as a
3352         bonus, reduces the code size and duplication).
3353
3354 2001-03-22  Anthony Towns  <ajt@debian.org>
3355
3356         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3357         instead of just giving a gpg error.
3358
3359 2001-03-21  James Troup  <james@nocrew.org>
3360
3361         * madison (main): use apt_pkg.VersionCompare to sort versions so
3362         that output is correctly sorted for packages like debhlper.
3363         Noticed by ajt@.
3364
3365         * tea (check_source_in_one_dir): actually find problematic source
3366         packages.
3367
3368         * katie (check_dsc): remember the orig.tar.gz's location ID if
3369         it's not in a legacy suite.
3370         (check_diff): we don't use orig_tar_id.
3371         (install): add code to handle sourceful diff-only upload of
3372         packages which change components by copying the .orig.tar.gz into
3373         the new component, if it doesn't already exist there.
3374         (process_it): reset orig_tar_location (as above).
3375
3376         * melanie (main): use template substiution for the bug closing
3377         emails.
3378         (main): don't hardcode bugs.debian.org or packages.debian.org
3379         either; use configuration items.
3380
3381         * katie: likewise.
3382
3383         * natalie.py (init): use None rather than 'localhost' for the
3384         hostname given to pg.connect.
3385
3386         * utils.py (TemplateSubst): new function; lifted from
3387         userdir-ldap.
3388
3389 2001-03-21  Ryan Murray  <rmurray@debian.org>
3390
3391         * katie (announce): fix the case of non-existent
3392         Suite::$SUITE::Announce.
3393
3394 2001-03-20  Ryan Murray  <rmurray@debian.org>
3395
3396         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3397         /usr/.
3398
3399         * alyson (main): use config variable for database name.
3400         * andrea (main): likewise.
3401         * catherine (main): likewise.
3402         * charisma (main): likewise.
3403         * cindy (main): likewise.
3404         * claire.py (main): likewise.
3405         * denise (main): likewise.
3406         * heidi (main): likewise.
3407         * jenna (main): likewise.
3408         * katie (main): likewise.
3409         * madison (main): likewise.
3410         * melanie (main): likewise.
3411         * neve (main): likewise.
3412         * rhona (main): likewise.
3413         * tea (main): likewise.
3414
3415 2001-03-15  James Troup  <james@nocrew.org>
3416
3417         * rhona (check_sources): fixed evil off by one (letter) error
3418         which was causing only .dsc files to be deleted when cleaning
3419         source packages.
3420
3421         * charisma (get_maintainer_from_source): remove really stupid and
3422         gratuitous IN sub-query and replace with normal inner join.
3423         (main): connect as read-only user nobody.
3424
3425         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3426         with EXISTS.
3427         (check_files): likewise; still disabled by default though.
3428         (clean_binaries): add ' seconds' to the mysterious number in the
3429         output.
3430         (clean): likewise.
3431
3432         * tea (check_files): add missing global declaration on db_files.
3433
3434 2001-03-14  James Troup  <james@nocrew.org>
3435
3436         * rhona: rewritten large chunks. Removed a lot of the silly
3437         selecting into dictionaries and replaced it with 'where exists'
3438         based sub queries.  Added support for StayOfExecution.  Fix the
3439         problem with deleting dsc_files too early and disable cleaning of
3440         unattached files.
3441
3442 2001-03-14  Anthony Towns  <ajt@debian.org>
3443
3444         * katie (announce): also check Changed-By when trying to detect
3445         NMUs.
3446
3447 2001-03-06  Anthony Towns  <ajt@debian.org>
3448
3449         * ziyi (main): Generate Release.gpg files as well, using the key from
3450         Dinstall::SigningKey in katie.conf, if present. That key has to be
3451         passwordless, and hence kept fairly secretly.
3452
3453 2001-03-02  James Troup  <james@nocrew.org>
3454
3455         * utils.py (str_isnum): new function; checks to see if the string
3456         is a number.
3457
3458         * shania (main): fix _hideous_ bug which was causing all files > 2
3459         weeks old to be deleted from incoming, even if they were part of a
3460         valid upload.
3461
3462 2001-02-27  James Troup  <james@nocrew.org>
3463
3464         * melanie (main): accept new argument -C/--carbon-copy which
3465         allows arbitarty carbon-copying of the bug closure messages.
3466         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3467         separate variable.
3468
3469 2001-02-27  Anthony Towns  <ajt@debian.org>
3470
3471         * ziyi: new program; generates Release files.
3472
3473 2001-02-25  James Troup  <james@nocrew.org>
3474
3475         * katie (reject): add missing '\n' to error message.
3476         (manual_reject): likewise.
3477         (install): catch exceptions from moving the changes file into DONE
3478         and ignore them.
3479
3480         * tea (check_md5sums): new function.
3481
3482 2001-02-25  Michael Beattie  <mjb@debian.org>
3483
3484         * melanie: use $EDITOR if available.
3485
3486 2001-02-15  James Troup  <james@nocrew.org>
3487
3488         * utils.py (parse_changes): don't crash and burn on empty .changes
3489         files.  Symptoms noticed by mjb@.
3490
3491 2001-02-15  Adam Heath  <doogie@debian.org>
3492
3493         * denise (main): use an absolute path for the output filename.
3494
3495         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3496         compile errors with postgresql-dev >= 7.0.
3497
3498 2001-02-12  James Troup  <james@nocrew.org>
3499
3500         * rene: initial version.
3501
3502         * andrea: initial version.
3503
3504         * catherine (main): remove obsolete assignment of arguments.
3505
3506 2001-02-09  James Troup  <james@nocrew.org>
3507
3508         * catherine: first working version.
3509
3510 2001-02-06  James Troup  <james@nocrew.org>
3511
3512         * katie (check_files): validate the priority field; i.e. ensure it
3513         doesn't contain a '/' (to catch people prepending the priority
3514         with the component rather than the section).
3515         (check_override): don't warn about source packages; the only check
3516         is on section and we have no GUI tools that would use the Section
3517         field for a Sources file.
3518         (announce): use tags rather than severities for NMUs.  Requested
3519         by Josip Rodin <joy@>. [#78035]
3520
3521 2001-02-04  James Troup  <james@nocrew.org>
3522
3523         * tea (check_override): new function; ensures packages in suites
3524         are also in the override file.  Thanks to bod@ for noticing that
3525         such packages existed.
3526
3527         * katie: move file type compiled regular expressions to utils as
3528         catherine uses them too.
3529         (check_changes): always default maintainer822 to the installer
3530         address so that any bail out won't cause undefs later.
3531         (check_files): update file type re's to match above.
3532         (stable_install): likewise.
3533         (reject): handle any except from moving the changes files.  Fixes
3534         crashes on unreadable changes files.
3535
3536         * melanie (main): add an explanation of why things are not removed
3537         from testing.
3538
3539 2001-01-31  James Troup  <james@nocrew.org>
3540
3541         * melanie (main): ignore a) no message, b) removing from stable or
3542         testing when invoked with -n/--no-action.
3543
3544         * katie (check_override): lower section before checking to see if
3545         we're whining about 'non-US' versus 'non-US/main'.
3546
3547         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3548         function so that we can use inside of PostgreSQL.
3549
3550 2001-01-28  James Troup  <james@nocrew.org>
3551
3552         * katie: updated to pass new flag to parse_changes() and deal with
3553         the exception raised on invalid .dsc's if appropriate.
3554         * shania (main): likewise.
3555         * melanie (main): likewise.
3556
3557         * tea (check_dscs): new function to validate all .dsc files in
3558         unstable.
3559
3560         * utils.py (parse_changes): if passed an additional flag, validate
3561         the .dsc file to ensure it's extractable by dpkg-source.
3562         Requested by Ben Collins <bcollins@>.
3563
3564 2001-01-27  James Troup  <james@nocrew.org>
3565
3566         * madison (main): connect to the DB as nobody.
3567
3568         * katie (check_files): remove support for -r/--no-version-check
3569         since it makes no sense under katie (jenna will automatically
3570         remove the (new) older version) and was evil in any event.
3571         (check_changes): add missing new line to rejection message.
3572         (check_dsc): likewise.
3573         (process_it): reset reject_message here.
3574         (main): not here.  Also remove support for -r.
3575
3576 2001-01-26  James Troup  <james@nocrew.org>
3577
3578         * katie (check_override): don't whine about 'non-US/main' versus
3579         'non-US'.
3580
3581 2001-01-26  Michael Beattie  <mjb@debian.org>
3582
3583         * natalie.py (usage): new function.
3584         (main): use it.
3585
3586 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3587
3588         * update-mirrorlists: Update README.non-US too (request from Joy).
3589
3590 2001-01-25  James Troup  <james@nocrew.org>
3591
3592         * katie (reject): catch any exception from utils.move() and just
3593         pass, we previously only caught can't-overwrite errors and not
3594         can't-read ones.
3595
3596         * jenna (generate_src_list): use ORDER BY in selects to avoid
3597         unnecessary changes to Packages files.
3598         (generate_bin_list): likewise.
3599
3600         * utils.py (extract_component_from_section): separated out from
3601         build_file_list() as it's now used by claire too.
3602
3603         * claire.py (find_dislocated_stable): rewrite the query to extract
3604         section information and handle component-less locations properly.
3605         Thanks to ajt@ for the improved queries.
3606         (fix_component_section): new function to fix components and
3607         sections.
3608
3609 2001-01-23  James Troup  <james@nocrew.org>
3610
3611         * katie (check_files): set file type for (u?)debs first thing, so
3612         that if we continue, other functions which rely on file type
3613         existing don't bomb out.  If apt_pkg or apt_inst raise an
3614         exception when parsing the control file, don't try any other
3615         checks, just drop out.
3616         (check_changes): new test to ensure there is actually a target
3617         distribution.
3618
3619 2001-01-22  James Troup  <james@nocrew.org>
3620
3621         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3622         <grin@>.
3623         (check_changes): when mapping to unstable, remember to actually
3624         add unstable to the suite list and not just remove the invalid
3625         suite.
3626
3627 2001-01-21  James Troup  <james@nocrew.org>
3628
3629         * katie (check_files): catch exceptions from debExtractControl()
3630         and reject packages which raise any.
3631
3632 2001-01-19  James Troup  <james@nocrew.org>
3633
3634         * katie (check_signature): basename() file name in rejection
3635         message.
3636
3637 2001-01-18  James Troup  <james@nocrew.org>
3638
3639         * katie (in_override_p): remember the section and priority from
3640         the override file so we can check them against the package later.
3641         (check_override): new function; checks section and priority (for
3642         binaries) from the package against the override file and mails the
3643         maintainer about any disparities.
3644         (install): call check_override after announcing the upload.
3645
3646 2001-01-16  James Troup  <james@nocrew.org>
3647
3648         * utils.py (build_file_list): catch ValueError's from splitting up
3649         the files field and translate it into a parse error.
3650
3651         * tea: add support for finding unreferenced files.
3652
3653         * katie (in_override_p): add support for suite-aliasing so that
3654         proposed-updates uploads work again.
3655         (check_changes): catch parses errors from utils.build_file_list().
3656         (check_dsc): likewise.
3657         (check_diff): yet more dpkg breakage so we require even newer a
3658         version.
3659
3660         * jenna (generate_bin_list): don't do nasty path munging that's no
3661         longer needed.
3662
3663         * denise (main): support for non-US; and rename testing's override
3664         files so they're based on testing's codename.
3665
3666 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3667
3668         * melanie: add to the bug closing message explaining what happens
3669         (or rather doesn't) with bugs against packages that have been
3670         removed.
3671
3672 2001-01-14  James Troup  <james@nocrew.org>
3673
3674         * charisma (main): fix silly off-by-one error; suite priority
3675         checking was done using "less than" rather than "less than or
3676         equal to" which was causing weird hesienbugs with wrong Maintainer
3677         fields.
3678
3679 2001-01-10  James Troup  <james@nocrew.org>
3680
3681         * katie (in_override_p): adapted to use SQL-based overrides.
3682         read_override_file function disappears.
3683
3684         * db_access.py: add new functions get_section_id, get_priority_id
3685         and get_override_type_id.
3686         (get_architecture_id): return -1 if the architecture is not found.
3687
3688         * heidi: switch %d -> %d in all SQL queries.
3689         (get_list): Use string.join where appropriate.
3690
3691         * rhona (in_override_p): don't die if the override file doesn't
3692         exist.
3693         (main): warn if the override file doesn't exist.
3694
3695         * alyson: new script; will eventually sync the config file and the
3696         SQL database.
3697
3698         * natalie.py: new script; manipulates overrides.
3699
3700         * melanie: new script; removes packages from suites.
3701
3702 2001-01-08  James Troup  <james@nocrew.org>
3703
3704         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3705         anything it just changed the symptom.  Recognise the new breakage
3706         and reject them too.
3707
3708 2001-01-07  James Troup  <james@nocrew.org>
3709
3710         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3711         to the .changes file, be sure to set up files[filename]["type"]
3712         too.
3713
3714 2001-01-06  James Troup  <james@nocrew.org>
3715
3716         * katie (check_diff): new function; detects bad diff files
3717         produced by dpkg 1.8.1 and rejects thems.
3718         (process_it): call check_diff().
3719         (check_dsc): gar.  Add support for multiple versions of the
3720         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3721         and size against all versions and use one which matches if
3722         possible and exclude any that don't from being poolized to avoid
3723         file overwrites.  Thanks to broonie@ for providing the example.
3724         (install): skip any files marked as excluded as above.
3725
3726 2001-01-05  James Troup  <james@nocrew.org>
3727
3728         * heidi (process_file): add missing argument to error message.
3729
3730 2001-01-04  James Troup  <james@nocrew.org>
3731
3732         * heidi (main): fix handling of multiple files by reading all
3733         files not just the first file n times (where n = the number of
3734         files passed as arguments).
3735
3736 2001-01-04  Anthony Towns  <ajt@debian.org>
3737
3738         * katie (check_dsc): proper fix for the code which locates the
3739         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3740
3741 2000-12-20  James Troup  <james@nocrew.org>
3742
3743         * rhona: replace IN's with EXISTS's to make DELETE time for
3744         binaries and source sane on auric.  Add a -n/--no-action flag and
3745         make it stop actions if used.  Fixed a bug in binaries deletion
3746         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3747         -V/--version.  Giving timing info on deletion till I'm sure it's
3748         sane.
3749
3750         * katie (check_changes): map testing to unstable.
3751
3752         * madison: new script; shows versions in different architectures.
3753
3754         * katie (check_dsc): ensure size matches as well as md5sum;
3755         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3756         #69702.
3757
3758 2000-12-19  James Troup  <james@nocrew.org>
3759
3760         * katie (reject): ignore the "can't overwrite file" exception from
3761         utils.move() and leave the files where they are.
3762         (reject): doh! os.access() test was reversed so we only tried to
3763         move files which didn't exist... replaced with os.path.exists()
3764         test the right way round.
3765
3766         * utils.py (move): raise an exception if we can't overwrite the
3767         destination file.
3768         (copy): likewise.
3769
3770 2000-12-18  James Troup  <james@nocrew.org>
3771
3772         * rhona: first working version.
3773
3774         * db_access.py (get_files_id): force both sizes to be integers.
3775
3776         * katie (main): use size_type().
3777
3778         * utils.py (size_type): new function; pretty prints a file size.
3779
3780 2000-12-17  James Troup  <james@nocrew.org>
3781
3782         * charisma (main): do version compares so that older packages do
3783         not override newer ones and process source first as source wins
3784         over binaries in terms of who we think of as the Maintainer.
3785
3786 2000-12-15  James Troup  <james@nocrew.org>
3787
3788         * katie (install): use the files id for the .orig.tar.gz from
3789         check_dsc().
3790         (install): limit select for legacy source to a) source in legacy
3791         or legacy-mixed type locations and b) distinct on files.id.
3792         (install): rather than the bizarre insert new, delete old method
3793         for moving legacy source into the pool, use a simple update of
3794         files.
3795         (process_it): initalize some globals before each process.
3796
3797 2000-12-14  James Troup  <james@nocrew.org>
3798
3799         * katie (in_override_p): index on binary_type too since .udeb
3800         overrides are in a different file.
3801         (read_override_file): likewise.
3802         (check_files): correct filename passed to get_files_id().
3803         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3804         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3805         (check_dsc): remember the files id of the .orig.tar.gz, not the
3806         location id.
3807
3808 2000-12-13  James Troup  <james@nocrew.org>
3809
3810         * utils.py (poolify): force the component to lower case except for
3811         non-US.
3812
3813         * katie (in_override_p): handle .udeb-specific override files.
3814         (check_files): pass the binary type to in_override_p().
3815         (check_dsc): remember the location id of the old .orig.tar.gz in
3816         case it's not in the pool.
3817         (install): use location id from dsc_files; which is where
3818         check_dsc() puts it for old .orig.tar.gz files.
3819         (install): install files after all DB work is complete.
3820         (reject): basename() the changes filename.
3821         (manual_reject): likewise.
3822
3823         * shania: new progam; replaces incomingcleaner.
3824
3825 2000-12-05  James Troup  <james@nocrew.org>
3826
3827         * katie (check_changes): if inside stable and can't find files
3828         from the .changes; assume it's installed in the pool and chdir()
3829         to there.
3830         (check_files): we are not installing for stable installs, so don't
3831         check for overwriting existing files.
3832         (check_dsc): likewise.
3833         (check_dsc): reorder .orig.tar.gz handling so that we search in
3834         the pool first and only then fall back on any .orig.tar.gz in the
3835         cwd; this avoids false positives on the overwrite check when
3836         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3837         (install): if this is a stable install, bail out to
3838         stable_install() immediately.
3839         (install): dsc_files handling was horribly broken. a) we need to
3840         add files from the .dsc and not the .changes (duh), b) we need to
3841         add the .dsc file itself to dsc_files (to be consistent with neve
3842         if for no other reason).
3843         (stable_install): new function; handles installs from inside
3844         proposed-updates to stable.
3845         (acknowledge_new): basename changes_filename before doing
3846         anything.
3847         (process_it): absolutize the changes filename to avoid the
3848         requirement of being in the same directory as the .changes file.
3849         (process_it): save and restore the cwd as stable installs can
3850         potentially jump into the pool to find files.
3851
3852         * jenna: dislocated_files support using claire.
3853
3854         * heidi (process_file): select package field from binaries
3855         explicitly.
3856
3857         * db_access.py (get_files_id): fix cache key used.
3858
3859         * utils.py (build_file_list): fix 'non-US/non-free' case in
3860         section/component splitting.
3861         (move): use os.path.isdir() rather than stat.
3862         (copy): likewise.
3863
3864         * claire.py: new file; stable in non-stable munger.
3865
3866         * tea: new file; simply ensures all files in the DB exist.
3867
3868 2000-12-01  James Troup  <james@nocrew.org>
3869
3870         * katie (check_dsc): use regex_safe().
3871         (check_changes): typo in changes{} key:
3872         s/distributions/distribution/.
3873         (install): use changes["source"], not files[file]["source"] as the
3874         latter may not exist and the former is used elsewhere.  Commit the
3875         SQL transaction earlier.
3876
3877         * utils.py (regex_safe): new function; escapes characters which
3878         have meaning to SQL's regex comparison operator ('~').
3879
3880 2000-11-30  James Troup  <james@nocrew.org>
3881
3882         * katie (install): pool_location is based on source package name,
3883         not binary package.
3884
3885         * utils.py (move): if dest is a directory, append the filename
3886         before chmod-ing.
3887         (copy): ditto.
3888
3889         * katie (check_files): don't allow overwriting of existing .debs.
3890         (check_dsc): don't allow overwriting of existing source files.
3891
3892 2000-11-27  James Troup  <james@nocrew.org>
3893
3894         * katie (check_signature): don't try to load rsaref; it's
3895         obsolete.
3896         (in_override_p): don't try to lookup override entries for packages
3897         with an invalid suite name.
3898         (announce): don't assume the suite name is valid; use Find() to
3899         lookup the mailing list name for announcements.
3900
3901         * utils.py (where_am_i): typo; hostname is in the first element,
3902         not second.
3903
3904         * db_access.py (get_suite_id): return -1 on an unknown suite.
3905
3906 2000-11-26  James Troup  <james@nocrew.org>
3907
3908         * katie (install): fix CopyChanges handling; typo in in checking
3909         Cnf for CopyChanges flag and was calling non-existent function
3910         copy_file.
3911
3912         * utils.py (copy): new function; clone of move without the
3913         unlink().
3914
3915 2000-11-25  James Troup  <james@nocrew.org>
3916
3917         * utils.py (build_file_list): handle non-US prefixes properly
3918         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3919         + 'libs' not 'non-US/libs').
3920         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3921         delays.  This is possibly(/probably) exim speicifc and (like other
3922         sendmail options) needs to be in the config file.
3923
3924 2000-11-24  James Troup  <james@nocrew.org>
3925
3926         * rhona (check_sources): we need file id from dsc_files; not id.
3927         Handle non .dsc source files being re-referenced in dsc_files.
3928
3929         * katie (in_override_p): strip out any 'non-US' prefix.
3930         (check_files): use utils.where_am_i() rather than hardcoding.
3931         (check_files): validate the component.
3932         (install): use utils.where_am_i() rather than hardcoding.
3933         (install): fix mail to go to actual recepient.
3934         (reject): likewise.
3935         (manual_reject): likewise.
3936         (acknowledge_new): likewise.
3937         (announce): likewise.
3938
3939         * db_access.py (get_component_id): ignore case when searching for
3940         the component and don't crash if the component can't be found, but
3941         return -1.
3942         (get_location_id): handle -1 from get_component_id().
3943
3944         * jenna (generate_src_list): don't bring 'suite' into our big
3945         multi-table-joining select as we already know the 'suite_id'.
3946         (generate_bin_list): likewise.
3947
3948         * neve (main): don't quit if not on ftp-master.
3949         (process_packages): remove unused variable 'suite_codename'.
3950
3951         * utils.py (move): actually move the file.
3952         (build_file_list): handle non-US prefixes in the section.
3953
3954         * catherine (main): use which_conf_file().
3955         * charisma (main): likewise.
3956         * heidi (main): likewise.
3957         * jenna (main): likewise.
3958         * katie (main): likewise.
3959         * neve (main): likewise.
3960         * rhona (main): likewise.
3961
3962         * utils.py (where_am_i): new routine; determines the archive as
3963         understood by other 'dak' programs.
3964         (which_conf_file): new routine; determines the conf file to read.
3965
3966 2000-11-17  James Troup  <james@nocrew.org>
3967
3968         * katie (install): fix where .changes files for proposed-updates
3969         go.
3970
3971 2000-11-04  James Troup  <james@nocrew.org>
3972
3973         * jenna (main): handle architecture properly if no
3974         -a/--architecture argument is given, i.e. reset architecture with
3975         the values for the suite for each suite.
3976
3977         * Add apt_pkg.init() to the start of all scripts as it's now
3978         required by python-apt.
3979
3980 2000-10-29  James Troup  <james@nocrew.org>
3981
3982         * jenna (generate_bin_list): take an additional argument 'type'
3983         and use it in the SELECT.
3984         (main): if processing component 'main', process udebs and debs.
3985
3986         * neve (process_packages): set up 'type' in 'binaries' (by
3987         assuming .deb).
3988
3989         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3990         (check_files): set up files[file]["dbtype"].
3991         (install): use files[file]["dbtype"] to set up the 'type' field in
3992         the 'binaries' table.
3993
3994         * init_pool.sql: add a 'type' field to the 'binaries' table to
3995         distinguisgh between ".udeb" and ".deb" files.
3996
3997         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3998         dest ? dirname(dest)" type check instead.
3999
4000         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4001         in the pool without crashing.  Also handle the case of being asked
4002         to look for something other than an .orig.tar.gz in the pool.
4003
4004 2000-10-26  James Troup  <james@nocrew.org>
4005
4006         * katie (install): fix filenames put into files table during
4007         poolification of legacy source.
4008
4009         * utils.py (move): work around a bug in os.path.basename() which
4010         cunningly returns '' if there is a trailing slash on the path
4011         passed to it.
4012
4013         * katie (check_dsc): Remove more cruft.  If we find the
4014         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4015         location, make a note of that so we can fix things in install().
4016         (install): as above.  Move any old source out of legacy locations
4017         so that 'apt-get source' will work.
4018         (process_it): reset the flag that indicates to install that the
4019         source needs moved.
4020
4021         * cron.daily: more.  Nowhere near complete yet though.
4022
4023         * katie (install): don't run os.makedirs, a) utils.move() does
4024         this now, b) we weren't removing the user's umask and were
4025         creating dirs with SNAFU permissions.
4026         (check_dsc): rewrite the .orig.tar.gz handling to take into
4027         account, err, package pools.  i.e. look anywhere in the pool
4028         rather than faffing around with two simple paths.
4029
4030         * neve (process_sources): add the .dsc to dsc_files too.
4031
4032 2000-10-25  James Troup  <james@nocrew.org>
4033
4034         * neve (process_sources): don't duplicate .orig.tar.gz's.
4035
4036 2000-10-23  James Troup  <james@nocrew.org>
4037
4038         * utils.py (re_extract_src_version): moved here.
4039
4040         * neve: move re_extract_src_version to utils.
4041         (process_packages): reflect change.
4042
4043         * katie (install): reflect change.
4044
4045 2000-10-19  James Troup  <james@nocrew.org>
4046
4047         * jenna (generate_src_list): handle locations with null
4048         components.
4049         (generate_bin_list): likewise.
4050