]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
katie.py: update to +bX binNMU versioning
[dak.git] / ChangeLog
1 2005-11-25  Anthony Towns  <aj@erisian.com.au>
2
3         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
4         works
5         * jennifer: Re-enable .deb ar format checking
6         * katie.py: Convert to +bX binNMU special casing
7
8 2005-11-15  Anthony Towns  <aj@erisian.com.au>
9
10         * Merge of changes from spohr, by various people.
11
12         * tiffani: new script to do patches to Packages, Sources and Contents
13         files for quicker downloads.
14         * ziyi: update to authenticate tiffani generated files
15
16         * dak: new script to provide a single binary with less arbitrary names
17         for access to dak functionality.
18
19         * cindy: script implemented
20
21         * saffron: cope with suites that don't have a Priority specified
22         * heidi: use get_suite_id()
23         * denise: don't hardcode stable and unstable, or limit udebs to unstable
24         * denise: remove override munging for testing (now done by cindy)
25         * helena: expanded help, added new, sort and age options, and fancy headers
26         * jennifer: require description, add a reject for missing dsc file
27         * jennifer: change lock file
28         * kelly: propogation support
29         * lisa: honour accepted lock, use mtime not ctime, add override type_id
30         * madison: don't say "dep-retry"
31         * melanie: bug fix in output (missing %)
32         * natalie: cope with maintainer_override == None; add type_id for overrides
33         * nina: use mtime, not ctime
34
35         * katie.py: propogation bug fixes
36         * logging.py: add debugging support, use | as the logfile separator
37
38         * katie.conf: updated signing key (4F368D5D)
39         * katie.conf: changed lockfile to dinstall.lock
40         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
41         * katie.conf: added tiffani, cindy support
42         * katie.conf: updated to match 3.0r6 release
43         * katie.conf: updated to match sarge's release
44
45         * apt.conf: update for sarge's release
46         * apt.conf.stable: update for sarge's release
47         * apt.conf: bump daily max Contents change to 25MB from 12MB
48
49         * cron.daily: add accepted lock and invoke cindy  
50         * cron.daily: add daily.lock
51         * cron.daily: invoke tiffani
52         * cron.daily: rebuild accepted buildd stuff
53         * cron.daily: save rene-daily output on the web site
54         * cron.daily: disable billie
55         * cron.daily: add stats pr0n
56
57         * cron.hourly: invoke helena
58
59         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
60         * vars: add lockdir, add etch to copyoverrides
61         * Makefile: add -Ipostgresql/server to CXXFLAGS
62
63         * docs/: added README.quotes
64         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
65         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
66
67         * TODO: correct spelling of "conflicts"
68
69 2005-05-28  James Troup  <james@nocrew.org>
70
71         * helena (process_changes_files): use MTIME rather than CTIME (the
72         C's not for 'creation', stupid).
73         * lisa (sort_changes): likewise.
74
75         * jennifer (check_distributions): use has_key rather than an 'in'
76         test which doesn't work with python2.1.  [Probably by AJ]
77
78 2005-03-19  James Troup  <james@nocrew.org>
79
80         * rene (main): use Suite::<suite>::UdebComponents to determine
81         what components have udebs rather than assuming only 'main' does.
82
83 2005-03-18  James Troup  <james@nocrew.org>
84
85         * utils.py (rfc2047_encode): use codecs.lookup() rather than
86         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
87         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
88         <andrew@ubuntu.com>.
89
90 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
91
92         * helena: add -n/--new HTML output option and improved sorting
93         options.
94
95 2005-03-06  Ryan Murray  <rmurray@debian.org>
96
97         * shania(main): use Cnf::Dir::Reject instead of REJECT
98
99 2005-02-08  James Troup  <james@nocrew.org>
100
101         * rene (main): add partial NBS support by checking that binary
102         packages are built by their real parent and not some random
103         stranger.
104         (do_partial_nbs): likewise.
105
106 2005-01-18  James Troup  <james@nocrew.org>
107
108         * katie.py (Katie.build_summaries): avoid leaking file handle when
109         extracting package description.
110         (Katie.force_reject): remember and close each file descriptor we
111         use.
112         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
113         s/reason_file/reason_fd/ because it's a file descriptor.
114         (Katie.check_dsc_against_db): avoid leaking file handle whenever
115         invoking apt_pkg.md5sum().
116
117         * jennifer (check_deb_ar): new function: sanity check the ar
118         contents of a .deb.
119         (check_files): use it.
120         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
121         found.
122         (check_files): accept 'raw-installer' as an alias for 'byhand'.
123
124 2005-01-14  Anthony Towns  <ajt@debian.org>
125
126         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
127
128         * propup stuff (thanks to Andreas Barth)
129         * katie.conf: add stable MustBeOlderThan testing, add -security
130           propup
131         * jennifer: set distribution-version in .katie if propup may be needed
132         * katie.py: add propogation to cross_suite_version_check
133
134 2004-11-27  James Troup  <james@nocrew.org>
135
136         * nina: new script to split monolithic queue/done into date-based
137         hierarchy.
138
139         * rene (usage): document -s/--suite.
140         (add_nbs): use .setdefault().
141         (do_anais): likewise.
142         (do_nbs): don't set a string to "" and then += it.
143         (do_obsolete_source): new function - looks for obsolete source
144         packages (i.e source packages whose binary packages are ALL a)
145         claimed by someone else and b) newer when built from the other
146         source package).
147         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
148         and 'full' check modes.  Check for obsolete source packages.
149         linux-wlan-ng has been fixed - remove hideous bodge.
150
151         * jennifer (check_distributions): support 'reject' suite map type.
152
153         * utils.py (validate_changes_file_arg): s/file/filename/.
154         s/fatal/require_changes/.  If require_changes is -1, ignore errors
155         and return the .changes filename regardless.
156         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
157         (re_no_revision): don't escape '-', it's not a special character.
158         s/\*/+/ as there must be at least one non-dash character after the
159         dash in a revision.  Thanks to Christian Reis for noticing both of
160         these.
161
162         * ashley (main): pass require_changes=-1 to
163         utils.validate_changes_file_arg().
164
165         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
166         Team <debian-kernel@lists.debian.org>'.
167
168         * katie.py (Katie.in_override_p): fix .startswith() usage.
169
170         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
171         (Lauren::MoreInfoURL): update to 3.0r3.
172         (Suite::Stable::Version): likewise.
173         (Suite::Stable::Description): likewise.
174
175         * cron.daily: disable automatic task override generation.
176
177         * cindy (process): restrict "find all packages" queries by
178         component.  Respect Options["No-Action"].
179         (main): add -n/--no-action support.  Only run on unstable.  Rename
180         type to otype (pychecker).
181
182 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
183
184         * katie.conf (Billie::BasicTrees): add all architectures.
185         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
186         'everything'.
187
188         * cron.daily: Update a 'current' symlink when creating the
189         post-daily-cron-job database backup to aid mirroring to merkel.
190         Run billie.
191
192         * billie (BillieTarget.poolish_match): handle .udeb too.
193
194 2004-10-13  Ryan Murray  <rmurray@debian.org>
195
196         * amber (do_upload): Sort changes files in "katie" order so that
197           source always arrives before binary-only rebuilds
198         
199 2004-10-05  James Troup  <james@nocrew.org>
200
201         * jennifer (check_dsc): correct reject message on invalid
202         Maintainer field.
203
204 2004-09-20  James Troup  <james@nocrew.org>
205
206         * alicia: remove unused 'pwd' import.
207
208         * tea (check_override): underline suite name in output properly.
209
210         * rene (main): read a compressed Packages file.
211         * tea (validate_packages): likewise.
212
213         * katie.py (re_fdnic): add 'r' prefix.
214         (re_bin_only_nmu_of_mu): likewise.
215         (re_bin_only_nmu_of_nmu): likewise.
216
217         * madison (main): retrieve component information too and display
218         it if it's not 'main'.
219         * melanie (reverse_depends_check): likewise.
220
221         * utils.py (pp_dep): renamed...
222         (pp_deps): ... to this.
223         * jeri (check_dep): update calls to utils.pp_deps().
224         * melanie (reverse_depends_check): likewise.
225
226         * jennifer (check_changes): move initalization of email variables
227         from here...
228         (process_it): ...to here as we no longer always run
229         check_changes().  Don't bother to initialize
230         changes["architecture"].
231
232         * denise (list): renamed to...
233         (do_list): ...this to avoid name clash with builtin 'list'.
234         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
235         for dictionaries.
236         (main): Likewise for name clash avoidance and also
237         s/override_type/suffix/.  Adjust call to do_list().
238
239 2004-09-01  Ryan Murray  <rmurray@debian.org>
240
241         * tea (check_files): check the pool/ directory instead of dists/
242
243 2004-08-04  James Troup  <james@nocrew.org>
244
245         * jenna (cleanup): use .setdefault() for dictionaries.
246         (write_filelists): likewise.
247
248         (write_filelists): Use utils.split_args() not split() to split
249         command line arguments.
250         (stable_dislocation_p): likewise.
251
252         (write_filelists): Add support for mapping side of suite-based
253         "Arch: all mapping".
254         (do_da_do_da): ensure that if we're not doing all suites that we
255         process enough to be able correct map arch: all packages.
256
257         * utils.py (cant_open_exc): correct exception string,
258         s/read/open/, s/.$//.
259
260         * templates/amber.advisory: update to match reality a little
261         better.
262
263         * melanie (reverse_depends_check): read Packages.gz rather than
264         Packages.
265
266         * jennifer (check_files): check for unknown component before
267         checking for NEWness.
268
269         * katie.py (Katie.in_override_p): use .startswith in favour of a
270         slice.
271
272         * docs/melanie.1.sgml: document -R/--rdep-check.
273
274 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
275
276         * billie (main): Make the verbatim lists include all the README
277           elements.
278         * docs/README.names: Add billie in (correcting oversight)
279
280 2004-07-01  James Troup  <james@nocrew.org>
281
282         * emilie (main): handle woody's case-sensitive python-ldap,
283         s/keyfingerprint/keyFingerPrint/.
284
285 2004-06-25  James Troup  <james@nocrew.org>
286
287         * debian/control (Depends): add dpkg-dev since jennifer uses
288         dpkg-source.
289
290 2004-06-24  James Troup  <james@nocrew.org>
291
292         * melanie (main): s/file/temp_file/ and close file handle before
293         removing the temporary file.
294         (main): don't warn about needing a --carbon-copy if in no-action
295         mode.
296
297         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
298         (main): likewise.
299
300         * test/006/test.py (main): check bracketed email-only form.
301
302         * utils.py (fix_maintainer): if the Maintainer string is bracketed
303         email-only, strip the brackets so we don't end up with
304         <<james@nocrew.org>>.
305
306 2004-06-20  James Troup  <james@nocrew.org>
307
308         * jennifer (process_it): only run check_changes() if
309         check_signature() returns something.  (Likewise)
310
311         * utils.py (changes_compare): if there's no changes["version"] use
312         "0" rather than None.  (Avoids a crash on unsigned changes file.)
313
314 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
315
316         * jeri (pp_dep): moved from here to ...
317         * utils.py (pp_dep): here.
318
319         * melanie (main): add reverse dependency checking.
320
321 2004-06-17  James Troup  <james@nocrew.org>
322
323         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
324         * tea (check_dscs): likewise.
325
326         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
327         change from boolean to a variable with 3 possible values, 0 and 1
328         as before, -1 means don't require a signature.  Makes
329         parse_changes() useful for parsing arbitary RFC822-style files,
330         e.g. 'Release' files.
331         (check_signature): add support for detached signatures by passing
332         the files the signature is for as an optional third argument.
333         s/filename/sig_filename/g.  Add a fourth optional argument to
334         choose the keyring(s) to use.  Don't os.path.basename() the
335         sig_filename before checking it for taint.
336         (re_taint_free): allow '/'.
337
338 2004-06-11  James Troup  <james@nocrew.org>
339
340         * tea (check_files): make override.unreadable optional.
341         (validate_sources): close the Sources file handle.
342
343         * docs/README.first: clarify that 'alyson' and running
344         add_constraints.sql by hand is something you only want to do if
345         you're not running 'neve'.
346
347         * docs/README.config (Location::$LOCATION::Suites): document.
348
349         * db_access.py (do_query): also print out the result of the query.
350
351 2004-06-10  James Troup  <james@nocrew.org>
352
353         * katie.py (Katie.cross_suite_version_check): post-woody versions
354         of python-apt's apt_pkg.VersionCompare() function apparently
355         returns variable integers for less than or greater than results -
356         update our result checking to match.
357         * jenna (resolve_arch_all_vs_any): likewise.
358         * charisma (main): likewise.
359
360 2004-06-09  James Troup  <james@nocrew.org>
361
362         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
363         valid_dsc_p and don't run check_source() if check_dsc() failed.
364         (check_dsc): on fatal failures return 0 so check_source() isn't
365         run (since it makes fatal assumptions about the presence of
366         mandatory .dsc fields).  
367         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
368
369 2004-05-07  James Troup  <james@nocrew.org>
370
371         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
372         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
373
374         * katie.conf (Dir::Override): remove duplicate definition.
375
376         * neve (get_or_set_files_id): add an always-NULL last_used column
377         to output.
378
379 2004-04-27  James Troup  <james@nocrew.org>
380
381         * apt.conf-security (tree "dists/stable/updates"): add
382         ExtraOverride - noticed by Joey Hess (#246050).
383         (tree "dists/testing/updates"): likewise.
384
385 2004-04-20  James Troup  <james@nocrew.org>
386
387         * jennifer (check_files): check for existing .changes or .katie
388         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
389         directories.
390
391 2004-04-19  James Troup  <james@nocrew.org>
392
393         * jennifer (check_source): handle failure to remove the temporary
394          directory (used for source tree extraction) better, specifically:
395          if we fail with -EACCES, chmod -R u+rwx the temporary directory
396          and try again and if that works, REJECT the package.
397
398 2004-04-17  James Troup  <james@nocrew.org>
399
400         * docs/madison.1.sgml: document -b/--binary-type,
401         -g/--greaterorequal and -G/--greaterthan.
402
403         * madison (usage): -b/--binary-type only takes a single argument.
404         Document -g/--greaterorequal and -G/--greaterthan.
405         (main): add support for -g/--greaterorequal and -G/--greaterthan.
406
407 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
408
409         * billie: Cleaned up a load of comments, added /README.non-US to
410           the verbatim matches list.
411
412 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
413
414         * utils.py (size_type): Make it use real binary megabytes and
415           kilobytes, instead of the marketing terms used before.
416
417 2004-04-07  James Troup  <james@nocrew.org>
418
419         * katie.py (Katie.check_dsc_against_db): in the case we're
420         ignoring an identical-to-existing orig.tar.gz remember the path to
421         the existent version in pkg.orig_tar_gz.  Adjust query to grab
422         location.path too to be able to do so.
423
424 2004-04-03  James Troup  <james@nocrew.org>
425
426         * debian/control (Depends): add python2.1-email | python (>= 2.2)
427         needed for new utils.rfc2047_encode() function.
428
429         * utils.py (re_parse_maintainer): allow whitespace inside the
430         email address.
431         (Error): new exception base class.
432         (ParseMaintError): new exception class.
433         (force_to_utf8): new function.
434         (rfc2047_encode): likewise.
435         (fix_maintainer): rework.  use force_to_utf8() to force name and
436         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
437         return an rfc2047 value.  Validate the address to catch missing
438         email addresses and (some) broken ones.
439
440         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
441         by adopting foo2047 return value.
442         (Katie.dump_vars): add changedby2047 and maintainer2047 as
443         mandatory changes fields.  Promote changes and maintainer822 to
444         mandatory fields.
445         (Katie.update_subst): default maintainer2047 rather than
446         maintainer822.  User foo2047 rather than foo822 when setting
447         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
448
449         * jennifer (check_changes): set default changes["maintainer2047"]
450         and changes["changedby2047"] values rather than their 822
451         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
452         to new utils.fix_maintainer() - reject on exception and adopt
453         foo2047 return value.
454         (check_dsc): if a mandatory field is missing don't do any further
455         checks and as a result reduce paranoia about dsc[var] existence.
456         Validate the maintainer field by calling new
457         utils.fix_maintainer().
458
459         * ashley (main): add changedby2047 and maintainer2047 to mandatory
460         changes fields.  Promote maintainer822 to a mandatory changes
461         field.  add "pool name" to files fields.
462
463         * test/006/test.py: new file - tests for new
464         utils.fix_maintainer().
465
466 2004-04-01  James Troup  <james@nocrew.org>
467
468         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
469
470         * jennifer (get_changelog_versions): create a symlink mirror of
471         the source files in the temporary directory.
472         (check_source): if check_dsc_against_db() couldn't find the
473         orig.tar.gz bail out.
474
475         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
476         part of the upload store the path to it in pkg.orig_tar_gz and if
477         it can't be found set pkg.orig_tar_gz to -1.
478
479         Explicitly return the second value as None in the (usual) case
480         where we don't have to reprocess.  Remove obsolete diagnostic
481         logs.
482
483         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
484
485         * utils.py (temp_filename): new helper function that wraps around
486         tempfile.mktemp().
487
488         * katie.py (Katie.do_reject): use it and don't import tempfile.
489         * lisa (prod_maintainer): likewise.
490         (edit_note): likewise.
491         (edit_new): likewise.
492         * lauren (reject): likewise.
493         * melanie (main): likewise.
494         * neve (do_sources): likewise.
495         * rene (main): likewise.
496         * tea (validate_sources): likewise.
497
498 2004-03-31  James Troup  <james@nocrew.org>
499
500         * tea (validate_sources): remove unused 's' temporary variable.
501
502 2004-03-15  James Troup  <james@nocrew.org>
503
504         * jennifer (check_dsc): check changes["architecture"] for
505         source before we do anything else.
506
507 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
508
509         * billie: Added
510         * katie.conf (Billie): Added sample Billie stanza to katie.conf
511
512 2004-03-12  James Troup  <james@nocrew.org>
513
514         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
515
516         * katie.conf (Dir::Queue::BTSVersionTrack): define.
517
518         * katie.py (Katie.accept): add support for DebBugs Version
519         Tracking by writing out .versions (generated in jennifer's
520         get_changelog_versions()) and .debinfo (mapping of binary ->
521         source) files.
522
523         * ashley (main): add dsc["bts changelog"].
524
525         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
526
527         * jennifer (check_diff): obsoleted by check_source(), removed.
528         (check_source): new function: create a temporary directory and
529         move into it and call get_changelog_versions().
530         (get_changelog_versions): new function: extract the source package
531         and optionally parse debian/changelog to obtain the version
532         history for the BTS.
533         (process_it): call check_source() rather than check_diff().
534
535 2004-03-08  James Troup  <james@nocrew.org>
536
537         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
538         listbar" rather than "if listbar.count(varfoo)"' change on
539         2004-02-24.
540
541 2004-03-05  James Troup  <james@nocrew.org>
542
543         * alicia (main): don't warn about not closing bugs - we don't
544         manage overrides through the BTS.
545
546 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
547
548         * docs/README.config: lots of updates and corrections.
549         * docs/README.first: likewise.
550
551         * docs/README.config: drop unused Dir::Queue::Root.
552         * katie.conf-non-US: likewise.
553         * katie.conf: likewise.
554         * katie.conf-security: likewise.
555
556 2004-02-27  James Troup  <james@nocrew.org>
557
558         * rose (process_tree): use 'if var in [ list ]' rather than long
559         'if var == foo or var == bar or var == baz'.  Suggested by Martin
560         Michlmayr.
561
562         * jennifer (check_files): reduce 'if var != None' to 'if var' as
563         suggested by Martin Michlmayr.
564         * catherine (poolize): likewise.
565         * charisma (main): likewise.
566         * halle (check_changes): likewise.
567         * heidi (main): likewise.
568         (process_file): likewise.
569         * kelly (install): likewise.
570         (stable_install): likewise.
571         * utils.py (fix_maintainer): likewise.
572
573         * apt.conf: add support for debian-installer in testing-proposed-updates.
574         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
575         add - set to main.
576
577         * mkmaintainers: add "-T15" option to wget of non-US packages file
578         so that we don't hang cron.daily if non-US is down.
579
580         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
581
582         * templates/jennifer.bug-close: add Source and Source-Version
583         pseudo-headers that may be used for BTS Version Tracking someday
584         [ajt@].
585
586         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
587         (main): likewise.
588
589         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
590
591 2004-02-25  James Troup  <james@nocrew.org>
592
593         * katie.conf (SuiteMappings): don't map testing-security to
594         proposed-updates.
595
596 2004-02-24  James Troup  <james@nocrew.org>
597
598         * katie.py (Katie.__init__): remove unused 'values' field.
599
600         * utils.py (extract_component_from_section): use 's.find(c) != -1'
601         rather than 's.count(c) > 0'.
602
603         * katie.py (Katie.source_exists): use "if varfoo in listbar"
604         rather than "if listbar.count(varfoo)".
605         * halle (check_joey): likewise.
606         * jeri (check_joey): likewise.
607         * lisa (edit_index): likewise.
608         * jenna (stable_dislocation_p): likewise.
609
610         * jennifer (main): remove unused global 'nmu'.
611
612 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
613
614         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
615           to be ftpmaster@ftp-master.debian.org to bring it into line with how
616           the dak tools close bugs.
617
618 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
619
620         * katie.conf (Alicia): Added an Alicia section with email address
621         * templates/alicia.bug-close: Added
622         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
623         * alicia (main): Added a -d/--done argument
624
625 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
626
627         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
628
629 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
630
631         * lisa (prod_maintainer): Added function to prod the maintainer without
632           accepting or rejecting the package
633         * templates/lisa.prod: Added this template for the prodding mail
634
635         * .cvsignore: Added neve-files which turns up in new installations
636
637 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
638
639         * alicia (usage): Fixed usage message to offer section and priority
640           as seperately optional arguments.
641         * alicia (main): Added a % (arg) interpolation needed when only
642           one of section or priority is provided and it cannot be found.
643
644 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
645
646         * alicia: Added
647         * docs/alicia.1.sgml: Added
648         * docs/Makefile: Added alicia to the list of manpages to build
649         * docs/README.names: Noted what alicia does
650         * docs/README.first: Noted where alicia is useful
651
652 2004-01-21  James Troup  <james@nocrew.org>
653
654         * madison (main): add -b/--binary-type.
655         (usage): likewise.
656
657         * denise (main): generate debian-installer overrides for testing
658         too.
659         * apt.conf: add support for debian-installer in testing.
660         * katie.conf (Suite::Testing::UdebComponents): set to main.
661
662         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
663         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
664         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
665
666         * utils.py (parse_changes): don't process data not inside the
667         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
668         pointing this out.
669         * test/005/test.py (main): new test to test for above.
670
671 2004-01-04  James Troup  <james@nocrew.org>
672
673         * jenna (write_filelists): correct typo, s/Components/Component/
674         for Options.
675
676 2004-01-04  Ryan Murray  <rmurray@debian.org>
677
678         * cron.buildd: move update of overrides and Packages file...
679         * cron.unchecked: to here.
680         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
681         * katie.conf-security: likewise
682
683 2003-11-20  James Troup  <james@nocrew.org>
684
685         * jenna (main): don't use utils.try_with_debug(), it produces way
686         too much output.
687
688         * halle (check_changes): don't error out if a .changes refers to a
689         non-existent package, just warn and skip the file.
690
691         * docs/README.stable-point-release: mention halle and .changes
692         obsoleted by removal through melanie.  Update for 3.0r2.
693
694         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
695         (Suite::Stable::Description): update for 3.0r2.
696         (Lauren::MoreInfoURL): likewise.
697         * katie.conf-non-US (Suite::Stable::Version): likewise.
698         (Suite::Stable::Description): likewise.
699         (Lauren::MoreInfoURL): likewise.
700
701         * apt.conf.stable (Default): don't define MaxContentsChange.
702         * apt.conf.stable-non-US (Default): likewise.
703
704         * lauren (reject): hack to work around partial replacement of an
705         upload, i.e. one or more binaries superseded by another source
706         package.
707
708 2003-11-17  James Troup  <james@nocrew.org>
709
710         * pseudo-packages.maintainers: point installation-reports at
711         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
712         request.
713
714         * utils.py (parse_changes): calculate the number of lines once
715         with len() rather than max().
716
717         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
718         files, since check_dsc_against_db() deletes the .orig.tar.gz
719         entry.
720
721 2003-11-13  Ryan Murray  <rmurray@debian.org>
722
723         * apt.conf: specify a src override file for debian-installer
724
725 2003-11-10  James Troup  <james@nocrew.org>
726
727         * fernanda.py (strip_pgp_signature): new function - strips PGP
728         signature from a file and returns the modified contents of the
729         file in a string.
730         (display_changes): use it.
731         (read_dsc): likewise.
732
733 2003-11-09  Ryan Murray  <rmurray@debian.org>
734
735         * cron.buildd: export accepted_autobuild table for unstable, and use
736         it to generate the incoming Packages/Sources rather than having apt
737         walk the directory.
738         * apt.conf.buildd: use exported table from cron.buildd to generate
739         Packages/Sources
740
741 2003-11-07  James Troup  <james@nocrew.org>
742
743         * kelly: import errno.
744
745         * katie.py (Katie.build_summaries): sort override disparities.
746
747         * kelly (install): set dsc_component based on the .dsc's component
748         not a random binaries.
749
750 2003-10-29  James Troup  <james@nocrew.org>
751
752         * katie.py (Katie.build_summaries): don't assume changes["source"]
753         exists since it might not.
754
755 2003-10-20  James Troup  <james@nocrew.org>
756
757         * pseudo-packages.maintainers: update security.d.o to use
758         team@s.d.o at joy@'s request.
759
760 2003-10-17  James Troup  <james@nocrew.org>
761
762         * jennifer (check_dsc): use .startswith rather than .find() == 0.
763
764 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
765
766         * tea (chk_bd_process_dir): use .endswith rather than slice.
767
768 2003-10-14  James Troup  <james@nocrew.org>
769
770         * tea (check_build_depends): new function.
771         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
772         in the archive.
773         (main): update for new function.
774         (usage): likewise.
775
776         * katie.py (Katie.do_reject): sanitize variable names,
777         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
778         os.close() to outside if clause.
779
780         * jennifer (check_dsc): check build-depends and
781         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
782         Fold the ARRAY check into the same code block and tidy up it's
783         rejection message.
784         (check_changes): ensure that the Files field is non-empty.
785         Suggested by Santiago Vila <sanvila@unex.es>
786         (check_changes): normalize reject messages.
787         (check_dsc): instead of doing most of the checks inside a for loop
788         and an if, find the dsc_filename in a short loop over files first
789         and then do all the checks.  Add check for more than one .dsc in a
790         .changes which we can't handle.  Normalize reject messages.
791
792 2003-10-13  James Troup  <james@nocrew.org>
793
794         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
795         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
796
797         * jennifer (check_files): Set 'has_binaries' and 'has_source'
798         variables while iterating over 'files'.  Don't regenerate it when
799         checking for source if source is mentioned.
800
801         Reject source only uploads if the config variable
802         Dinstall::Reject::NoSourceOnly is set.
803
804 2003-10-03  James Troup  <james@nocrew.org>
805
806         * rene (main): add nasty hardcoded reference to debian-installer
807         so we detect NBS .udebs.
808
809 2003-09-29  James Troup  <james@nocrew.org>
810
811         * apt.conf (old-proposed-updates): remove.
812         * apt.conf-non-US (old-proposed-updates): likewise.
813
814 2003-09-24  James Troup  <james@nocrew.org>
815
816         * tea (check_files_not_symlinks): new function, ensure files
817         mentioned in the database aren't symlinks.  Includes code to
818         update any files that are like this to their real filenames +
819         location; commented out by though.
820         (usage): update for new function.
821         (main): likewise.
822
823 2003-09-24  Anthony Towns  <ajt@debian.org>
824
825         * vars: external-overrides variable added
826         * cron.daily: Update testing/unstable Task: overrides from joeyh
827         managed external source.
828
829 2003-09-22  James Troup  <james@nocrew.org>
830
831         * kelly (install): if we can't move the .changes into queue/done,
832         fail don't warn and carry on.  The old behaviour pre-dates NI and
833         doesn't make much sense now since jennifer checks both
834         queue/accepted and queue/done for any .changes files she's
835         processing.
836
837         * utils.py (move): don't throw exceptions on existing files or
838         can't overwrite, instead just fubar out.
839
840         * jennifer (check_dsc): also check Build-Depends-Indep for
841         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
842
843 2003-09-18  James Troup  <james@nocrew.org>
844
845         * katie.py (Katie.close_bugs): only log the bugs we've closed
846         once.
847
848         * kelly (main): log as 'kelly', not 'katie'.
849
850 2003-09-16  James Troup  <james@nocrew.org>
851
852         * katie.py (Katie.check_binary_against_db): likewise noramlize.
853
854         * jennifer (check_changes): normalize reject message for "changes
855         file already exists" to be %s: <foo>.
856         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
857         produced by broken dpkg-source in 1.10.11.  Tone down and
858         normalize rejection message for incompatible 'Format' version
859         numbers.
860         (check_diff): likewise tone down and normalize.
861
862 2003-09-07  James Troup  <james@nocrew.org>
863
864         * utils.py (parse_changes): if dsc_whitespace_rules is false,
865         don't bomb out on bogus empty lines.
866         (build_file_list): check for changes["files"] earlier.  use Dict
867         to create files[name] dictionary.
868         (send_mail): don't bother validating arguments.
869         (check_signature): minor improvements to some of the rejection
870         messages including listing the key id of the key that wasn't found
871         in the keyring.
872         (wrap): new function.
873
874         * tea: add new check 'validate-indices' that ensures all files
875         mentioned in indices (Packages, Sources) files do in fact exist.
876
877         * catherine (poolize): use a local re_isadeb which handles legacy
878         (i.e. no architecture) style .deb filenames.
879
880         * rosamund: new script.
881
882         * rhona (check_binaries): when checking for binary packages not in
883         a suite, don't bother selecting files that already have a
884         last_used date.
885         (check_sources): likewise.
886
887         * rhona: change all SQL EXISTS sub-query clauses to use the
888         postgres suggested convention of "SELECT 1 FROM".
889         * andrea (main): likewise.
890         * tea (check_override): likewise.
891         * catherine (main): likewise.
892
893         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
894         entries and in other suites MustBeNewerThan's.
895         (SuiteMappings): likewise
896         * katie.conf-non-US: likewise.
897         * katie.conf-security: likewise.
898
899         * apt.conf-security: remove oldstable.
900         * apt.conf.stable: likewise.
901         * apt.conf.stable-non-US: likewise.
902         * cron.buildd-security: likewise.
903         * cron.daily-security: likewise.
904         * vars-security (suites): likewise.
905         * wanna-build/trigger.daily: likewise.
906
907         * claire.py (clean_symlink): move...
908         * utils.py (clean_symlink): here.
909
910         * claire.py (find_dislocated_stable): update accordingly.
911
912 2003-08-16  Anthony Towns  <ajt@debian.org>
913
914         * katie.py (source_exists): expand the list of distributions
915         the source may exist in to include any suite that's mapped to
916         the destination suite (even transitively (a->b->c)). This should
917         unbreak binary uploads to *-proposed-updates.
918
919 2003-08-09  Randall Donald  <rdonald@debian.org>
920
921         * lisa (recheck): change changes["distribution"].keys() to
922         Katie.pkg.changes...
923
924 2003-08-08  Randall Donald  <rdonald@debian.org>
925
926         * katie.py: only tag bugs as fixed-in-experimental for
927         experimental uploads
928
929 2003-07-26  Anthony Towns  <ajt@debian.org>
930
931         * katie.py (source_exists): add an extra parameter to limit the
932         distribution(s) the source must exist in.
933         * kelly, lisa, jennifer: update to use the new source_exists
934
935 2003-07-15  Anthony Towns  <ajt@debian.org>
936
937         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
938         checksums for debian-installer stuff even when it's just a symlink to
939         another suite
940
941         * apt.conf: add the FakeDI line
942
943 2003-06-09  James Troup  <james@nocrew.org>
944
945         * kelly (check): make sure the 'file' we're looking for in 'files'
946         hasn't been deleted by katie.check_dsc_against_db().
947
948 2003-05-07  James Troup  <james@nocrew.org>
949
950         * helena (time_pp): fix s/years/year/ typo.
951
952 2003-04-29  James Troup  <james@nocrew.org>
953
954         * madison (usage): document -c/--component.
955
956         * madison (usage): Fix s/seperated/separated/.
957         * melanie (usage): likewise.
958         * jenna (usage): likewise.
959
960 2003-04-24  James Troup  <james@nocrew.org>
961
962         * cron.daily-non-US: if there's nothing for kelly to install, say
963         so.
964
965         * jennifer (check_timestamps): print sys.exc_value as well as
966         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
967         failed' with 'deb contents' to make it clearer what timestamp(s)
968         are being checked.
969
970 2003-04-15  James Troup  <james@nocrew.org>
971
972         * cron.daily-non-US: only run kelly if there are some .changes
973         files in accepted.
974
975         * rene: add -m/--mode argument which can be either daily (default)
976         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
977         Various changes to make this possible including a poor attempt at
978         splitting main() up a little.  De-hardcode suite numbers from SQL
979         queries and return quietly from do_nviu() if experimental doesn't
980         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
981         is.
982
983         * debian/control (Depends): remove python-zlib as it's obsolete.
984
985         * charisma (main): don't slice the \n off strings when we're
986         strip()-ing it anyway.
987         * heidi (set_suite): likewise.
988         (process_file): likewise.
989         * natalie (process_file): likewise.
990
991 2003-04-08  James Troup  <james@nocrew.org>
992
993         * katie.py (Katie.check_dsc_against_db): improve the speed of two
994         slow queries by using one LIKE '%foo%' and then matching against
995         '%s' or '/%s$' in python.  Also only join location when we need it
996         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
997         query, so 6s for each sourceful package.
998
999         * cron.daily: invoke rene and send the report to ftpmaster.
1000         * cron.daily-non-US: likewise.
1001
1002 2003-03-14  James Troup  <james@nocrew.org>
1003
1004         * utils.py (send_mail): default filename to blank.
1005         * amber (make_advisory): adapt.
1006         * jennifer (acknowledge_new): likewise.
1007         * katie.py (Katie.close_bugs): likewise.
1008         (Katie.announce): likewise.
1009         (Katie.accept): likewise.
1010         (Katie.check_override): likewise.
1011         (Katie.do_reject): likewise.
1012         * kelly (do_reject): likewise.
1013         (stable_install): likewise.
1014         * lisa (do_bxa_notification): likewise.
1015         * lauren (reject): likewise.
1016         * melanie (main): likewise.
1017
1018         * rene (add_nbs): check any NBS packages against unstable to see
1019         if they haven't been removed already.
1020
1021         * templates/katie.rejected: remove paragraph about rejected files
1022         since they're o-rwx due to c-i-m and the uploader can't do
1023         anything about them and shania will take care of them anyway.
1024
1025         * madison (usage): update usage example to use comma seperation.
1026         * melanie (usage): likewise.
1027
1028         * utils.py (split_args): new function; splits command line
1029         arguments either by space or comma (whichever is used).  Also has
1030         optional-but-default DWIM spurious space detection to avoid
1031         'command -a i386, m68k' problems.
1032         (parse_args): use it.
1033         * melanie (main): likewise.
1034
1035         * melanie (main): force the admin to tell someone if we're not
1036         doing a rene-led removal (or closing a bug, which counts as
1037         telling someone).
1038
1039 2003-03-05  James Troup  <james@nocrew.org>
1040
1041         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1042         and python sections.
1043         * katie.conf-security (Section): likewise.
1044
1045         * add_constraints.sql: add uid and uid_id_seq to grants.
1046
1047         * lisa (determine_new): also warn about adding overrides to
1048         oldstable.
1049
1050         * madison (main): make the -S/--source-and-binary query obey
1051         -s/--suite restrictions.
1052
1053 2003-03-03  James Troup  <james@nocrew.org>
1054
1055         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1056         exists, warn the user that our output might seem strange.  (People
1057         get confused by multiple versions in a suite which happens
1058         post-kelly but pre-jenna.)
1059
1060 2003-02-21  James Troup  <james@nocrew.org>
1061
1062         * kelly (main): we don't need to worry about StableRejector.
1063
1064         * melanie (main): sort versions with apt_pkg.VersionCompare()
1065         prior to output.
1066
1067         * lauren: new script to manually reject packages from
1068         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1069
1070 2003-02-20  James Troup  <james@nocrew.org>
1071
1072         * kelly (init): remove unused -m/--manual-reject argument.
1073
1074         * katie.py (Katie.force_reject): renamed from force_move to make
1075         it more explicit what this function does.
1076         (Katie.do_reject): update to match.
1077
1078         * utils.py (prefix_multi_line_string): add an optional argument
1079         include_blank_lines which defaults to 0.  If non-zero, blank lines
1080         will be includes in the output.
1081
1082         * katie.py (Katie.do_reject): don't add leading space to each line
1083         of the reject message.  Include blank lines when showing the
1084         message to the user.
1085
1086 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1087
1088         * utils.py (fix_maintainer): replace pointless re.sub() with
1089         simple string format.
1090
1091 2003-02-11  James Troup  <james@nocrew.org>
1092
1093         * lisa (edit_overrides): only strip-to-one-char and upper-case
1094         non-numeric answers.  Fixes editing of items with indices >= 10;
1095         noticed by Randall.
1096         (edit_overrides): correct order of arguments to "not a valid
1097         index" error message.
1098
1099         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1100         remove_duplicate_versions(); thanks to aj for the initial
1101         diagnosis.
1102         (remove_duplicate_versions): correct how we return
1103         dominant_versions.
1104         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1105         a tuple rather than just a tuple.
1106
1107 2003-02-10  James Troup  <james@nocrew.org>
1108
1109         * emilie: new script - sync fingerprint and uid tables with a
1110         debian.org LDAP DB.
1111
1112         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1113         in 'fingerprint'.
1114
1115         * db_access.py (get_or_set_uid_id): new function.
1116
1117         * jennifer (main): update locking to a) not used FCNTL (deprecated
1118         in python >= 2.2) and b) acknowledge upstream's broken
1119         implementation of lockf (see Debian bug #74777), c) try to acquire
1120         the lock non-blocking.
1121         * kelly (main): likewise.
1122
1123         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1124
1125         * madison (main): only append the package to new_packages if it's
1126         not already in there; fixes -S/--source-and-binary for cases where
1127         the source builds a binary package of the same name.
1128
1129 2003-02-10  Anthony Towns  <ajt@debian.org>
1130
1131         * madison (main): use explicit JOIN syntax for
1132         -S/--source-and-binary queries to reduce the query's runtime from
1133         >10 seconds to negligible.
1134
1135 2003-02-08  James Troup  <james@nocrew.org>
1136
1137         * rene (main): in the NVIU output, append items to lists, not
1138         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1139         should be removed.
1140
1141 2003-02-07  James Troup  <james@nocrew.org>
1142
1143         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1144         Sources [aj].
1145
1146         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1147         O. Benham/Adam Heath/.
1148
1149         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1150         (Suite::Stable::Description): update for 3.0r1a.
1151         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1152
1153         * utils.py (gpgv_get_status_output): rename from
1154         get_status_output().
1155
1156         * neve (check_signature): use gpgv_get_status_output and Dict from
1157         utils().  Add missing newline to error message about duplicate tokens.
1158
1159         * saffron (per_arch_space_use): also print space used by source.
1160         (output_format): correct string.join() invocation.
1161
1162         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1163
1164 2003-02-04  James Troup  <james@nocrew.org>
1165
1166         * cron.buildd: correct generation of Packages/Sources and grep out
1167         non-US/non-free as well as non-free.
1168
1169 2003-02-03  Ryan Murray  <rmurray@debian.org>
1170
1171         * cron.buildd: generate quinn-diff output with full Packages/Sources
1172           files to get out-of-date vs. uncompiled right.
1173         * apt.conf.buildd: no longer generate uncompressed files, as they
1174           are generated in cron.buildd instead
1175         * add -i option to quinn-diff to ignore binary-all packages
1176         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1177           aren't in the packages file, the arch that uploaded them will build
1178           them anyways...
1179
1180 2003-01-30  James Troup  <james@nocrew.org>
1181
1182         * rene (main): only print suggested melanie command when there's
1183         some NBS to remove.
1184
1185 2003-01-30  Ryan Murray  <rmurray@debian.org>
1186
1187         * cron.buildd: fix incorrectly inverted lockfile check
1188
1189 2003-01-29  Ryan Murray  <rmurray@debian.org>
1190
1191         * cron.buildd: generate override.sid.all3.src
1192         * apt.conf.buildd: use generated override.sid.all3.src
1193
1194 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1195
1196         * utils.py (get_status_output): moved from jennifer.
1197         (Dict): likewise.
1198         (check_signature): likewise.
1199
1200         * jennifer (get_status_output): moved to utils.py.
1201         (Dict): likewise.
1202         (check_signature): likewise.
1203
1204         * utils.py (check_signature): add an argument to specifiy which
1205         function to call when an error was found.
1206         (check_signature): document this function better.
1207
1208         * jennifer (check_files): pass the reject function as an argument
1209         to utils.check_signature.
1210         (process_it): likewise.
1211
1212 2003-01-20  James Troup  <james@nocrew.org>
1213
1214         * rene (main): lots of changes to improve the output and make it
1215         more useful.
1216
1217         * katie.py (Katie.check_override): make the override messages
1218         clearer (hopefully).
1219
1220 2002-12-26  James Troup  <james@nocrew.org>
1221
1222         * ziyi (usage): document the ability to pass suite(s) as
1223         argument(s).
1224         (main): read apt.conf after checking for -h/--help.
1225
1226         * tea (main): take the check to run as an argument.
1227
1228         * saffron.R: R script to graph daily install runs.
1229
1230         * saffron: new script; various stats functions.
1231
1232         * rhona (main): connect to the database after checking for -h/--help.
1233
1234         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1235
1236         * melanie (main): sort versions with utils.arch_compare_sw().
1237
1238         * madison (usage): alphabetize order of options.
1239         * melanie (usage): likewise.
1240
1241         * kelly (usage): fix usage short description (we aren't dinstall).
1242
1243         * julia (usage): fix usage description and alphabetize order of
1244         options.
1245
1246         * jeri (usage): fix usage short description.
1247
1248         * jennifer (main): move --help and --version checks from here...
1249         (init): to here so that they work with an empty katie.conf.
1250         * kelly: likewise.
1251
1252         * alyson (usage): new function.
1253         (main): use it.
1254         * andrea: likewise.
1255         * ashley: likewise.
1256         * cindy: likewise.
1257         * denise: likewise.
1258         * helena: likewise.
1259         * neve: likewise.
1260         * rene: likewise.
1261         * rose: likewise.
1262         * tea: likewise.
1263
1264         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1265         entry that caused tasks to be omitted from 3.0r1.
1266
1267 2002-12-10  James Troup  <james@nocrew.org>
1268
1269         * jennifer (check_files): sanity check the Depends field to ensure
1270         it's non-empty if present since apt chokes on an empty one.
1271         Thanks to Ryan Murray for the idea.
1272
1273 2002-12-08  James Troup  <james@nocrew.org>
1274
1275         * katie.conf-security (Helena::Directories): new; include accepted
1276         in addition to byhand and new.
1277
1278         * helena (process_changes_files): use utils.arch_compare_sw().
1279         Justify things based on the longest [package, version,
1280         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1281         the commas in architecture and version lists for the same reason.
1282         (main): make directories we process configurable through
1283         Helena::Directories in the config file; if that doesn't exist
1284         default to the old hardcoded values (byhand & new).
1285
1286         * utils.py (arch_compare_sw): moved here from madison.
1287         * madison (main): adjust to compensate.
1288
1289 2002-12-06  James Troup  <james@nocrew.org>
1290
1291         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1292         right filename.
1293
1294 2002-12-05  James Troup  <james@nocrew.org>
1295
1296         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1297
1298 2002-11-28  Randall Donald  <rdonald@debian.org>
1299
1300         * fernanda.py (read_control): fix typo of 'Architecture'.
1301
1302 2002-11-26  James Troup  <james@nocrew.org>
1303
1304         * lisa (check_pkg): call less with '-R' so we see the colour from
1305         Randall's fernanda changes.
1306
1307         * neve (process_sources): if Directory points to a legacy location
1308         but the .dsc isn't there; assume it's broken and look in the pool.
1309         (update_section): new, borroed from alyson.
1310         (do_da_do_da): use it.
1311         (process_packages): add suite_it to the cache key used for
1312         arch_all_cache since otherwise we only add a package to the first
1313         suite it's in and ignore any subsequent ones.
1314
1315         * katie.conf-non-US (Location): fixed to reflect reality (all
1316         suites, except old-proposed-updates (which is legacy-mixed)) are
1317         pool.
1318
1319         * utils.py (try_with_debug): wrapper for print_exc().
1320         * jenna (main): use it.
1321         * neve (main): likewise.
1322
1323 2002-11-25  Randall Donald  <rdonald@debian.org>
1324
1325         * fernanda.py (main): added -R to less command line for raw control
1326         character support to print colours
1327         (check_deb): Instead of running dpkg -I on deb file, call
1328         output_deb_info, the new colourized control reporter.
1329         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1330         of printing out each .dsc line.
1331         (output_deb_info): new function. Outputs each key/value pair from
1332         read_control except in special cases where we highlight section,
1333         maintainer, architecture, depends and recommends.
1334         (create_depends_string): new function. Takes Depends tree and looks
1335         up it's compontent via projectb db, colourizes and constructs a
1336         depends string in original order.
1337         (read_dsc): new function. reads and parses .dsc info via
1338         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1339         colourized.
1340         (read_control): new function. reads and parses control info via
1341         apt_pkg. Depends and Recommends are split in to list structures,
1342         Section and Architecture are colourized. Maintainer is colourized
1343         if it has a localhost.localdomain address.
1344         (split_depends): new function. Creates a list of lists of
1345         dictionaries of depends (package,version relation). Top list is
1346         colected from comma delimited items. Sub lists are | delimited.
1347         (get_comma_list): new function. splits string input among commas
1348         (get_or_list): new function. splits string input among | delimiters
1349         (get_depends_parts): new function. Creates dictionary of package name
1350         and version relation from dependancy string.
1351         Colours for section and depends are per component. Unfound depends
1352         are in bold. Lookups using version info is not supported yet.
1353
1354 2002-11-22  James Troup  <james@nocrew.org>
1355
1356         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1357         'udmsearch'.
1358
1359         * amber (make_advisory): string.atol() is deprecated and hasn't
1360         been ported to string methods.  Use long() instead.
1361
1362         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1363         creating the database since we'll fail badly if it's created with
1364         e.g. UNICODE encoding.
1365
1366         * rose (main): AptCnf is a global.
1367
1368         * neve (get_location_path): new function determines the location
1369         from the the first (left-most) directory of a Filename/Directory.
1370         (process_sources): don't need 'location' anymore.  Use
1371         utils.warn().  Use the Directory: field for each package to find
1372         the .dsc.  Use get_location_path() to determine the location for
1373         each .dsc.
1374         (process_packages): do't need 'location' anymore.  Use
1375         utils.warn().  Use get_location_path().
1376         (do_sources): don't need 'location', drop 'prefix' in favour of
1377         being told the full path to the Sources file, like
1378         process_packages().
1379         (do_da_do_da): main() renamed, so that main can call us in a
1380         try/except.  Adapt for the changes in do_sources() and
1381         process_packages() above.  Assume Sources and Packages file are in
1382         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1383
1384         * katie.conf-security (Location): fixed to reflect reality (all
1385         suites are pool, not legacy).
1386
1387         * utils.py (print_exc): more useful (i.e. much more verbose)
1388         traceback; a recipe from the Python cookbook.
1389         * jenna (main): use it.
1390         * neve (main): likewise.
1391
1392 2002-11-19  James Troup  <james@nocrew.org>
1393
1394         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1395         handling which was FUBAR for multi-suite uploads.  Now we just
1396         make a dictionary of destinations to copy to and iterate over
1397         those.
1398
1399         * fernanda.py (check_deb): run linda as well as lintian.
1400
1401 2002-10-21  James Troup  <james@nocrew.org>
1402
1403         * melanie (main): change X-Melanie to X-Katie and prefix it with
1404         'melanie '.
1405
1406         * lisa (main): prefix X-Katie with 'lisa '.
1407
1408         * jennifer (clean_holding): fix typo in string method changes;
1409         s/file.find(file/file.find(/.
1410
1411         * cron.daily: invoke helena and send the report to ftpmaster.
1412         * cron.daily-non-US: likewise.
1413
1414 2002-10-16  James Troup  <james@nocrew.org>
1415
1416         * kelly (check): call reject() with a blank prefix when parsing
1417         the return of check_dsc_against_db() since it does its own
1418         prefix-ing.
1419
1420         * rose: new script; only handles directory creation initally.
1421
1422         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1423         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1424
1425 2002-10-06  James Troup  <james@nocrew.org>
1426
1427         * rene (main): remove bogus argument handling.
1428
1429         * kelly: katie, renamed.
1430         * cron.daily: adapt for katie being renamed to kelly.
1431         * cron.daily-non-US: likewise.
1432         * amber (main): likewise.
1433
1434         * Changes for python 2.1.
1435
1436         * kelly: time.strftime no longer requires a second argument of
1437         "time.localtime(time.time())".
1438         * logging.py: likewise.
1439         * rhona: likewise.
1440         * shania (init): likewise.
1441
1442         * amber: use augmented assignment.
1443         * catherine (poolize): likewise.
1444         * claire.py (fix_component_section): likewise.
1445         * halle (check_changes): likewise.
1446         * helena: likewise.
1447         * jenna: likewise.
1448         * jennifer: likewise.
1449         * jeri: likewise.
1450         * katie.py: likewise.
1451         * kelly: likewise.
1452         * lisa: likewise.
1453         * madison (main): likewise.
1454         * melanie: likewise.
1455         * natalie: likewise.
1456         * neve: likewise.
1457         * rhona: likewise.
1458         * tea: likewise.
1459         * utils.py: likewise.
1460         * ziyi: likewise.
1461
1462         * amber: use .endswith.
1463         * fernanda.py: likewise.
1464         * halle (main): likewise.
1465         * jennifer: likewise.
1466         * jeri: likewise.
1467         * katie.py: likewise.
1468         * kelly: likewise.
1469         * lisa: likewise.
1470         * neve: likewise.
1471         * shania (main): likewise.
1472         * utils.py: likewise.
1473
1474         * alyson: use string methods.
1475         * amber: likewise.
1476         * andrea: likewise.
1477         * ashley: likewise.
1478         * catherine: likewise.
1479         * charisma: likewise.
1480         * claire.py: likewise.
1481         * db_access.py: likewise.
1482         * denise: likewise.
1483         * halle: likewise.
1484         * heidi: likewise.
1485         * helena: likewise.
1486         * jenna: likewise.
1487         * jennifer: likewise.
1488         * jeri: likewise.
1489         * julia: likewise.
1490         * katie.py: likewise.
1491         * kelly: likewise.
1492         * lisa: likewise.
1493         * logging.py: likewise.
1494         * madison: likewise.
1495         * melanie: likewise.
1496         * natalie: likewise.
1497         * neve: likewise.
1498         * rene: likewise.
1499         * tea: likewise.
1500         * utils.py: likewise.
1501         * ziyi: likewise.
1502
1503 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1504
1505         * utils.py (parse_changes): use <string>.startswith() rather than
1506         string.find().
1507
1508 2002-08-27  Anthony Towns  <ajt@debian.org>
1509
1510         * katie.py (in_override_p): when searching for a source override,
1511         and the dsc query misses, search for both udeb and deb overrides
1512         as well. Should fix the UNACCEPT issues with udebs.
1513
1514 2002-08-24  James Troup  <james@nocrew.org>
1515
1516         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1517         source+binary package finding code which was causing severe
1518         performance degradation with postgres 7.2.
1519
1520 2002-08-14  James Troup  <james@nocrew.org>
1521
1522         * julia (main): use the pwd.getpwall() to get system user info
1523         rather than trying to read a password file.  Add a -n/--no-action
1524         option.
1525
1526         * cron.hourly: julia no longer takes any arguments.
1527         * cron.hourly-non-US: likewise.
1528
1529 2002-08-07  James Troup  <james@nocrew.org>
1530
1531         * katie (install): handle multi-suite uploads when CopyChanges
1532         and/or CopyKatie are in use, ensuring we only copy stuff once.
1533
1534 2002-08-01  Ryan Murray  <rmurray@debian.org>
1535
1536         * wanna-build/trigger.daily: initial commit, with locking
1537         * cron.buildd: add locking against daily run
1538
1539 2002-07-30  James Troup  <james@nocrew.org>
1540
1541         * melanie (main): readd creation of suite_ids_list so melanie is
1542         remotely useful again.
1543
1544         * katie.conf: adopt for woody release; diable
1545         StableDislocationSupport, add oldstable, adjust other suites and
1546         mappings, fix up location.
1547         * katie.conf-non-US: likewise.
1548         * katie.conf-security: likewise.
1549
1550         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1551         stable.
1552         * apt.conf.stable-non-US: likewise.
1553
1554         * apt.conf-security: adapt for woody release; adding oldstable,
1555         oldstable, adjust stable and testing.
1556         * cron.daily-security: likewise.
1557         * cron.buildd-security: likewise.
1558
1559         * apt.conf: adapt for woody release; rename woody-proposed-updates
1560         to testing-proposed-updates and proposed-updates to
1561         old-proposed-updates.
1562         * apt.conf-non-US: likewise.
1563
1564         * vars-non-US (copyoverrides): add sarge.
1565         * vars (copyoverrides): likewise.
1566
1567         * vars-security (suites): add oldstable.
1568
1569 2002-07-22  Ryan Murray  <rmurray@debian.org>
1570
1571         * apt.conf.security-buildd: use suite codenames instead of
1572           distnames.
1573
1574 2002-07-16  James Troup  <james@nocrew.org>
1575
1576         * denise (main): fix filenames for testing override files.
1577
1578 2002-07-14  James Troup  <james@nocrew.org>
1579
1580         * jennifer (process_it): call check_md5sums later so we can check
1581         files in the .dsc too
1582         (check_md5sums): check files in the .dsc too.  Check both md5sum
1583         and size.
1584
1585         * melanie (main): use parse_args() and join_with_commas_and() from
1586         utils.  If there's nothing to do, say so and exit, don't ask for
1587         confirmation etc.
1588
1589         * amber (join_with_commas_and): moved from here to ...
1590         * utils.py (join_with_commas_and): here.
1591
1592 2002-07-13  James Troup  <james@nocrew.org>
1593
1594         * madison (main): use parse_args() from utils.  Support
1595         -c/--component.
1596
1597         * jenna (parse_args): moved from here to ...
1598         * utils.py (parse_args): here.
1599
1600         * katie.conf (Architectures): minor corrections to the description
1601         for arm, mips and mipsel.
1602         * katie.conf-non-US (Architectures): likewise.
1603         * katie.conf-security (Architectures): likewise.
1604
1605         * cron.daily-security: use natalie's new -a/--add functionality to
1606         flesh out the security overrides.
1607
1608 2002-07-12  James Troup  <james@nocrew.org>
1609
1610         * cron.buildd (ARCHS): add arm.
1611
1612         * katie.conf: 2.2r7 was released.
1613         * katie.conf-non-US: likewise.
1614
1615         * utils.py (parse_changes): handle a multi-line field with no
1616         starting line.
1617
1618 2002-06-25  James Troup  <james@nocrew.org>
1619
1620         * templates/amber.advisory (To): add missing email address since
1621         __WHOAMI__ is only a name.
1622
1623         * katie.conf-security (Melane::LogFile): correct to go somewhere
1624         katie has write access to.
1625         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1626         Testing.
1627
1628         * natalie: add support for -a/-add which adds packages only
1629         (ignoring changes and deletions).
1630
1631         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1632         use FindB, not get.
1633
1634 2002-06-22  James Troup  <james@nocrew.org>
1635
1636         * jennifer (check_files): validate the package name and version
1637         field.  If 'Package', 'Version' or 'Architecture' are missing,
1638         don't try any further checks.
1639         (check_dsc): likewise.
1640
1641         * utils.py (re_taint_free): add '~' as a valid character.
1642
1643 2002-06-20  Anthony Towns  <ajt@debian.org>
1644
1645         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1646
1647 2002-06-09  James Troup  <james@nocrew.org>
1648
1649         * jennifer (check_files): reduce useless code.
1650
1651         * cron.daily-security: run symlinks -dr on $ftpdir.
1652
1653         * vars-security (ftpdir): add.
1654
1655 2002-06-08  James Troup  <james@nocrew.org>
1656
1657         * neve (update_override_type): transaction is handled higher up in
1658         main().
1659         (update_priority): likewise.
1660         (process_sources): remove code that makes testing a duplicate of
1661         stable.
1662         (process_packages): likewise.
1663
1664         * templates/amber.advisory: add missing mail headers.
1665
1666         * cron.daily-security: also call apt-ftparchive clean for
1667         apt.conf.buildd-security.
1668         * cron.weekly: likewise.
1669
1670         * amber (do_upload): write out a list of source packages (and
1671         their version) uploaded for testing.
1672         (make_advisory): add more Subst mappings for the mail headers.
1673         (spawn): check for suspicious characters in the command and abort
1674         if their found.
1675
1676 2002-06-07  James Troup  <james@nocrew.org>
1677
1678         * ziyi (main): remove the 'nonus'/'security' hacks and use
1679         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1680         the lower level Release files, even if they don't exist.  fubar
1681         out if we can't open a lower level Release file for writing.
1682
1683         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1684         ziyi.
1685         * katie.conf-security (Dinstall): likewise.
1686
1687         * amber (do_upload): renamed from get_file_list().  Determine the
1688         upload host from the original component.
1689         (init): Add a -n/--no-action option.  Fix how we get changes_files
1690         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1691         sys.argv).  Add an Options global.
1692         (make_advisory): support -n/--no-action.
1693         (spawn): likewise.
1694         (main): likewise.
1695         (usage): document -n/--no-action.
1696
1697         * cron.buildd-security: fix path to Packages-arch-specific in
1698         quinn-diff invocation.
1699
1700         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1701         to proper suite names (i.e. stable, testing) rather than codenames
1702         (potato, woody).
1703         (Dinstall::DefaultSuite): likewise.
1704         (Suite): likewise.
1705         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1706         * vars-security (suites): likewise.
1707         * apt.conf-security: likewise.
1708
1709         * katie.conf-security (Component): add "updates/" prefix.
1710         (Suite::*::Components): likewise.
1711         (ComponentMappings): new; map all {ftp-master,non-US} components
1712         -> updates/<foo>.
1713
1714         * katie.conf-security (Natalie): removed; the options have
1715         defaults and ComponentPosition is used by alyson which doesn't
1716         work on security.d.o.
1717         (Amber): replace UploadHost and UploadDir with ComponentMappings
1718         which is a mapping of components -> URI.
1719         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1720         (SuiteMappings): use "silent-map" in preference to "map".
1721
1722         * cron.unchecked-security: fix call to cron.buildd-security.
1723
1724         * cron.daily-security: map local suite (stable) -> override suite
1725         (potato) when fixing overrides.  Correct component in natalie call
1726         to take into account "updates/" prefix.  Fix cut'n'waste in
1727         override.$dist.all3 generation, the old files weren't being
1728         removed, so they were endlessly growing.
1729
1730         * neve (main): don't use .Find for the CodeName since we require
1731         it.  Location::*::Suites is a ValueList.
1732         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
1733         out on expired keys, just warn.
1734         (update_override_type): new function; lifted from alyson.
1735         (update_priority): likewise.
1736         (main): use update_{override_type,priority}().
1737
1738         * jennifer (check_distributions): remove redunant test for
1739         SuiteMappings; ValueList("does-not-exist") returns [] which is
1740         fine.  Add support for a "silent-map" type which doesn't warn
1741         about the mapping to the user.
1742         (check_files): add support for ComponentMappings, similar to
1743         SuiteMappings, but there's no type, just a source and a
1744         destination and the original component is stored in "original
1745         component".
1746         * katie.py (Katie.dump_vars): add "original component" as an
1747         optionsal files[file] dump variable.
1748
1749         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
1750         query.  Add support for section-less legacy locations like current
1751         security.debian.org through YetAnotherConfigBoolean
1752         'LegacyStableHasNoSections'.
1753         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
1754
1755         * utils.py (real_arch): moved here from ziyi.
1756         * ziyi (real_arch): moved to utils.py.
1757         * ziyi (main): likewise.
1758
1759         * claire.py (find_dislocated_stable): use real_arch() with
1760         filter() to strip out source and all.
1761         * neve (main): likewise.
1762         * rene (main): likewise.
1763         * jeri (parse_packages): likewise.
1764
1765 2002-06-06  James Troup  <james@nocrew.org>
1766
1767         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
1768         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
1769         doing.
1770
1771 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1772
1773         * jeri (check_joey): check if the line contains two elements
1774         before accessing the second.  Also, strip trailing spaces as well
1775         as the newline.
1776         * halle (check_joey): likewise.
1777
1778 2002-06-05  James Troup  <james@nocrew.org>
1779
1780         * cron.unchecked-security: new file; like cron.unchecked but if
1781         there's nothing to do exit so we don't call cron.buildd-security.
1782
1783         * apt.conf.buildd-security: new file.
1784
1785         * vars (archs): alphabetize.
1786         * vars-non-US (archs): likewise.
1787
1788         * vars-security: add unchecked.
1789
1790         * madison (main): reduce rather bizarrely verbose and purposeless
1791         code to print arches to a simple string.join.
1792
1793         * katie.conf (Suites::Unstable): add UdebComponents, a new
1794         valuelist of suites, used by jenna to flesh out the list of
1795         <suite>_main-debian-installer-binary-<arch>.list files generated.
1796         (Dinstall): add StableDislocationSupport, a new boolean used by
1797         jenna to enable or disable stable dislocation support
1798         (i.e. claire), as true.
1799
1800         * katie.conf (Dinstall): add StableDislocationSupport, a new
1801         boolean used by jenna to enable or disable stable dislocation
1802         support (i.e. claire), as true.
1803         * katie.conf-non-US: likewise.
1804         * katie.conf-security: likewise.
1805
1806         * cron.daily-security: generate .all3 overrides for the buildd
1807         support.  Freshen a local copy of Packages-arch-specific from
1808         buildd.debian.org.
1809
1810         * claire.py (find_dislocated_stable): disable the support for
1811         files in legacy-mixed locations since none of the Debian archives
1812         have any anymore.
1813
1814         * helena: new script; produces a report on NEW and BYHAND
1815         packages.
1816
1817         * jenna: rewritten from scratch to fix speed problems.  Run time
1818         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
1819         minutes, 105 seconds are the monster query and 70 odd seconds is
1820         claire.
1821
1822         * apt.conf.buildd (Default): remove MaxContentsChange as it's
1823         irrelevant.
1824
1825 2002-06-05  Ryan Murray  <rmurray@debian.org>
1826
1827         * cron.buildd-security: new file.
1828
1829 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
1830
1831         * denise (list): take a file argument and use it.
1832         (main): don't abuse sys.stdout, just write to the file.
1833
1834         * claire.py (usage): Fix misspelling.
1835         (clean_symlink): Simplify.
1836         (find_dislocated_stable): Avoid unnecessary work.
1837
1838 2002-05-29  James Troup  <james@nocrew.org>
1839
1840         * cameron: removed; apt-ftparchive can simply walk the directory.
1841
1842 2002-05-26  Anthony Towns  <ajt@debian.org>
1843
1844         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
1845         for the autobuilders.
1846
1847 2002-05-24  Ryan Murray  <rmurray@debian.org>
1848
1849         * cron.buildd: update override files before running apt-ftparchive
1850
1851 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1852
1853         * amber (main): remove extra space in prompt.
1854
1855         * utils.py (validate_changes_file_arg): use original filename in
1856         error messages.
1857
1858         * jeri (check_joey): close file after use.
1859         (parse_packages): likewise.
1860         (main): setup debug option properly.
1861
1862         * melanie (main): remove unused packages variable and simplify the
1863         code to build up con_packages by using repr().
1864
1865 2002-05-23  James Troup  <james@nocrew.org>
1866
1867         * lisa (recheck): when we reject, also return 0 so the package is
1868         skipped.
1869         (sg_compare): fix note sorting.
1870         (recheck): remove the .katie file after rejection.
1871
1872         * katie.py (Katie.accept): accepted auto-build support take 3;
1873         this time adding support for security.  Security needs a) non-pool
1874         files copied rather than symlinked since accepted is readable only
1875         by katie/security and www-data needs to be able to see the files,
1876         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
1877         AcceptedAutoBuildSuites and is a ValueList containing the suites.
1878         SecurityAcceptedAutoBuild is a new boolean which controls whether
1879         or not normal or security style is used.  The unstable_accepted
1880         table was renamed to accepted_autobuild and a suite column added.
1881         Also fix a bug noticed by Ryan where an existent orig.tar.gz
1882         didn't have it's last_used/in_accepted flags correctly updated.
1883         * katie (install): likewise.
1884         * rhona (clean_accepted_autobuild): likewise.
1885
1886 2002-05-22  James Troup  <james@nocrew.org>
1887
1888         * lisa (sort_changes): new function; sorts changes properly.
1889         Finally.
1890         (sg_compare): new function; helper for sort_changes().  Sorts by
1891         have note and time of oldest upload.
1892         (indiv_sg_compare): new function; helper for sort_changes().
1893         Sorts by source version, have source and filename.
1894         (main): use sort_changes().
1895         (changes_compare): obsoleted; removed.
1896
1897 2002-05-20  James Troup  <james@nocrew.org>
1898
1899         * rhona (clean_accepted_autobuild): don't die if a file we're
1900         trying to remove doesn't exist.  Makes rhona more friendly to
1901         katie/katie.py crashes/bugs without any undue cost.
1902
1903 2002-05-19  James Troup  <james@nocrew.org>
1904
1905         * lisa (main): if sorting a large number of changes give some
1906         feedback.
1907         (recheck): new function, run the same checks (modulo NEW,
1908         obviously) as katie does, if they fail do the standard
1909         reject/skip/quit dance.
1910         (do_pkg): use it.
1911
1912         * katie (install): don't try to unlink the symlink in the
1913         AcceptedAutoBuild support if the destination is not a symlink (or
1914         doesn't exist).  Avoids unnecessary bombs on previous partial
1915         accepts and will still bomb hard if the file exists and isn't a
1916         symlink.
1917
1918         * utils.py: blah, commands _is_ used when the mail stuff isn't
1919         commented out like it is in my test environment.
1920
1921         * lisa (changes_compare): "has note" overrides everything else.
1922         Use .katie files rather than running parse_changes, faster and
1923         allows "has note" to work.  Correct version compare, it was
1924         reversed.  Ctime check should only kick in if the source packages
1925         are not the same.
1926         (print_new): print out and return any note.  Rename 'ret_code' to
1927         'broken'.
1928         (edit_new): renamed from spawn_editor.  Don't leak file
1929         descriptors.  Clean up error message if editor fails.
1930         (edit_note): new function, allows one to edit notes.
1931         (do_new): add note support, editing and removing.
1932         (init): kill -s/--sort; with notes we always want to use our
1933         sorting method.
1934         (usage): likewise.
1935
1936         * katie.py (Katie.dump_vars): add "lisa note" as an optional
1937         changes field.
1938
1939         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
1940         it default to 0.  Adapt tests to assume it's boolean.
1941         * fernanda.py (check_changes): adjust call appropriately.
1942         * halle (check_changes): likewise.
1943         * jennifer (check_changes): likewise.
1944         * jeri (check_changes): likewise.
1945         * shania (flush_orphans): likewise.
1946
1947         * jennifer (check_dsc): pass is_a_dsc by name when calling
1948         build_file_list() for clarity.
1949         * shania (flush_orphans): likewise.
1950         * tea (check_missing_tar_gz_in_dsc): likewise.
1951
1952         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
1953         calling parse_changes() for clarity.
1954         * tea (check_dscs): likewise.
1955
1956         * utils.py (parse_changes): make dsc_whitespace_rules default to
1957         not true.
1958         * halle (check_changes): adjust call appropriately.
1959         * jennifer (check_changes): likewise.
1960         * jeri (check_changes): likewise.
1961         * lisa (changes_compare): likewise.
1962         * utils.py (changes_compare): likewise.
1963         * melanie (main): likewise.
1964         * shania (flush_orphans): likewise.
1965         * fernanda.py (check_changes): likewise.
1966
1967 2002-05-18  James Troup  <james@nocrew.org>
1968
1969         * katie.py (Katie.dump_vars): make the .katie file unreadable,
1970         it's not useful and by and large a duplication of information
1971         available in readable format in other files.
1972
1973 2002-05-16  Ryan Murray  <rmurray@debian.org>
1974
1975         * melanie: Dir::TemplatesDir -> Dir::Templates
1976
1977 2002-05-15  Ryan Murray  <rmurray@debian.org>
1978
1979         * cameron: correct the use of os.path.join
1980
1981 2002-05-15  Anthony Towns  <ajt@debian.org>
1982
1983         * ziyi: Update to match the new format for Architectures/Components
1984         in katie.conf.
1985
1986 2002-05-14  James Troup  <james@nocrew.org>
1987
1988         * amber: new script; 'installer' wrapper script for the security
1989         team.
1990
1991         * katie.py (Katie.announce): remove unused 'dsc' local
1992         variable. (pychecker)
1993
1994         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
1995
1996         * neve: don't import sys, we don't use it. (pychecker)
1997         (check_signature): fix return type mismatch. (pychecker)
1998
1999         * utils.py: don't import commands, we don't use it.  (pychecker)
2000
2001         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2002
2003         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2004         obsoleted by the change to "othercomponents" handling in jennifer
2005         detailed below.
2006         (Katie.cross_suite_version_check): new function; implements
2007         cross-suite version checking rules specified in the conf file
2008         while also enforcing the standard "must be newer than target
2009         suite" rule.
2010         (Katie.check_binary_against_db): renamed, since it's invoked once
2011         per-binary, "binaries" was inaccurate.  Use
2012         cross_suite_version_check() and don't bother with the "oldfiles"
2013         rubbish as jennifer works out "othercomponents" herself now.
2014         (Katie.check_source_against_db): use cross_suite_version_check().
2015
2016         * katie (check): the version and file overwrite checks
2017         (check_{binary,source,dsc}_against_db) are not per-suite.
2018
2019         * jennifer (check_files): less duplication of
2020         'control.Find("Architecture", "")' by putting it in a local
2021         variable.
2022         (check_files): call check_binary_against_db higher up since it's
2023         not a per-suite check.
2024         (check_files): get "othercomponents" directly rather than having
2025         check_binary_against_db do it for us.
2026
2027         * heidi (main): 'if x:', not 'if x != []:'.
2028         * katie.py (Katie.in_override_p): likewise.
2029         (Katie.check_dsc_against_db): likewise.
2030         * natalie (main): likewise.
2031         * rene (main): likewise.
2032         * ziyi (real_arch): likewise.
2033
2034         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2035         and OverrideType are now value lists, not lists.
2036         * andrea (main): likewise.
2037         * cindy (main): likewise.
2038         * claire.py (find_dislocated_stable): likewise.
2039         * denise (main): likewise.
2040         * jenna (main): likewise.
2041         * jennifer (check_distributions): likewise.
2042         (check_files): likewise.
2043         (check_urgency): likewise (Urgency::Valid).
2044         * jeri (parse_packages): likewise.
2045         * neve (main): likewise (and Location::%s::Suites).
2046         * rene (main): likewise.
2047
2048 2002-05-13  James Troup  <james@nocrew.org>
2049
2050         * katie.py (Katie.check_source_against_db): correct case of reject
2051         message to be consistent with binary checks.
2052
2053         * jennifer (get_status_output): don't leak 2 file descriptors per
2054         invocation.
2055         (check_signature): add missing '\n' to "duplicate status token"
2056         error message.
2057
2058 2002-05-09  James Troup  <james@nocrew.org>
2059
2060         * utils.py (validate_changes_file_arg): new function; validates an
2061         argument which should be a .changes file.
2062         * ashley (main): use it.
2063         * lisa (main): likewise.
2064
2065         * katie.py (Katie.check_dsc_against_db): since there can be more
2066         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2067         entry still exists in files.
2068
2069         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2070         files, since check_dsc_against_db() deletes the .orig.tar.gz
2071         entry.
2072
2073         * cameron: cleanups.
2074
2075         * utils.py (changes_compare): change sort order so that source
2076         name and source version trump 'have source'; this should fix
2077         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2078         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2079         by Ryan.
2080
2081         * lisa (main): allow the arguments to be .katie files too.
2082
2083 2002-05-07  Ryan Murray  <rmurray@debian.org>
2084
2085         * cron.buildd: add s390 to arch list again
2086
2087 2002-05-05  Ryan Murray  <rmurray@debian.org>
2088
2089         * cron.buildd: new script, update w-b database from unstable_accepted
2090         table
2091         * cameron: new script, take list in unstable_accepted and write out
2092         a file list for apt-ftparchive
2093         * apt.conf.buildd: new apt configuration for Packages/Sources for
2094         unstable_accepted
2095         * vars: add s390 to arch list.
2096
2097 2002-05-03  James Troup  <james@nocrew.org>
2098
2099         * neve (main): don't hard code the calling user as that doesn't
2100         work with modern postgres installs.  Fix psql invocation for
2101         init_pool.sql (database name required).  Dont' hard code the
2102         database name.
2103         (process_sources): add support for fingerprint and install_date.
2104         (process_packages): add support for fingerprint.
2105         (do_sources): pass in the directory, fingerprint support needs it.
2106         (get_status_output): borrowed from jennifer.
2107         (reject): likewise.
2108         (check_signature): likewise.
2109
2110         * katie (install): only try to log urgencies if Urgency_Logger is
2111         defined.
2112         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2113         defined; only close Urgency_Logger if it's defined.
2114
2115         * catherine (poolize): adapt for Dir rationalization.
2116         * claire.py (find_dislocated_stable): likewise.
2117         * denise (main): likewise.
2118         * halle (check_joey): likewise.
2119         * jenna: likewise.
2120         * jennifer: likewise.
2121         * jeri: likewise.
2122         * katie.py: likewise.
2123         * katie: likewise.
2124         * lisa (do_bxa_notification): likewise.
2125         * logging.py (Logger.__init__): likewise
2126         * rene (main): likewise.
2127         * rhona (clean): likewise.
2128         * shania (init): likewise.
2129         * tea: likewise.
2130         * ziyi: likewise.
2131
2132         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2133         FindB, not FindI.
2134
2135         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2136         boolean, use FindB, not get.
2137
2138         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2139         .orig.tar.gz's which are an exact (size/md5sum) match.
2140
2141         * ashley (main): really allow *.katie files as arguments too;
2142         noticed by aj.
2143
2144         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2145
2146 2002-05-03  Anthony Towns  <ajt@debian.org>
2147
2148         * ziyi: support for security.
2149
2150 2002-05-02  James Troup  <james@nocrew.org>
2151
2152         * jennifer (accept): call Katie.check_override() unconditional as
2153         no-mail check moved into that function.
2154         (do_byhand): likewise.
2155
2156         * katie.py (Katie.check_override): don't do anything if we're a)
2157         not sending mail or b) the override disparity checks have been
2158         disbled via Dinstall::OverrideDisparityCheck.
2159
2160         * jennifer (check_files): don't hard code Unstable as the suite
2161         used to check for architecture validity; use
2162         Dinstall::DefaultSuite instead, if it exists.
2163         (accept): conditionalize
2164
2165         * katie.py (Katie.update_subst): support global maintainer
2166         override with Dinstall::OverrideMaintainer.
2167
2168         * jennifer (check_distributions): new function, Distribution
2169         validation and mapping.  Uses new SuiteMappings variable from
2170         config file to abstract suite mappings.
2171         (check_changes): call it.
2172
2173         * natalie: renamed; nothing imports or likely will for some time.
2174
2175         * denise (main): remove unused natalie import and init().
2176
2177         * natalie.py (init): removed.
2178         (main): initalize here instead and don't hardcode the database
2179         name.
2180
2181 2002-04-30  James Troup  <james@nocrew.org>
2182
2183         * katie.py (Katie.close_bugs): new function, split out from
2184         announce().
2185         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2186         true.
2187         (Katie.close_bugs): new function, split out
2188         (Katie.close_bugs): return immediately if there are no bugs to
2189         close.
2190
2191         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2192         * katie (do_reject): likewise.
2193         (stable_install): likewise.
2194         * katie.py (Katie.announce): likewise.
2195         (Katie.accept): likewise.
2196         (Katie.check_override): likewise.
2197         (Katie.do_reject): likewise.
2198         * lisa (do_bxa_notification): likewise.
2199         * melanie (main): likewise.
2200
2201         * utils.py (TemplateSubst): change second argument to be a
2202         filename rather than a template since every caller opened a file
2203         on the fly which was ugly and leaked file descriptor.
2204
2205 2002-04-29  James Troup  <james@nocrew.org>
2206
2207         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2208         <hertzog@debian.org> to send 'accepted' announce mails to the
2209         PTS. [#128140]
2210
2211 2002-04-24  James Troup  <james@nocrew.org>
2212
2213         * init_pool.sql (unstable_accepted): add two new fields to
2214         unstable_accepted; in_accepted is a boolean indicating whether or
2215         not the file is in accepted and last_used is a timestamp used by
2216         rhona to determine when to remove symlinks for installed packages.
2217
2218         * katie.py (Katie.accept): auto-build support take 2.  Create
2219         symlinks for all files into a seperate directory.  Add files to
2220         unstable_accepted as paths to the new directory; mark them as
2221         being in accepted for cameron.  Properly conditionalize it on a
2222         configuration variable.
2223
2224         * katie (install): likewise.  Update symlinks to point into the
2225         pool; mark the files for later deletion by rhona and mark them as
2226         not being in accepted for cameron.
2227
2228         * rhona (clean_accepted_autobuild): new function.
2229
2230 2002-04-22  James Troup  <james@nocrew.org>
2231
2232         * jennifer (check_files): handle db_access.get_location_id()
2233         returning -1 properly/better.
2234
2235         * rhona (clean_fingerprints): new function.
2236
2237 2002-04-21  James Troup  <james@nocrew.org>
2238
2239         * utils.py (touch_file): unused; remove.
2240         (plural): likewise.
2241
2242         * jennifer (check_files): close file descriptor used to get the
2243         control file.
2244         (check_md5sums): likewise.
2245         (callback): likewise.
2246
2247         * katie.py (Katie.do_reject): handle manual rejects much better;
2248         call the editor first and get confirmation from the user before
2249         proceeding.
2250
2251         * jennifer (check_signature): prefix_multi_line_string() moved to
2252         utils.
2253
2254         * utils.py (prefix_multi_line_string): moved here from jennifer.
2255
2256 2002-04-20  James Troup  <james@nocrew.org>
2257
2258         * lisa (main): handle non-existent files.
2259
2260         * ashley (main): allow *.katie files as arguments too.
2261
2262 2002-04-19  James Troup  <james@nocrew.org>
2263
2264         * katie.py (Katie.accept): add stuff to help auto-building from
2265         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2266         in the pool), create a symlink to it in the accepted directory and
2267         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2268
2269         * katie (install): undo the "auto-building from accepted" stuff
2270         (i.e. remove the .orig.tar.gz symlink and remove the files from
2271         unstable_accepted table).
2272
2273 2002-04-16  James Troup  <james@nocrew.org>
2274
2275         * jennifer (upload_too_new): fix typo which was causing all
2276         timestamp comparisons to be against the .changes file.  Also move
2277         back to the original directory so we do the comparisons against
2278         accurate timestamps.
2279
2280         * tea (check_missing_tar_gz_in_dsc): new function.
2281
2282         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2283         file mentioned in the .dsc.
2284
2285         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2286         way mails reach debian-{devel-,}changes@l.d.o.
2287
2288 2002-04-02  Ryan Murray  <rmurray@debian.org>
2289
2290         * cron.daily: run shania after rhona
2291         * cron.daily-non-US: likewise.
2292
2293 2002-04-01  James Troup  <james@nocrew.org>
2294
2295         * katie: re-add proposed-updates/stable install support.
2296
2297         * katie.py (Katie.dump_vars): add changes["changes"] as an
2298         optional field; should be mandatory later.
2299
2300 2002-03-31  James Troup  <james@nocrew.org>
2301
2302         * katie (install): support a Suite::<foo>::CopyKatie similar to
2303         CopyChanges.  Done seperately because .katie files don't need to
2304         be mirrored and will probably be copied to another directory as a
2305         result.
2306
2307         * halle (main): add missing debug to options.
2308
2309 2002-03-29  James Troup  <james@nocrew.org>
2310
2311         * madison (main): add a -r/--regex option.
2312
2313 2002-03-26  James Troup  <james@nocrew.org>
2314
2315         * lisa: don't trample on changes["distribution"]; make a copy of
2316         it as changes["suite"] instead and use that.
2317
2318 2002-03-16  Anthony Towns  <ajt@debian.org>
2319
2320         * templates/lisa.bxa_notification: Fix some grammatical errors.
2321         Encourage contact via bxa@ftp-master email address.
2322
2323 2002-03-15  James Troup  <james@nocrew.org>
2324
2325         * jennifer (check_timestamps): remove bogus raise in except.
2326
2327 2002-03-15  Anthony Towns  <ajt@debian.org>
2328
2329         * cron.monthly: rotate mail/archive/bxamail as well as
2330         mail/archive/mail. This is for a complete archive of
2331         correspondence with the BXA.
2332
2333 2002-03-14  Anthony Towns  <ajt@debian.org>
2334
2335         * crypto-in-main changes.
2336
2337         * utils.py (move, copy): add an optional perms= parameter to let you
2338         set the resulting permissions of the moved/copied file
2339         * katie.py (force_move): rejected/morgued files should be unreadable
2340         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2341         should be unreadable.
2342
2343 2002-03-07  Ryan Murray  <rmurray@debian.org>
2344
2345         * katie (install): check for existance of "files id" key as well as
2346         it being set to a valid value.
2347         * katie (install): check for existense and valid value for location
2348         id as well
2349
2350 2002-03-05  Ryan Murray  <rmurray@debian.org>
2351
2352         * katie.py (do_reject): reread the reason file after editing it.
2353
2354 2002-02-25  James Troup  <james@nocrew.org>
2355
2356         * jennifer (check_changes): don't enforce sanity in .changes file
2357         names since it doesn't seem to be possible; pcmica-cs and similar
2358         freak show packages in particular cause real problems.
2359
2360         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2361         each dsc_file since the .orig.tar.gz checking code now uses it as
2362         a boolean.  Fixes bizarro rejections which bogusly claimed
2363         .diff.gz md5sum/size was incorrect.
2364
2365 2002-02-24  James Troup  <james@nocrew.org>
2366
2367         * katie (process_it): reset reject_message.
2368
2369 2002-02-22  James Troup  <james@nocrew.org>
2370
2371         * db_access.py(set_files_id): disable use of
2372         currval('files_id_seq') because it was taking 3 seconds on auric
2373         which is insane (most calls take < 0.01) and simply call
2374         get_files_id() for the return value instead.
2375
2376         * katie.py (Katie.do_query): convenience function; unused by
2377         default, useful for profiling.
2378         * db_access.py (do_query): likewise.
2379
2380         * katie (install): fix insert SQL call when binary has no source.
2381
2382         * lisa (determine_new): auto-correct non-US/main to non-US.
2383         (determine_new): add a warning when adding things to stable.
2384         (edit_index): use our_raw_input().
2385         (edit_overrides): likewise.
2386         (do_new): likewise.  Use re.search() not re.match() since the
2387         default answer may not be the first one.
2388         (do_byhand): likewise.
2389         (do_new): Default to 'S'kip and never 'A'dd.
2390
2391         * jennifer (action): pass prompt to our_raw_input().
2392         * melanie (game_over): likewise.
2393         * katie (action): likewise.
2394
2395         * utils.py (our_raw_input): add an optional prompt argument to
2396         make the function more usable as a drop in replacement for
2397         raw_input().
2398
2399         * jennifer (check_files): correct reject() to not double prefix
2400         when using katie.py based functions.
2401         (check_dsc): likewise.
2402
2403         * katie.py (Katie.reject): prepend a new line if appropriate
2404         rathen than appending one to avoid double new lines when caller
2405         adds one of his own.
2406
2407         * lisa (determine_new): warn if the package is also in other
2408         components.
2409
2410 2002-02-20  James Troup  <james@nocrew.org>
2411
2412         * jennifer (check_files): if .changes file lists "source" in
2413         Architecture field, there must be a .dsc.
2414
2415 2002-02-15  James Troup  <james@nocrew.org>
2416
2417         * ashley (main): add some missing fields.
2418
2419         * katie.py (Katie.check_dsc_against_db): fix to take into account
2420         the fact that the .orig.tar.gz might be in byhand, accepted or
2421         new.  Also fix calling of reject().
2422         (Katie.check_binaries_against_db): fix calling of reject().
2423         (Katie.check_source_against_db): likewise.
2424         (Katie.dump_vars): add missing variables used for bug closures.
2425
2426         * lisa (changes_compare_by_time): sort by reverse time.
2427
2428         * katie.py (Katie.accept): log.
2429         (Katie.dump_vars): missing has_key test for optional changes fields.
2430
2431         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2432         (process_it): traceback goes to stderr, not stdout.
2433         (acknowledge_new): log.
2434         (do_byhand): likewise.
2435
2436         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2437
2438         * add_constraints.sql: add grants for the new fingerprint table.
2439
2440 2002-02-13  James Troup  <james@nocrew.org>
2441
2442         * katie (do_reject): basename the .changes filename before trying
2443         to use it to construct the .reason filename.
2444         (process_it): call Katie.update_subst() so do_reject() DTRT with
2445         the mail template.
2446         (do_reject): setup the mail template correctly.
2447
2448 2002-02-12  James Troup  <james@nocrew.org>
2449
2450         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2451         (check_files): don't abuse global dictionaries.
2452         (Ent): use all variables.
2453         (check_timestamps): don't abuse global dictionaries.
2454
2455         * fernanda.py: renamed to .py so lisa can import it.
2456         (check_dsc): remove unused local variables (pychecker).
2457         (display_changes): split off from check_changes.
2458
2459         * katie: rewritten; most of the functionality moves to jennifer;
2460         what's left is the code to install packages once a day from the
2461         'accepted' directory.
2462
2463         * jennifer: new program, processes packages in 'unchecked'
2464         (i.e. most of the non-install functionality of old katie).
2465
2466         * katie.py: common functions shared between the clique of
2467         jennifer, lisa and katie.
2468
2469         * lisa: new program; handles NEW and BYHAND packages.
2470
2471         * jeri (usage): new function.
2472         (main): use it.
2473         (check_package): remove unused local variable (pychecker).
2474
2475         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2476         binaries and source.  Add install_date to source.
2477
2478         * halle (usage): new function.
2479         (main): use it.  Remove unused options.
2480         (check_changes): remove unused local variable (pychecker).
2481
2482         * add_constraints.sql: add fingerprint references.
2483
2484         * db_access.py (get_or_set_fingerprint_id): new function.
2485
2486         * ashley (main): new program; dumps the contents of a .katie file
2487         to stdout.
2488
2489         * alyson (main): remove option handling since we don't actually
2490         support any.
2491         * cindy (main): likewise.
2492
2493         * remove unnecessary imports and pre-define globals (pychecker).
2494
2495 2002-02-11  Anthony Towns  <ajt@debian.org>
2496
2497         * added installation-report and upgrade-report pseudo-packages
2498
2499 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2500
2501         * katie (update_subst): use Dinstall::TrackingServer.
2502         * melanie (main): likewise.
2503
2504 2002-01-27  James Troup  <james@nocrew.org>
2505
2506         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2507         noticing, jgg@ for fix.
2508
2509 2002-01-19  James Troup  <james@nocrew.org>
2510
2511         * utils.py (extract_component_from_section): handle non-US
2512         non-main properly.
2513
2514 2002-01-12  James Troup  <james@nocrew.org>
2515
2516         * madison: add support for -S/--source-and-binary which displays
2517         information for the source package and all it's binary children.
2518
2519 2002-01-13  Anthony Towns  <ajt@debian.org>
2520
2521         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2522         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2523           and 2002 key ids.
2524         * katie.conf-non-US: Likewise.
2525         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2526           multiple keys automatically. This is probably only useful for
2527           transitioning from an expired (or revoked?) key.
2528
2529 2002-01-08  Ryan Murray  <rmurray@debian.org>
2530
2531         * debian/python-dep: new file that prints out python:Depends for
2532           substvars
2533         * debian/control: use python:Depends, build-depend on python
2534           lower Depends: on postgresql to Suggests:
2535         * debian/rules: determine python version, install to the correct
2536           versioned dir
2537
2538 2001-12-18  Anthony Towns  <ajt@debian.org>
2539
2540         * ziyi: unlink Release files before overwriting them (in case they've
2541           been merged)
2542         * ziyi: always include checksums/sizes for the uncompressed versions
2543           of Sources and Packages, even if they're not present on disk
2544
2545 2001-11-26  Ryan Murray  <rmurray@debian.org>
2546
2547         * ziyi (main): add SigningPubKey config option
2548         * katie.conf: use SigningPubKey config option
2549         * katie.conf-non-US: likewise
2550
2551 2001-11-24  James Troup  <james@nocrew.org>
2552
2553         * katie (acknowledge_new): log newness.
2554
2555 2001-11-24  Anthony Towns  <ajt@debian.org>
2556
2557         * ziyi (real_arch): bail out if some moron forgot to reset
2558         untouchable on stable.
2559         (real_arch): source Release files.
2560
2561 2001-11-19  James Troup  <james@nocrew.org>
2562
2563         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2564         utils.get_conf().
2565         * shania (main): likewise.
2566
2567         * rhona (main): add default options.
2568
2569         * db_access.py (get_archive_id): case independent.
2570
2571         * katie (action): sort files so that ordering is consistent
2572         between mails; noticed/requested by Joey.
2573
2574 2001-11-17  Ryan Murray  <rmurray@debian.org>
2575
2576         * utils.py: add get_conf function, change startup code to read all
2577           config files to the Cnf that get_conf returns
2578           use the component list from the katie conf rather than the hardcoded
2579           list.
2580         * all scripts: use new get_conf function
2581         * shania: fix try/except around changes files
2582         * jenna: only do debian-installer if it is a section in Cnf
2583
2584 2001-11-16  Ryan Murray  <rmurray@debian.org>
2585
2586         * shania (main): Initialize days to a string of a number.
2587                  (main): Initialize Cnf vars before reading in Cnf
2588
2589 2001-11-14  Ryan Murray  <rmurray@debian.org>
2590
2591         * shania (main): Initialize days to a number.
2592
2593 2001-11-04  James Troup  <james@nocrew.org>
2594
2595         * docs/Makefile: use docbook-utils' docbook2man binary.
2596
2597         * Change all "if foo == []" constructs into "if not foo".
2598
2599         * katie (check_changes): when installing into stable from
2600         proposed-updates, remove all non-stable target distributions.
2601         (check_override): don't check for override disparities on stable
2602         installs.
2603         (stable_install): update install_bytes appropriately.
2604         (reject): stable rejection support; i.e. don't remove files when
2605         rejecting files in the pool, rather remove them from the
2606         proposed-update suite instead, rhona will do the rest.
2607         (manual_reject): support for a stable specific template.
2608         (main): setup up stable rejector in subst.
2609
2610 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2611
2612         * debian/control (Build-Depends): docbook2man has been superseded
2613         by docbook-utils.
2614
2615         * neve (main): exit with a more useful error message.
2616         (update_suites): Suite::<suite>::Version, Origin and Description
2617         are not required, so don't fail if they don't exist.
2618
2619         * db_access.py (get_archive_id): return -1 on error rather than
2620         raise an exception.
2621         (get_location_id): likewise.
2622
2623         * madison (main): don't exit on the first not-found package,
2624         rather exit with an appropriate return code after processing all
2625         packages.
2626
2627 2001-11-03  James Troup  <james@nocrew.org>
2628
2629         * claire.py (find_dislocated_stable): add per-architecture
2630         symlinks for dislocated architecture: all debs.
2631
2632 2001-10-19  Anthony Towns  <ajt@debian.org>
2633
2634         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2635
2636 2001-10-10  Anthony Towns  <ajt@debian.org>
2637
2638         * claire.py (fix_component_section): do _not_ assign to None under
2639         any circumstances
2640
2641 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2642
2643         * melanie (main): don't duplicate architectures when removing from
2644         more than one suite.
2645
2646         * heidi (main, process_file, get_list): report suite name not ID.
2647
2648         * naima (nmu_p): be case insensitive.
2649
2650         * naima (action): more list handling clean ups.
2651
2652         * melanie (main): clean up lists handling to use string.join and
2653         IN's.
2654
2655         * madison (main): clean up suite and architecture argument parsing
2656         to use slices less and string.join more.
2657
2658         * utils.py (parse_changes): Use string.find() instead of slices for
2659         string comparisons thereby avoid hardcoding the length of strings.
2660         * ziyi (main): likewise.
2661
2662 2001-10-07  James Troup  <james@nocrew.org>
2663
2664         * Remove mode argument from utils.open_files() calls if it's the
2665         default, i.e. 'r'.
2666
2667 2001-09-27  James Troup  <james@nocrew.org>
2668
2669         * katie (init): new function; options clean up.
2670         (usage): add missing options, remove obsolete ones.
2671         (main): adapt for the two changes above.  If the lock file or
2672         new-ack log file don't exist, create them.  Don't try to open the
2673         new-ack log file except running in new-ack mode.
2674
2675         * alyson (main): initialize all the tables that are based on the
2676         conf file.
2677
2678         * utils.py (touch_file): like touch(1).
2679         (where_am_i): typo.
2680
2681         * catherine (usage): new.
2682         (main): use it.  options cleanup.
2683         * claire.py: likewise.
2684         * fernanda: likewise.
2685         * heidi: likewise.
2686         * jenna: likewise.
2687         * shania: likewise.
2688         * ziyi: likewise.
2689
2690         * andrea: options cleanup.
2691         * charisma: likewise.
2692         * julia: likewise.
2693         * madison: likewise.
2694         * melanie: likewise.
2695         * natalie: likewise.
2696         * rhona: likewise.
2697         * tea: likewise.
2698
2699 2001-09-26  James Troup  <james@nocrew.org>
2700
2701         * utils.py: default to sane config file locations
2702         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2703         or they can point to the real ones through use of a new Config
2704         section.  Based on an old patch by Adam Heath.
2705         (where_am_i): use the new default config stuff.
2706         (which_conf_file): likewise.
2707         (which_apt_conf_file): likewise.
2708
2709         * charisma (main): output defaults to
2710         `Package~Version\tMaintainer'; input can be of either form.  When
2711         parsing the new format do version comparisons, when parsing the
2712         old format assume anything in the extra file wins.  This fixes the
2713         problem of newer non-US packages being overwhelmed by older
2714         versions still in stable on main.
2715
2716 2001-09-17  James Troup  <james@nocrew.org>
2717
2718         * natalie.py (list): use result_join().
2719
2720         * denise (main): result_join() moved to utils.
2721
2722         * utils.py (result_join): move to utils; add an optional seperator
2723         argument.
2724
2725 2001-09-14  James Troup  <james@nocrew.org>
2726
2727         * heidi (set_suite): new function; does --set like natalie does,
2728         i.e. turns it into a sequence of --add's and --remove's
2729         internally.  This is a major win (~20 minute run time > ~20
2730         seconds) in the common, everday (i.e. testing) case.
2731         (get_id): common code used by set_suite() and process_file().
2732         (process_file): call set_suite() and get_id().
2733         (main): add logging support.
2734
2735         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
2736         files.
2737
2738         * utils.py (parse_changes): use slices or simple string comparison
2739         in favour of regexes where possible.
2740
2741         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
2742         fact that the string VARDATA() points to are not null terminated.
2743
2744         * denise (result_join): new function; like string.join() but
2745         handles None's.
2746         (list): use it.
2747         (main): likewise.
2748
2749         * charisma (main): python-pygresql 7.1 returns None not "".
2750
2751 2001-09-14  Ryan Murray  <rmurray@debian.org>
2752
2753         * natalie.py (list): handle python-pygresql 7.1 returning None.
2754
2755 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
2756
2757         * madison (main): return 1 if no package is found.
2758
2759 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
2760
2761         * madison (main): better error handling for incorrect
2762         -a/--architecture or -s/--suite arguments.
2763         (usage): new.
2764         (main): use it.
2765
2766 2001-09-05  Ryan Murray  <rmurray@debian.org>
2767
2768         * charisma, madison, katie: remove use of ROUser
2769         * katie.conf,katie.conf-non-US: remove defintion of ROUser
2770
2771 2001-08-26  James Troup  <james@nocrew.org>
2772
2773         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
2774         maintained packages at cjwatson@'s request.
2775
2776 2001-08-21  James Troup  <james@nocrew.org>
2777
2778         * madison (main): add -a/--architecture support.
2779
2780         * jenna: use logging instead of being overly verbose on stdout.
2781
2782 2001-08-11  Ryan Murray  <rmurray@debian.org>
2783
2784         * melanie: add functional help option
2785
2786 2001-08-07  Anthony Towns  <ajt@debian.org>
2787
2788         * apt.conf, katie.conf: Add ia64 and hppa to testing.
2789
2790 2001-07-28  James Troup  <james@nocrew.org>
2791
2792         * katie (check_dsc): ensure source version is >> than existing
2793         source in target suite.
2794
2795 2001-07-25  James Troup  <james@nocrew.org>
2796
2797         * natalie.py: add logging support.
2798
2799         * utils.py (open_file): make the second argument optional and
2800         default to read-only.
2801
2802         * rene (main): work around broken source packages that duplicate
2803         arch: all packages with arch: !all packages (no longer allowed
2804         into the archive by katie).
2805
2806 2001-07-13  James Troup  <james@nocrew.org>
2807
2808         * katie (action): don't assume distribution is a dictionary.
2809         (update_subst): don't assume architecture is a dictionary and that
2810         maintainer822 is defined.
2811         (check_changes): recognise nk_format exceptions.
2812         (check_changes): reject on 'testing' only uploads.
2813         (check_files): when checking to ensure all packages are newer
2814         versions check against arch-all packages too.
2815         (check_dsc): enforce the existent of a sane set of mandatory
2816         fields.  Ensure the version number in the .dsc (modulo epoch)
2817         matches the version number in the .changes file.
2818
2819         * utils.py (changes_compare): ignore all exceptions when parsing
2820         the changes files.
2821         (build_file_list): don't UNDEF on a changes file with no format
2822         field.
2823
2824 2001-07-07  James Troup  <james@nocrew.org>
2825
2826         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
2827         rather than 'changedbyname' to avoid false negatives on uploads
2828         with an email-address-only Changed-By field.
2829         (check_dsc): don't overwrite reject_message; append to it.
2830         (check_signature): likewise.
2831         (check_changes): likewise.
2832         (announce): condition logging on 'action'.
2833
2834         * logging.py: new logging module.
2835
2836         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
2837         sub-tree into a separate (global) variable.
2838         (check_dsc): ensure format is 1.0 to retain backwards
2839         compatability with dpkg-source in potato.
2840         (main): only try to obtain the lock when not running in no-action
2841         mode.
2842         Use the new logging module.
2843
2844         * christina: initial version; only partially usable.
2845
2846 2001-06-28  Anthony Towns  <ajt@debian.org>
2847
2848         * apt.conf: Add ExtraOverrides to auric.
2849
2850 2001-06-25  James Troup  <james@nocrew.org>
2851
2852         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
2853         they preferred the name 'Uploaders'.
2854
2855 2001-06-23  James Troup  <james@nocrew.org>
2856
2857         * katie (check_files): fix typo in uncommon rejection message,
2858         s/sourceversion/source version/.
2859
2860         * denise (main): we can't use print because stdout has been
2861         redirected.
2862
2863         * katie (source_exists): new function; moved out of check_files()
2864         and added support for binary-only NMUs of earlier sourceful NMUs.
2865
2866         * rhona (clean): find_next_free has moved.
2867
2868         * utils.py (find_next_free): new function; moved here from rhona.
2869         Change too_many to be an argument with a default value, rather
2870         than a hardcoded variable.
2871
2872         * shania: rewritten to work better; REJECTion reminder mail
2873         handling got lost though.
2874
2875 2001-06-22  James Troup  <james@nocrew.org>
2876
2877         * rhona (main): remove unused override code.
2878
2879         * fernanda (main): remove extraneous \n's from utils.warn calls.
2880         * natalie.py (list): likewise.
2881
2882         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
2883         use utils.{warn,fubar} where appropriate.
2884
2885 2001-06-21  James Troup  <james@nocrew.org>
2886
2887         * katie (nmu_p): new class that encapsulates the "is a nmu?"
2888         functionality.
2889         (nmu_p.is_an_nmu): add support for multiple maintainers specified
2890         by the "Maintainers" field in the .dsc file and maintainer groups.
2891         (nmu_p.__init__): read in the list of group maintainer names.
2892         (announce): use nmu_p.
2893
2894 2001-06-20  James Troup  <james@nocrew.org>
2895
2896         * rene (main): hardcode the suite experimental is compared to by
2897         name rather than number.
2898
2899         * katie (check_files): differentiate between doesn't-exist and
2900         permission-denied in "can not read" rejections; requested by edd@.
2901         (check_dsc): use os.path.exists rather than os.access to allow the
2902         above check to kick in.
2903
2904         * heidi (process_file): read all input before doing anything and
2905         use transactions.
2906
2907 2001-06-15  James Troup  <james@nocrew.org>
2908
2909         * fernanda: new script; replaces old 'check' shell script
2910         nastiness.
2911
2912 2001-06-14  James Troup  <james@nocrew.org>
2913
2914         * katie: actually import traceback module to avoid amusing
2915         infinite loop.
2916
2917 2001-06-10  James Troup  <james@nocrew.org>
2918
2919         * utils.py (extract_component_from_section): fix to handle just
2920         'non-free' and 'contrib'.  Also fix to handle non-US in a
2921         completely case insensitive manner as a component.
2922
2923 2001-06-08  James Troup  <james@nocrew.org>
2924
2925         * madison (arch_compare): sort function that sorts 'source' first
2926         then alphabetically.
2927         (main): use it.
2928
2929 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
2930
2931         * catherine (poolize): explicitly make poolized_size a long so it
2932         doesn't overflow when poolizing e.g. entire archives.
2933
2934 2001-06-01  James Troup  <james@nocrew.org>
2935
2936         * utils.py (send_mail): throw exceptions rather than exiting.
2937
2938         * katie (process_it): catch exceptions and ignore them.
2939
2940 2001-06-01  Michael Beattie  <mjb@debian.org>
2941
2942         * added update-mailingliststxt and update-readmenonus to update
2943         those files, respectively. modified cron.daily{,-non-US} to
2944         use them.
2945
2946 2001-05-31  Anthony Towns  <ajt@debian.org>
2947
2948         * rhona: make StayOfExecution work.
2949
2950 2001-05-31  James Troup  <james@nocrew.org>
2951
2952         * rhona (find_next_free): fixes to not overwrite files but rename
2953         them by appending .<n> instead.
2954         (clean): use find_next_free and use dated sub-directories in the
2955         morgue.
2956
2957         * utils.py (move): don't overwrite files unless forced to.
2958         (copy): likewise.
2959
2960 2001-05-24  James Troup  <james@nocrew.org>
2961
2962         * katie (check_files): determine the source version here instead
2963         of during install().
2964         (check_files): check for existent source with bin-only NMU
2965         support.
2966         (main): sort the list of changes so that the source-must-exist
2967         check Does The Right Thing(tm).
2968
2969         * utils.py (changes_compare): new function; sorts a list of
2970         changes files by 'have-source', source, version.
2971         (cc_fix_changes): helper function.
2972         (parse_changes): use compiled regexes.
2973         (fix_maintainer): likewise.
2974
2975         * rene (main): warn about packages in experimental that are
2976         superseded by newer versions in unstable.
2977
2978 2001-05-21  James Troup  <james@nocrew.org>
2979
2980         * rene (main): add support for checking for ANAIS (Architecture
2981         Not Allowed In Source) packages.
2982
2983 2001-05-17  James Troup  <james@nocrew.org>
2984
2985         * katie (check_changes): initalize `architecture' dictionary in
2986         changes global so that if we can't parse the changes file for
2987         whatever reason we don't undef later on.
2988
2989         * utils.py (parse_changes): fix handling of multi-line fields
2990         where the first line did have data.
2991
2992 2001-05-05  Anthony Towns  <ajt@debian.org>
2993
2994         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
2995         (It should always have been there. Ooopsy.)
2996
2997 2001-05-03  Anthony Towns  <ajt@debian.org>
2998
2999         * jenna: Cleanup packages that move from arch:any to arch:all or
3000         vice-versa.
3001
3002 2001-04-24  Anthony Towns  <ajt@debian.org>
3003
3004         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3005         cope with debian-installer and boot-floppies' md5sum.txt.
3006
3007 2001-04-16  James Troup  <james@nocrew.org>
3008
3009         * katie (check_changes): add missing %s format string argument.
3010         (stable_install): temporary work around for morgue location to
3011         move installed changes files into.
3012         (stable_install): helps if you actually read in the template.
3013         (manual_reject): fix for editing of reject messages which was
3014         using the wrong variable name.
3015
3016         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3017
3018 2001-04-13  James Troup  <james@nocrew.org>
3019
3020         * katie (manual_reject): Cc the installer.
3021         (reject): don't.
3022         (check_changes): remove unused maintainer-determination code.
3023         (update_subst): add support for Changed-By when setting the
3024         *MAINTAINER* variables.
3025
3026         * rene (bar): new function to check for packages on architectures
3027         when they shouldn't be.
3028
3029         * natalie.py (main): use fubar() and warn() from utils.
3030
3031         * utils.py (whoami): new mini-function().
3032         * melanie (main): use it.
3033         * katie (manual_reject): likewise.
3034
3035 2001-04-03  James Troup  <james@nocrew.org>
3036
3037         * katie (action): ignore exceptions from os.path.getmtime() so we
3038         don't crash on non-existent changes files (e.g. when they are
3039         moved between the start of the install run in cron.daily and the
3040         time we get round to processing them).
3041
3042         * madison (main): also list source and accept -s/--suite.
3043
3044         * jenna (generate_src_list): missing \n in error message.
3045
3046         * katie (update_subst): add sane defaults for when changes is
3047         skeletal.
3048
3049 2001-03-29  James Troup  <james@nocrew.org>
3050
3051         * melanie (main): use fubar() and warn() from utils.  Remember who
3052         the maintainer for the removed packages are and display that info
3053         to the user.  Readd support for melanie-specific Bcc-ing that got
3054         lost in the TemplateSubst transition.
3055
3056         * utils.py (fubar): new function.
3057         (warn): like wise.
3058
3059         * db_access.py (get_maintainer): as below.
3060
3061         * charisma (get_maintainer): moved the bulk of this function to
3062         db_access so that melanie can use it too.
3063
3064         * claire.py (find_dislocated_stable): restrict the override join
3065         to those entries where the suite is stable; this avoids problems
3066         with packages which have moved to new sections (e.g. science)
3067         between stable and unstable.
3068
3069 2001-03-24  James Troup  <james@nocrew.org>
3070
3071         * catherine (poolize): new function; not really independent of
3072         main() fully, yet.
3073         (main): use it.
3074
3075         * katie (stable_install): __SUITE__ needs to be space prefixed
3076         because buildd's check for 'INSTALLED$'.
3077
3078 2001-03-22  James Troup  <james@nocrew.org>
3079
3080         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3081
3082         * jenna: rewritten; now does deletions on a per-suite level
3083         instead of a per-suite-component-architecture-type level.  This
3084         allows mutli-component packages to be auto-cleaned (and as a
3085         bonus, reduces the code size and duplication).
3086
3087 2001-03-22  Anthony Towns  <ajt@debian.org>
3088
3089         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3090         instead of just giving a gpg error.
3091
3092 2001-03-21  James Troup  <james@nocrew.org>
3093
3094         * madison (main): use apt_pkg.VersionCompare to sort versions so
3095         that output is correctly sorted for packages like debhlper.
3096         Noticed by ajt@.
3097
3098         * tea (check_source_in_one_dir): actually find problematic source
3099         packages.
3100
3101         * katie (check_dsc): remember the orig.tar.gz's location ID if
3102         it's not in a legacy suite.
3103         (check_diff): we don't use orig_tar_id.
3104         (install): add code to handle sourceful diff-only upload of
3105         packages which change components by copying the .orig.tar.gz into
3106         the new component, if it doesn't already exist there.
3107         (process_it): reset orig_tar_location (as above).
3108
3109         * melanie (main): use template substiution for the bug closing
3110         emails.
3111         (main): don't hardcode bugs.debian.org or packages.debian.org
3112         either; use configuration items.
3113
3114         * katie: likewise.
3115
3116         * natalie.py (init): use None rather than 'localhost' for the
3117         hostname given to pg.connect.
3118
3119         * utils.py (TemplateSubst): new function; lifted from
3120         userdir-ldap.
3121
3122 2001-03-21  Ryan Murray  <rmurray@debian.org>
3123
3124         * katie (announce): fix the case of non-existent
3125         Suite::$SUITE::Announce.
3126
3127 2001-03-20  Ryan Murray  <rmurray@debian.org>
3128
3129         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3130         /usr/.
3131
3132         * alyson (main): use config variable for database name.
3133         * andrea (main): likewise.
3134         * catherine (main): likewise.
3135         * charisma (main): likewise.
3136         * cindy (main): likewise.
3137         * claire.py (main): likewise.
3138         * denise (main): likewise.
3139         * heidi (main): likewise.
3140         * jenna (main): likewise.
3141         * katie (main): likewise.
3142         * madison (main): likewise.
3143         * melanie (main): likewise.
3144         * neve (main): likewise.
3145         * rhona (main): likewise.
3146         * tea (main): likewise.
3147
3148 2001-03-15  James Troup  <james@nocrew.org>
3149
3150         * rhona (check_sources): fixed evil off by one (letter) error
3151         which was causing only .dsc files to be deleted when cleaning
3152         source packages.
3153
3154         * charisma (get_maintainer_from_source): remove really stupid and
3155         gratuitous IN sub-query and replace with normal inner join.
3156         (main): connect as read-only user nobody.
3157
3158         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3159         with EXISTS.
3160         (check_files): likewise; still disabled by default though.
3161         (clean_binaries): add ' seconds' to the mysterious number in the
3162         output.
3163         (clean): likewise.
3164
3165         * tea (check_files): add missing global declaration on db_files.
3166
3167 2001-03-14  James Troup  <james@nocrew.org>
3168
3169         * rhona: rewritten large chunks. Removed a lot of the silly
3170         selecting into dictionaries and replaced it with 'where exists'
3171         based sub queries.  Added support for StayOfExecution.  Fix the
3172         problem with deleting dsc_files too early and disable cleaning of
3173         unattached files.
3174
3175 2001-03-14  Anthony Towns  <ajt@debian.org>
3176
3177         * katie (announce): also check Changed-By when trying to detect
3178         NMUs.
3179
3180 2001-03-06  Anthony Towns  <ajt@debian.org>
3181
3182         * ziyi (main): Generate Release.gpg files as well, using the key from
3183         Dinstall::SigningKey in katie.conf, if present. That key has to be
3184         passwordless, and hence kept fairly secretly.
3185
3186 2001-03-02  James Troup  <james@nocrew.org>
3187
3188         * utils.py (str_isnum): new function; checks to see if the string
3189         is a number.
3190
3191         * shania (main): fix _hideous_ bug which was causing all files > 2
3192         weeks old to be deleted from incoming, even if they were part of a
3193         valid upload.
3194
3195 2001-02-27  James Troup  <james@nocrew.org>
3196
3197         * melanie (main): accept new argument -C/--carbon-copy which
3198         allows arbitarty carbon-copying of the bug closure messages.
3199         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3200         separate variable.
3201
3202 2001-02-27  Anthony Towns  <ajt@debian.org>
3203
3204         * ziyi: new program; generates Release files.
3205
3206 2001-02-25  James Troup  <james@nocrew.org>
3207
3208         * katie (reject): add missing '\n' to error message.
3209         (manual_reject): likewise.
3210         (install): catch exceptions from moving the changes file into DONE
3211         and ignore them.
3212
3213         * tea (check_md5sums): new function.
3214
3215 2001-02-25  Michael Beattie  <mjb@debian.org>
3216
3217         * melanie: use $EDITOR if available.
3218
3219 2001-02-15  James Troup  <james@nocrew.org>
3220
3221         * utils.py (parse_changes): don't crash and burn on empty .changes
3222         files.  Symptoms noticed by mjb@.
3223
3224 2001-02-15  Adam Heath  <doogie@debian.org>
3225
3226         * denise (main): use an absolute path for the output filename.
3227
3228         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3229         compile errors with postgresql-dev >= 7.0.
3230
3231 2001-02-12  James Troup  <james@nocrew.org>
3232
3233         * rene: initial version.
3234
3235         * andrea: initial version.
3236
3237         * catherine (main): remove obsolete assignment of arguments.
3238
3239 2001-02-09  James Troup  <james@nocrew.org>
3240
3241         * catherine: first working version.
3242
3243 2001-02-06  James Troup  <james@nocrew.org>
3244
3245         * katie (check_files): validate the priority field; i.e. ensure it
3246         doesn't contain a '/' (to catch people prepending the priority
3247         with the component rather than the section).
3248         (check_override): don't warn about source packages; the only check
3249         is on section and we have no GUI tools that would use the Section
3250         field for a Sources file.
3251         (announce): use tags rather than severities for NMUs.  Requested
3252         by Josip Rodin <joy@>. [#78035]
3253
3254 2001-02-04  James Troup  <james@nocrew.org>
3255
3256         * tea (check_override): new function; ensures packages in suites
3257         are also in the override file.  Thanks to bod@ for noticing that
3258         such packages existed.
3259
3260         * katie: move file type compiled regular expressions to utils as
3261         catherine uses them too.
3262         (check_changes): always default maintainer822 to the installer
3263         address so that any bail out won't cause undefs later.
3264         (check_files): update file type re's to match above.
3265         (stable_install): likewise.
3266         (reject): handle any except from moving the changes files.  Fixes
3267         crashes on unreadable changes files.
3268
3269         * melanie (main): add an explanation of why things are not removed
3270         from testing.
3271
3272 2001-01-31  James Troup  <james@nocrew.org>
3273
3274         * melanie (main): ignore a) no message, b) removing from stable or
3275         testing when invoked with -n/--no-action.
3276
3277         * katie (check_override): lower section before checking to see if
3278         we're whining about 'non-US' versus 'non-US/main'.
3279
3280         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3281         function so that we can use inside of PostgreSQL.
3282
3283 2001-01-28  James Troup  <james@nocrew.org>
3284
3285         * katie: updated to pass new flag to parse_changes() and deal with
3286         the exception raised on invalid .dsc's if appropriate.
3287         * shania (main): likewise.
3288         * melanie (main): likewise.
3289
3290         * tea (check_dscs): new function to validate all .dsc files in
3291         unstable.
3292
3293         * utils.py (parse_changes): if passed an additional flag, validate
3294         the .dsc file to ensure it's extractable by dpkg-source.
3295         Requested by Ben Collins <bcollins@>.
3296
3297 2001-01-27  James Troup  <james@nocrew.org>
3298
3299         * madison (main): connect to the DB as nobody.
3300
3301         * katie (check_files): remove support for -r/--no-version-check
3302         since it makes no sense under katie (jenna will automatically
3303         remove the (new) older version) and was evil in any event.
3304         (check_changes): add missing new line to rejection message.
3305         (check_dsc): likewise.
3306         (process_it): reset reject_message here.
3307         (main): not here.  Also remove support for -r.
3308
3309 2001-01-26  James Troup  <james@nocrew.org>
3310
3311         * katie (check_override): don't whine about 'non-US/main' versus
3312         'non-US'.
3313
3314 2001-01-26  Michael Beattie  <mjb@debian.org>
3315
3316         * natalie.py (usage): new function.
3317         (main): use it.
3318
3319 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3320
3321         * update-mirrorlists: Update README.non-US too (request from Joy).
3322
3323 2001-01-25  James Troup  <james@nocrew.org>
3324
3325         * katie (reject): catch any exception from utils.move() and just
3326         pass, we previously only caught can't-overwrite errors and not
3327         can't-read ones.
3328
3329         * jenna (generate_src_list): use ORDER BY in selects to avoid
3330         unnecessary changes to Packages files.
3331         (generate_bin_list): likewise.
3332
3333         * utils.py (extract_component_from_section): separated out from
3334         build_file_list() as it's now used by claire too.
3335
3336         * claire.py (find_dislocated_stable): rewrite the query to extract
3337         section information and handle component-less locations properly.
3338         Thanks to ajt@ for the improved queries.
3339         (fix_component_section): new function to fix components and
3340         sections.
3341
3342 2001-01-23  James Troup  <james@nocrew.org>
3343
3344         * katie (check_files): set file type for (u?)debs first thing, so
3345         that if we continue, other functions which rely on file type
3346         existing don't bomb out.  If apt_pkg or apt_inst raise an
3347         exception when parsing the control file, don't try any other
3348         checks, just drop out.
3349         (check_changes): new test to ensure there is actually a target
3350         distribution.
3351
3352 2001-01-22  James Troup  <james@nocrew.org>
3353
3354         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3355         <grin@>.
3356         (check_changes): when mapping to unstable, remember to actually
3357         add unstable to the suite list and not just remove the invalid
3358         suite.
3359
3360 2001-01-21  James Troup  <james@nocrew.org>
3361
3362         * katie (check_files): catch exceptions from debExtractControl()
3363         and reject packages which raise any.
3364
3365 2001-01-19  James Troup  <james@nocrew.org>
3366
3367         * katie (check_signature): basename() file name in rejection
3368         message.
3369
3370 2001-01-18  James Troup  <james@nocrew.org>
3371
3372         * katie (in_override_p): remember the section and priority from
3373         the override file so we can check them against the package later.
3374         (check_override): new function; checks section and priority (for
3375         binaries) from the package against the override file and mails the
3376         maintainer about any disparities.
3377         (install): call check_override after announcing the upload.
3378
3379 2001-01-16  James Troup  <james@nocrew.org>
3380
3381         * utils.py (build_file_list): catch ValueError's from splitting up
3382         the files field and translate it into a parse error.
3383
3384         * tea: add support for finding unreferenced files.
3385
3386         * katie (in_override_p): add support for suite-aliasing so that
3387         proposed-updates uploads work again.
3388         (check_changes): catch parses errors from utils.build_file_list().
3389         (check_dsc): likewise.
3390         (check_diff): yet more dpkg breakage so we require even newer a
3391         version.
3392
3393         * jenna (generate_bin_list): don't do nasty path munging that's no
3394         longer needed.
3395
3396         * denise (main): support for non-US; and rename testing's override
3397         files so they're based on testing's codename.
3398
3399 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3400
3401         * melanie: add to the bug closing message explaining what happens
3402         (or rather doesn't) with bugs against packages that have been
3403         removed.
3404
3405 2001-01-14  James Troup  <james@nocrew.org>
3406
3407         * charisma (main): fix silly off-by-one error; suite priority
3408         checking was done using "less than" rather than "less than or
3409         equal to" which was causing weird hesienbugs with wrong Maintainer
3410         fields.
3411
3412 2001-01-10  James Troup  <james@nocrew.org>
3413
3414         * katie (in_override_p): adapted to use SQL-based overrides.
3415         read_override_file function disappears.
3416
3417         * db_access.py: add new functions get_section_id, get_priority_id
3418         and get_override_type_id.
3419         (get_architecture_id): return -1 if the architecture is not found.
3420
3421         * heidi: switch %d -> %d in all SQL queries.
3422         (get_list): Use string.join where appropriate.
3423
3424         * rhona (in_override_p): don't die if the override file doesn't
3425         exist.
3426         (main): warn if the override file doesn't exist.
3427
3428         * alyson: new script; will eventually sync the config file and the
3429         SQL database.
3430
3431         * natalie.py: new script; manipulates overrides.
3432
3433         * melanie: new script; removes packages from suites.
3434
3435 2001-01-08  James Troup  <james@nocrew.org>
3436
3437         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3438         anything it just changed the symptom.  Recognise the new breakage
3439         and reject them too.
3440
3441 2001-01-07  James Troup  <james@nocrew.org>
3442
3443         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3444         to the .changes file, be sure to set up files[filename]["type"]
3445         too.
3446
3447 2001-01-06  James Troup  <james@nocrew.org>
3448
3449         * katie (check_diff): new function; detects bad diff files
3450         produced by dpkg 1.8.1 and rejects thems.
3451         (process_it): call check_diff().
3452         (check_dsc): gar.  Add support for multiple versions of the
3453         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3454         and size against all versions and use one which matches if
3455         possible and exclude any that don't from being poolized to avoid
3456         file overwrites.  Thanks to broonie@ for providing the example.
3457         (install): skip any files marked as excluded as above.
3458
3459 2001-01-05  James Troup  <james@nocrew.org>
3460
3461         * heidi (process_file): add missing argument to error message.
3462
3463 2001-01-04  James Troup  <james@nocrew.org>
3464
3465         * heidi (main): fix handling of multiple files by reading all
3466         files not just the first file n times (where n = the number of
3467         files passed as arguments).
3468
3469 2001-01-04  Anthony Towns  <ajt@debian.org>
3470
3471         * katie (check_dsc): proper fix for the code which locates the
3472         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3473
3474 2000-12-20  James Troup  <james@nocrew.org>
3475
3476         * rhona: replace IN's with EXISTS's to make DELETE time for
3477         binaries and source sane on auric.  Add a -n/--no-action flag and
3478         make it stop actions if used.  Fixed a bug in binaries deletion
3479         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3480         -V/--version.  Giving timing info on deletion till I'm sure it's
3481         sane.
3482
3483         * katie (check_changes): map testing to unstable.
3484
3485         * madison: new script; shows versions in different architectures.
3486
3487         * katie (check_dsc): ensure size matches as well as md5sum;
3488         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3489         #69702.
3490
3491 2000-12-19  James Troup  <james@nocrew.org>
3492
3493         * katie (reject): ignore the "can't overwrite file" exception from
3494         utils.move() and leave the files where they are.
3495         (reject): doh! os.access() test was reversed so we only tried to
3496         move files which didn't exist... replaced with os.path.exists()
3497         test the right way round.
3498
3499         * utils.py (move): raise an exception if we can't overwrite the
3500         destination file.
3501         (copy): likewise.
3502
3503 2000-12-18  James Troup  <james@nocrew.org>
3504
3505         * rhona: first working version.
3506
3507         * db_access.py (get_files_id): force both sizes to be integers.
3508
3509         * katie (main): use size_type().
3510
3511         * utils.py (size_type): new function; pretty prints a file size.
3512
3513 2000-12-17  James Troup  <james@nocrew.org>
3514
3515         * charisma (main): do version compares so that older packages do
3516         not override newer ones and process source first as source wins
3517         over binaries in terms of who we think of as the Maintainer.
3518
3519 2000-12-15  James Troup  <james@nocrew.org>
3520
3521         * katie (install): use the files id for the .orig.tar.gz from
3522         check_dsc().
3523         (install): limit select for legacy source to a) source in legacy
3524         or legacy-mixed type locations and b) distinct on files.id.
3525         (install): rather than the bizarre insert new, delete old method
3526         for moving legacy source into the pool, use a simple update of
3527         files.
3528         (process_it): initalize some globals before each process.
3529
3530 2000-12-14  James Troup  <james@nocrew.org>
3531
3532         * katie (in_override_p): index on binary_type too since .udeb
3533         overrides are in a different file.
3534         (read_override_file): likewise.
3535         (check_files): correct filename passed to get_files_id().
3536         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3537         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3538         (check_dsc): remember the files id of the .orig.tar.gz, not the
3539         location id.
3540
3541 2000-12-13  James Troup  <james@nocrew.org>
3542
3543         * utils.py (poolify): force the component to lower case except for
3544         non-US.
3545
3546         * katie (in_override_p): handle .udeb-specific override files.
3547         (check_files): pass the binary type to in_override_p().
3548         (check_dsc): remember the location id of the old .orig.tar.gz in
3549         case it's not in the pool.
3550         (install): use location id from dsc_files; which is where
3551         check_dsc() puts it for old .orig.tar.gz files.
3552         (install): install files after all DB work is complete.
3553         (reject): basename() the changes filename.
3554         (manual_reject): likewise.
3555
3556         * shania: new progam; replaces incomingcleaner.
3557
3558 2000-12-05  James Troup  <james@nocrew.org>
3559
3560         * katie (check_changes): if inside stable and can't find files
3561         from the .changes; assume it's installed in the pool and chdir()
3562         to there.
3563         (check_files): we are not installing for stable installs, so don't
3564         check for overwriting existing files.
3565         (check_dsc): likewise.
3566         (check_dsc): reorder .orig.tar.gz handling so that we search in
3567         the pool first and only then fall back on any .orig.tar.gz in the
3568         cwd; this avoids false positives on the overwrite check when
3569         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3570         (install): if this is a stable install, bail out to
3571         stable_install() immediately.
3572         (install): dsc_files handling was horribly broken. a) we need to
3573         add files from the .dsc and not the .changes (duh), b) we need to
3574         add the .dsc file itself to dsc_files (to be consistent with neve
3575         if for no other reason).
3576         (stable_install): new function; handles installs from inside
3577         proposed-updates to stable.
3578         (acknowledge_new): basename changes_filename before doing
3579         anything.
3580         (process_it): absolutize the changes filename to avoid the
3581         requirement of being in the same directory as the .changes file.
3582         (process_it): save and restore the cwd as stable installs can
3583         potentially jump into the pool to find files.
3584
3585         * jenna: dislocated_files support using claire.
3586
3587         * heidi (process_file): select package field from binaries
3588         explicitly.
3589
3590         * db_access.py (get_files_id): fix cache key used.
3591
3592         * utils.py (build_file_list): fix 'non-US/non-free' case in
3593         section/component splitting.
3594         (move): use os.path.isdir() rather than stat.
3595         (copy): likewise.
3596
3597         * claire.py: new file; stable in non-stable munger.
3598
3599         * tea: new file; simply ensures all files in the DB exist.
3600
3601 2000-12-01  James Troup  <james@nocrew.org>
3602
3603         * katie (check_dsc): use regex_safe().
3604         (check_changes): typo in changes{} key:
3605         s/distributions/distribution/.
3606         (install): use changes["source"], not files[file]["source"] as the
3607         latter may not exist and the former is used elsewhere.  Commit the
3608         SQL transaction earlier.
3609
3610         * utils.py (regex_safe): new function; escapes characters which
3611         have meaning to SQL's regex comparison operator ('~').
3612
3613 2000-11-30  James Troup  <james@nocrew.org>
3614
3615         * katie (install): pool_location is based on source package name,
3616         not binary package.
3617
3618         * utils.py (move): if dest is a directory, append the filename
3619         before chmod-ing.
3620         (copy): ditto.
3621
3622         * katie (check_files): don't allow overwriting of existing .debs.
3623         (check_dsc): don't allow overwriting of existing source files.
3624
3625 2000-11-27  James Troup  <james@nocrew.org>
3626
3627         * katie (check_signature): don't try to load rsaref; it's
3628         obsolete.
3629         (in_override_p): don't try to lookup override entries for packages
3630         with an invalid suite name.
3631         (announce): don't assume the suite name is valid; use Find() to
3632         lookup the mailing list name for announcements.
3633
3634         * utils.py (where_am_i): typo; hostname is in the first element,
3635         not second.
3636
3637         * db_access.py (get_suite_id): return -1 on an unknown suite.
3638
3639 2000-11-26  James Troup  <james@nocrew.org>
3640
3641         * katie (install): fix CopyChanges handling; typo in in checking
3642         Cnf for CopyChanges flag and was calling non-existent function
3643         copy_file.
3644
3645         * utils.py (copy): new function; clone of move without the
3646         unlink().
3647
3648 2000-11-25  James Troup  <james@nocrew.org>
3649
3650         * utils.py (build_file_list): handle non-US prefixes properly
3651         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3652         + 'libs' not 'non-US/libs').
3653         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3654         delays.  This is possibly(/probably) exim speicifc and (like other
3655         sendmail options) needs to be in the config file.
3656
3657 2000-11-24  James Troup  <james@nocrew.org>
3658
3659         * rhona (check_sources): we need file id from dsc_files; not id.
3660         Handle non .dsc source files being re-referenced in dsc_files.
3661
3662         * katie (in_override_p): strip out any 'non-US' prefix.
3663         (check_files): use utils.where_am_i() rather than hardcoding.
3664         (check_files): validate the component.
3665         (install): use utils.where_am_i() rather than hardcoding.
3666         (install): fix mail to go to actual recepient.
3667         (reject): likewise.
3668         (manual_reject): likewise.
3669         (acknowledge_new): likewise.
3670         (announce): likewise.
3671
3672         * db_access.py (get_component_id): ignore case when searching for
3673         the component and don't crash if the component can't be found, but
3674         return -1.
3675         (get_location_id): handle -1 from get_component_id().
3676
3677         * jenna (generate_src_list): don't bring 'suite' into our big
3678         multi-table-joining select as we already know the 'suite_id'.
3679         (generate_bin_list): likewise.
3680
3681         * neve (main): don't quit if not on ftp-master.
3682         (process_packages): remove unused variable 'suite_codename'.
3683
3684         * utils.py (move): actually move the file.
3685         (build_file_list): handle non-US prefixes in the section.
3686
3687         * catherine (main): use which_conf_file().
3688         * charisma (main): likewise.
3689         * heidi (main): likewise.
3690         * jenna (main): likewise.
3691         * katie (main): likewise.
3692         * neve (main): likewise.
3693         * rhona (main): likewise.
3694
3695         * utils.py (where_am_i): new routine; determines the archive as
3696         understood by other 'dak' programs.
3697         (which_conf_file): new routine; determines the conf file to read.
3698
3699 2000-11-17  James Troup  <james@nocrew.org>
3700
3701         * katie (install): fix where .changes files for proposed-updates
3702         go.
3703
3704 2000-11-04  James Troup  <james@nocrew.org>
3705
3706         * jenna (main): handle architecture properly if no
3707         -a/--architecture argument is given, i.e. reset architecture with
3708         the values for the suite for each suite.
3709
3710         * Add apt_pkg.init() to the start of all scripts as it's now
3711         required by python-apt.
3712
3713 2000-10-29  James Troup  <james@nocrew.org>
3714
3715         * jenna (generate_bin_list): take an additional argument 'type'
3716         and use it in the SELECT.
3717         (main): if processing component 'main', process udebs and debs.
3718
3719         * neve (process_packages): set up 'type' in 'binaries' (by
3720         assuming .deb).
3721
3722         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3723         (check_files): set up files[file]["dbtype"].
3724         (install): use files[file]["dbtype"] to set up the 'type' field in
3725         the 'binaries' table.
3726
3727         * init_pool.sql: add a 'type' field to the 'binaries' table to
3728         distinguisgh between ".udeb" and ".deb" files.
3729
3730         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3731         dest ? dirname(dest)" type check instead.
3732
3733         * katie (check_dsc): handle the case of an .orig.tar.gz not found
3734         in the pool without crashing.  Also handle the case of being asked
3735         to look for something other than an .orig.tar.gz in the pool.
3736
3737 2000-10-26  James Troup  <james@nocrew.org>
3738
3739         * katie (install): fix filenames put into files table during
3740         poolification of legacy source.
3741
3742         * utils.py (move): work around a bug in os.path.basename() which
3743         cunningly returns '' if there is a trailing slash on the path
3744         passed to it.
3745
3746         * katie (check_dsc): Remove more cruft.  If we find the
3747         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
3748         location, make a note of that so we can fix things in install().
3749         (install): as above.  Move any old source out of legacy locations
3750         so that 'apt-get source' will work.
3751         (process_it): reset the flag that indicates to install that the
3752         source needs moved.
3753
3754         * cron.daily: more.  Nowhere near complete yet though.
3755
3756         * katie (install): don't run os.makedirs, a) utils.move() does
3757         this now, b) we weren't removing the user's umask and were
3758         creating dirs with SNAFU permissions.
3759         (check_dsc): rewrite the .orig.tar.gz handling to take into
3760         account, err, package pools.  i.e. look anywhere in the pool
3761         rather than faffing around with two simple paths.
3762
3763         * neve (process_sources): add the .dsc to dsc_files too.
3764
3765 2000-10-25  James Troup  <james@nocrew.org>
3766
3767         * neve (process_sources): don't duplicate .orig.tar.gz's.
3768
3769 2000-10-23  James Troup  <james@nocrew.org>
3770
3771         * utils.py (re_extract_src_version): moved here.
3772
3773         * neve: move re_extract_src_version to utils.
3774         (process_packages): reflect change.
3775
3776         * katie (install): reflect change.
3777
3778 2000-10-19  James Troup  <james@nocrew.org>
3779
3780         * jenna (generate_src_list): handle locations with null
3781         components.
3782         (generate_bin_list): likewise.
3783