]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
jennifer: re-enable ar check, cope with broken Changed-By fields
[dak.git] / ChangeLog
1 2005-11-25  Anthony Towns  <aj@erisian.com.au>
2
3         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
4         works
5         * jennifer: Re-enable .deb ar format checking
6
7 2005-11-15  Anthony Towns  <aj@erisian.com.au>
8
9         * Merge of changes from spohr, by various people.
10
11         * tiffani: new script to do patches to Packages, Sources and Contents
12         files for quicker downloads.
13         * ziyi: update to authenticate tiffani generated files
14
15         * dak: new script to provide a single binary with less arbitrary names
16         for access to dak functionality.
17
18         * cindy: script implemented
19
20         * saffron: cope with suites that don't have a Priority specified
21         * heidi: use get_suite_id()
22         * denise: don't hardcode stable and unstable, or limit udebs to unstable
23         * denise: remove override munging for testing (now done by cindy)
24         * helena: expanded help, added new, sort and age options, and fancy headers
25         * jennifer: require description, add a reject for missing dsc file
26         * jennifer: change lock file
27         * kelly: propogation support
28         * lisa: honour accepted lock, use mtime not ctime, add override type_id
29         * madison: don't say "dep-retry"
30         * melanie: bug fix in output (missing %)
31         * natalie: cope with maintainer_override == None; add type_id for overrides
32         * nina: use mtime, not ctime
33
34         * katie.py: propogation bug fixes
35         * logging.py: add debugging support, use | as the logfile separator
36
37         * katie.conf: updated signing key (4F368D5D)
38         * katie.conf: changed lockfile to dinstall.lock
39         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
40         * katie.conf: added tiffani, cindy support
41         * katie.conf: updated to match 3.0r6 release
42         * katie.conf: updated to match sarge's release
43
44         * apt.conf: update for sarge's release
45         * apt.conf.stable: update for sarge's release
46         * apt.conf: bump daily max Contents change to 25MB from 12MB
47
48         * cron.daily: add accepted lock and invoke cindy  
49         * cron.daily: add daily.lock
50         * cron.daily: invoke tiffani
51         * cron.daily: rebuild accepted buildd stuff
52         * cron.daily: save rene-daily output on the web site
53         * cron.daily: disable billie
54         * cron.daily: add stats pr0n
55
56         * cron.hourly: invoke helena
57
58         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
59         * vars: add lockdir, add etch to copyoverrides
60         * Makefile: add -Ipostgresql/server to CXXFLAGS
61
62         * docs/: added README.quotes
63         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
64         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
65
66         * TODO: correct spelling of "conflicts"
67
68 2005-05-28  James Troup  <james@nocrew.org>
69
70         * helena (process_changes_files): use MTIME rather than CTIME (the
71         C's not for 'creation', stupid).
72         * lisa (sort_changes): likewise.
73
74         * jennifer (check_distributions): use has_key rather than an 'in'
75         test which doesn't work with python2.1.  [Probably by AJ]
76
77 2005-03-19  James Troup  <james@nocrew.org>
78
79         * rene (main): use Suite::<suite>::UdebComponents to determine
80         what components have udebs rather than assuming only 'main' does.
81
82 2005-03-18  James Troup  <james@nocrew.org>
83
84         * utils.py (rfc2047_encode): use codecs.lookup() rather than
85         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
86         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
87         <andrew@ubuntu.com>.
88
89 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
90
91         * helena: add -n/--new HTML output option and improved sorting
92         options.
93
94 2005-03-06  Ryan Murray  <rmurray@debian.org>
95
96         * shania(main): use Cnf::Dir::Reject instead of REJECT
97
98 2005-02-08  James Troup  <james@nocrew.org>
99
100         * rene (main): add partial NBS support by checking that binary
101         packages are built by their real parent and not some random
102         stranger.
103         (do_partial_nbs): likewise.
104
105 2005-01-18  James Troup  <james@nocrew.org>
106
107         * katie.py (Katie.build_summaries): avoid leaking file handle when
108         extracting package description.
109         (Katie.force_reject): remember and close each file descriptor we
110         use.
111         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
112         s/reason_file/reason_fd/ because it's a file descriptor.
113         (Katie.check_dsc_against_db): avoid leaking file handle whenever
114         invoking apt_pkg.md5sum().
115
116         * jennifer (check_deb_ar): new function: sanity check the ar
117         contents of a .deb.
118         (check_files): use it.
119         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
120         found.
121         (check_files): accept 'raw-installer' as an alias for 'byhand'.
122
123 2005-01-14  Anthony Towns  <ajt@debian.org>
124
125         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
126
127         * propup stuff (thanks to Andreas Barth)
128         * katie.conf: add stable MustBeOlderThan testing, add -security
129           propup
130         * jennifer: set distribution-version in .katie if propup may be needed
131         * katie.py: add propogation to cross_suite_version_check
132
133 2004-11-27  James Troup  <james@nocrew.org>
134
135         * nina: new script to split monolithic queue/done into date-based
136         hierarchy.
137
138         * rene (usage): document -s/--suite.
139         (add_nbs): use .setdefault().
140         (do_anais): likewise.
141         (do_nbs): don't set a string to "" and then += it.
142         (do_obsolete_source): new function - looks for obsolete source
143         packages (i.e source packages whose binary packages are ALL a)
144         claimed by someone else and b) newer when built from the other
145         source package).
146         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
147         and 'full' check modes.  Check for obsolete source packages.
148         linux-wlan-ng has been fixed - remove hideous bodge.
149
150         * jennifer (check_distributions): support 'reject' suite map type.
151
152         * utils.py (validate_changes_file_arg): s/file/filename/.
153         s/fatal/require_changes/.  If require_changes is -1, ignore errors
154         and return the .changes filename regardless.
155         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
156         (re_no_revision): don't escape '-', it's not a special character.
157         s/\*/+/ as there must be at least one non-dash character after the
158         dash in a revision.  Thanks to Christian Reis for noticing both of
159         these.
160
161         * ashley (main): pass require_changes=-1 to
162         utils.validate_changes_file_arg().
163
164         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
165         Team <debian-kernel@lists.debian.org>'.
166
167         * katie.py (Katie.in_override_p): fix .startswith() usage.
168
169         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
170         (Lauren::MoreInfoURL): update to 3.0r3.
171         (Suite::Stable::Version): likewise.
172         (Suite::Stable::Description): likewise.
173
174         * cron.daily: disable automatic task override generation.
175
176         * cindy (process): restrict "find all packages" queries by
177         component.  Respect Options["No-Action"].
178         (main): add -n/--no-action support.  Only run on unstable.  Rename
179         type to otype (pychecker).
180
181 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
182
183         * katie.conf (Billie::BasicTrees): add all architectures.
184         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
185         'everything'.
186
187         * cron.daily: Update a 'current' symlink when creating the
188         post-daily-cron-job database backup to aid mirroring to merkel.
189         Run billie.
190
191         * billie (BillieTarget.poolish_match): handle .udeb too.
192
193 2004-10-13  Ryan Murray  <rmurray@debian.org>
194
195         * amber (do_upload): Sort changes files in "katie" order so that
196           source always arrives before binary-only rebuilds
197         
198 2004-10-05  James Troup  <james@nocrew.org>
199
200         * jennifer (check_dsc): correct reject message on invalid
201         Maintainer field.
202
203 2004-09-20  James Troup  <james@nocrew.org>
204
205         * alicia: remove unused 'pwd' import.
206
207         * tea (check_override): underline suite name in output properly.
208
209         * rene (main): read a compressed Packages file.
210         * tea (validate_packages): likewise.
211
212         * katie.py (re_fdnic): add 'r' prefix.
213         (re_bin_only_nmu_of_mu): likewise.
214         (re_bin_only_nmu_of_nmu): likewise.
215
216         * madison (main): retrieve component information too and display
217         it if it's not 'main'.
218         * melanie (reverse_depends_check): likewise.
219
220         * utils.py (pp_dep): renamed...
221         (pp_deps): ... to this.
222         * jeri (check_dep): update calls to utils.pp_deps().
223         * melanie (reverse_depends_check): likewise.
224
225         * jennifer (check_changes): move initalization of email variables
226         from here...
227         (process_it): ...to here as we no longer always run
228         check_changes().  Don't bother to initialize
229         changes["architecture"].
230
231         * denise (list): renamed to...
232         (do_list): ...this to avoid name clash with builtin 'list'.
233         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
234         for dictionaries.
235         (main): Likewise for name clash avoidance and also
236         s/override_type/suffix/.  Adjust call to do_list().
237
238 2004-09-01  Ryan Murray  <rmurray@debian.org>
239
240         * tea (check_files): check the pool/ directory instead of dists/
241
242 2004-08-04  James Troup  <james@nocrew.org>
243
244         * jenna (cleanup): use .setdefault() for dictionaries.
245         (write_filelists): likewise.
246
247         (write_filelists): Use utils.split_args() not split() to split
248         command line arguments.
249         (stable_dislocation_p): likewise.
250
251         (write_filelists): Add support for mapping side of suite-based
252         "Arch: all mapping".
253         (do_da_do_da): ensure that if we're not doing all suites that we
254         process enough to be able correct map arch: all packages.
255
256         * utils.py (cant_open_exc): correct exception string,
257         s/read/open/, s/.$//.
258
259         * templates/amber.advisory: update to match reality a little
260         better.
261
262         * melanie (reverse_depends_check): read Packages.gz rather than
263         Packages.
264
265         * jennifer (check_files): check for unknown component before
266         checking for NEWness.
267
268         * katie.py (Katie.in_override_p): use .startswith in favour of a
269         slice.
270
271         * docs/melanie.1.sgml: document -R/--rdep-check.
272
273 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
274
275         * billie (main): Make the verbatim lists include all the README
276           elements.
277         * docs/README.names: Add billie in (correcting oversight)
278
279 2004-07-01  James Troup  <james@nocrew.org>
280
281         * emilie (main): handle woody's case-sensitive python-ldap,
282         s/keyfingerprint/keyFingerPrint/.
283
284 2004-06-25  James Troup  <james@nocrew.org>
285
286         * debian/control (Depends): add dpkg-dev since jennifer uses
287         dpkg-source.
288
289 2004-06-24  James Troup  <james@nocrew.org>
290
291         * melanie (main): s/file/temp_file/ and close file handle before
292         removing the temporary file.
293         (main): don't warn about needing a --carbon-copy if in no-action
294         mode.
295
296         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
297         (main): likewise.
298
299         * test/006/test.py (main): check bracketed email-only form.
300
301         * utils.py (fix_maintainer): if the Maintainer string is bracketed
302         email-only, strip the brackets so we don't end up with
303         <<james@nocrew.org>>.
304
305 2004-06-20  James Troup  <james@nocrew.org>
306
307         * jennifer (process_it): only run check_changes() if
308         check_signature() returns something.  (Likewise)
309
310         * utils.py (changes_compare): if there's no changes["version"] use
311         "0" rather than None.  (Avoids a crash on unsigned changes file.)
312
313 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
314
315         * jeri (pp_dep): moved from here to ...
316         * utils.py (pp_dep): here.
317
318         * melanie (main): add reverse dependency checking.
319
320 2004-06-17  James Troup  <james@nocrew.org>
321
322         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
323         * tea (check_dscs): likewise.
324
325         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
326         change from boolean to a variable with 3 possible values, 0 and 1
327         as before, -1 means don't require a signature.  Makes
328         parse_changes() useful for parsing arbitary RFC822-style files,
329         e.g. 'Release' files.
330         (check_signature): add support for detached signatures by passing
331         the files the signature is for as an optional third argument.
332         s/filename/sig_filename/g.  Add a fourth optional argument to
333         choose the keyring(s) to use.  Don't os.path.basename() the
334         sig_filename before checking it for taint.
335         (re_taint_free): allow '/'.
336
337 2004-06-11  James Troup  <james@nocrew.org>
338
339         * tea (check_files): make override.unreadable optional.
340         (validate_sources): close the Sources file handle.
341
342         * docs/README.first: clarify that 'alyson' and running
343         add_constraints.sql by hand is something you only want to do if
344         you're not running 'neve'.
345
346         * docs/README.config (Location::$LOCATION::Suites): document.
347
348         * db_access.py (do_query): also print out the result of the query.
349
350 2004-06-10  James Troup  <james@nocrew.org>
351
352         * katie.py (Katie.cross_suite_version_check): post-woody versions
353         of python-apt's apt_pkg.VersionCompare() function apparently
354         returns variable integers for less than or greater than results -
355         update our result checking to match.
356         * jenna (resolve_arch_all_vs_any): likewise.
357         * charisma (main): likewise.
358
359 2004-06-09  James Troup  <james@nocrew.org>
360
361         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
362         valid_dsc_p and don't run check_source() if check_dsc() failed.
363         (check_dsc): on fatal failures return 0 so check_source() isn't
364         run (since it makes fatal assumptions about the presence of
365         mandatory .dsc fields).  
366         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
367
368 2004-05-07  James Troup  <james@nocrew.org>
369
370         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
371         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
372
373         * katie.conf (Dir::Override): remove duplicate definition.
374
375         * neve (get_or_set_files_id): add an always-NULL last_used column
376         to output.
377
378 2004-04-27  James Troup  <james@nocrew.org>
379
380         * apt.conf-security (tree "dists/stable/updates"): add
381         ExtraOverride - noticed by Joey Hess (#246050).
382         (tree "dists/testing/updates"): likewise.
383
384 2004-04-20  James Troup  <james@nocrew.org>
385
386         * jennifer (check_files): check for existing .changes or .katie
387         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
388         directories.
389
390 2004-04-19  James Troup  <james@nocrew.org>
391
392         * jennifer (check_source): handle failure to remove the temporary
393          directory (used for source tree extraction) better, specifically:
394          if we fail with -EACCES, chmod -R u+rwx the temporary directory
395          and try again and if that works, REJECT the package.
396
397 2004-04-17  James Troup  <james@nocrew.org>
398
399         * docs/madison.1.sgml: document -b/--binary-type,
400         -g/--greaterorequal and -G/--greaterthan.
401
402         * madison (usage): -b/--binary-type only takes a single argument.
403         Document -g/--greaterorequal and -G/--greaterthan.
404         (main): add support for -g/--greaterorequal and -G/--greaterthan.
405
406 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
407
408         * billie: Cleaned up a load of comments, added /README.non-US to
409           the verbatim matches list.
410
411 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
412
413         * utils.py (size_type): Make it use real binary megabytes and
414           kilobytes, instead of the marketing terms used before.
415
416 2004-04-07  James Troup  <james@nocrew.org>
417
418         * katie.py (Katie.check_dsc_against_db): in the case we're
419         ignoring an identical-to-existing orig.tar.gz remember the path to
420         the existent version in pkg.orig_tar_gz.  Adjust query to grab
421         location.path too to be able to do so.
422
423 2004-04-03  James Troup  <james@nocrew.org>
424
425         * debian/control (Depends): add python2.1-email | python (>= 2.2)
426         needed for new utils.rfc2047_encode() function.
427
428         * utils.py (re_parse_maintainer): allow whitespace inside the
429         email address.
430         (Error): new exception base class.
431         (ParseMaintError): new exception class.
432         (force_to_utf8): new function.
433         (rfc2047_encode): likewise.
434         (fix_maintainer): rework.  use force_to_utf8() to force name and
435         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
436         return an rfc2047 value.  Validate the address to catch missing
437         email addresses and (some) broken ones.
438
439         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
440         by adopting foo2047 return value.
441         (Katie.dump_vars): add changedby2047 and maintainer2047 as
442         mandatory changes fields.  Promote changes and maintainer822 to
443         mandatory fields.
444         (Katie.update_subst): default maintainer2047 rather than
445         maintainer822.  User foo2047 rather than foo822 when setting
446         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
447
448         * jennifer (check_changes): set default changes["maintainer2047"]
449         and changes["changedby2047"] values rather than their 822
450         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
451         to new utils.fix_maintainer() - reject on exception and adopt
452         foo2047 return value.
453         (check_dsc): if a mandatory field is missing don't do any further
454         checks and as a result reduce paranoia about dsc[var] existence.
455         Validate the maintainer field by calling new
456         utils.fix_maintainer().
457
458         * ashley (main): add changedby2047 and maintainer2047 to mandatory
459         changes fields.  Promote maintainer822 to a mandatory changes
460         field.  add "pool name" to files fields.
461
462         * test/006/test.py: new file - tests for new
463         utils.fix_maintainer().
464
465 2004-04-01  James Troup  <james@nocrew.org>
466
467         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
468
469         * jennifer (get_changelog_versions): create a symlink mirror of
470         the source files in the temporary directory.
471         (check_source): if check_dsc_against_db() couldn't find the
472         orig.tar.gz bail out.
473
474         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
475         part of the upload store the path to it in pkg.orig_tar_gz and if
476         it can't be found set pkg.orig_tar_gz to -1.
477
478         Explicitly return the second value as None in the (usual) case
479         where we don't have to reprocess.  Remove obsolete diagnostic
480         logs.
481
482         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
483
484         * utils.py (temp_filename): new helper function that wraps around
485         tempfile.mktemp().
486
487         * katie.py (Katie.do_reject): use it and don't import tempfile.
488         * lisa (prod_maintainer): likewise.
489         (edit_note): likewise.
490         (edit_new): likewise.
491         * lauren (reject): likewise.
492         * melanie (main): likewise.
493         * neve (do_sources): likewise.
494         * rene (main): likewise.
495         * tea (validate_sources): likewise.
496
497 2004-03-31  James Troup  <james@nocrew.org>
498
499         * tea (validate_sources): remove unused 's' temporary variable.
500
501 2004-03-15  James Troup  <james@nocrew.org>
502
503         * jennifer (check_dsc): check changes["architecture"] for
504         source before we do anything else.
505
506 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
507
508         * billie: Added
509         * katie.conf (Billie): Added sample Billie stanza to katie.conf
510
511 2004-03-12  James Troup  <james@nocrew.org>
512
513         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
514
515         * katie.conf (Dir::Queue::BTSVersionTrack): define.
516
517         * katie.py (Katie.accept): add support for DebBugs Version
518         Tracking by writing out .versions (generated in jennifer's
519         get_changelog_versions()) and .debinfo (mapping of binary ->
520         source) files.
521
522         * ashley (main): add dsc["bts changelog"].
523
524         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
525
526         * jennifer (check_diff): obsoleted by check_source(), removed.
527         (check_source): new function: create a temporary directory and
528         move into it and call get_changelog_versions().
529         (get_changelog_versions): new function: extract the source package
530         and optionally parse debian/changelog to obtain the version
531         history for the BTS.
532         (process_it): call check_source() rather than check_diff().
533
534 2004-03-08  James Troup  <james@nocrew.org>
535
536         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
537         listbar" rather than "if listbar.count(varfoo)"' change on
538         2004-02-24.
539
540 2004-03-05  James Troup  <james@nocrew.org>
541
542         * alicia (main): don't warn about not closing bugs - we don't
543         manage overrides through the BTS.
544
545 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
546
547         * docs/README.config: lots of updates and corrections.
548         * docs/README.first: likewise.
549
550         * docs/README.config: drop unused Dir::Queue::Root.
551         * katie.conf-non-US: likewise.
552         * katie.conf: likewise.
553         * katie.conf-security: likewise.
554
555 2004-02-27  James Troup  <james@nocrew.org>
556
557         * rose (process_tree): use 'if var in [ list ]' rather than long
558         'if var == foo or var == bar or var == baz'.  Suggested by Martin
559         Michlmayr.
560
561         * jennifer (check_files): reduce 'if var != None' to 'if var' as
562         suggested by Martin Michlmayr.
563         * catherine (poolize): likewise.
564         * charisma (main): likewise.
565         * halle (check_changes): likewise.
566         * heidi (main): likewise.
567         (process_file): likewise.
568         * kelly (install): likewise.
569         (stable_install): likewise.
570         * utils.py (fix_maintainer): likewise.
571
572         * apt.conf: add support for debian-installer in testing-proposed-updates.
573         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
574         add - set to main.
575
576         * mkmaintainers: add "-T15" option to wget of non-US packages file
577         so that we don't hang cron.daily if non-US is down.
578
579         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
580
581         * templates/jennifer.bug-close: add Source and Source-Version
582         pseudo-headers that may be used for BTS Version Tracking someday
583         [ajt@].
584
585         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
586         (main): likewise.
587
588         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
589
590 2004-02-25  James Troup  <james@nocrew.org>
591
592         * katie.conf (SuiteMappings): don't map testing-security to
593         proposed-updates.
594
595 2004-02-24  James Troup  <james@nocrew.org>
596
597         * katie.py (Katie.__init__): remove unused 'values' field.
598
599         * utils.py (extract_component_from_section): use 's.find(c) != -1'
600         rather than 's.count(c) > 0'.
601
602         * katie.py (Katie.source_exists): use "if varfoo in listbar"
603         rather than "if listbar.count(varfoo)".
604         * halle (check_joey): likewise.
605         * jeri (check_joey): likewise.
606         * lisa (edit_index): likewise.
607         * jenna (stable_dislocation_p): likewise.
608
609         * jennifer (main): remove unused global 'nmu'.
610
611 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
612
613         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
614           to be ftpmaster@ftp-master.debian.org to bring it into line with how
615           the dak tools close bugs.
616
617 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
618
619         * katie.conf (Alicia): Added an Alicia section with email address
620         * templates/alicia.bug-close: Added
621         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
622         * alicia (main): Added a -d/--done argument
623
624 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
625
626         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
627
628 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
629
630         * lisa (prod_maintainer): Added function to prod the maintainer without
631           accepting or rejecting the package
632         * templates/lisa.prod: Added this template for the prodding mail
633
634         * .cvsignore: Added neve-files which turns up in new installations
635
636 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
637
638         * alicia (usage): Fixed usage message to offer section and priority
639           as seperately optional arguments.
640         * alicia (main): Added a % (arg) interpolation needed when only
641           one of section or priority is provided and it cannot be found.
642
643 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
644
645         * alicia: Added
646         * docs/alicia.1.sgml: Added
647         * docs/Makefile: Added alicia to the list of manpages to build
648         * docs/README.names: Noted what alicia does
649         * docs/README.first: Noted where alicia is useful
650
651 2004-01-21  James Troup  <james@nocrew.org>
652
653         * madison (main): add -b/--binary-type.
654         (usage): likewise.
655
656         * denise (main): generate debian-installer overrides for testing
657         too.
658         * apt.conf: add support for debian-installer in testing.
659         * katie.conf (Suite::Testing::UdebComponents): set to main.
660
661         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
662         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
663         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
664
665         * utils.py (parse_changes): don't process data not inside the
666         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
667         pointing this out.
668         * test/005/test.py (main): new test to test for above.
669
670 2004-01-04  James Troup  <james@nocrew.org>
671
672         * jenna (write_filelists): correct typo, s/Components/Component/
673         for Options.
674
675 2004-01-04  Ryan Murray  <rmurray@debian.org>
676
677         * cron.buildd: move update of overrides and Packages file...
678         * cron.unchecked: to here.
679         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
680         * katie.conf-security: likewise
681
682 2003-11-20  James Troup  <james@nocrew.org>
683
684         * jenna (main): don't use utils.try_with_debug(), it produces way
685         too much output.
686
687         * halle (check_changes): don't error out if a .changes refers to a
688         non-existent package, just warn and skip the file.
689
690         * docs/README.stable-point-release: mention halle and .changes
691         obsoleted by removal through melanie.  Update for 3.0r2.
692
693         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
694         (Suite::Stable::Description): update for 3.0r2.
695         (Lauren::MoreInfoURL): likewise.
696         * katie.conf-non-US (Suite::Stable::Version): likewise.
697         (Suite::Stable::Description): likewise.
698         (Lauren::MoreInfoURL): likewise.
699
700         * apt.conf.stable (Default): don't define MaxContentsChange.
701         * apt.conf.stable-non-US (Default): likewise.
702
703         * lauren (reject): hack to work around partial replacement of an
704         upload, i.e. one or more binaries superseded by another source
705         package.
706
707 2003-11-17  James Troup  <james@nocrew.org>
708
709         * pseudo-packages.maintainers: point installation-reports at
710         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
711         request.
712
713         * utils.py (parse_changes): calculate the number of lines once
714         with len() rather than max().
715
716         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
717         files, since check_dsc_against_db() deletes the .orig.tar.gz
718         entry.
719
720 2003-11-13  Ryan Murray  <rmurray@debian.org>
721
722         * apt.conf: specify a src override file for debian-installer
723
724 2003-11-10  James Troup  <james@nocrew.org>
725
726         * fernanda.py (strip_pgp_signature): new function - strips PGP
727         signature from a file and returns the modified contents of the
728         file in a string.
729         (display_changes): use it.
730         (read_dsc): likewise.
731
732 2003-11-09  Ryan Murray  <rmurray@debian.org>
733
734         * cron.buildd: export accepted_autobuild table for unstable, and use
735         it to generate the incoming Packages/Sources rather than having apt
736         walk the directory.
737         * apt.conf.buildd: use exported table from cron.buildd to generate
738         Packages/Sources
739
740 2003-11-07  James Troup  <james@nocrew.org>
741
742         * kelly: import errno.
743
744         * katie.py (Katie.build_summaries): sort override disparities.
745
746         * kelly (install): set dsc_component based on the .dsc's component
747         not a random binaries.
748
749 2003-10-29  James Troup  <james@nocrew.org>
750
751         * katie.py (Katie.build_summaries): don't assume changes["source"]
752         exists since it might not.
753
754 2003-10-20  James Troup  <james@nocrew.org>
755
756         * pseudo-packages.maintainers: update security.d.o to use
757         team@s.d.o at joy@'s request.
758
759 2003-10-17  James Troup  <james@nocrew.org>
760
761         * jennifer (check_dsc): use .startswith rather than .find() == 0.
762
763 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
764
765         * tea (chk_bd_process_dir): use .endswith rather than slice.
766
767 2003-10-14  James Troup  <james@nocrew.org>
768
769         * tea (check_build_depends): new function.
770         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
771         in the archive.
772         (main): update for new function.
773         (usage): likewise.
774
775         * katie.py (Katie.do_reject): sanitize variable names,
776         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
777         os.close() to outside if clause.
778
779         * jennifer (check_dsc): check build-depends and
780         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
781         Fold the ARRAY check into the same code block and tidy up it's
782         rejection message.
783         (check_changes): ensure that the Files field is non-empty.
784         Suggested by Santiago Vila <sanvila@unex.es>
785         (check_changes): normalize reject messages.
786         (check_dsc): instead of doing most of the checks inside a for loop
787         and an if, find the dsc_filename in a short loop over files first
788         and then do all the checks.  Add check for more than one .dsc in a
789         .changes which we can't handle.  Normalize reject messages.
790
791 2003-10-13  James Troup  <james@nocrew.org>
792
793         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
794         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
795
796         * jennifer (check_files): Set 'has_binaries' and 'has_source'
797         variables while iterating over 'files'.  Don't regenerate it when
798         checking for source if source is mentioned.
799
800         Reject source only uploads if the config variable
801         Dinstall::Reject::NoSourceOnly is set.
802
803 2003-10-03  James Troup  <james@nocrew.org>
804
805         * rene (main): add nasty hardcoded reference to debian-installer
806         so we detect NBS .udebs.
807
808 2003-09-29  James Troup  <james@nocrew.org>
809
810         * apt.conf (old-proposed-updates): remove.
811         * apt.conf-non-US (old-proposed-updates): likewise.
812
813 2003-09-24  James Troup  <james@nocrew.org>
814
815         * tea (check_files_not_symlinks): new function, ensure files
816         mentioned in the database aren't symlinks.  Includes code to
817         update any files that are like this to their real filenames +
818         location; commented out by though.
819         (usage): update for new function.
820         (main): likewise.
821
822 2003-09-24  Anthony Towns  <ajt@debian.org>
823
824         * vars: external-overrides variable added
825         * cron.daily: Update testing/unstable Task: overrides from joeyh
826         managed external source.
827
828 2003-09-22  James Troup  <james@nocrew.org>
829
830         * kelly (install): if we can't move the .changes into queue/done,
831         fail don't warn and carry on.  The old behaviour pre-dates NI and
832         doesn't make much sense now since jennifer checks both
833         queue/accepted and queue/done for any .changes files she's
834         processing.
835
836         * utils.py (move): don't throw exceptions on existing files or
837         can't overwrite, instead just fubar out.
838
839         * jennifer (check_dsc): also check Build-Depends-Indep for
840         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
841
842 2003-09-18  James Troup  <james@nocrew.org>
843
844         * katie.py (Katie.close_bugs): only log the bugs we've closed
845         once.
846
847         * kelly (main): log as 'kelly', not 'katie'.
848
849 2003-09-16  James Troup  <james@nocrew.org>
850
851         * katie.py (Katie.check_binary_against_db): likewise noramlize.
852
853         * jennifer (check_changes): normalize reject message for "changes
854         file already exists" to be %s: <foo>.
855         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
856         produced by broken dpkg-source in 1.10.11.  Tone down and
857         normalize rejection message for incompatible 'Format' version
858         numbers.
859         (check_diff): likewise tone down and normalize.
860
861 2003-09-07  James Troup  <james@nocrew.org>
862
863         * utils.py (parse_changes): if dsc_whitespace_rules is false,
864         don't bomb out on bogus empty lines.
865         (build_file_list): check for changes["files"] earlier.  use Dict
866         to create files[name] dictionary.
867         (send_mail): don't bother validating arguments.
868         (check_signature): minor improvements to some of the rejection
869         messages including listing the key id of the key that wasn't found
870         in the keyring.
871         (wrap): new function.
872
873         * tea: add new check 'validate-indices' that ensures all files
874         mentioned in indices (Packages, Sources) files do in fact exist.
875
876         * catherine (poolize): use a local re_isadeb which handles legacy
877         (i.e. no architecture) style .deb filenames.
878
879         * rosamund: new script.
880
881         * rhona (check_binaries): when checking for binary packages not in
882         a suite, don't bother selecting files that already have a
883         last_used date.
884         (check_sources): likewise.
885
886         * rhona: change all SQL EXISTS sub-query clauses to use the
887         postgres suggested convention of "SELECT 1 FROM".
888         * andrea (main): likewise.
889         * tea (check_override): likewise.
890         * catherine (main): likewise.
891
892         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
893         entries and in other suites MustBeNewerThan's.
894         (SuiteMappings): likewise
895         * katie.conf-non-US: likewise.
896         * katie.conf-security: likewise.
897
898         * apt.conf-security: remove oldstable.
899         * apt.conf.stable: likewise.
900         * apt.conf.stable-non-US: likewise.
901         * cron.buildd-security: likewise.
902         * cron.daily-security: likewise.
903         * vars-security (suites): likewise.
904         * wanna-build/trigger.daily: likewise.
905
906         * claire.py (clean_symlink): move...
907         * utils.py (clean_symlink): here.
908
909         * claire.py (find_dislocated_stable): update accordingly.
910
911 2003-08-16  Anthony Towns  <ajt@debian.org>
912
913         * katie.py (source_exists): expand the list of distributions
914         the source may exist in to include any suite that's mapped to
915         the destination suite (even transitively (a->b->c)). This should
916         unbreak binary uploads to *-proposed-updates.
917
918 2003-08-09  Randall Donald  <rdonald@debian.org>
919
920         * lisa (recheck): change changes["distribution"].keys() to
921         Katie.pkg.changes...
922
923 2003-08-08  Randall Donald  <rdonald@debian.org>
924
925         * katie.py: only tag bugs as fixed-in-experimental for
926         experimental uploads
927
928 2003-07-26  Anthony Towns  <ajt@debian.org>
929
930         * katie.py (source_exists): add an extra parameter to limit the
931         distribution(s) the source must exist in.
932         * kelly, lisa, jennifer: update to use the new source_exists
933
934 2003-07-15  Anthony Towns  <ajt@debian.org>
935
936         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
937         checksums for debian-installer stuff even when it's just a symlink to
938         another suite
939
940         * apt.conf: add the FakeDI line
941
942 2003-06-09  James Troup  <james@nocrew.org>
943
944         * kelly (check): make sure the 'file' we're looking for in 'files'
945         hasn't been deleted by katie.check_dsc_against_db().
946
947 2003-05-07  James Troup  <james@nocrew.org>
948
949         * helena (time_pp): fix s/years/year/ typo.
950
951 2003-04-29  James Troup  <james@nocrew.org>
952
953         * madison (usage): document -c/--component.
954
955         * madison (usage): Fix s/seperated/separated/.
956         * melanie (usage): likewise.
957         * jenna (usage): likewise.
958
959 2003-04-24  James Troup  <james@nocrew.org>
960
961         * cron.daily-non-US: if there's nothing for kelly to install, say
962         so.
963
964         * jennifer (check_timestamps): print sys.exc_value as well as
965         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
966         failed' with 'deb contents' to make it clearer what timestamp(s)
967         are being checked.
968
969 2003-04-15  James Troup  <james@nocrew.org>
970
971         * cron.daily-non-US: only run kelly if there are some .changes
972         files in accepted.
973
974         * rene: add -m/--mode argument which can be either daily (default)
975         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
976         Various changes to make this possible including a poor attempt at
977         splitting main() up a little.  De-hardcode suite numbers from SQL
978         queries and return quietly from do_nviu() if experimental doesn't
979         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
980         is.
981
982         * debian/control (Depends): remove python-zlib as it's obsolete.
983
984         * charisma (main): don't slice the \n off strings when we're
985         strip()-ing it anyway.
986         * heidi (set_suite): likewise.
987         (process_file): likewise.
988         * natalie (process_file): likewise.
989
990 2003-04-08  James Troup  <james@nocrew.org>
991
992         * katie.py (Katie.check_dsc_against_db): improve the speed of two
993         slow queries by using one LIKE '%foo%' and then matching against
994         '%s' or '/%s$' in python.  Also only join location when we need it
995         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
996         query, so 6s for each sourceful package.
997
998         * cron.daily: invoke rene and send the report to ftpmaster.
999         * cron.daily-non-US: likewise.
1000
1001 2003-03-14  James Troup  <james@nocrew.org>
1002
1003         * utils.py (send_mail): default filename to blank.
1004         * amber (make_advisory): adapt.
1005         * jennifer (acknowledge_new): likewise.
1006         * katie.py (Katie.close_bugs): likewise.
1007         (Katie.announce): likewise.
1008         (Katie.accept): likewise.
1009         (Katie.check_override): likewise.
1010         (Katie.do_reject): likewise.
1011         * kelly (do_reject): likewise.
1012         (stable_install): likewise.
1013         * lisa (do_bxa_notification): likewise.
1014         * lauren (reject): likewise.
1015         * melanie (main): likewise.
1016
1017         * rene (add_nbs): check any NBS packages against unstable to see
1018         if they haven't been removed already.
1019
1020         * templates/katie.rejected: remove paragraph about rejected files
1021         since they're o-rwx due to c-i-m and the uploader can't do
1022         anything about them and shania will take care of them anyway.
1023
1024         * madison (usage): update usage example to use comma seperation.
1025         * melanie (usage): likewise.
1026
1027         * utils.py (split_args): new function; splits command line
1028         arguments either by space or comma (whichever is used).  Also has
1029         optional-but-default DWIM spurious space detection to avoid
1030         'command -a i386, m68k' problems.
1031         (parse_args): use it.
1032         * melanie (main): likewise.
1033
1034         * melanie (main): force the admin to tell someone if we're not
1035         doing a rene-led removal (or closing a bug, which counts as
1036         telling someone).
1037
1038 2003-03-05  James Troup  <james@nocrew.org>
1039
1040         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1041         and python sections.
1042         * katie.conf-security (Section): likewise.
1043
1044         * add_constraints.sql: add uid and uid_id_seq to grants.
1045
1046         * lisa (determine_new): also warn about adding overrides to
1047         oldstable.
1048
1049         * madison (main): make the -S/--source-and-binary query obey
1050         -s/--suite restrictions.
1051
1052 2003-03-03  James Troup  <james@nocrew.org>
1053
1054         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1055         exists, warn the user that our output might seem strange.  (People
1056         get confused by multiple versions in a suite which happens
1057         post-kelly but pre-jenna.)
1058
1059 2003-02-21  James Troup  <james@nocrew.org>
1060
1061         * kelly (main): we don't need to worry about StableRejector.
1062
1063         * melanie (main): sort versions with apt_pkg.VersionCompare()
1064         prior to output.
1065
1066         * lauren: new script to manually reject packages from
1067         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1068
1069 2003-02-20  James Troup  <james@nocrew.org>
1070
1071         * kelly (init): remove unused -m/--manual-reject argument.
1072
1073         * katie.py (Katie.force_reject): renamed from force_move to make
1074         it more explicit what this function does.
1075         (Katie.do_reject): update to match.
1076
1077         * utils.py (prefix_multi_line_string): add an optional argument
1078         include_blank_lines which defaults to 0.  If non-zero, blank lines
1079         will be includes in the output.
1080
1081         * katie.py (Katie.do_reject): don't add leading space to each line
1082         of the reject message.  Include blank lines when showing the
1083         message to the user.
1084
1085 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1086
1087         * utils.py (fix_maintainer): replace pointless re.sub() with
1088         simple string format.
1089
1090 2003-02-11  James Troup  <james@nocrew.org>
1091
1092         * lisa (edit_overrides): only strip-to-one-char and upper-case
1093         non-numeric answers.  Fixes editing of items with indices >= 10;
1094         noticed by Randall.
1095         (edit_overrides): correct order of arguments to "not a valid
1096         index" error message.
1097
1098         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1099         remove_duplicate_versions(); thanks to aj for the initial
1100         diagnosis.
1101         (remove_duplicate_versions): correct how we return
1102         dominant_versions.
1103         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1104         a tuple rather than just a tuple.
1105
1106 2003-02-10  James Troup  <james@nocrew.org>
1107
1108         * emilie: new script - sync fingerprint and uid tables with a
1109         debian.org LDAP DB.
1110
1111         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1112         in 'fingerprint'.
1113
1114         * db_access.py (get_or_set_uid_id): new function.
1115
1116         * jennifer (main): update locking to a) not used FCNTL (deprecated
1117         in python >= 2.2) and b) acknowledge upstream's broken
1118         implementation of lockf (see Debian bug #74777), c) try to acquire
1119         the lock non-blocking.
1120         * kelly (main): likewise.
1121
1122         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1123
1124         * madison (main): only append the package to new_packages if it's
1125         not already in there; fixes -S/--source-and-binary for cases where
1126         the source builds a binary package of the same name.
1127
1128 2003-02-10  Anthony Towns  <ajt@debian.org>
1129
1130         * madison (main): use explicit JOIN syntax for
1131         -S/--source-and-binary queries to reduce the query's runtime from
1132         >10 seconds to negligible.
1133
1134 2003-02-08  James Troup  <james@nocrew.org>
1135
1136         * rene (main): in the NVIU output, append items to lists, not
1137         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1138         should be removed.
1139
1140 2003-02-07  James Troup  <james@nocrew.org>
1141
1142         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1143         Sources [aj].
1144
1145         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1146         O. Benham/Adam Heath/.
1147
1148         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1149         (Suite::Stable::Description): update for 3.0r1a.
1150         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1151
1152         * utils.py (gpgv_get_status_output): rename from
1153         get_status_output().
1154
1155         * neve (check_signature): use gpgv_get_status_output and Dict from
1156         utils().  Add missing newline to error message about duplicate tokens.
1157
1158         * saffron (per_arch_space_use): also print space used by source.
1159         (output_format): correct string.join() invocation.
1160
1161         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1162
1163 2003-02-04  James Troup  <james@nocrew.org>
1164
1165         * cron.buildd: correct generation of Packages/Sources and grep out
1166         non-US/non-free as well as non-free.
1167
1168 2003-02-03  Ryan Murray  <rmurray@debian.org>
1169
1170         * cron.buildd: generate quinn-diff output with full Packages/Sources
1171           files to get out-of-date vs. uncompiled right.
1172         * apt.conf.buildd: no longer generate uncompressed files, as they
1173           are generated in cron.buildd instead
1174         * add -i option to quinn-diff to ignore binary-all packages
1175         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1176           aren't in the packages file, the arch that uploaded them will build
1177           them anyways...
1178
1179 2003-01-30  James Troup  <james@nocrew.org>
1180
1181         * rene (main): only print suggested melanie command when there's
1182         some NBS to remove.
1183
1184 2003-01-30  Ryan Murray  <rmurray@debian.org>
1185
1186         * cron.buildd: fix incorrectly inverted lockfile check
1187
1188 2003-01-29  Ryan Murray  <rmurray@debian.org>
1189
1190         * cron.buildd: generate override.sid.all3.src
1191         * apt.conf.buildd: use generated override.sid.all3.src
1192
1193 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1194
1195         * utils.py (get_status_output): moved from jennifer.
1196         (Dict): likewise.
1197         (check_signature): likewise.
1198
1199         * jennifer (get_status_output): moved to utils.py.
1200         (Dict): likewise.
1201         (check_signature): likewise.
1202
1203         * utils.py (check_signature): add an argument to specifiy which
1204         function to call when an error was found.
1205         (check_signature): document this function better.
1206
1207         * jennifer (check_files): pass the reject function as an argument
1208         to utils.check_signature.
1209         (process_it): likewise.
1210
1211 2003-01-20  James Troup  <james@nocrew.org>
1212
1213         * rene (main): lots of changes to improve the output and make it
1214         more useful.
1215
1216         * katie.py (Katie.check_override): make the override messages
1217         clearer (hopefully).
1218
1219 2002-12-26  James Troup  <james@nocrew.org>
1220
1221         * ziyi (usage): document the ability to pass suite(s) as
1222         argument(s).
1223         (main): read apt.conf after checking for -h/--help.
1224
1225         * tea (main): take the check to run as an argument.
1226
1227         * saffron.R: R script to graph daily install runs.
1228
1229         * saffron: new script; various stats functions.
1230
1231         * rhona (main): connect to the database after checking for -h/--help.
1232
1233         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1234
1235         * melanie (main): sort versions with utils.arch_compare_sw().
1236
1237         * madison (usage): alphabetize order of options.
1238         * melanie (usage): likewise.
1239
1240         * kelly (usage): fix usage short description (we aren't dinstall).
1241
1242         * julia (usage): fix usage description and alphabetize order of
1243         options.
1244
1245         * jeri (usage): fix usage short description.
1246
1247         * jennifer (main): move --help and --version checks from here...
1248         (init): to here so that they work with an empty katie.conf.
1249         * kelly: likewise.
1250
1251         * alyson (usage): new function.
1252         (main): use it.
1253         * andrea: likewise.
1254         * ashley: likewise.
1255         * cindy: likewise.
1256         * denise: likewise.
1257         * helena: likewise.
1258         * neve: likewise.
1259         * rene: likewise.
1260         * rose: likewise.
1261         * tea: likewise.
1262
1263         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1264         entry that caused tasks to be omitted from 3.0r1.
1265
1266 2002-12-10  James Troup  <james@nocrew.org>
1267
1268         * jennifer (check_files): sanity check the Depends field to ensure
1269         it's non-empty if present since apt chokes on an empty one.
1270         Thanks to Ryan Murray for the idea.
1271
1272 2002-12-08  James Troup  <james@nocrew.org>
1273
1274         * katie.conf-security (Helena::Directories): new; include accepted
1275         in addition to byhand and new.
1276
1277         * helena (process_changes_files): use utils.arch_compare_sw().
1278         Justify things based on the longest [package, version,
1279         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1280         the commas in architecture and version lists for the same reason.
1281         (main): make directories we process configurable through
1282         Helena::Directories in the config file; if that doesn't exist
1283         default to the old hardcoded values (byhand & new).
1284
1285         * utils.py (arch_compare_sw): moved here from madison.
1286         * madison (main): adjust to compensate.
1287
1288 2002-12-06  James Troup  <james@nocrew.org>
1289
1290         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1291         right filename.
1292
1293 2002-12-05  James Troup  <james@nocrew.org>
1294
1295         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1296
1297 2002-11-28  Randall Donald  <rdonald@debian.org>
1298
1299         * fernanda.py (read_control): fix typo of 'Architecture'.
1300
1301 2002-11-26  James Troup  <james@nocrew.org>
1302
1303         * lisa (check_pkg): call less with '-R' so we see the colour from
1304         Randall's fernanda changes.
1305
1306         * neve (process_sources): if Directory points to a legacy location
1307         but the .dsc isn't there; assume it's broken and look in the pool.
1308         (update_section): new, borroed from alyson.
1309         (do_da_do_da): use it.
1310         (process_packages): add suite_it to the cache key used for
1311         arch_all_cache since otherwise we only add a package to the first
1312         suite it's in and ignore any subsequent ones.
1313
1314         * katie.conf-non-US (Location): fixed to reflect reality (all
1315         suites, except old-proposed-updates (which is legacy-mixed)) are
1316         pool.
1317
1318         * utils.py (try_with_debug): wrapper for print_exc().
1319         * jenna (main): use it.
1320         * neve (main): likewise.
1321
1322 2002-11-25  Randall Donald  <rdonald@debian.org>
1323
1324         * fernanda.py (main): added -R to less command line for raw control
1325         character support to print colours
1326         (check_deb): Instead of running dpkg -I on deb file, call
1327         output_deb_info, the new colourized control reporter.
1328         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1329         of printing out each .dsc line.
1330         (output_deb_info): new function. Outputs each key/value pair from
1331         read_control except in special cases where we highlight section,
1332         maintainer, architecture, depends and recommends.
1333         (create_depends_string): new function. Takes Depends tree and looks
1334         up it's compontent via projectb db, colourizes and constructs a
1335         depends string in original order.
1336         (read_dsc): new function. reads and parses .dsc info via
1337         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1338         colourized.
1339         (read_control): new function. reads and parses control info via
1340         apt_pkg. Depends and Recommends are split in to list structures,
1341         Section and Architecture are colourized. Maintainer is colourized
1342         if it has a localhost.localdomain address.
1343         (split_depends): new function. Creates a list of lists of
1344         dictionaries of depends (package,version relation). Top list is
1345         colected from comma delimited items. Sub lists are | delimited.
1346         (get_comma_list): new function. splits string input among commas
1347         (get_or_list): new function. splits string input among | delimiters
1348         (get_depends_parts): new function. Creates dictionary of package name
1349         and version relation from dependancy string.
1350         Colours for section and depends are per component. Unfound depends
1351         are in bold. Lookups using version info is not supported yet.
1352
1353 2002-11-22  James Troup  <james@nocrew.org>
1354
1355         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1356         'udmsearch'.
1357
1358         * amber (make_advisory): string.atol() is deprecated and hasn't
1359         been ported to string methods.  Use long() instead.
1360
1361         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1362         creating the database since we'll fail badly if it's created with
1363         e.g. UNICODE encoding.
1364
1365         * rose (main): AptCnf is a global.
1366
1367         * neve (get_location_path): new function determines the location
1368         from the the first (left-most) directory of a Filename/Directory.
1369         (process_sources): don't need 'location' anymore.  Use
1370         utils.warn().  Use the Directory: field for each package to find
1371         the .dsc.  Use get_location_path() to determine the location for
1372         each .dsc.
1373         (process_packages): do't need 'location' anymore.  Use
1374         utils.warn().  Use get_location_path().
1375         (do_sources): don't need 'location', drop 'prefix' in favour of
1376         being told the full path to the Sources file, like
1377         process_packages().
1378         (do_da_do_da): main() renamed, so that main can call us in a
1379         try/except.  Adapt for the changes in do_sources() and
1380         process_packages() above.  Assume Sources and Packages file are in
1381         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1382
1383         * katie.conf-security (Location): fixed to reflect reality (all
1384         suites are pool, not legacy).
1385
1386         * utils.py (print_exc): more useful (i.e. much more verbose)
1387         traceback; a recipe from the Python cookbook.
1388         * jenna (main): use it.
1389         * neve (main): likewise.
1390
1391 2002-11-19  James Troup  <james@nocrew.org>
1392
1393         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1394         handling which was FUBAR for multi-suite uploads.  Now we just
1395         make a dictionary of destinations to copy to and iterate over
1396         those.
1397
1398         * fernanda.py (check_deb): run linda as well as lintian.
1399
1400 2002-10-21  James Troup  <james@nocrew.org>
1401
1402         * melanie (main): change X-Melanie to X-Katie and prefix it with
1403         'melanie '.
1404
1405         * lisa (main): prefix X-Katie with 'lisa '.
1406
1407         * jennifer (clean_holding): fix typo in string method changes;
1408         s/file.find(file/file.find(/.
1409
1410         * cron.daily: invoke helena and send the report to ftpmaster.
1411         * cron.daily-non-US: likewise.
1412
1413 2002-10-16  James Troup  <james@nocrew.org>
1414
1415         * kelly (check): call reject() with a blank prefix when parsing
1416         the return of check_dsc_against_db() since it does its own
1417         prefix-ing.
1418
1419         * rose: new script; only handles directory creation initally.
1420
1421         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1422         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1423
1424 2002-10-06  James Troup  <james@nocrew.org>
1425
1426         * rene (main): remove bogus argument handling.
1427
1428         * kelly: katie, renamed.
1429         * cron.daily: adapt for katie being renamed to kelly.
1430         * cron.daily-non-US: likewise.
1431         * amber (main): likewise.
1432
1433         * Changes for python 2.1.
1434
1435         * kelly: time.strftime no longer requires a second argument of
1436         "time.localtime(time.time())".
1437         * logging.py: likewise.
1438         * rhona: likewise.
1439         * shania (init): likewise.
1440
1441         * amber: use augmented assignment.
1442         * catherine (poolize): likewise.
1443         * claire.py (fix_component_section): likewise.
1444         * halle (check_changes): likewise.
1445         * helena: likewise.
1446         * jenna: likewise.
1447         * jennifer: likewise.
1448         * jeri: likewise.
1449         * katie.py: likewise.
1450         * kelly: likewise.
1451         * lisa: likewise.
1452         * madison (main): likewise.
1453         * melanie: likewise.
1454         * natalie: likewise.
1455         * neve: likewise.
1456         * rhona: likewise.
1457         * tea: likewise.
1458         * utils.py: likewise.
1459         * ziyi: likewise.
1460
1461         * amber: use .endswith.
1462         * fernanda.py: likewise.
1463         * halle (main): likewise.
1464         * jennifer: likewise.
1465         * jeri: likewise.
1466         * katie.py: likewise.
1467         * kelly: likewise.
1468         * lisa: likewise.
1469         * neve: likewise.
1470         * shania (main): likewise.
1471         * utils.py: likewise.
1472
1473         * alyson: use string methods.
1474         * amber: likewise.
1475         * andrea: likewise.
1476         * ashley: likewise.
1477         * catherine: likewise.
1478         * charisma: likewise.
1479         * claire.py: likewise.
1480         * db_access.py: likewise.
1481         * denise: likewise.
1482         * halle: likewise.
1483         * heidi: likewise.
1484         * helena: likewise.
1485         * jenna: likewise.
1486         * jennifer: likewise.
1487         * jeri: likewise.
1488         * julia: likewise.
1489         * katie.py: likewise.
1490         * kelly: likewise.
1491         * lisa: likewise.
1492         * logging.py: likewise.
1493         * madison: likewise.
1494         * melanie: likewise.
1495         * natalie: likewise.
1496         * neve: likewise.
1497         * rene: likewise.
1498         * tea: likewise.
1499         * utils.py: likewise.
1500         * ziyi: likewise.
1501
1502 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1503
1504         * utils.py (parse_changes): use <string>.startswith() rather than
1505         string.find().
1506
1507 2002-08-27  Anthony Towns  <ajt@debian.org>
1508
1509         * katie.py (in_override_p): when searching for a source override,
1510         and the dsc query misses, search for both udeb and deb overrides
1511         as well. Should fix the UNACCEPT issues with udebs.
1512
1513 2002-08-24  James Troup  <james@nocrew.org>
1514
1515         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1516         source+binary package finding code which was causing severe
1517         performance degradation with postgres 7.2.
1518
1519 2002-08-14  James Troup  <james@nocrew.org>
1520
1521         * julia (main): use the pwd.getpwall() to get system user info
1522         rather than trying to read a password file.  Add a -n/--no-action
1523         option.
1524
1525         * cron.hourly: julia no longer takes any arguments.
1526         * cron.hourly-non-US: likewise.
1527
1528 2002-08-07  James Troup  <james@nocrew.org>
1529
1530         * katie (install): handle multi-suite uploads when CopyChanges
1531         and/or CopyKatie are in use, ensuring we only copy stuff once.
1532
1533 2002-08-01  Ryan Murray  <rmurray@debian.org>
1534
1535         * wanna-build/trigger.daily: initial commit, with locking
1536         * cron.buildd: add locking against daily run
1537
1538 2002-07-30  James Troup  <james@nocrew.org>
1539
1540         * melanie (main): readd creation of suite_ids_list so melanie is
1541         remotely useful again.
1542
1543         * katie.conf: adopt for woody release; diable
1544         StableDislocationSupport, add oldstable, adjust other suites and
1545         mappings, fix up location.
1546         * katie.conf-non-US: likewise.
1547         * katie.conf-security: likewise.
1548
1549         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1550         stable.
1551         * apt.conf.stable-non-US: likewise.
1552
1553         * apt.conf-security: adapt for woody release; adding oldstable,
1554         oldstable, adjust stable and testing.
1555         * cron.daily-security: likewise.
1556         * cron.buildd-security: likewise.
1557
1558         * apt.conf: adapt for woody release; rename woody-proposed-updates
1559         to testing-proposed-updates and proposed-updates to
1560         old-proposed-updates.
1561         * apt.conf-non-US: likewise.
1562
1563         * vars-non-US (copyoverrides): add sarge.
1564         * vars (copyoverrides): likewise.
1565
1566         * vars-security (suites): add oldstable.
1567
1568 2002-07-22  Ryan Murray  <rmurray@debian.org>
1569
1570         * apt.conf.security-buildd: use suite codenames instead of
1571           distnames.
1572
1573 2002-07-16  James Troup  <james@nocrew.org>
1574
1575         * denise (main): fix filenames for testing override files.
1576
1577 2002-07-14  James Troup  <james@nocrew.org>
1578
1579         * jennifer (process_it): call check_md5sums later so we can check
1580         files in the .dsc too
1581         (check_md5sums): check files in the .dsc too.  Check both md5sum
1582         and size.
1583
1584         * melanie (main): use parse_args() and join_with_commas_and() from
1585         utils.  If there's nothing to do, say so and exit, don't ask for
1586         confirmation etc.
1587
1588         * amber (join_with_commas_and): moved from here to ...
1589         * utils.py (join_with_commas_and): here.
1590
1591 2002-07-13  James Troup  <james@nocrew.org>
1592
1593         * madison (main): use parse_args() from utils.  Support
1594         -c/--component.
1595
1596         * jenna (parse_args): moved from here to ...
1597         * utils.py (parse_args): here.
1598
1599         * katie.conf (Architectures): minor corrections to the description
1600         for arm, mips and mipsel.
1601         * katie.conf-non-US (Architectures): likewise.
1602         * katie.conf-security (Architectures): likewise.
1603
1604         * cron.daily-security: use natalie's new -a/--add functionality to
1605         flesh out the security overrides.
1606
1607 2002-07-12  James Troup  <james@nocrew.org>
1608
1609         * cron.buildd (ARCHS): add arm.
1610
1611         * katie.conf: 2.2r7 was released.
1612         * katie.conf-non-US: likewise.
1613
1614         * utils.py (parse_changes): handle a multi-line field with no
1615         starting line.
1616
1617 2002-06-25  James Troup  <james@nocrew.org>
1618
1619         * templates/amber.advisory (To): add missing email address since
1620         __WHOAMI__ is only a name.
1621
1622         * katie.conf-security (Melane::LogFile): correct to go somewhere
1623         katie has write access to.
1624         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1625         Testing.
1626
1627         * natalie: add support for -a/-add which adds packages only
1628         (ignoring changes and deletions).
1629
1630         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1631         use FindB, not get.
1632
1633 2002-06-22  James Troup  <james@nocrew.org>
1634
1635         * jennifer (check_files): validate the package name and version
1636         field.  If 'Package', 'Version' or 'Architecture' are missing,
1637         don't try any further checks.
1638         (check_dsc): likewise.
1639
1640         * utils.py (re_taint_free): add '~' as a valid character.
1641
1642 2002-06-20  Anthony Towns  <ajt@debian.org>
1643
1644         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1645
1646 2002-06-09  James Troup  <james@nocrew.org>
1647
1648         * jennifer (check_files): reduce useless code.
1649
1650         * cron.daily-security: run symlinks -dr on $ftpdir.
1651
1652         * vars-security (ftpdir): add.
1653
1654 2002-06-08  James Troup  <james@nocrew.org>
1655
1656         * neve (update_override_type): transaction is handled higher up in
1657         main().
1658         (update_priority): likewise.
1659         (process_sources): remove code that makes testing a duplicate of
1660         stable.
1661         (process_packages): likewise.
1662
1663         * templates/amber.advisory: add missing mail headers.
1664
1665         * cron.daily-security: also call apt-ftparchive clean for
1666         apt.conf.buildd-security.
1667         * cron.weekly: likewise.
1668
1669         * amber (do_upload): write out a list of source packages (and
1670         their version) uploaded for testing.
1671         (make_advisory): add more Subst mappings for the mail headers.
1672         (spawn): check for suspicious characters in the command and abort
1673         if their found.
1674
1675 2002-06-07  James Troup  <james@nocrew.org>
1676
1677         * ziyi (main): remove the 'nonus'/'security' hacks and use
1678         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1679         the lower level Release files, even if they don't exist.  fubar
1680         out if we can't open a lower level Release file for writing.
1681
1682         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1683         ziyi.
1684         * katie.conf-security (Dinstall): likewise.
1685
1686         * amber (do_upload): renamed from get_file_list().  Determine the
1687         upload host from the original component.
1688         (init): Add a -n/--no-action option.  Fix how we get changes_files
1689         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1690         sys.argv).  Add an Options global.
1691         (make_advisory): support -n/--no-action.
1692         (spawn): likewise.
1693         (main): likewise.
1694         (usage): document -n/--no-action.
1695
1696         * cron.buildd-security: fix path to Packages-arch-specific in
1697         quinn-diff invocation.
1698
1699         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1700         to proper suite names (i.e. stable, testing) rather than codenames
1701         (potato, woody).
1702         (Dinstall::DefaultSuite): likewise.
1703         (Suite): likewise.
1704         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1705         * vars-security (suites): likewise.
1706         * apt.conf-security: likewise.
1707
1708         * katie.conf-security (Component): add "updates/" prefix.
1709         (Suite::*::Components): likewise.
1710         (ComponentMappings): new; map all {ftp-master,non-US} components
1711         -> updates/<foo>.
1712
1713         * katie.conf-security (Natalie): removed; the options have
1714         defaults and ComponentPosition is used by alyson which doesn't
1715         work on security.d.o.
1716         (Amber): replace UploadHost and UploadDir with ComponentMappings
1717         which is a mapping of components -> URI.
1718         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1719         (SuiteMappings): use "silent-map" in preference to "map".
1720
1721         * cron.unchecked-security: fix call to cron.buildd-security.
1722
1723         * cron.daily-security: map local suite (stable) -> override suite
1724         (potato) when fixing overrides.  Correct component in natalie call
1725         to take into account "updates/" prefix.  Fix cut'n'waste in
1726         override.$dist.all3 generation, the old files weren't being
1727         removed, so they were endlessly growing.
1728
1729         * neve (main): don't use .Find for the CodeName since we require
1730         it.  Location::*::Suites is a ValueList.
1731         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
1732         out on expired keys, just warn.
1733         (update_override_type): new function; lifted from alyson.
1734         (update_priority): likewise.
1735         (main): use update_{override_type,priority}().
1736
1737         * jennifer (check_distributions): remove redunant test for
1738         SuiteMappings; ValueList("does-not-exist") returns [] which is
1739         fine.  Add support for a "silent-map" type which doesn't warn
1740         about the mapping to the user.
1741         (check_files): add support for ComponentMappings, similar to
1742         SuiteMappings, but there's no type, just a source and a
1743         destination and the original component is stored in "original
1744         component".
1745         * katie.py (Katie.dump_vars): add "original component" as an
1746         optionsal files[file] dump variable.
1747
1748         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
1749         query.  Add support for section-less legacy locations like current
1750         security.debian.org through YetAnotherConfigBoolean
1751         'LegacyStableHasNoSections'.
1752         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
1753
1754         * utils.py (real_arch): moved here from ziyi.
1755         * ziyi (real_arch): moved to utils.py.
1756         * ziyi (main): likewise.
1757
1758         * claire.py (find_dislocated_stable): use real_arch() with
1759         filter() to strip out source and all.
1760         * neve (main): likewise.
1761         * rene (main): likewise.
1762         * jeri (parse_packages): likewise.
1763
1764 2002-06-06  James Troup  <james@nocrew.org>
1765
1766         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
1767         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
1768         doing.
1769
1770 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1771
1772         * jeri (check_joey): check if the line contains two elements
1773         before accessing the second.  Also, strip trailing spaces as well
1774         as the newline.
1775         * halle (check_joey): likewise.
1776
1777 2002-06-05  James Troup  <james@nocrew.org>
1778
1779         * cron.unchecked-security: new file; like cron.unchecked but if
1780         there's nothing to do exit so we don't call cron.buildd-security.
1781
1782         * apt.conf.buildd-security: new file.
1783
1784         * vars (archs): alphabetize.
1785         * vars-non-US (archs): likewise.
1786
1787         * vars-security: add unchecked.
1788
1789         * madison (main): reduce rather bizarrely verbose and purposeless
1790         code to print arches to a simple string.join.
1791
1792         * katie.conf (Suites::Unstable): add UdebComponents, a new
1793         valuelist of suites, used by jenna to flesh out the list of
1794         <suite>_main-debian-installer-binary-<arch>.list files generated.
1795         (Dinstall): add StableDislocationSupport, a new boolean used by
1796         jenna to enable or disable stable dislocation support
1797         (i.e. claire), as true.
1798
1799         * katie.conf (Dinstall): add StableDislocationSupport, a new
1800         boolean used by jenna to enable or disable stable dislocation
1801         support (i.e. claire), as true.
1802         * katie.conf-non-US: likewise.
1803         * katie.conf-security: likewise.
1804
1805         * cron.daily-security: generate .all3 overrides for the buildd
1806         support.  Freshen a local copy of Packages-arch-specific from
1807         buildd.debian.org.
1808
1809         * claire.py (find_dislocated_stable): disable the support for
1810         files in legacy-mixed locations since none of the Debian archives
1811         have any anymore.
1812
1813         * helena: new script; produces a report on NEW and BYHAND
1814         packages.
1815
1816         * jenna: rewritten from scratch to fix speed problems.  Run time
1817         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
1818         minutes, 105 seconds are the monster query and 70 odd seconds is
1819         claire.
1820
1821         * apt.conf.buildd (Default): remove MaxContentsChange as it's
1822         irrelevant.
1823
1824 2002-06-05  Ryan Murray  <rmurray@debian.org>
1825
1826         * cron.buildd-security: new file.
1827
1828 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
1829
1830         * denise (list): take a file argument and use it.
1831         (main): don't abuse sys.stdout, just write to the file.
1832
1833         * claire.py (usage): Fix misspelling.
1834         (clean_symlink): Simplify.
1835         (find_dislocated_stable): Avoid unnecessary work.
1836
1837 2002-05-29  James Troup  <james@nocrew.org>
1838
1839         * cameron: removed; apt-ftparchive can simply walk the directory.
1840
1841 2002-05-26  Anthony Towns  <ajt@debian.org>
1842
1843         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
1844         for the autobuilders.
1845
1846 2002-05-24  Ryan Murray  <rmurray@debian.org>
1847
1848         * cron.buildd: update override files before running apt-ftparchive
1849
1850 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1851
1852         * amber (main): remove extra space in prompt.
1853
1854         * utils.py (validate_changes_file_arg): use original filename in
1855         error messages.
1856
1857         * jeri (check_joey): close file after use.
1858         (parse_packages): likewise.
1859         (main): setup debug option properly.
1860
1861         * melanie (main): remove unused packages variable and simplify the
1862         code to build up con_packages by using repr().
1863
1864 2002-05-23  James Troup  <james@nocrew.org>
1865
1866         * lisa (recheck): when we reject, also return 0 so the package is
1867         skipped.
1868         (sg_compare): fix note sorting.
1869         (recheck): remove the .katie file after rejection.
1870
1871         * katie.py (Katie.accept): accepted auto-build support take 3;
1872         this time adding support for security.  Security needs a) non-pool
1873         files copied rather than symlinked since accepted is readable only
1874         by katie/security and www-data needs to be able to see the files,
1875         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
1876         AcceptedAutoBuildSuites and is a ValueList containing the suites.
1877         SecurityAcceptedAutoBuild is a new boolean which controls whether
1878         or not normal or security style is used.  The unstable_accepted
1879         table was renamed to accepted_autobuild and a suite column added.
1880         Also fix a bug noticed by Ryan where an existent orig.tar.gz
1881         didn't have it's last_used/in_accepted flags correctly updated.
1882         * katie (install): likewise.
1883         * rhona (clean_accepted_autobuild): likewise.
1884
1885 2002-05-22  James Troup  <james@nocrew.org>
1886
1887         * lisa (sort_changes): new function; sorts changes properly.
1888         Finally.
1889         (sg_compare): new function; helper for sort_changes().  Sorts by
1890         have note and time of oldest upload.
1891         (indiv_sg_compare): new function; helper for sort_changes().
1892         Sorts by source version, have source and filename.
1893         (main): use sort_changes().
1894         (changes_compare): obsoleted; removed.
1895
1896 2002-05-20  James Troup  <james@nocrew.org>
1897
1898         * rhona (clean_accepted_autobuild): don't die if a file we're
1899         trying to remove doesn't exist.  Makes rhona more friendly to
1900         katie/katie.py crashes/bugs without any undue cost.
1901
1902 2002-05-19  James Troup  <james@nocrew.org>
1903
1904         * lisa (main): if sorting a large number of changes give some
1905         feedback.
1906         (recheck): new function, run the same checks (modulo NEW,
1907         obviously) as katie does, if they fail do the standard
1908         reject/skip/quit dance.
1909         (do_pkg): use it.
1910
1911         * katie (install): don't try to unlink the symlink in the
1912         AcceptedAutoBuild support if the destination is not a symlink (or
1913         doesn't exist).  Avoids unnecessary bombs on previous partial
1914         accepts and will still bomb hard if the file exists and isn't a
1915         symlink.
1916
1917         * utils.py: blah, commands _is_ used when the mail stuff isn't
1918         commented out like it is in my test environment.
1919
1920         * lisa (changes_compare): "has note" overrides everything else.
1921         Use .katie files rather than running parse_changes, faster and
1922         allows "has note" to work.  Correct version compare, it was
1923         reversed.  Ctime check should only kick in if the source packages
1924         are not the same.
1925         (print_new): print out and return any note.  Rename 'ret_code' to
1926         'broken'.
1927         (edit_new): renamed from spawn_editor.  Don't leak file
1928         descriptors.  Clean up error message if editor fails.
1929         (edit_note): new function, allows one to edit notes.
1930         (do_new): add note support, editing and removing.
1931         (init): kill -s/--sort; with notes we always want to use our
1932         sorting method.
1933         (usage): likewise.
1934
1935         * katie.py (Katie.dump_vars): add "lisa note" as an optional
1936         changes field.
1937
1938         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
1939         it default to 0.  Adapt tests to assume it's boolean.
1940         * fernanda.py (check_changes): adjust call appropriately.
1941         * halle (check_changes): likewise.
1942         * jennifer (check_changes): likewise.
1943         * jeri (check_changes): likewise.
1944         * shania (flush_orphans): likewise.
1945
1946         * jennifer (check_dsc): pass is_a_dsc by name when calling
1947         build_file_list() for clarity.
1948         * shania (flush_orphans): likewise.
1949         * tea (check_missing_tar_gz_in_dsc): likewise.
1950
1951         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
1952         calling parse_changes() for clarity.
1953         * tea (check_dscs): likewise.
1954
1955         * utils.py (parse_changes): make dsc_whitespace_rules default to
1956         not true.
1957         * halle (check_changes): adjust call appropriately.
1958         * jennifer (check_changes): likewise.
1959         * jeri (check_changes): likewise.
1960         * lisa (changes_compare): likewise.
1961         * utils.py (changes_compare): likewise.
1962         * melanie (main): likewise.
1963         * shania (flush_orphans): likewise.
1964         * fernanda.py (check_changes): likewise.
1965
1966 2002-05-18  James Troup  <james@nocrew.org>
1967
1968         * katie.py (Katie.dump_vars): make the .katie file unreadable,
1969         it's not useful and by and large a duplication of information
1970         available in readable format in other files.
1971
1972 2002-05-16  Ryan Murray  <rmurray@debian.org>
1973
1974         * melanie: Dir::TemplatesDir -> Dir::Templates
1975
1976 2002-05-15  Ryan Murray  <rmurray@debian.org>
1977
1978         * cameron: correct the use of os.path.join
1979
1980 2002-05-15  Anthony Towns  <ajt@debian.org>
1981
1982         * ziyi: Update to match the new format for Architectures/Components
1983         in katie.conf.
1984
1985 2002-05-14  James Troup  <james@nocrew.org>
1986
1987         * amber: new script; 'installer' wrapper script for the security
1988         team.
1989
1990         * katie.py (Katie.announce): remove unused 'dsc' local
1991         variable. (pychecker)
1992
1993         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
1994
1995         * neve: don't import sys, we don't use it. (pychecker)
1996         (check_signature): fix return type mismatch. (pychecker)
1997
1998         * utils.py: don't import commands, we don't use it.  (pychecker)
1999
2000         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2001
2002         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2003         obsoleted by the change to "othercomponents" handling in jennifer
2004         detailed below.
2005         (Katie.cross_suite_version_check): new function; implements
2006         cross-suite version checking rules specified in the conf file
2007         while also enforcing the standard "must be newer than target
2008         suite" rule.
2009         (Katie.check_binary_against_db): renamed, since it's invoked once
2010         per-binary, "binaries" was inaccurate.  Use
2011         cross_suite_version_check() and don't bother with the "oldfiles"
2012         rubbish as jennifer works out "othercomponents" herself now.
2013         (Katie.check_source_against_db): use cross_suite_version_check().
2014
2015         * katie (check): the version and file overwrite checks
2016         (check_{binary,source,dsc}_against_db) are not per-suite.
2017
2018         * jennifer (check_files): less duplication of
2019         'control.Find("Architecture", "")' by putting it in a local
2020         variable.
2021         (check_files): call check_binary_against_db higher up since it's
2022         not a per-suite check.
2023         (check_files): get "othercomponents" directly rather than having
2024         check_binary_against_db do it for us.
2025
2026         * heidi (main): 'if x:', not 'if x != []:'.
2027         * katie.py (Katie.in_override_p): likewise.
2028         (Katie.check_dsc_against_db): likewise.
2029         * natalie (main): likewise.
2030         * rene (main): likewise.
2031         * ziyi (real_arch): likewise.
2032
2033         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2034         and OverrideType are now value lists, not lists.
2035         * andrea (main): likewise.
2036         * cindy (main): likewise.
2037         * claire.py (find_dislocated_stable): likewise.
2038         * denise (main): likewise.
2039         * jenna (main): likewise.
2040         * jennifer (check_distributions): likewise.
2041         (check_files): likewise.
2042         (check_urgency): likewise (Urgency::Valid).
2043         * jeri (parse_packages): likewise.
2044         * neve (main): likewise (and Location::%s::Suites).
2045         * rene (main): likewise.
2046
2047 2002-05-13  James Troup  <james@nocrew.org>
2048
2049         * katie.py (Katie.check_source_against_db): correct case of reject
2050         message to be consistent with binary checks.
2051
2052         * jennifer (get_status_output): don't leak 2 file descriptors per
2053         invocation.
2054         (check_signature): add missing '\n' to "duplicate status token"
2055         error message.
2056
2057 2002-05-09  James Troup  <james@nocrew.org>
2058
2059         * utils.py (validate_changes_file_arg): new function; validates an
2060         argument which should be a .changes file.
2061         * ashley (main): use it.
2062         * lisa (main): likewise.
2063
2064         * katie.py (Katie.check_dsc_against_db): since there can be more
2065         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2066         entry still exists in files.
2067
2068         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2069         files, since check_dsc_against_db() deletes the .orig.tar.gz
2070         entry.
2071
2072         * cameron: cleanups.
2073
2074         * utils.py (changes_compare): change sort order so that source
2075         name and source version trump 'have source'; this should fix
2076         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2077         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2078         by Ryan.
2079
2080         * lisa (main): allow the arguments to be .katie files too.
2081
2082 2002-05-07  Ryan Murray  <rmurray@debian.org>
2083
2084         * cron.buildd: add s390 to arch list again
2085
2086 2002-05-05  Ryan Murray  <rmurray@debian.org>
2087
2088         * cron.buildd: new script, update w-b database from unstable_accepted
2089         table
2090         * cameron: new script, take list in unstable_accepted and write out
2091         a file list for apt-ftparchive
2092         * apt.conf.buildd: new apt configuration for Packages/Sources for
2093         unstable_accepted
2094         * vars: add s390 to arch list.
2095
2096 2002-05-03  James Troup  <james@nocrew.org>
2097
2098         * neve (main): don't hard code the calling user as that doesn't
2099         work with modern postgres installs.  Fix psql invocation for
2100         init_pool.sql (database name required).  Dont' hard code the
2101         database name.
2102         (process_sources): add support for fingerprint and install_date.
2103         (process_packages): add support for fingerprint.
2104         (do_sources): pass in the directory, fingerprint support needs it.
2105         (get_status_output): borrowed from jennifer.
2106         (reject): likewise.
2107         (check_signature): likewise.
2108
2109         * katie (install): only try to log urgencies if Urgency_Logger is
2110         defined.
2111         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2112         defined; only close Urgency_Logger if it's defined.
2113
2114         * catherine (poolize): adapt for Dir rationalization.
2115         * claire.py (find_dislocated_stable): likewise.
2116         * denise (main): likewise.
2117         * halle (check_joey): likewise.
2118         * jenna: likewise.
2119         * jennifer: likewise.
2120         * jeri: likewise.
2121         * katie.py: likewise.
2122         * katie: likewise.
2123         * lisa (do_bxa_notification): likewise.
2124         * logging.py (Logger.__init__): likewise
2125         * rene (main): likewise.
2126         * rhona (clean): likewise.
2127         * shania (init): likewise.
2128         * tea: likewise.
2129         * ziyi: likewise.
2130
2131         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2132         FindB, not FindI.
2133
2134         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2135         boolean, use FindB, not get.
2136
2137         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2138         .orig.tar.gz's which are an exact (size/md5sum) match.
2139
2140         * ashley (main): really allow *.katie files as arguments too;
2141         noticed by aj.
2142
2143         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2144
2145 2002-05-03  Anthony Towns  <ajt@debian.org>
2146
2147         * ziyi: support for security.
2148
2149 2002-05-02  James Troup  <james@nocrew.org>
2150
2151         * jennifer (accept): call Katie.check_override() unconditional as
2152         no-mail check moved into that function.
2153         (do_byhand): likewise.
2154
2155         * katie.py (Katie.check_override): don't do anything if we're a)
2156         not sending mail or b) the override disparity checks have been
2157         disbled via Dinstall::OverrideDisparityCheck.
2158
2159         * jennifer (check_files): don't hard code Unstable as the suite
2160         used to check for architecture validity; use
2161         Dinstall::DefaultSuite instead, if it exists.
2162         (accept): conditionalize
2163
2164         * katie.py (Katie.update_subst): support global maintainer
2165         override with Dinstall::OverrideMaintainer.
2166
2167         * jennifer (check_distributions): new function, Distribution
2168         validation and mapping.  Uses new SuiteMappings variable from
2169         config file to abstract suite mappings.
2170         (check_changes): call it.
2171
2172         * natalie: renamed; nothing imports or likely will for some time.
2173
2174         * denise (main): remove unused natalie import and init().
2175
2176         * natalie.py (init): removed.
2177         (main): initalize here instead and don't hardcode the database
2178         name.
2179
2180 2002-04-30  James Troup  <james@nocrew.org>
2181
2182         * katie.py (Katie.close_bugs): new function, split out from
2183         announce().
2184         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2185         true.
2186         (Katie.close_bugs): new function, split out
2187         (Katie.close_bugs): return immediately if there are no bugs to
2188         close.
2189
2190         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2191         * katie (do_reject): likewise.
2192         (stable_install): likewise.
2193         * katie.py (Katie.announce): likewise.
2194         (Katie.accept): likewise.
2195         (Katie.check_override): likewise.
2196         (Katie.do_reject): likewise.
2197         * lisa (do_bxa_notification): likewise.
2198         * melanie (main): likewise.
2199
2200         * utils.py (TemplateSubst): change second argument to be a
2201         filename rather than a template since every caller opened a file
2202         on the fly which was ugly and leaked file descriptor.
2203
2204 2002-04-29  James Troup  <james@nocrew.org>
2205
2206         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2207         <hertzog@debian.org> to send 'accepted' announce mails to the
2208         PTS. [#128140]
2209
2210 2002-04-24  James Troup  <james@nocrew.org>
2211
2212         * init_pool.sql (unstable_accepted): add two new fields to
2213         unstable_accepted; in_accepted is a boolean indicating whether or
2214         not the file is in accepted and last_used is a timestamp used by
2215         rhona to determine when to remove symlinks for installed packages.
2216
2217         * katie.py (Katie.accept): auto-build support take 2.  Create
2218         symlinks for all files into a seperate directory.  Add files to
2219         unstable_accepted as paths to the new directory; mark them as
2220         being in accepted for cameron.  Properly conditionalize it on a
2221         configuration variable.
2222
2223         * katie (install): likewise.  Update symlinks to point into the
2224         pool; mark the files for later deletion by rhona and mark them as
2225         not being in accepted for cameron.
2226
2227         * rhona (clean_accepted_autobuild): new function.
2228
2229 2002-04-22  James Troup  <james@nocrew.org>
2230
2231         * jennifer (check_files): handle db_access.get_location_id()
2232         returning -1 properly/better.
2233
2234         * rhona (clean_fingerprints): new function.
2235
2236 2002-04-21  James Troup  <james@nocrew.org>
2237
2238         * utils.py (touch_file): unused; remove.
2239         (plural): likewise.
2240
2241         * jennifer (check_files): close file descriptor used to get the
2242         control file.
2243         (check_md5sums): likewise.
2244         (callback): likewise.
2245
2246         * katie.py (Katie.do_reject): handle manual rejects much better;
2247         call the editor first and get confirmation from the user before
2248         proceeding.
2249
2250         * jennifer (check_signature): prefix_multi_line_string() moved to
2251         utils.
2252
2253         * utils.py (prefix_multi_line_string): moved here from jennifer.
2254
2255 2002-04-20  James Troup  <james@nocrew.org>
2256
2257         * lisa (main): handle non-existent files.
2258
2259         * ashley (main): allow *.katie files as arguments too.
2260
2261 2002-04-19  James Troup  <james@nocrew.org>
2262
2263         * katie.py (Katie.accept): add stuff to help auto-building from
2264         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2265         in the pool), create a symlink to it in the accepted directory and
2266         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2267
2268         * katie (install): undo the "auto-building from accepted" stuff
2269         (i.e. remove the .orig.tar.gz symlink and remove the files from
2270         unstable_accepted table).
2271
2272 2002-04-16  James Troup  <james@nocrew.org>
2273
2274         * jennifer (upload_too_new): fix typo which was causing all
2275         timestamp comparisons to be against the .changes file.  Also move
2276         back to the original directory so we do the comparisons against
2277         accurate timestamps.
2278
2279         * tea (check_missing_tar_gz_in_dsc): new function.
2280
2281         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2282         file mentioned in the .dsc.
2283
2284         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2285         way mails reach debian-{devel-,}changes@l.d.o.
2286
2287 2002-04-02  Ryan Murray  <rmurray@debian.org>
2288
2289         * cron.daily: run shania after rhona
2290         * cron.daily-non-US: likewise.
2291
2292 2002-04-01  James Troup  <james@nocrew.org>
2293
2294         * katie: re-add proposed-updates/stable install support.
2295
2296         * katie.py (Katie.dump_vars): add changes["changes"] as an
2297         optional field; should be mandatory later.
2298
2299 2002-03-31  James Troup  <james@nocrew.org>
2300
2301         * katie (install): support a Suite::<foo>::CopyKatie similar to
2302         CopyChanges.  Done seperately because .katie files don't need to
2303         be mirrored and will probably be copied to another directory as a
2304         result.
2305
2306         * halle (main): add missing debug to options.
2307
2308 2002-03-29  James Troup  <james@nocrew.org>
2309
2310         * madison (main): add a -r/--regex option.
2311
2312 2002-03-26  James Troup  <james@nocrew.org>
2313
2314         * lisa: don't trample on changes["distribution"]; make a copy of
2315         it as changes["suite"] instead and use that.
2316
2317 2002-03-16  Anthony Towns  <ajt@debian.org>
2318
2319         * templates/lisa.bxa_notification: Fix some grammatical errors.
2320         Encourage contact via bxa@ftp-master email address.
2321
2322 2002-03-15  James Troup  <james@nocrew.org>
2323
2324         * jennifer (check_timestamps): remove bogus raise in except.
2325
2326 2002-03-15  Anthony Towns  <ajt@debian.org>
2327
2328         * cron.monthly: rotate mail/archive/bxamail as well as
2329         mail/archive/mail. This is for a complete archive of
2330         correspondence with the BXA.
2331
2332 2002-03-14  Anthony Towns  <ajt@debian.org>
2333
2334         * crypto-in-main changes.
2335
2336         * utils.py (move, copy): add an optional perms= parameter to let you
2337         set the resulting permissions of the moved/copied file
2338         * katie.py (force_move): rejected/morgued files should be unreadable
2339         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2340         should be unreadable.
2341
2342 2002-03-07  Ryan Murray  <rmurray@debian.org>
2343
2344         * katie (install): check for existance of "files id" key as well as
2345         it being set to a valid value.
2346         * katie (install): check for existense and valid value for location
2347         id as well
2348
2349 2002-03-05  Ryan Murray  <rmurray@debian.org>
2350
2351         * katie.py (do_reject): reread the reason file after editing it.
2352
2353 2002-02-25  James Troup  <james@nocrew.org>
2354
2355         * jennifer (check_changes): don't enforce sanity in .changes file
2356         names since it doesn't seem to be possible; pcmica-cs and similar
2357         freak show packages in particular cause real problems.
2358
2359         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2360         each dsc_file since the .orig.tar.gz checking code now uses it as
2361         a boolean.  Fixes bizarro rejections which bogusly claimed
2362         .diff.gz md5sum/size was incorrect.
2363
2364 2002-02-24  James Troup  <james@nocrew.org>
2365
2366         * katie (process_it): reset reject_message.
2367
2368 2002-02-22  James Troup  <james@nocrew.org>
2369
2370         * db_access.py(set_files_id): disable use of
2371         currval('files_id_seq') because it was taking 3 seconds on auric
2372         which is insane (most calls take < 0.01) and simply call
2373         get_files_id() for the return value instead.
2374
2375         * katie.py (Katie.do_query): convenience function; unused by
2376         default, useful for profiling.
2377         * db_access.py (do_query): likewise.
2378
2379         * katie (install): fix insert SQL call when binary has no source.
2380
2381         * lisa (determine_new): auto-correct non-US/main to non-US.
2382         (determine_new): add a warning when adding things to stable.
2383         (edit_index): use our_raw_input().
2384         (edit_overrides): likewise.
2385         (do_new): likewise.  Use re.search() not re.match() since the
2386         default answer may not be the first one.
2387         (do_byhand): likewise.
2388         (do_new): Default to 'S'kip and never 'A'dd.
2389
2390         * jennifer (action): pass prompt to our_raw_input().
2391         * melanie (game_over): likewise.
2392         * katie (action): likewise.
2393
2394         * utils.py (our_raw_input): add an optional prompt argument to
2395         make the function more usable as a drop in replacement for
2396         raw_input().
2397
2398         * jennifer (check_files): correct reject() to not double prefix
2399         when using katie.py based functions.
2400         (check_dsc): likewise.
2401
2402         * katie.py (Katie.reject): prepend a new line if appropriate
2403         rathen than appending one to avoid double new lines when caller
2404         adds one of his own.
2405
2406         * lisa (determine_new): warn if the package is also in other
2407         components.
2408
2409 2002-02-20  James Troup  <james@nocrew.org>
2410
2411         * jennifer (check_files): if .changes file lists "source" in
2412         Architecture field, there must be a .dsc.
2413
2414 2002-02-15  James Troup  <james@nocrew.org>
2415
2416         * ashley (main): add some missing fields.
2417
2418         * katie.py (Katie.check_dsc_against_db): fix to take into account
2419         the fact that the .orig.tar.gz might be in byhand, accepted or
2420         new.  Also fix calling of reject().
2421         (Katie.check_binaries_against_db): fix calling of reject().
2422         (Katie.check_source_against_db): likewise.
2423         (Katie.dump_vars): add missing variables used for bug closures.
2424
2425         * lisa (changes_compare_by_time): sort by reverse time.
2426
2427         * katie.py (Katie.accept): log.
2428         (Katie.dump_vars): missing has_key test for optional changes fields.
2429
2430         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2431         (process_it): traceback goes to stderr, not stdout.
2432         (acknowledge_new): log.
2433         (do_byhand): likewise.
2434
2435         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2436
2437         * add_constraints.sql: add grants for the new fingerprint table.
2438
2439 2002-02-13  James Troup  <james@nocrew.org>
2440
2441         * katie (do_reject): basename the .changes filename before trying
2442         to use it to construct the .reason filename.
2443         (process_it): call Katie.update_subst() so do_reject() DTRT with
2444         the mail template.
2445         (do_reject): setup the mail template correctly.
2446
2447 2002-02-12  James Troup  <james@nocrew.org>
2448
2449         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2450         (check_files): don't abuse global dictionaries.
2451         (Ent): use all variables.
2452         (check_timestamps): don't abuse global dictionaries.
2453
2454         * fernanda.py: renamed to .py so lisa can import it.
2455         (check_dsc): remove unused local variables (pychecker).
2456         (display_changes): split off from check_changes.
2457
2458         * katie: rewritten; most of the functionality moves to jennifer;
2459         what's left is the code to install packages once a day from the
2460         'accepted' directory.
2461
2462         * jennifer: new program, processes packages in 'unchecked'
2463         (i.e. most of the non-install functionality of old katie).
2464
2465         * katie.py: common functions shared between the clique of
2466         jennifer, lisa and katie.
2467
2468         * lisa: new program; handles NEW and BYHAND packages.
2469
2470         * jeri (usage): new function.
2471         (main): use it.
2472         (check_package): remove unused local variable (pychecker).
2473
2474         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2475         binaries and source.  Add install_date to source.
2476
2477         * halle (usage): new function.
2478         (main): use it.  Remove unused options.
2479         (check_changes): remove unused local variable (pychecker).
2480
2481         * add_constraints.sql: add fingerprint references.
2482
2483         * db_access.py (get_or_set_fingerprint_id): new function.
2484
2485         * ashley (main): new program; dumps the contents of a .katie file
2486         to stdout.
2487
2488         * alyson (main): remove option handling since we don't actually
2489         support any.
2490         * cindy (main): likewise.
2491
2492         * remove unnecessary imports and pre-define globals (pychecker).
2493
2494 2002-02-11  Anthony Towns  <ajt@debian.org>
2495
2496         * added installation-report and upgrade-report pseudo-packages
2497
2498 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2499
2500         * katie (update_subst): use Dinstall::TrackingServer.
2501         * melanie (main): likewise.
2502
2503 2002-01-27  James Troup  <james@nocrew.org>
2504
2505         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2506         noticing, jgg@ for fix.
2507
2508 2002-01-19  James Troup  <james@nocrew.org>
2509
2510         * utils.py (extract_component_from_section): handle non-US
2511         non-main properly.
2512
2513 2002-01-12  James Troup  <james@nocrew.org>
2514
2515         * madison: add support for -S/--source-and-binary which displays
2516         information for the source package and all it's binary children.
2517
2518 2002-01-13  Anthony Towns  <ajt@debian.org>
2519
2520         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2521         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2522           and 2002 key ids.
2523         * katie.conf-non-US: Likewise.
2524         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2525           multiple keys automatically. This is probably only useful for
2526           transitioning from an expired (or revoked?) key.
2527
2528 2002-01-08  Ryan Murray  <rmurray@debian.org>
2529
2530         * debian/python-dep: new file that prints out python:Depends for
2531           substvars
2532         * debian/control: use python:Depends, build-depend on python
2533           lower Depends: on postgresql to Suggests:
2534         * debian/rules: determine python version, install to the correct
2535           versioned dir
2536
2537 2001-12-18  Anthony Towns  <ajt@debian.org>
2538
2539         * ziyi: unlink Release files before overwriting them (in case they've
2540           been merged)
2541         * ziyi: always include checksums/sizes for the uncompressed versions
2542           of Sources and Packages, even if they're not present on disk
2543
2544 2001-11-26  Ryan Murray  <rmurray@debian.org>
2545
2546         * ziyi (main): add SigningPubKey config option
2547         * katie.conf: use SigningPubKey config option
2548         * katie.conf-non-US: likewise
2549
2550 2001-11-24  James Troup  <james@nocrew.org>
2551
2552         * katie (acknowledge_new): log newness.
2553
2554 2001-11-24  Anthony Towns  <ajt@debian.org>
2555
2556         * ziyi (real_arch): bail out if some moron forgot to reset
2557         untouchable on stable.
2558         (real_arch): source Release files.
2559
2560 2001-11-19  James Troup  <james@nocrew.org>
2561
2562         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2563         utils.get_conf().
2564         * shania (main): likewise.
2565
2566         * rhona (main): add default options.
2567
2568         * db_access.py (get_archive_id): case independent.
2569
2570         * katie (action): sort files so that ordering is consistent
2571         between mails; noticed/requested by Joey.
2572
2573 2001-11-17  Ryan Murray  <rmurray@debian.org>
2574
2575         * utils.py: add get_conf function, change startup code to read all
2576           config files to the Cnf that get_conf returns
2577           use the component list from the katie conf rather than the hardcoded
2578           list.
2579         * all scripts: use new get_conf function
2580         * shania: fix try/except around changes files
2581         * jenna: only do debian-installer if it is a section in Cnf
2582
2583 2001-11-16  Ryan Murray  <rmurray@debian.org>
2584
2585         * shania (main): Initialize days to a string of a number.
2586                  (main): Initialize Cnf vars before reading in Cnf
2587
2588 2001-11-14  Ryan Murray  <rmurray@debian.org>
2589
2590         * shania (main): Initialize days to a number.
2591
2592 2001-11-04  James Troup  <james@nocrew.org>
2593
2594         * docs/Makefile: use docbook-utils' docbook2man binary.
2595
2596         * Change all "if foo == []" constructs into "if not foo".
2597
2598         * katie (check_changes): when installing into stable from
2599         proposed-updates, remove all non-stable target distributions.
2600         (check_override): don't check for override disparities on stable
2601         installs.
2602         (stable_install): update install_bytes appropriately.
2603         (reject): stable rejection support; i.e. don't remove files when
2604         rejecting files in the pool, rather remove them from the
2605         proposed-update suite instead, rhona will do the rest.
2606         (manual_reject): support for a stable specific template.
2607         (main): setup up stable rejector in subst.
2608
2609 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2610
2611         * debian/control (Build-Depends): docbook2man has been superseded
2612         by docbook-utils.
2613
2614         * neve (main): exit with a more useful error message.
2615         (update_suites): Suite::<suite>::Version, Origin and Description
2616         are not required, so don't fail if they don't exist.
2617
2618         * db_access.py (get_archive_id): return -1 on error rather than
2619         raise an exception.
2620         (get_location_id): likewise.
2621
2622         * madison (main): don't exit on the first not-found package,
2623         rather exit with an appropriate return code after processing all
2624         packages.
2625
2626 2001-11-03  James Troup  <james@nocrew.org>
2627
2628         * claire.py (find_dislocated_stable): add per-architecture
2629         symlinks for dislocated architecture: all debs.
2630
2631 2001-10-19  Anthony Towns  <ajt@debian.org>
2632
2633         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2634
2635 2001-10-10  Anthony Towns  <ajt@debian.org>
2636
2637         * claire.py (fix_component_section): do _not_ assign to None under
2638         any circumstances
2639
2640 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2641
2642         * melanie (main): don't duplicate architectures when removing from
2643         more than one suite.
2644
2645         * heidi (main, process_file, get_list): report suite name not ID.
2646
2647         * naima (nmu_p): be case insensitive.
2648
2649         * naima (action): more list handling clean ups.
2650
2651         * melanie (main): clean up lists handling to use string.join and
2652         IN's.
2653
2654         * madison (main): clean up suite and architecture argument parsing
2655         to use slices less and string.join more.
2656
2657         * utils.py (parse_changes): Use string.find() instead of slices for
2658         string comparisons thereby avoid hardcoding the length of strings.
2659         * ziyi (main): likewise.
2660
2661 2001-10-07  James Troup  <james@nocrew.org>
2662
2663         * Remove mode argument from utils.open_files() calls if it's the
2664         default, i.e. 'r'.
2665
2666 2001-09-27  James Troup  <james@nocrew.org>
2667
2668         * katie (init): new function; options clean up.
2669         (usage): add missing options, remove obsolete ones.
2670         (main): adapt for the two changes above.  If the lock file or
2671         new-ack log file don't exist, create them.  Don't try to open the
2672         new-ack log file except running in new-ack mode.
2673
2674         * alyson (main): initialize all the tables that are based on the
2675         conf file.
2676
2677         * utils.py (touch_file): like touch(1).
2678         (where_am_i): typo.
2679
2680         * catherine (usage): new.
2681         (main): use it.  options cleanup.
2682         * claire.py: likewise.
2683         * fernanda: likewise.
2684         * heidi: likewise.
2685         * jenna: likewise.
2686         * shania: likewise.
2687         * ziyi: likewise.
2688
2689         * andrea: options cleanup.
2690         * charisma: likewise.
2691         * julia: likewise.
2692         * madison: likewise.
2693         * melanie: likewise.
2694         * natalie: likewise.
2695         * rhona: likewise.
2696         * tea: likewise.
2697
2698 2001-09-26  James Troup  <james@nocrew.org>
2699
2700         * utils.py: default to sane config file locations
2701         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2702         or they can point to the real ones through use of a new Config
2703         section.  Based on an old patch by Adam Heath.
2704         (where_am_i): use the new default config stuff.
2705         (which_conf_file): likewise.
2706         (which_apt_conf_file): likewise.
2707
2708         * charisma (main): output defaults to
2709         `Package~Version\tMaintainer'; input can be of either form.  When
2710         parsing the new format do version comparisons, when parsing the
2711         old format assume anything in the extra file wins.  This fixes the
2712         problem of newer non-US packages being overwhelmed by older
2713         versions still in stable on main.
2714
2715 2001-09-17  James Troup  <james@nocrew.org>
2716
2717         * natalie.py (list): use result_join().
2718
2719         * denise (main): result_join() moved to utils.
2720
2721         * utils.py (result_join): move to utils; add an optional seperator
2722         argument.
2723
2724 2001-09-14  James Troup  <james@nocrew.org>
2725
2726         * heidi (set_suite): new function; does --set like natalie does,
2727         i.e. turns it into a sequence of --add's and --remove's
2728         internally.  This is a major win (~20 minute run time > ~20
2729         seconds) in the common, everday (i.e. testing) case.
2730         (get_id): common code used by set_suite() and process_file().
2731         (process_file): call set_suite() and get_id().
2732         (main): add logging support.
2733
2734         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
2735         files.
2736
2737         * utils.py (parse_changes): use slices or simple string comparison
2738         in favour of regexes where possible.
2739
2740         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
2741         fact that the string VARDATA() points to are not null terminated.
2742
2743         * denise (result_join): new function; like string.join() but
2744         handles None's.
2745         (list): use it.
2746         (main): likewise.
2747
2748         * charisma (main): python-pygresql 7.1 returns None not "".
2749
2750 2001-09-14  Ryan Murray  <rmurray@debian.org>
2751
2752         * natalie.py (list): handle python-pygresql 7.1 returning None.
2753
2754 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
2755
2756         * madison (main): return 1 if no package is found.
2757
2758 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
2759
2760         * madison (main): better error handling for incorrect
2761         -a/--architecture or -s/--suite arguments.
2762         (usage): new.
2763         (main): use it.
2764
2765 2001-09-05  Ryan Murray  <rmurray@debian.org>
2766
2767         * charisma, madison, katie: remove use of ROUser
2768         * katie.conf,katie.conf-non-US: remove defintion of ROUser
2769
2770 2001-08-26  James Troup  <james@nocrew.org>
2771
2772         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
2773         maintained packages at cjwatson@'s request.
2774
2775 2001-08-21  James Troup  <james@nocrew.org>
2776
2777         * madison (main): add -a/--architecture support.
2778
2779         * jenna: use logging instead of being overly verbose on stdout.
2780
2781 2001-08-11  Ryan Murray  <rmurray@debian.org>
2782
2783         * melanie: add functional help option
2784
2785 2001-08-07  Anthony Towns  <ajt@debian.org>
2786
2787         * apt.conf, katie.conf: Add ia64 and hppa to testing.
2788
2789 2001-07-28  James Troup  <james@nocrew.org>
2790
2791         * katie (check_dsc): ensure source version is >> than existing
2792         source in target suite.
2793
2794 2001-07-25  James Troup  <james@nocrew.org>
2795
2796         * natalie.py: add logging support.
2797
2798         * utils.py (open_file): make the second argument optional and
2799         default to read-only.
2800
2801         * rene (main): work around broken source packages that duplicate
2802         arch: all packages with arch: !all packages (no longer allowed
2803         into the archive by katie).
2804
2805 2001-07-13  James Troup  <james@nocrew.org>
2806
2807         * katie (action): don't assume distribution is a dictionary.
2808         (update_subst): don't assume architecture is a dictionary and that
2809         maintainer822 is defined.
2810         (check_changes): recognise nk_format exceptions.
2811         (check_changes): reject on 'testing' only uploads.
2812         (check_files): when checking to ensure all packages are newer
2813         versions check against arch-all packages too.
2814         (check_dsc): enforce the existent of a sane set of mandatory
2815         fields.  Ensure the version number in the .dsc (modulo epoch)
2816         matches the version number in the .changes file.
2817
2818         * utils.py (changes_compare): ignore all exceptions when parsing
2819         the changes files.
2820         (build_file_list): don't UNDEF on a changes file with no format
2821         field.
2822
2823 2001-07-07  James Troup  <james@nocrew.org>
2824
2825         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
2826         rather than 'changedbyname' to avoid false negatives on uploads
2827         with an email-address-only Changed-By field.
2828         (check_dsc): don't overwrite reject_message; append to it.
2829         (check_signature): likewise.
2830         (check_changes): likewise.
2831         (announce): condition logging on 'action'.
2832
2833         * logging.py: new logging module.
2834
2835         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
2836         sub-tree into a separate (global) variable.
2837         (check_dsc): ensure format is 1.0 to retain backwards
2838         compatability with dpkg-source in potato.
2839         (main): only try to obtain the lock when not running in no-action
2840         mode.
2841         Use the new logging module.
2842
2843         * christina: initial version; only partially usable.
2844
2845 2001-06-28  Anthony Towns  <ajt@debian.org>
2846
2847         * apt.conf: Add ExtraOverrides to auric.
2848
2849 2001-06-25  James Troup  <james@nocrew.org>
2850
2851         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
2852         they preferred the name 'Uploaders'.
2853
2854 2001-06-23  James Troup  <james@nocrew.org>
2855
2856         * katie (check_files): fix typo in uncommon rejection message,
2857         s/sourceversion/source version/.
2858
2859         * denise (main): we can't use print because stdout has been
2860         redirected.
2861
2862         * katie (source_exists): new function; moved out of check_files()
2863         and added support for binary-only NMUs of earlier sourceful NMUs.
2864
2865         * rhona (clean): find_next_free has moved.
2866
2867         * utils.py (find_next_free): new function; moved here from rhona.
2868         Change too_many to be an argument with a default value, rather
2869         than a hardcoded variable.
2870
2871         * shania: rewritten to work better; REJECTion reminder mail
2872         handling got lost though.
2873
2874 2001-06-22  James Troup  <james@nocrew.org>
2875
2876         * rhona (main): remove unused override code.
2877
2878         * fernanda (main): remove extraneous \n's from utils.warn calls.
2879         * natalie.py (list): likewise.
2880
2881         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
2882         use utils.{warn,fubar} where appropriate.
2883
2884 2001-06-21  James Troup  <james@nocrew.org>
2885
2886         * katie (nmu_p): new class that encapsulates the "is a nmu?"
2887         functionality.
2888         (nmu_p.is_an_nmu): add support for multiple maintainers specified
2889         by the "Maintainers" field in the .dsc file and maintainer groups.
2890         (nmu_p.__init__): read in the list of group maintainer names.
2891         (announce): use nmu_p.
2892
2893 2001-06-20  James Troup  <james@nocrew.org>
2894
2895         * rene (main): hardcode the suite experimental is compared to by
2896         name rather than number.
2897
2898         * katie (check_files): differentiate between doesn't-exist and
2899         permission-denied in "can not read" rejections; requested by edd@.
2900         (check_dsc): use os.path.exists rather than os.access to allow the
2901         above check to kick in.
2902
2903         * heidi (process_file): read all input before doing anything and
2904         use transactions.
2905
2906 2001-06-15  James Troup  <james@nocrew.org>
2907
2908         * fernanda: new script; replaces old 'check' shell script
2909         nastiness.
2910
2911 2001-06-14  James Troup  <james@nocrew.org>
2912
2913         * katie: actually import traceback module to avoid amusing
2914         infinite loop.
2915
2916 2001-06-10  James Troup  <james@nocrew.org>
2917
2918         * utils.py (extract_component_from_section): fix to handle just
2919         'non-free' and 'contrib'.  Also fix to handle non-US in a
2920         completely case insensitive manner as a component.
2921
2922 2001-06-08  James Troup  <james@nocrew.org>
2923
2924         * madison (arch_compare): sort function that sorts 'source' first
2925         then alphabetically.
2926         (main): use it.
2927
2928 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
2929
2930         * catherine (poolize): explicitly make poolized_size a long so it
2931         doesn't overflow when poolizing e.g. entire archives.
2932
2933 2001-06-01  James Troup  <james@nocrew.org>
2934
2935         * utils.py (send_mail): throw exceptions rather than exiting.
2936
2937         * katie (process_it): catch exceptions and ignore them.
2938
2939 2001-06-01  Michael Beattie  <mjb@debian.org>
2940
2941         * added update-mailingliststxt and update-readmenonus to update
2942         those files, respectively. modified cron.daily{,-non-US} to
2943         use them.
2944
2945 2001-05-31  Anthony Towns  <ajt@debian.org>
2946
2947         * rhona: make StayOfExecution work.
2948
2949 2001-05-31  James Troup  <james@nocrew.org>
2950
2951         * rhona (find_next_free): fixes to not overwrite files but rename
2952         them by appending .<n> instead.
2953         (clean): use find_next_free and use dated sub-directories in the
2954         morgue.
2955
2956         * utils.py (move): don't overwrite files unless forced to.
2957         (copy): likewise.
2958
2959 2001-05-24  James Troup  <james@nocrew.org>
2960
2961         * katie (check_files): determine the source version here instead
2962         of during install().
2963         (check_files): check for existent source with bin-only NMU
2964         support.
2965         (main): sort the list of changes so that the source-must-exist
2966         check Does The Right Thing(tm).
2967
2968         * utils.py (changes_compare): new function; sorts a list of
2969         changes files by 'have-source', source, version.
2970         (cc_fix_changes): helper function.
2971         (parse_changes): use compiled regexes.
2972         (fix_maintainer): likewise.
2973
2974         * rene (main): warn about packages in experimental that are
2975         superseded by newer versions in unstable.
2976
2977 2001-05-21  James Troup  <james@nocrew.org>
2978
2979         * rene (main): add support for checking for ANAIS (Architecture
2980         Not Allowed In Source) packages.
2981
2982 2001-05-17  James Troup  <james@nocrew.org>
2983
2984         * katie (check_changes): initalize `architecture' dictionary in
2985         changes global so that if we can't parse the changes file for
2986         whatever reason we don't undef later on.
2987
2988         * utils.py (parse_changes): fix handling of multi-line fields
2989         where the first line did have data.
2990
2991 2001-05-05  Anthony Towns  <ajt@debian.org>
2992
2993         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
2994         (It should always have been there. Ooopsy.)
2995
2996 2001-05-03  Anthony Towns  <ajt@debian.org>
2997
2998         * jenna: Cleanup packages that move from arch:any to arch:all or
2999         vice-versa.
3000
3001 2001-04-24  Anthony Towns  <ajt@debian.org>
3002
3003         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3004         cope with debian-installer and boot-floppies' md5sum.txt.
3005
3006 2001-04-16  James Troup  <james@nocrew.org>
3007
3008         * katie (check_changes): add missing %s format string argument.
3009         (stable_install): temporary work around for morgue location to
3010         move installed changes files into.
3011         (stable_install): helps if you actually read in the template.
3012         (manual_reject): fix for editing of reject messages which was
3013         using the wrong variable name.
3014
3015         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3016
3017 2001-04-13  James Troup  <james@nocrew.org>
3018
3019         * katie (manual_reject): Cc the installer.
3020         (reject): don't.
3021         (check_changes): remove unused maintainer-determination code.
3022         (update_subst): add support for Changed-By when setting the
3023         *MAINTAINER* variables.
3024
3025         * rene (bar): new function to check for packages on architectures
3026         when they shouldn't be.
3027
3028         * natalie.py (main): use fubar() and warn() from utils.
3029
3030         * utils.py (whoami): new mini-function().
3031         * melanie (main): use it.
3032         * katie (manual_reject): likewise.
3033
3034 2001-04-03  James Troup  <james@nocrew.org>
3035
3036         * katie (action): ignore exceptions from os.path.getmtime() so we
3037         don't crash on non-existent changes files (e.g. when they are
3038         moved between the start of the install run in cron.daily and the
3039         time we get round to processing them).
3040
3041         * madison (main): also list source and accept -s/--suite.
3042
3043         * jenna (generate_src_list): missing \n in error message.
3044
3045         * katie (update_subst): add sane defaults for when changes is
3046         skeletal.
3047
3048 2001-03-29  James Troup  <james@nocrew.org>
3049
3050         * melanie (main): use fubar() and warn() from utils.  Remember who
3051         the maintainer for the removed packages are and display that info
3052         to the user.  Readd support for melanie-specific Bcc-ing that got
3053         lost in the TemplateSubst transition.
3054
3055         * utils.py (fubar): new function.
3056         (warn): like wise.
3057
3058         * db_access.py (get_maintainer): as below.
3059
3060         * charisma (get_maintainer): moved the bulk of this function to
3061         db_access so that melanie can use it too.
3062
3063         * claire.py (find_dislocated_stable): restrict the override join
3064         to those entries where the suite is stable; this avoids problems
3065         with packages which have moved to new sections (e.g. science)
3066         between stable and unstable.
3067
3068 2001-03-24  James Troup  <james@nocrew.org>
3069
3070         * catherine (poolize): new function; not really independent of
3071         main() fully, yet.
3072         (main): use it.
3073
3074         * katie (stable_install): __SUITE__ needs to be space prefixed
3075         because buildd's check for 'INSTALLED$'.
3076
3077 2001-03-22  James Troup  <james@nocrew.org>
3078
3079         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3080
3081         * jenna: rewritten; now does deletions on a per-suite level
3082         instead of a per-suite-component-architecture-type level.  This
3083         allows mutli-component packages to be auto-cleaned (and as a
3084         bonus, reduces the code size and duplication).
3085
3086 2001-03-22  Anthony Towns  <ajt@debian.org>
3087
3088         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3089         instead of just giving a gpg error.
3090
3091 2001-03-21  James Troup  <james@nocrew.org>
3092
3093         * madison (main): use apt_pkg.VersionCompare to sort versions so
3094         that output is correctly sorted for packages like debhlper.
3095         Noticed by ajt@.
3096
3097         * tea (check_source_in_one_dir): actually find problematic source
3098         packages.
3099
3100         * katie (check_dsc): remember the orig.tar.gz's location ID if
3101         it's not in a legacy suite.
3102         (check_diff): we don't use orig_tar_id.
3103         (install): add code to handle sourceful diff-only upload of
3104         packages which change components by copying the .orig.tar.gz into
3105         the new component, if it doesn't already exist there.
3106         (process_it): reset orig_tar_location (as above).
3107
3108         * melanie (main): use template substiution for the bug closing
3109         emails.
3110         (main): don't hardcode bugs.debian.org or packages.debian.org
3111         either; use configuration items.
3112
3113         * katie: likewise.
3114
3115         * natalie.py (init): use None rather than 'localhost' for the
3116         hostname given to pg.connect.
3117
3118         * utils.py (TemplateSubst): new function; lifted from
3119         userdir-ldap.
3120
3121 2001-03-21  Ryan Murray  <rmurray@debian.org>
3122
3123         * katie (announce): fix the case of non-existent
3124         Suite::$SUITE::Announce.
3125
3126 2001-03-20  Ryan Murray  <rmurray@debian.org>
3127
3128         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3129         /usr/.
3130
3131         * alyson (main): use config variable for database name.
3132         * andrea (main): likewise.
3133         * catherine (main): likewise.
3134         * charisma (main): likewise.
3135         * cindy (main): likewise.
3136         * claire.py (main): likewise.
3137         * denise (main): likewise.
3138         * heidi (main): likewise.
3139         * jenna (main): likewise.
3140         * katie (main): likewise.
3141         * madison (main): likewise.
3142         * melanie (main): likewise.
3143         * neve (main): likewise.
3144         * rhona (main): likewise.
3145         * tea (main): likewise.
3146
3147 2001-03-15  James Troup  <james@nocrew.org>
3148
3149         * rhona (check_sources): fixed evil off by one (letter) error
3150         which was causing only .dsc files to be deleted when cleaning
3151         source packages.
3152
3153         * charisma (get_maintainer_from_source): remove really stupid and
3154         gratuitous IN sub-query and replace with normal inner join.
3155         (main): connect as read-only user nobody.
3156
3157         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3158         with EXISTS.
3159         (check_files): likewise; still disabled by default though.
3160         (clean_binaries): add ' seconds' to the mysterious number in the
3161         output.
3162         (clean): likewise.
3163
3164         * tea (check_files): add missing global declaration on db_files.
3165
3166 2001-03-14  James Troup  <james@nocrew.org>
3167
3168         * rhona: rewritten large chunks. Removed a lot of the silly
3169         selecting into dictionaries and replaced it with 'where exists'
3170         based sub queries.  Added support for StayOfExecution.  Fix the
3171         problem with deleting dsc_files too early and disable cleaning of
3172         unattached files.
3173
3174 2001-03-14  Anthony Towns  <ajt@debian.org>
3175
3176         * katie (announce): also check Changed-By when trying to detect
3177         NMUs.
3178
3179 2001-03-06  Anthony Towns  <ajt@debian.org>
3180
3181         * ziyi (main): Generate Release.gpg files as well, using the key from
3182         Dinstall::SigningKey in katie.conf, if present. That key has to be
3183         passwordless, and hence kept fairly secretly.
3184
3185 2001-03-02  James Troup  <james@nocrew.org>
3186
3187         * utils.py (str_isnum): new function; checks to see if the string
3188         is a number.
3189
3190         * shania (main): fix _hideous_ bug which was causing all files > 2
3191         weeks old to be deleted from incoming, even if they were part of a
3192         valid upload.
3193
3194 2001-02-27  James Troup  <james@nocrew.org>
3195
3196         * melanie (main): accept new argument -C/--carbon-copy which
3197         allows arbitarty carbon-copying of the bug closure messages.
3198         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3199         separate variable.
3200
3201 2001-02-27  Anthony Towns  <ajt@debian.org>
3202
3203         * ziyi: new program; generates Release files.
3204
3205 2001-02-25  James Troup  <james@nocrew.org>
3206
3207         * katie (reject): add missing '\n' to error message.
3208         (manual_reject): likewise.
3209         (install): catch exceptions from moving the changes file into DONE
3210         and ignore them.
3211
3212         * tea (check_md5sums): new function.
3213
3214 2001-02-25  Michael Beattie  <mjb@debian.org>
3215
3216         * melanie: use $EDITOR if available.
3217
3218 2001-02-15  James Troup  <james@nocrew.org>
3219
3220         * utils.py (parse_changes): don't crash and burn on empty .changes
3221         files.  Symptoms noticed by mjb@.
3222
3223 2001-02-15  Adam Heath  <doogie@debian.org>
3224
3225         * denise (main): use an absolute path for the output filename.
3226
3227         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3228         compile errors with postgresql-dev >= 7.0.
3229
3230 2001-02-12  James Troup  <james@nocrew.org>
3231
3232         * rene: initial version.
3233
3234         * andrea: initial version.
3235
3236         * catherine (main): remove obsolete assignment of arguments.
3237
3238 2001-02-09  James Troup  <james@nocrew.org>
3239
3240         * catherine: first working version.
3241
3242 2001-02-06  James Troup  <james@nocrew.org>
3243
3244         * katie (check_files): validate the priority field; i.e. ensure it
3245         doesn't contain a '/' (to catch people prepending the priority
3246         with the component rather than the section).
3247         (check_override): don't warn about source packages; the only check
3248         is on section and we have no GUI tools that would use the Section
3249         field for a Sources file.
3250         (announce): use tags rather than severities for NMUs.  Requested
3251         by Josip Rodin <joy@>. [#78035]
3252
3253 2001-02-04  James Troup  <james@nocrew.org>
3254
3255         * tea (check_override): new function; ensures packages in suites
3256         are also in the override file.  Thanks to bod@ for noticing that
3257         such packages existed.
3258
3259         * katie: move file type compiled regular expressions to utils as
3260         catherine uses them too.
3261         (check_changes): always default maintainer822 to the installer
3262         address so that any bail out won't cause undefs later.
3263         (check_files): update file type re's to match above.
3264         (stable_install): likewise.
3265         (reject): handle any except from moving the changes files.  Fixes
3266         crashes on unreadable changes files.
3267
3268         * melanie (main): add an explanation of why things are not removed
3269         from testing.
3270
3271 2001-01-31  James Troup  <james@nocrew.org>
3272
3273         * melanie (main): ignore a) no message, b) removing from stable or
3274         testing when invoked with -n/--no-action.
3275
3276         * katie (check_override): lower section before checking to see if
3277         we're whining about 'non-US' versus 'non-US/main'.
3278
3279         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3280         function so that we can use inside of PostgreSQL.
3281
3282 2001-01-28  James Troup  <james@nocrew.org>
3283
3284         * katie: updated to pass new flag to parse_changes() and deal with
3285         the exception raised on invalid .dsc's if appropriate.
3286         * shania (main): likewise.
3287         * melanie (main): likewise.
3288
3289         * tea (check_dscs): new function to validate all .dsc files in
3290         unstable.
3291
3292         * utils.py (parse_changes): if passed an additional flag, validate
3293         the .dsc file to ensure it's extractable by dpkg-source.
3294         Requested by Ben Collins <bcollins@>.
3295
3296 2001-01-27  James Troup  <james@nocrew.org>
3297
3298         * madison (main): connect to the DB as nobody.
3299
3300         * katie (check_files): remove support for -r/--no-version-check
3301         since it makes no sense under katie (jenna will automatically
3302         remove the (new) older version) and was evil in any event.
3303         (check_changes): add missing new line to rejection message.
3304         (check_dsc): likewise.
3305         (process_it): reset reject_message here.
3306         (main): not here.  Also remove support for -r.
3307
3308 2001-01-26  James Troup  <james@nocrew.org>
3309
3310         * katie (check_override): don't whine about 'non-US/main' versus
3311         'non-US'.
3312
3313 2001-01-26  Michael Beattie  <mjb@debian.org>
3314
3315         * natalie.py (usage): new function.
3316         (main): use it.
3317
3318 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3319
3320         * update-mirrorlists: Update README.non-US too (request from Joy).
3321
3322 2001-01-25  James Troup  <james@nocrew.org>
3323
3324         * katie (reject): catch any exception from utils.move() and just
3325         pass, we previously only caught can't-overwrite errors and not
3326         can't-read ones.
3327
3328         * jenna (generate_src_list): use ORDER BY in selects to avoid
3329         unnecessary changes to Packages files.
3330         (generate_bin_list): likewise.
3331
3332         * utils.py (extract_component_from_section): separated out from
3333         build_file_list() as it's now used by claire too.
3334
3335         * claire.py (find_dislocated_stable): rewrite the query to extract
3336         section information and handle component-less locations properly.
3337         Thanks to ajt@ for the improved queries.
3338         (fix_component_section): new function to fix components and
3339         sections.
3340
3341 2001-01-23  James Troup  <james@nocrew.org>
3342
3343         * katie (check_files): set file type for (u?)debs first thing, so
3344         that if we continue, other functions which rely on file type
3345         existing don't bomb out.  If apt_pkg or apt_inst raise an
3346         exception when parsing the control file, don't try any other
3347         checks, just drop out.
3348         (check_changes): new test to ensure there is actually a target
3349         distribution.
3350
3351 2001-01-22  James Troup  <james@nocrew.org>
3352
3353         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3354         <grin@>.
3355         (check_changes): when mapping to unstable, remember to actually
3356         add unstable to the suite list and not just remove the invalid
3357         suite.
3358
3359 2001-01-21  James Troup  <james@nocrew.org>
3360
3361         * katie (check_files): catch exceptions from debExtractControl()
3362         and reject packages which raise any.
3363
3364 2001-01-19  James Troup  <james@nocrew.org>
3365
3366         * katie (check_signature): basename() file name in rejection
3367         message.
3368
3369 2001-01-18  James Troup  <james@nocrew.org>
3370
3371         * katie (in_override_p): remember the section and priority from
3372         the override file so we can check them against the package later.
3373         (check_override): new function; checks section and priority (for
3374         binaries) from the package against the override file and mails the
3375         maintainer about any disparities.
3376         (install): call check_override after announcing the upload.
3377
3378 2001-01-16  James Troup  <james@nocrew.org>
3379
3380         * utils.py (build_file_list): catch ValueError's from splitting up
3381         the files field and translate it into a parse error.
3382
3383         * tea: add support for finding unreferenced files.
3384
3385         * katie (in_override_p): add support for suite-aliasing so that
3386         proposed-updates uploads work again.
3387         (check_changes): catch parses errors from utils.build_file_list().
3388         (check_dsc): likewise.
3389         (check_diff): yet more dpkg breakage so we require even newer a
3390         version.
3391
3392         * jenna (generate_bin_list): don't do nasty path munging that's no
3393         longer needed.
3394
3395         * denise (main): support for non-US; and rename testing's override
3396         files so they're based on testing's codename.
3397
3398 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3399
3400         * melanie: add to the bug closing message explaining what happens
3401         (or rather doesn't) with bugs against packages that have been
3402         removed.
3403
3404 2001-01-14  James Troup  <james@nocrew.org>
3405
3406         * charisma (main): fix silly off-by-one error; suite priority
3407         checking was done using "less than" rather than "less than or
3408         equal to" which was causing weird hesienbugs with wrong Maintainer
3409         fields.
3410
3411 2001-01-10  James Troup  <james@nocrew.org>
3412
3413         * katie (in_override_p): adapted to use SQL-based overrides.
3414         read_override_file function disappears.
3415
3416         * db_access.py: add new functions get_section_id, get_priority_id
3417         and get_override_type_id.
3418         (get_architecture_id): return -1 if the architecture is not found.
3419
3420         * heidi: switch %d -> %d in all SQL queries.
3421         (get_list): Use string.join where appropriate.
3422
3423         * rhona (in_override_p): don't die if the override file doesn't
3424         exist.
3425         (main): warn if the override file doesn't exist.
3426
3427         * alyson: new script; will eventually sync the config file and the
3428         SQL database.
3429
3430         * natalie.py: new script; manipulates overrides.
3431
3432         * melanie: new script; removes packages from suites.
3433
3434 2001-01-08  James Troup  <james@nocrew.org>
3435
3436         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3437         anything it just changed the symptom.  Recognise the new breakage
3438         and reject them too.
3439
3440 2001-01-07  James Troup  <james@nocrew.org>
3441
3442         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3443         to the .changes file, be sure to set up files[filename]["type"]
3444         too.
3445
3446 2001-01-06  James Troup  <james@nocrew.org>
3447
3448         * katie (check_diff): new function; detects bad diff files
3449         produced by dpkg 1.8.1 and rejects thems.
3450         (process_it): call check_diff().
3451         (check_dsc): gar.  Add support for multiple versions of the
3452         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3453         and size against all versions and use one which matches if
3454         possible and exclude any that don't from being poolized to avoid
3455         file overwrites.  Thanks to broonie@ for providing the example.
3456         (install): skip any files marked as excluded as above.
3457
3458 2001-01-05  James Troup  <james@nocrew.org>
3459
3460         * heidi (process_file): add missing argument to error message.
3461
3462 2001-01-04  James Troup  <james@nocrew.org>
3463
3464         * heidi (main): fix handling of multiple files by reading all
3465         files not just the first file n times (where n = the number of
3466         files passed as arguments).
3467
3468 2001-01-04  Anthony Towns  <ajt@debian.org>
3469
3470         * katie (check_dsc): proper fix for the code which locates the
3471         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3472
3473 2000-12-20  James Troup  <james@nocrew.org>
3474
3475         * rhona: replace IN's with EXISTS's to make DELETE time for
3476         binaries and source sane on auric.  Add a -n/--no-action flag and
3477         make it stop actions if used.  Fixed a bug in binaries deletion
3478         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3479         -V/--version.  Giving timing info on deletion till I'm sure it's
3480         sane.
3481
3482         * katie (check_changes): map testing to unstable.
3483
3484         * madison: new script; shows versions in different architectures.
3485
3486         * katie (check_dsc): ensure size matches as well as md5sum;
3487         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3488         #69702.
3489
3490 2000-12-19  James Troup  <james@nocrew.org>
3491
3492         * katie (reject): ignore the "can't overwrite file" exception from
3493         utils.move() and leave the files where they are.
3494         (reject): doh! os.access() test was reversed so we only tried to
3495         move files which didn't exist... replaced with os.path.exists()
3496         test the right way round.
3497
3498         * utils.py (move): raise an exception if we can't overwrite the
3499         destination file.
3500         (copy): likewise.
3501
3502 2000-12-18  James Troup  <james@nocrew.org>
3503
3504         * rhona: first working version.
3505
3506         * db_access.py (get_files_id): force both sizes to be integers.
3507
3508         * katie (main): use size_type().
3509
3510         * utils.py (size_type): new function; pretty prints a file size.
3511
3512 2000-12-17  James Troup  <james@nocrew.org>
3513
3514         * charisma (main): do version compares so that older packages do
3515         not override newer ones and process source first as source wins
3516         over binaries in terms of who we think of as the Maintainer.
3517
3518 2000-12-15  James Troup  <james@nocrew.org>
3519
3520         * katie (install): use the files id for the .orig.tar.gz from
3521         check_dsc().
3522         (install): limit select for legacy source to a) source in legacy
3523         or legacy-mixed type locations and b) distinct on files.id.
3524         (install): rather than the bizarre insert new, delete old method
3525         for moving legacy source into the pool, use a simple update of
3526         files.
3527         (process_it): initalize some globals before each process.
3528
3529 2000-12-14  James Troup  <james@nocrew.org>
3530
3531         * katie (in_override_p): index on binary_type too since .udeb
3532         overrides are in a different file.
3533         (read_override_file): likewise.
3534         (check_files): correct filename passed to get_files_id().
3535         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3536         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3537         (check_dsc): remember the files id of the .orig.tar.gz, not the
3538         location id.
3539
3540 2000-12-13  James Troup  <james@nocrew.org>
3541
3542         * utils.py (poolify): force the component to lower case except for
3543         non-US.
3544
3545         * katie (in_override_p): handle .udeb-specific override files.
3546         (check_files): pass the binary type to in_override_p().
3547         (check_dsc): remember the location id of the old .orig.tar.gz in
3548         case it's not in the pool.
3549         (install): use location id from dsc_files; which is where
3550         check_dsc() puts it for old .orig.tar.gz files.
3551         (install): install files after all DB work is complete.
3552         (reject): basename() the changes filename.
3553         (manual_reject): likewise.
3554
3555         * shania: new progam; replaces incomingcleaner.
3556
3557 2000-12-05  James Troup  <james@nocrew.org>
3558
3559         * katie (check_changes): if inside stable and can't find files
3560         from the .changes; assume it's installed in the pool and chdir()
3561         to there.
3562         (check_files): we are not installing for stable installs, so don't
3563         check for overwriting existing files.
3564         (check_dsc): likewise.
3565         (check_dsc): reorder .orig.tar.gz handling so that we search in
3566         the pool first and only then fall back on any .orig.tar.gz in the
3567         cwd; this avoids false positives on the overwrite check when
3568         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3569         (install): if this is a stable install, bail out to
3570         stable_install() immediately.
3571         (install): dsc_files handling was horribly broken. a) we need to
3572         add files from the .dsc and not the .changes (duh), b) we need to
3573         add the .dsc file itself to dsc_files (to be consistent with neve
3574         if for no other reason).
3575         (stable_install): new function; handles installs from inside
3576         proposed-updates to stable.
3577         (acknowledge_new): basename changes_filename before doing
3578         anything.
3579         (process_it): absolutize the changes filename to avoid the
3580         requirement of being in the same directory as the .changes file.
3581         (process_it): save and restore the cwd as stable installs can
3582         potentially jump into the pool to find files.
3583
3584         * jenna: dislocated_files support using claire.
3585
3586         * heidi (process_file): select package field from binaries
3587         explicitly.
3588
3589         * db_access.py (get_files_id): fix cache key used.
3590
3591         * utils.py (build_file_list): fix 'non-US/non-free' case in
3592         section/component splitting.
3593         (move): use os.path.isdir() rather than stat.
3594         (copy): likewise.
3595
3596         * claire.py: new file; stable in non-stable munger.
3597
3598         * tea: new file; simply ensures all files in the DB exist.
3599
3600 2000-12-01  James Troup  <james@nocrew.org>
3601
3602         * katie (check_dsc): use regex_safe().
3603         (check_changes): typo in changes{} key:
3604         s/distributions/distribution/.
3605         (install): use changes["source"], not files[file]["source"] as the
3606         latter may not exist and the former is used elsewhere.  Commit the
3607         SQL transaction earlier.
3608
3609         * utils.py (regex_safe): new function; escapes characters which
3610         have meaning to SQL's regex comparison operator ('~').
3611
3612 2000-11-30  James Troup  <james@nocrew.org>
3613
3614         * katie (install): pool_location is based on source package name,
3615         not binary package.
3616
3617         * utils.py (move): if dest is a directory, append the filename
3618         before chmod-ing.
3619         (copy): ditto.
3620
3621         * katie (check_files): don't allow overwriting of existing .debs.
3622         (check_dsc): don't allow overwriting of existing source files.
3623
3624 2000-11-27  James Troup  <james@nocrew.org>
3625
3626         * katie (check_signature): don't try to load rsaref; it's
3627         obsolete.
3628         (in_override_p): don't try to lookup override entries for packages
3629         with an invalid suite name.
3630         (announce): don't assume the suite name is valid; use Find() to
3631         lookup the mailing list name for announcements.
3632
3633         * utils.py (where_am_i): typo; hostname is in the first element,
3634         not second.
3635
3636         * db_access.py (get_suite_id): return -1 on an unknown suite.
3637
3638 2000-11-26  James Troup  <james@nocrew.org>
3639
3640         * katie (install): fix CopyChanges handling; typo in in checking
3641         Cnf for CopyChanges flag and was calling non-existent function
3642         copy_file.
3643
3644         * utils.py (copy): new function; clone of move without the
3645         unlink().
3646
3647 2000-11-25  James Troup  <james@nocrew.org>
3648
3649         * utils.py (build_file_list): handle non-US prefixes properly
3650         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3651         + 'libs' not 'non-US/libs').
3652         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3653         delays.  This is possibly(/probably) exim speicifc and (like other
3654         sendmail options) needs to be in the config file.
3655
3656 2000-11-24  James Troup  <james@nocrew.org>
3657
3658         * rhona (check_sources): we need file id from dsc_files; not id.
3659         Handle non .dsc source files being re-referenced in dsc_files.
3660
3661         * katie (in_override_p): strip out any 'non-US' prefix.
3662         (check_files): use utils.where_am_i() rather than hardcoding.
3663         (check_files): validate the component.
3664         (install): use utils.where_am_i() rather than hardcoding.
3665         (install): fix mail to go to actual recepient.
3666         (reject): likewise.
3667         (manual_reject): likewise.
3668         (acknowledge_new): likewise.
3669         (announce): likewise.
3670
3671         * db_access.py (get_component_id): ignore case when searching for
3672         the component and don't crash if the component can't be found, but
3673         return -1.
3674         (get_location_id): handle -1 from get_component_id().
3675
3676         * jenna (generate_src_list): don't bring 'suite' into our big
3677         multi-table-joining select as we already know the 'suite_id'.
3678         (generate_bin_list): likewise.
3679
3680         * neve (main): don't quit if not on ftp-master.
3681         (process_packages): remove unused variable 'suite_codename'.
3682
3683         * utils.py (move): actually move the file.
3684         (build_file_list): handle non-US prefixes in the section.
3685
3686         * catherine (main): use which_conf_file().
3687         * charisma (main): likewise.
3688         * heidi (main): likewise.
3689         * jenna (main): likewise.
3690         * katie (main): likewise.
3691         * neve (main): likewise.
3692         * rhona (main): likewise.
3693
3694         * utils.py (where_am_i): new routine; determines the archive as
3695         understood by other 'dak' programs.
3696         (which_conf_file): new routine; determines the conf file to read.
3697
3698 2000-11-17  James Troup  <james@nocrew.org>
3699
3700         * katie (install): fix where .changes files for proposed-updates
3701         go.
3702
3703 2000-11-04  James Troup  <james@nocrew.org>
3704
3705         * jenna (main): handle architecture properly if no
3706         -a/--architecture argument is given, i.e. reset architecture with
3707         the values for the suite for each suite.
3708
3709         * Add apt_pkg.init() to the start of all scripts as it's now
3710         required by python-apt.
3711
3712 2000-10-29  James Troup  <james@nocrew.org>
3713
3714         * jenna (generate_bin_list): take an additional argument 'type'
3715         and use it in the SELECT.
3716         (main): if processing component 'main', process udebs and debs.
3717
3718         * neve (process_packages): set up 'type' in 'binaries' (by
3719         assuming .deb).
3720
3721         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3722         (check_files): set up files[file]["dbtype"].
3723         (install): use files[file]["dbtype"] to set up the 'type' field in
3724         the 'binaries' table.
3725
3726         * init_pool.sql: add a 'type' field to the 'binaries' table to
3727         distinguisgh between ".udeb" and ".deb" files.
3728
3729         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3730         dest ? dirname(dest)" type check instead.
3731
3732         * katie (check_dsc): handle the case of an .orig.tar.gz not found
3733         in the pool without crashing.  Also handle the case of being asked
3734         to look for something other than an .orig.tar.gz in the pool.
3735
3736 2000-10-26  James Troup  <james@nocrew.org>
3737
3738         * katie (install): fix filenames put into files table during
3739         poolification of legacy source.
3740
3741         * utils.py (move): work around a bug in os.path.basename() which
3742         cunningly returns '' if there is a trailing slash on the path
3743         passed to it.
3744
3745         * katie (check_dsc): Remove more cruft.  If we find the
3746         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
3747         location, make a note of that so we can fix things in install().
3748         (install): as above.  Move any old source out of legacy locations
3749         so that 'apt-get source' will work.
3750         (process_it): reset the flag that indicates to install that the
3751         source needs moved.
3752
3753         * cron.daily: more.  Nowhere near complete yet though.
3754
3755         * katie (install): don't run os.makedirs, a) utils.move() does
3756         this now, b) we weren't removing the user's umask and were
3757         creating dirs with SNAFU permissions.
3758         (check_dsc): rewrite the .orig.tar.gz handling to take into
3759         account, err, package pools.  i.e. look anywhere in the pool
3760         rather than faffing around with two simple paths.
3761
3762         * neve (process_sources): add the .dsc to dsc_files too.
3763
3764 2000-10-25  James Troup  <james@nocrew.org>
3765
3766         * neve (process_sources): don't duplicate .orig.tar.gz's.
3767
3768 2000-10-23  James Troup  <james@nocrew.org>
3769
3770         * utils.py (re_extract_src_version): moved here.
3771
3772         * neve: move re_extract_src_version to utils.
3773         (process_packages): reflect change.
3774
3775         * katie (install): reflect change.
3776
3777 2000-10-19  James Troup  <james@nocrew.org>
3778
3779         * jenna (generate_src_list): handle locations with null
3780         components.
3781         (generate_bin_list): likewise.
3782