]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
oops, actually cvs add dak, tiffani, README.quotes
[dak.git] / ChangeLog
1 2005-11-15  Anthony Towns  <aj@erisian.com.au>
2
3         * Merge of changes from spohr, by various people.
4
5         * tiffani: new script to do patches to Packages, Sources and Contents
6         files for quicker downloads.
7         * ziyi: update to authenticate tiffani generated files
8
9         * dak: new script to provide a single binary with less arbitrary names
10         for access to dak functionality.
11
12         * cindy: script implemented
13
14         * saffron: cope with suites that don't have a Priority specified
15         * heidi: use get_suite_id()
16         * denise: don't hardcode stable and unstable, or limit udebs to unstable
17         * denise: remove override munging for testing (now done by cindy)
18         * helena: expanded help, added new, sort and age options, and fancy headers
19         * jennifer: require description, add a reject for missing dsc file
20         * jennifer: change lock file
21         * kelly: propogation support
22         * lisa: honour accepted lock, use mtime not ctime, add override type_id
23         * madison: don't say "dep-retry"
24         * melanie: bug fix in output (missing %)
25         * natalie: cope with maintainer_override == None; add type_id for overrides
26         * nina: use mtime, not ctime
27
28         * katie.py: propogation bug fixes
29         * logging.py: add debugging support, use | as the logfile separator
30
31         * katie.conf: updated signing key (4F368D5D)
32         * katie.conf: changed lockfile to dinstall.lock
33         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
34         * katie.conf: added tiffani, cindy support
35         * katie.conf: updated to match 3.0r6 release
36         * katie.conf: updated to match sarge's release
37
38         * apt.conf: update for sarge's release
39         * apt.conf.stable: update for sarge's release
40         * apt.conf: bump daily max Contents change to 25MB from 12MB
41
42         * cron.daily: add accepted lock and invoke cindy  
43         * cron.daily: add daily.lock
44         * cron.daily: invoke tiffani
45         * cron.daily: rebuild accepted buildd stuff
46         * cron.daily: save rene-daily output on the web site
47         * cron.daily: disable billie
48         * cron.daily: add stats pr0n
49
50         * cron.hourly: invoke helena
51
52         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
53         * vars: add lockdir, add etch to copyoverrides
54         * Makefile: add -Ipostgresql/server to CXXFLAGS
55
56         * docs/: added README.quotes
57         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
58         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
59
60         * TODO: correct spelling of "conflicts"
61
62 2005-05-28  James Troup  <james@nocrew.org>
63
64         * helena (process_changes_files): use MTIME rather than CTIME (the
65         C's not for 'creation', stupid).
66         * lisa (sort_changes): likewise.
67
68         * jennifer (check_distributions): use has_key rather than an 'in'
69         test which doesn't work with python2.1.  [Probably by AJ]
70
71 2005-03-19  James Troup  <james@nocrew.org>
72
73         * rene (main): use Suite::<suite>::UdebComponents to determine
74         what components have udebs rather than assuming only 'main' does.
75
76 2005-03-18  James Troup  <james@nocrew.org>
77
78         * utils.py (rfc2047_encode): use codecs.lookup() rather than
79         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
80         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
81         <andrew@ubuntu.com>.
82
83 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
84
85         * helena: add -n/--new HTML output option and improved sorting
86         options.
87
88 2005-03-06  Ryan Murray  <rmurray@debian.org>
89
90         * shania(main): use Cnf::Dir::Reject instead of REJECT
91
92 2005-02-08  James Troup  <james@nocrew.org>
93
94         * rene (main): add partial NBS support by checking that binary
95         packages are built by their real parent and not some random
96         stranger.
97         (do_partial_nbs): likewise.
98
99 2005-01-18  James Troup  <james@nocrew.org>
100
101         * katie.py (Katie.build_summaries): avoid leaking file handle when
102         extracting package description.
103         (Katie.force_reject): remember and close each file descriptor we
104         use.
105         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
106         s/reason_file/reason_fd/ because it's a file descriptor.
107         (Katie.check_dsc_against_db): avoid leaking file handle whenever
108         invoking apt_pkg.md5sum().
109
110         * jennifer (check_deb_ar): new function: sanity check the ar
111         contents of a .deb.
112         (check_files): use it.
113         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
114         found.
115         (check_files): accept 'raw-installer' as an alias for 'byhand'.
116
117 2005-01-14  Anthony Towns  <ajt@debian.org>
118
119         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
120
121         * propup stuff (thanks to Andreas Barth)
122         * katie.conf: add stable MustBeOlderThan testing, add -security
123           propup
124         * jennifer: set distribution-version in .katie if propup may be needed
125         * katie.py: add propogation to cross_suite_version_check
126
127 2004-11-27  James Troup  <james@nocrew.org>
128
129         * nina: new script to split monolithic queue/done into date-based
130         hierarchy.
131
132         * rene (usage): document -s/--suite.
133         (add_nbs): use .setdefault().
134         (do_anais): likewise.
135         (do_nbs): don't set a string to "" and then += it.
136         (do_obsolete_source): new function - looks for obsolete source
137         packages (i.e source packages whose binary packages are ALL a)
138         claimed by someone else and b) newer when built from the other
139         source package).
140         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
141         and 'full' check modes.  Check for obsolete source packages.
142         linux-wlan-ng has been fixed - remove hideous bodge.
143
144         * jennifer (check_distributions): support 'reject' suite map type.
145
146         * utils.py (validate_changes_file_arg): s/file/filename/.
147         s/fatal/require_changes/.  If require_changes is -1, ignore errors
148         and return the .changes filename regardless.
149         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
150         (re_no_revision): don't escape '-', it's not a special character.
151         s/\*/+/ as there must be at least one non-dash character after the
152         dash in a revision.  Thanks to Christian Reis for noticing both of
153         these.
154
155         * ashley (main): pass require_changes=-1 to
156         utils.validate_changes_file_arg().
157
158         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
159         Team <debian-kernel@lists.debian.org>'.
160
161         * katie.py (Katie.in_override_p): fix .startswith() usage.
162
163         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
164         (Lauren::MoreInfoURL): update to 3.0r3.
165         (Suite::Stable::Version): likewise.
166         (Suite::Stable::Description): likewise.
167
168         * cron.daily: disable automatic task override generation.
169
170         * cindy (process): restrict "find all packages" queries by
171         component.  Respect Options["No-Action"].
172         (main): add -n/--no-action support.  Only run on unstable.  Rename
173         type to otype (pychecker).
174
175 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
176
177         * katie.conf (Billie::BasicTrees): add all architectures.
178         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
179         'everything'.
180
181         * cron.daily: Update a 'current' symlink when creating the
182         post-daily-cron-job database backup to aid mirroring to merkel.
183         Run billie.
184
185         * billie (BillieTarget.poolish_match): handle .udeb too.
186
187 2004-10-13  Ryan Murray  <rmurray@debian.org>
188
189         * amber (do_upload): Sort changes files in "katie" order so that
190           source always arrives before binary-only rebuilds
191         
192 2004-10-05  James Troup  <james@nocrew.org>
193
194         * jennifer (check_dsc): correct reject message on invalid
195         Maintainer field.
196
197 2004-09-20  James Troup  <james@nocrew.org>
198
199         * alicia: remove unused 'pwd' import.
200
201         * tea (check_override): underline suite name in output properly.
202
203         * rene (main): read a compressed Packages file.
204         * tea (validate_packages): likewise.
205
206         * katie.py (re_fdnic): add 'r' prefix.
207         (re_bin_only_nmu_of_mu): likewise.
208         (re_bin_only_nmu_of_nmu): likewise.
209
210         * madison (main): retrieve component information too and display
211         it if it's not 'main'.
212         * melanie (reverse_depends_check): likewise.
213
214         * utils.py (pp_dep): renamed...
215         (pp_deps): ... to this.
216         * jeri (check_dep): update calls to utils.pp_deps().
217         * melanie (reverse_depends_check): likewise.
218
219         * jennifer (check_changes): move initalization of email variables
220         from here...
221         (process_it): ...to here as we no longer always run
222         check_changes().  Don't bother to initialize
223         changes["architecture"].
224
225         * denise (list): renamed to...
226         (do_list): ...this to avoid name clash with builtin 'list'.
227         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
228         for dictionaries.
229         (main): Likewise for name clash avoidance and also
230         s/override_type/suffix/.  Adjust call to do_list().
231
232 2004-09-01  Ryan Murray  <rmurray@debian.org>
233
234         * tea (check_files): check the pool/ directory instead of dists/
235
236 2004-08-04  James Troup  <james@nocrew.org>
237
238         * jenna (cleanup): use .setdefault() for dictionaries.
239         (write_filelists): likewise.
240
241         (write_filelists): Use utils.split_args() not split() to split
242         command line arguments.
243         (stable_dislocation_p): likewise.
244
245         (write_filelists): Add support for mapping side of suite-based
246         "Arch: all mapping".
247         (do_da_do_da): ensure that if we're not doing all suites that we
248         process enough to be able correct map arch: all packages.
249
250         * utils.py (cant_open_exc): correct exception string,
251         s/read/open/, s/.$//.
252
253         * templates/amber.advisory: update to match reality a little
254         better.
255
256         * melanie (reverse_depends_check): read Packages.gz rather than
257         Packages.
258
259         * jennifer (check_files): check for unknown component before
260         checking for NEWness.
261
262         * katie.py (Katie.in_override_p): use .startswith in favour of a
263         slice.
264
265         * docs/melanie.1.sgml: document -R/--rdep-check.
266
267 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
268
269         * billie (main): Make the verbatim lists include all the README
270           elements.
271         * docs/README.names: Add billie in (correcting oversight)
272
273 2004-07-01  James Troup  <james@nocrew.org>
274
275         * emilie (main): handle woody's case-sensitive python-ldap,
276         s/keyfingerprint/keyFingerPrint/.
277
278 2004-06-25  James Troup  <james@nocrew.org>
279
280         * debian/control (Depends): add dpkg-dev since jennifer uses
281         dpkg-source.
282
283 2004-06-24  James Troup  <james@nocrew.org>
284
285         * melanie (main): s/file/temp_file/ and close file handle before
286         removing the temporary file.
287         (main): don't warn about needing a --carbon-copy if in no-action
288         mode.
289
290         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
291         (main): likewise.
292
293         * test/006/test.py (main): check bracketed email-only form.
294
295         * utils.py (fix_maintainer): if the Maintainer string is bracketed
296         email-only, strip the brackets so we don't end up with
297         <<james@nocrew.org>>.
298
299 2004-06-20  James Troup  <james@nocrew.org>
300
301         * jennifer (process_it): only run check_changes() if
302         check_signature() returns something.  (Likewise)
303
304         * utils.py (changes_compare): if there's no changes["version"] use
305         "0" rather than None.  (Avoids a crash on unsigned changes file.)
306
307 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
308
309         * jeri (pp_dep): moved from here to ...
310         * utils.py (pp_dep): here.
311
312         * melanie (main): add reverse dependency checking.
313
314 2004-06-17  James Troup  <james@nocrew.org>
315
316         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
317         * tea (check_dscs): likewise.
318
319         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
320         change from boolean to a variable with 3 possible values, 0 and 1
321         as before, -1 means don't require a signature.  Makes
322         parse_changes() useful for parsing arbitary RFC822-style files,
323         e.g. 'Release' files.
324         (check_signature): add support for detached signatures by passing
325         the files the signature is for as an optional third argument.
326         s/filename/sig_filename/g.  Add a fourth optional argument to
327         choose the keyring(s) to use.  Don't os.path.basename() the
328         sig_filename before checking it for taint.
329         (re_taint_free): allow '/'.
330
331 2004-06-11  James Troup  <james@nocrew.org>
332
333         * tea (check_files): make override.unreadable optional.
334         (validate_sources): close the Sources file handle.
335
336         * docs/README.first: clarify that 'alyson' and running
337         add_constraints.sql by hand is something you only want to do if
338         you're not running 'neve'.
339
340         * docs/README.config (Location::$LOCATION::Suites): document.
341
342         * db_access.py (do_query): also print out the result of the query.
343
344 2004-06-10  James Troup  <james@nocrew.org>
345
346         * katie.py (Katie.cross_suite_version_check): post-woody versions
347         of python-apt's apt_pkg.VersionCompare() function apparently
348         returns variable integers for less than or greater than results -
349         update our result checking to match.
350         * jenna (resolve_arch_all_vs_any): likewise.
351         * charisma (main): likewise.
352
353 2004-06-09  James Troup  <james@nocrew.org>
354
355         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
356         valid_dsc_p and don't run check_source() if check_dsc() failed.
357         (check_dsc): on fatal failures return 0 so check_source() isn't
358         run (since it makes fatal assumptions about the presence of
359         mandatory .dsc fields).  
360         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
361
362 2004-05-07  James Troup  <james@nocrew.org>
363
364         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
365         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
366
367         * katie.conf (Dir::Override): remove duplicate definition.
368
369         * neve (get_or_set_files_id): add an always-NULL last_used column
370         to output.
371
372 2004-04-27  James Troup  <james@nocrew.org>
373
374         * apt.conf-security (tree "dists/stable/updates"): add
375         ExtraOverride - noticed by Joey Hess (#246050).
376         (tree "dists/testing/updates"): likewise.
377
378 2004-04-20  James Troup  <james@nocrew.org>
379
380         * jennifer (check_files): check for existing .changes or .katie
381         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
382         directories.
383
384 2004-04-19  James Troup  <james@nocrew.org>
385
386         * jennifer (check_source): handle failure to remove the temporary
387          directory (used for source tree extraction) better, specifically:
388          if we fail with -EACCES, chmod -R u+rwx the temporary directory
389          and try again and if that works, REJECT the package.
390
391 2004-04-17  James Troup  <james@nocrew.org>
392
393         * docs/madison.1.sgml: document -b/--binary-type,
394         -g/--greaterorequal and -G/--greaterthan.
395
396         * madison (usage): -b/--binary-type only takes a single argument.
397         Document -g/--greaterorequal and -G/--greaterthan.
398         (main): add support for -g/--greaterorequal and -G/--greaterthan.
399
400 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
401
402         * billie: Cleaned up a load of comments, added /README.non-US to
403           the verbatim matches list.
404
405 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
406
407         * utils.py (size_type): Make it use real binary megabytes and
408           kilobytes, instead of the marketing terms used before.
409
410 2004-04-07  James Troup  <james@nocrew.org>
411
412         * katie.py (Katie.check_dsc_against_db): in the case we're
413         ignoring an identical-to-existing orig.tar.gz remember the path to
414         the existent version in pkg.orig_tar_gz.  Adjust query to grab
415         location.path too to be able to do so.
416
417 2004-04-03  James Troup  <james@nocrew.org>
418
419         * debian/control (Depends): add python2.1-email | python (>= 2.2)
420         needed for new utils.rfc2047_encode() function.
421
422         * utils.py (re_parse_maintainer): allow whitespace inside the
423         email address.
424         (Error): new exception base class.
425         (ParseMaintError): new exception class.
426         (force_to_utf8): new function.
427         (rfc2047_encode): likewise.
428         (fix_maintainer): rework.  use force_to_utf8() to force name and
429         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
430         return an rfc2047 value.  Validate the address to catch missing
431         email addresses and (some) broken ones.
432
433         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
434         by adopting foo2047 return value.
435         (Katie.dump_vars): add changedby2047 and maintainer2047 as
436         mandatory changes fields.  Promote changes and maintainer822 to
437         mandatory fields.
438         (Katie.update_subst): default maintainer2047 rather than
439         maintainer822.  User foo2047 rather than foo822 when setting
440         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
441
442         * jennifer (check_changes): set default changes["maintainer2047"]
443         and changes["changedby2047"] values rather than their 822
444         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
445         to new utils.fix_maintainer() - reject on exception and adopt
446         foo2047 return value.
447         (check_dsc): if a mandatory field is missing don't do any further
448         checks and as a result reduce paranoia about dsc[var] existence.
449         Validate the maintainer field by calling new
450         utils.fix_maintainer().
451
452         * ashley (main): add changedby2047 and maintainer2047 to mandatory
453         changes fields.  Promote maintainer822 to a mandatory changes
454         field.  add "pool name" to files fields.
455
456         * test/006/test.py: new file - tests for new
457         utils.fix_maintainer().
458
459 2004-04-01  James Troup  <james@nocrew.org>
460
461         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
462
463         * jennifer (get_changelog_versions): create a symlink mirror of
464         the source files in the temporary directory.
465         (check_source): if check_dsc_against_db() couldn't find the
466         orig.tar.gz bail out.
467
468         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
469         part of the upload store the path to it in pkg.orig_tar_gz and if
470         it can't be found set pkg.orig_tar_gz to -1.
471
472         Explicitly return the second value as None in the (usual) case
473         where we don't have to reprocess.  Remove obsolete diagnostic
474         logs.
475
476         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
477
478         * utils.py (temp_filename): new helper function that wraps around
479         tempfile.mktemp().
480
481         * katie.py (Katie.do_reject): use it and don't import tempfile.
482         * lisa (prod_maintainer): likewise.
483         (edit_note): likewise.
484         (edit_new): likewise.
485         * lauren (reject): likewise.
486         * melanie (main): likewise.
487         * neve (do_sources): likewise.
488         * rene (main): likewise.
489         * tea (validate_sources): likewise.
490
491 2004-03-31  James Troup  <james@nocrew.org>
492
493         * tea (validate_sources): remove unused 's' temporary variable.
494
495 2004-03-15  James Troup  <james@nocrew.org>
496
497         * jennifer (check_dsc): check changes["architecture"] for
498         source before we do anything else.
499
500 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
501
502         * billie: Added
503         * katie.conf (Billie): Added sample Billie stanza to katie.conf
504
505 2004-03-12  James Troup  <james@nocrew.org>
506
507         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
508
509         * katie.conf (Dir::Queue::BTSVersionTrack): define.
510
511         * katie.py (Katie.accept): add support for DebBugs Version
512         Tracking by writing out .versions (generated in jennifer's
513         get_changelog_versions()) and .debinfo (mapping of binary ->
514         source) files.
515
516         * ashley (main): add dsc["bts changelog"].
517
518         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
519
520         * jennifer (check_diff): obsoleted by check_source(), removed.
521         (check_source): new function: create a temporary directory and
522         move into it and call get_changelog_versions().
523         (get_changelog_versions): new function: extract the source package
524         and optionally parse debian/changelog to obtain the version
525         history for the BTS.
526         (process_it): call check_source() rather than check_diff().
527
528 2004-03-08  James Troup  <james@nocrew.org>
529
530         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
531         listbar" rather than "if listbar.count(varfoo)"' change on
532         2004-02-24.
533
534 2004-03-05  James Troup  <james@nocrew.org>
535
536         * alicia (main): don't warn about not closing bugs - we don't
537         manage overrides through the BTS.
538
539 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
540
541         * docs/README.config: lots of updates and corrections.
542         * docs/README.first: likewise.
543
544         * docs/README.config: drop unused Dir::Queue::Root.
545         * katie.conf-non-US: likewise.
546         * katie.conf: likewise.
547         * katie.conf-security: likewise.
548
549 2004-02-27  James Troup  <james@nocrew.org>
550
551         * rose (process_tree): use 'if var in [ list ]' rather than long
552         'if var == foo or var == bar or var == baz'.  Suggested by Martin
553         Michlmayr.
554
555         * jennifer (check_files): reduce 'if var != None' to 'if var' as
556         suggested by Martin Michlmayr.
557         * catherine (poolize): likewise.
558         * charisma (main): likewise.
559         * halle (check_changes): likewise.
560         * heidi (main): likewise.
561         (process_file): likewise.
562         * kelly (install): likewise.
563         (stable_install): likewise.
564         * utils.py (fix_maintainer): likewise.
565
566         * apt.conf: add support for debian-installer in testing-proposed-updates.
567         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
568         add - set to main.
569
570         * mkmaintainers: add "-T15" option to wget of non-US packages file
571         so that we don't hang cron.daily if non-US is down.
572
573         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
574
575         * templates/jennifer.bug-close: add Source and Source-Version
576         pseudo-headers that may be used for BTS Version Tracking someday
577         [ajt@].
578
579         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
580         (main): likewise.
581
582         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
583
584 2004-02-25  James Troup  <james@nocrew.org>
585
586         * katie.conf (SuiteMappings): don't map testing-security to
587         proposed-updates.
588
589 2004-02-24  James Troup  <james@nocrew.org>
590
591         * katie.py (Katie.__init__): remove unused 'values' field.
592
593         * utils.py (extract_component_from_section): use 's.find(c) != -1'
594         rather than 's.count(c) > 0'.
595
596         * katie.py (Katie.source_exists): use "if varfoo in listbar"
597         rather than "if listbar.count(varfoo)".
598         * halle (check_joey): likewise.
599         * jeri (check_joey): likewise.
600         * lisa (edit_index): likewise.
601         * jenna (stable_dislocation_p): likewise.
602
603         * jennifer (main): remove unused global 'nmu'.
604
605 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
606
607         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
608           to be ftpmaster@ftp-master.debian.org to bring it into line with how
609           the dak tools close bugs.
610
611 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
612
613         * katie.conf (Alicia): Added an Alicia section with email address
614         * templates/alicia.bug-close: Added
615         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
616         * alicia (main): Added a -d/--done argument
617
618 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
619
620         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
621
622 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
623
624         * lisa (prod_maintainer): Added function to prod the maintainer without
625           accepting or rejecting the package
626         * templates/lisa.prod: Added this template for the prodding mail
627
628         * .cvsignore: Added neve-files which turns up in new installations
629
630 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
631
632         * alicia (usage): Fixed usage message to offer section and priority
633           as seperately optional arguments.
634         * alicia (main): Added a % (arg) interpolation needed when only
635           one of section or priority is provided and it cannot be found.
636
637 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
638
639         * alicia: Added
640         * docs/alicia.1.sgml: Added
641         * docs/Makefile: Added alicia to the list of manpages to build
642         * docs/README.names: Noted what alicia does
643         * docs/README.first: Noted where alicia is useful
644
645 2004-01-21  James Troup  <james@nocrew.org>
646
647         * madison (main): add -b/--binary-type.
648         (usage): likewise.
649
650         * denise (main): generate debian-installer overrides for testing
651         too.
652         * apt.conf: add support for debian-installer in testing.
653         * katie.conf (Suite::Testing::UdebComponents): set to main.
654
655         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
656         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
657         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
658
659         * utils.py (parse_changes): don't process data not inside the
660         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
661         pointing this out.
662         * test/005/test.py (main): new test to test for above.
663
664 2004-01-04  James Troup  <james@nocrew.org>
665
666         * jenna (write_filelists): correct typo, s/Components/Component/
667         for Options.
668
669 2004-01-04  Ryan Murray  <rmurray@debian.org>
670
671         * cron.buildd: move update of overrides and Packages file...
672         * cron.unchecked: to here.
673         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
674         * katie.conf-security: likewise
675
676 2003-11-20  James Troup  <james@nocrew.org>
677
678         * jenna (main): don't use utils.try_with_debug(), it produces way
679         too much output.
680
681         * halle (check_changes): don't error out if a .changes refers to a
682         non-existent package, just warn and skip the file.
683
684         * docs/README.stable-point-release: mention halle and .changes
685         obsoleted by removal through melanie.  Update for 3.0r2.
686
687         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
688         (Suite::Stable::Description): update for 3.0r2.
689         (Lauren::MoreInfoURL): likewise.
690         * katie.conf-non-US (Suite::Stable::Version): likewise.
691         (Suite::Stable::Description): likewise.
692         (Lauren::MoreInfoURL): likewise.
693
694         * apt.conf.stable (Default): don't define MaxContentsChange.
695         * apt.conf.stable-non-US (Default): likewise.
696
697         * lauren (reject): hack to work around partial replacement of an
698         upload, i.e. one or more binaries superseded by another source
699         package.
700
701 2003-11-17  James Troup  <james@nocrew.org>
702
703         * pseudo-packages.maintainers: point installation-reports at
704         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
705         request.
706
707         * utils.py (parse_changes): calculate the number of lines once
708         with len() rather than max().
709
710         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
711         files, since check_dsc_against_db() deletes the .orig.tar.gz
712         entry.
713
714 2003-11-13  Ryan Murray  <rmurray@debian.org>
715
716         * apt.conf: specify a src override file for debian-installer
717
718 2003-11-10  James Troup  <james@nocrew.org>
719
720         * fernanda.py (strip_pgp_signature): new function - strips PGP
721         signature from a file and returns the modified contents of the
722         file in a string.
723         (display_changes): use it.
724         (read_dsc): likewise.
725
726 2003-11-09  Ryan Murray  <rmurray@debian.org>
727
728         * cron.buildd: export accepted_autobuild table for unstable, and use
729         it to generate the incoming Packages/Sources rather than having apt
730         walk the directory.
731         * apt.conf.buildd: use exported table from cron.buildd to generate
732         Packages/Sources
733
734 2003-11-07  James Troup  <james@nocrew.org>
735
736         * kelly: import errno.
737
738         * katie.py (Katie.build_summaries): sort override disparities.
739
740         * kelly (install): set dsc_component based on the .dsc's component
741         not a random binaries.
742
743 2003-10-29  James Troup  <james@nocrew.org>
744
745         * katie.py (Katie.build_summaries): don't assume changes["source"]
746         exists since it might not.
747
748 2003-10-20  James Troup  <james@nocrew.org>
749
750         * pseudo-packages.maintainers: update security.d.o to use
751         team@s.d.o at joy@'s request.
752
753 2003-10-17  James Troup  <james@nocrew.org>
754
755         * jennifer (check_dsc): use .startswith rather than .find() == 0.
756
757 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
758
759         * tea (chk_bd_process_dir): use .endswith rather than slice.
760
761 2003-10-14  James Troup  <james@nocrew.org>
762
763         * tea (check_build_depends): new function.
764         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
765         in the archive.
766         (main): update for new function.
767         (usage): likewise.
768
769         * katie.py (Katie.do_reject): sanitize variable names,
770         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
771         os.close() to outside if clause.
772
773         * jennifer (check_dsc): check build-depends and
774         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
775         Fold the ARRAY check into the same code block and tidy up it's
776         rejection message.
777         (check_changes): ensure that the Files field is non-empty.
778         Suggested by Santiago Vila <sanvila@unex.es>
779         (check_changes): normalize reject messages.
780         (check_dsc): instead of doing most of the checks inside a for loop
781         and an if, find the dsc_filename in a short loop over files first
782         and then do all the checks.  Add check for more than one .dsc in a
783         .changes which we can't handle.  Normalize reject messages.
784
785 2003-10-13  James Troup  <james@nocrew.org>
786
787         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
788         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
789
790         * jennifer (check_files): Set 'has_binaries' and 'has_source'
791         variables while iterating over 'files'.  Don't regenerate it when
792         checking for source if source is mentioned.
793
794         Reject source only uploads if the config variable
795         Dinstall::Reject::NoSourceOnly is set.
796
797 2003-10-03  James Troup  <james@nocrew.org>
798
799         * rene (main): add nasty hardcoded reference to debian-installer
800         so we detect NBS .udebs.
801
802 2003-09-29  James Troup  <james@nocrew.org>
803
804         * apt.conf (old-proposed-updates): remove.
805         * apt.conf-non-US (old-proposed-updates): likewise.
806
807 2003-09-24  James Troup  <james@nocrew.org>
808
809         * tea (check_files_not_symlinks): new function, ensure files
810         mentioned in the database aren't symlinks.  Includes code to
811         update any files that are like this to their real filenames +
812         location; commented out by though.
813         (usage): update for new function.
814         (main): likewise.
815
816 2003-09-24  Anthony Towns  <ajt@debian.org>
817
818         * vars: external-overrides variable added
819         * cron.daily: Update testing/unstable Task: overrides from joeyh
820         managed external source.
821
822 2003-09-22  James Troup  <james@nocrew.org>
823
824         * kelly (install): if we can't move the .changes into queue/done,
825         fail don't warn and carry on.  The old behaviour pre-dates NI and
826         doesn't make much sense now since jennifer checks both
827         queue/accepted and queue/done for any .changes files she's
828         processing.
829
830         * utils.py (move): don't throw exceptions on existing files or
831         can't overwrite, instead just fubar out.
832
833         * jennifer (check_dsc): also check Build-Depends-Indep for
834         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
835
836 2003-09-18  James Troup  <james@nocrew.org>
837
838         * katie.py (Katie.close_bugs): only log the bugs we've closed
839         once.
840
841         * kelly (main): log as 'kelly', not 'katie'.
842
843 2003-09-16  James Troup  <james@nocrew.org>
844
845         * katie.py (Katie.check_binary_against_db): likewise noramlize.
846
847         * jennifer (check_changes): normalize reject message for "changes
848         file already exists" to be %s: <foo>.
849         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
850         produced by broken dpkg-source in 1.10.11.  Tone down and
851         normalize rejection message for incompatible 'Format' version
852         numbers.
853         (check_diff): likewise tone down and normalize.
854
855 2003-09-07  James Troup  <james@nocrew.org>
856
857         * utils.py (parse_changes): if dsc_whitespace_rules is false,
858         don't bomb out on bogus empty lines.
859         (build_file_list): check for changes["files"] earlier.  use Dict
860         to create files[name] dictionary.
861         (send_mail): don't bother validating arguments.
862         (check_signature): minor improvements to some of the rejection
863         messages including listing the key id of the key that wasn't found
864         in the keyring.
865         (wrap): new function.
866
867         * tea: add new check 'validate-indices' that ensures all files
868         mentioned in indices (Packages, Sources) files do in fact exist.
869
870         * catherine (poolize): use a local re_isadeb which handles legacy
871         (i.e. no architecture) style .deb filenames.
872
873         * rosamund: new script.
874
875         * rhona (check_binaries): when checking for binary packages not in
876         a suite, don't bother selecting files that already have a
877         last_used date.
878         (check_sources): likewise.
879
880         * rhona: change all SQL EXISTS sub-query clauses to use the
881         postgres suggested convention of "SELECT 1 FROM".
882         * andrea (main): likewise.
883         * tea (check_override): likewise.
884         * catherine (main): likewise.
885
886         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
887         entries and in other suites MustBeNewerThan's.
888         (SuiteMappings): likewise
889         * katie.conf-non-US: likewise.
890         * katie.conf-security: likewise.
891
892         * apt.conf-security: remove oldstable.
893         * apt.conf.stable: likewise.
894         * apt.conf.stable-non-US: likewise.
895         * cron.buildd-security: likewise.
896         * cron.daily-security: likewise.
897         * vars-security (suites): likewise.
898         * wanna-build/trigger.daily: likewise.
899
900         * claire.py (clean_symlink): move...
901         * utils.py (clean_symlink): here.
902
903         * claire.py (find_dislocated_stable): update accordingly.
904
905 2003-08-16  Anthony Towns  <ajt@debian.org>
906
907         * katie.py (source_exists): expand the list of distributions
908         the source may exist in to include any suite that's mapped to
909         the destination suite (even transitively (a->b->c)). This should
910         unbreak binary uploads to *-proposed-updates.
911
912 2003-08-09  Randall Donald  <rdonald@debian.org>
913
914         * lisa (recheck): change changes["distribution"].keys() to
915         Katie.pkg.changes...
916
917 2003-08-08  Randall Donald  <rdonald@debian.org>
918
919         * katie.py: only tag bugs as fixed-in-experimental for
920         experimental uploads
921
922 2003-07-26  Anthony Towns  <ajt@debian.org>
923
924         * katie.py (source_exists): add an extra parameter to limit the
925         distribution(s) the source must exist in.
926         * kelly, lisa, jennifer: update to use the new source_exists
927
928 2003-07-15  Anthony Towns  <ajt@debian.org>
929
930         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
931         checksums for debian-installer stuff even when it's just a symlink to
932         another suite
933
934         * apt.conf: add the FakeDI line
935
936 2003-06-09  James Troup  <james@nocrew.org>
937
938         * kelly (check): make sure the 'file' we're looking for in 'files'
939         hasn't been deleted by katie.check_dsc_against_db().
940
941 2003-05-07  James Troup  <james@nocrew.org>
942
943         * helena (time_pp): fix s/years/year/ typo.
944
945 2003-04-29  James Troup  <james@nocrew.org>
946
947         * madison (usage): document -c/--component.
948
949         * madison (usage): Fix s/seperated/separated/.
950         * melanie (usage): likewise.
951         * jenna (usage): likewise.
952
953 2003-04-24  James Troup  <james@nocrew.org>
954
955         * cron.daily-non-US: if there's nothing for kelly to install, say
956         so.
957
958         * jennifer (check_timestamps): print sys.exc_value as well as
959         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
960         failed' with 'deb contents' to make it clearer what timestamp(s)
961         are being checked.
962
963 2003-04-15  James Troup  <james@nocrew.org>
964
965         * cron.daily-non-US: only run kelly if there are some .changes
966         files in accepted.
967
968         * rene: add -m/--mode argument which can be either daily (default)
969         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
970         Various changes to make this possible including a poor attempt at
971         splitting main() up a little.  De-hardcode suite numbers from SQL
972         queries and return quietly from do_nviu() if experimental doesn't
973         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
974         is.
975
976         * debian/control (Depends): remove python-zlib as it's obsolete.
977
978         * charisma (main): don't slice the \n off strings when we're
979         strip()-ing it anyway.
980         * heidi (set_suite): likewise.
981         (process_file): likewise.
982         * natalie (process_file): likewise.
983
984 2003-04-08  James Troup  <james@nocrew.org>
985
986         * katie.py (Katie.check_dsc_against_db): improve the speed of two
987         slow queries by using one LIKE '%foo%' and then matching against
988         '%s' or '/%s$' in python.  Also only join location when we need it
989         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
990         query, so 6s for each sourceful package.
991
992         * cron.daily: invoke rene and send the report to ftpmaster.
993         * cron.daily-non-US: likewise.
994
995 2003-03-14  James Troup  <james@nocrew.org>
996
997         * utils.py (send_mail): default filename to blank.
998         * amber (make_advisory): adapt.
999         * jennifer (acknowledge_new): likewise.
1000         * katie.py (Katie.close_bugs): likewise.
1001         (Katie.announce): likewise.
1002         (Katie.accept): likewise.
1003         (Katie.check_override): likewise.
1004         (Katie.do_reject): likewise.
1005         * kelly (do_reject): likewise.
1006         (stable_install): likewise.
1007         * lisa (do_bxa_notification): likewise.
1008         * lauren (reject): likewise.
1009         * melanie (main): likewise.
1010
1011         * rene (add_nbs): check any NBS packages against unstable to see
1012         if they haven't been removed already.
1013
1014         * templates/katie.rejected: remove paragraph about rejected files
1015         since they're o-rwx due to c-i-m and the uploader can't do
1016         anything about them and shania will take care of them anyway.
1017
1018         * madison (usage): update usage example to use comma seperation.
1019         * melanie (usage): likewise.
1020
1021         * utils.py (split_args): new function; splits command line
1022         arguments either by space or comma (whichever is used).  Also has
1023         optional-but-default DWIM spurious space detection to avoid
1024         'command -a i386, m68k' problems.
1025         (parse_args): use it.
1026         * melanie (main): likewise.
1027
1028         * melanie (main): force the admin to tell someone if we're not
1029         doing a rene-led removal (or closing a bug, which counts as
1030         telling someone).
1031
1032 2003-03-05  James Troup  <james@nocrew.org>
1033
1034         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1035         and python sections.
1036         * katie.conf-security (Section): likewise.
1037
1038         * add_constraints.sql: add uid and uid_id_seq to grants.
1039
1040         * lisa (determine_new): also warn about adding overrides to
1041         oldstable.
1042
1043         * madison (main): make the -S/--source-and-binary query obey
1044         -s/--suite restrictions.
1045
1046 2003-03-03  James Troup  <james@nocrew.org>
1047
1048         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1049         exists, warn the user that our output might seem strange.  (People
1050         get confused by multiple versions in a suite which happens
1051         post-kelly but pre-jenna.)
1052
1053 2003-02-21  James Troup  <james@nocrew.org>
1054
1055         * kelly (main): we don't need to worry about StableRejector.
1056
1057         * melanie (main): sort versions with apt_pkg.VersionCompare()
1058         prior to output.
1059
1060         * lauren: new script to manually reject packages from
1061         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1062
1063 2003-02-20  James Troup  <james@nocrew.org>
1064
1065         * kelly (init): remove unused -m/--manual-reject argument.
1066
1067         * katie.py (Katie.force_reject): renamed from force_move to make
1068         it more explicit what this function does.
1069         (Katie.do_reject): update to match.
1070
1071         * utils.py (prefix_multi_line_string): add an optional argument
1072         include_blank_lines which defaults to 0.  If non-zero, blank lines
1073         will be includes in the output.
1074
1075         * katie.py (Katie.do_reject): don't add leading space to each line
1076         of the reject message.  Include blank lines when showing the
1077         message to the user.
1078
1079 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1080
1081         * utils.py (fix_maintainer): replace pointless re.sub() with
1082         simple string format.
1083
1084 2003-02-11  James Troup  <james@nocrew.org>
1085
1086         * lisa (edit_overrides): only strip-to-one-char and upper-case
1087         non-numeric answers.  Fixes editing of items with indices >= 10;
1088         noticed by Randall.
1089         (edit_overrides): correct order of arguments to "not a valid
1090         index" error message.
1091
1092         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1093         remove_duplicate_versions(); thanks to aj for the initial
1094         diagnosis.
1095         (remove_duplicate_versions): correct how we return
1096         dominant_versions.
1097         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1098         a tuple rather than just a tuple.
1099
1100 2003-02-10  James Troup  <james@nocrew.org>
1101
1102         * emilie: new script - sync fingerprint and uid tables with a
1103         debian.org LDAP DB.
1104
1105         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1106         in 'fingerprint'.
1107
1108         * db_access.py (get_or_set_uid_id): new function.
1109
1110         * jennifer (main): update locking to a) not used FCNTL (deprecated
1111         in python >= 2.2) and b) acknowledge upstream's broken
1112         implementation of lockf (see Debian bug #74777), c) try to acquire
1113         the lock non-blocking.
1114         * kelly (main): likewise.
1115
1116         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1117
1118         * madison (main): only append the package to new_packages if it's
1119         not already in there; fixes -S/--source-and-binary for cases where
1120         the source builds a binary package of the same name.
1121
1122 2003-02-10  Anthony Towns  <ajt@debian.org>
1123
1124         * madison (main): use explicit JOIN syntax for
1125         -S/--source-and-binary queries to reduce the query's runtime from
1126         >10 seconds to negligible.
1127
1128 2003-02-08  James Troup  <james@nocrew.org>
1129
1130         * rene (main): in the NVIU output, append items to lists, not
1131         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1132         should be removed.
1133
1134 2003-02-07  James Troup  <james@nocrew.org>
1135
1136         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1137         Sources [aj].
1138
1139         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1140         O. Benham/Adam Heath/.
1141
1142         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1143         (Suite::Stable::Description): update for 3.0r1a.
1144         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1145
1146         * utils.py (gpgv_get_status_output): rename from
1147         get_status_output().
1148
1149         * neve (check_signature): use gpgv_get_status_output and Dict from
1150         utils().  Add missing newline to error message about duplicate tokens.
1151
1152         * saffron (per_arch_space_use): also print space used by source.
1153         (output_format): correct string.join() invocation.
1154
1155         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1156
1157 2003-02-04  James Troup  <james@nocrew.org>
1158
1159         * cron.buildd: correct generation of Packages/Sources and grep out
1160         non-US/non-free as well as non-free.
1161
1162 2003-02-03  Ryan Murray  <rmurray@debian.org>
1163
1164         * cron.buildd: generate quinn-diff output with full Packages/Sources
1165           files to get out-of-date vs. uncompiled right.
1166         * apt.conf.buildd: no longer generate uncompressed files, as they
1167           are generated in cron.buildd instead
1168         * add -i option to quinn-diff to ignore binary-all packages
1169         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1170           aren't in the packages file, the arch that uploaded them will build
1171           them anyways...
1172
1173 2003-01-30  James Troup  <james@nocrew.org>
1174
1175         * rene (main): only print suggested melanie command when there's
1176         some NBS to remove.
1177
1178 2003-01-30  Ryan Murray  <rmurray@debian.org>
1179
1180         * cron.buildd: fix incorrectly inverted lockfile check
1181
1182 2003-01-29  Ryan Murray  <rmurray@debian.org>
1183
1184         * cron.buildd: generate override.sid.all3.src
1185         * apt.conf.buildd: use generated override.sid.all3.src
1186
1187 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1188
1189         * utils.py (get_status_output): moved from jennifer.
1190         (Dict): likewise.
1191         (check_signature): likewise.
1192
1193         * jennifer (get_status_output): moved to utils.py.
1194         (Dict): likewise.
1195         (check_signature): likewise.
1196
1197         * utils.py (check_signature): add an argument to specifiy which
1198         function to call when an error was found.
1199         (check_signature): document this function better.
1200
1201         * jennifer (check_files): pass the reject function as an argument
1202         to utils.check_signature.
1203         (process_it): likewise.
1204
1205 2003-01-20  James Troup  <james@nocrew.org>
1206
1207         * rene (main): lots of changes to improve the output and make it
1208         more useful.
1209
1210         * katie.py (Katie.check_override): make the override messages
1211         clearer (hopefully).
1212
1213 2002-12-26  James Troup  <james@nocrew.org>
1214
1215         * ziyi (usage): document the ability to pass suite(s) as
1216         argument(s).
1217         (main): read apt.conf after checking for -h/--help.
1218
1219         * tea (main): take the check to run as an argument.
1220
1221         * saffron.R: R script to graph daily install runs.
1222
1223         * saffron: new script; various stats functions.
1224
1225         * rhona (main): connect to the database after checking for -h/--help.
1226
1227         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1228
1229         * melanie (main): sort versions with utils.arch_compare_sw().
1230
1231         * madison (usage): alphabetize order of options.
1232         * melanie (usage): likewise.
1233
1234         * kelly (usage): fix usage short description (we aren't dinstall).
1235
1236         * julia (usage): fix usage description and alphabetize order of
1237         options.
1238
1239         * jeri (usage): fix usage short description.
1240
1241         * jennifer (main): move --help and --version checks from here...
1242         (init): to here so that they work with an empty katie.conf.
1243         * kelly: likewise.
1244
1245         * alyson (usage): new function.
1246         (main): use it.
1247         * andrea: likewise.
1248         * ashley: likewise.
1249         * cindy: likewise.
1250         * denise: likewise.
1251         * helena: likewise.
1252         * neve: likewise.
1253         * rene: likewise.
1254         * rose: likewise.
1255         * tea: likewise.
1256
1257         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1258         entry that caused tasks to be omitted from 3.0r1.
1259
1260 2002-12-10  James Troup  <james@nocrew.org>
1261
1262         * jennifer (check_files): sanity check the Depends field to ensure
1263         it's non-empty if present since apt chokes on an empty one.
1264         Thanks to Ryan Murray for the idea.
1265
1266 2002-12-08  James Troup  <james@nocrew.org>
1267
1268         * katie.conf-security (Helena::Directories): new; include accepted
1269         in addition to byhand and new.
1270
1271         * helena (process_changes_files): use utils.arch_compare_sw().
1272         Justify things based on the longest [package, version,
1273         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1274         the commas in architecture and version lists for the same reason.
1275         (main): make directories we process configurable through
1276         Helena::Directories in the config file; if that doesn't exist
1277         default to the old hardcoded values (byhand & new).
1278
1279         * utils.py (arch_compare_sw): moved here from madison.
1280         * madison (main): adjust to compensate.
1281
1282 2002-12-06  James Troup  <james@nocrew.org>
1283
1284         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1285         right filename.
1286
1287 2002-12-05  James Troup  <james@nocrew.org>
1288
1289         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1290
1291 2002-11-28  Randall Donald  <rdonald@debian.org>
1292
1293         * fernanda.py (read_control): fix typo of 'Architecture'.
1294
1295 2002-11-26  James Troup  <james@nocrew.org>
1296
1297         * lisa (check_pkg): call less with '-R' so we see the colour from
1298         Randall's fernanda changes.
1299
1300         * neve (process_sources): if Directory points to a legacy location
1301         but the .dsc isn't there; assume it's broken and look in the pool.
1302         (update_section): new, borroed from alyson.
1303         (do_da_do_da): use it.
1304         (process_packages): add suite_it to the cache key used for
1305         arch_all_cache since otherwise we only add a package to the first
1306         suite it's in and ignore any subsequent ones.
1307
1308         * katie.conf-non-US (Location): fixed to reflect reality (all
1309         suites, except old-proposed-updates (which is legacy-mixed)) are
1310         pool.
1311
1312         * utils.py (try_with_debug): wrapper for print_exc().
1313         * jenna (main): use it.
1314         * neve (main): likewise.
1315
1316 2002-11-25  Randall Donald  <rdonald@debian.org>
1317
1318         * fernanda.py (main): added -R to less command line for raw control
1319         character support to print colours
1320         (check_deb): Instead of running dpkg -I on deb file, call
1321         output_deb_info, the new colourized control reporter.
1322         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1323         of printing out each .dsc line.
1324         (output_deb_info): new function. Outputs each key/value pair from
1325         read_control except in special cases where we highlight section,
1326         maintainer, architecture, depends and recommends.
1327         (create_depends_string): new function. Takes Depends tree and looks
1328         up it's compontent via projectb db, colourizes and constructs a
1329         depends string in original order.
1330         (read_dsc): new function. reads and parses .dsc info via
1331         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1332         colourized.
1333         (read_control): new function. reads and parses control info via
1334         apt_pkg. Depends and Recommends are split in to list structures,
1335         Section and Architecture are colourized. Maintainer is colourized
1336         if it has a localhost.localdomain address.
1337         (split_depends): new function. Creates a list of lists of
1338         dictionaries of depends (package,version relation). Top list is
1339         colected from comma delimited items. Sub lists are | delimited.
1340         (get_comma_list): new function. splits string input among commas
1341         (get_or_list): new function. splits string input among | delimiters
1342         (get_depends_parts): new function. Creates dictionary of package name
1343         and version relation from dependancy string.
1344         Colours for section and depends are per component. Unfound depends
1345         are in bold. Lookups using version info is not supported yet.
1346
1347 2002-11-22  James Troup  <james@nocrew.org>
1348
1349         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1350         'udmsearch'.
1351
1352         * amber (make_advisory): string.atol() is deprecated and hasn't
1353         been ported to string methods.  Use long() instead.
1354
1355         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1356         creating the database since we'll fail badly if it's created with
1357         e.g. UNICODE encoding.
1358
1359         * rose (main): AptCnf is a global.
1360
1361         * neve (get_location_path): new function determines the location
1362         from the the first (left-most) directory of a Filename/Directory.
1363         (process_sources): don't need 'location' anymore.  Use
1364         utils.warn().  Use the Directory: field for each package to find
1365         the .dsc.  Use get_location_path() to determine the location for
1366         each .dsc.
1367         (process_packages): do't need 'location' anymore.  Use
1368         utils.warn().  Use get_location_path().
1369         (do_sources): don't need 'location', drop 'prefix' in favour of
1370         being told the full path to the Sources file, like
1371         process_packages().
1372         (do_da_do_da): main() renamed, so that main can call us in a
1373         try/except.  Adapt for the changes in do_sources() and
1374         process_packages() above.  Assume Sources and Packages file are in
1375         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1376
1377         * katie.conf-security (Location): fixed to reflect reality (all
1378         suites are pool, not legacy).
1379
1380         * utils.py (print_exc): more useful (i.e. much more verbose)
1381         traceback; a recipe from the Python cookbook.
1382         * jenna (main): use it.
1383         * neve (main): likewise.
1384
1385 2002-11-19  James Troup  <james@nocrew.org>
1386
1387         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1388         handling which was FUBAR for multi-suite uploads.  Now we just
1389         make a dictionary of destinations to copy to and iterate over
1390         those.
1391
1392         * fernanda.py (check_deb): run linda as well as lintian.
1393
1394 2002-10-21  James Troup  <james@nocrew.org>
1395
1396         * melanie (main): change X-Melanie to X-Katie and prefix it with
1397         'melanie '.
1398
1399         * lisa (main): prefix X-Katie with 'lisa '.
1400
1401         * jennifer (clean_holding): fix typo in string method changes;
1402         s/file.find(file/file.find(/.
1403
1404         * cron.daily: invoke helena and send the report to ftpmaster.
1405         * cron.daily-non-US: likewise.
1406
1407 2002-10-16  James Troup  <james@nocrew.org>
1408
1409         * kelly (check): call reject() with a blank prefix when parsing
1410         the return of check_dsc_against_db() since it does its own
1411         prefix-ing.
1412
1413         * rose: new script; only handles directory creation initally.
1414
1415         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1416         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1417
1418 2002-10-06  James Troup  <james@nocrew.org>
1419
1420         * rene (main): remove bogus argument handling.
1421
1422         * kelly: katie, renamed.
1423         * cron.daily: adapt for katie being renamed to kelly.
1424         * cron.daily-non-US: likewise.
1425         * amber (main): likewise.
1426
1427         * Changes for python 2.1.
1428
1429         * kelly: time.strftime no longer requires a second argument of
1430         "time.localtime(time.time())".
1431         * logging.py: likewise.
1432         * rhona: likewise.
1433         * shania (init): likewise.
1434
1435         * amber: use augmented assignment.
1436         * catherine (poolize): likewise.
1437         * claire.py (fix_component_section): likewise.
1438         * halle (check_changes): likewise.
1439         * helena: likewise.
1440         * jenna: likewise.
1441         * jennifer: likewise.
1442         * jeri: likewise.
1443         * katie.py: likewise.
1444         * kelly: likewise.
1445         * lisa: likewise.
1446         * madison (main): likewise.
1447         * melanie: likewise.
1448         * natalie: likewise.
1449         * neve: likewise.
1450         * rhona: likewise.
1451         * tea: likewise.
1452         * utils.py: likewise.
1453         * ziyi: likewise.
1454
1455         * amber: use .endswith.
1456         * fernanda.py: likewise.
1457         * halle (main): likewise.
1458         * jennifer: likewise.
1459         * jeri: likewise.
1460         * katie.py: likewise.
1461         * kelly: likewise.
1462         * lisa: likewise.
1463         * neve: likewise.
1464         * shania (main): likewise.
1465         * utils.py: likewise.
1466
1467         * alyson: use string methods.
1468         * amber: likewise.
1469         * andrea: likewise.
1470         * ashley: likewise.
1471         * catherine: likewise.
1472         * charisma: likewise.
1473         * claire.py: likewise.
1474         * db_access.py: likewise.
1475         * denise: likewise.
1476         * halle: likewise.
1477         * heidi: likewise.
1478         * helena: likewise.
1479         * jenna: likewise.
1480         * jennifer: likewise.
1481         * jeri: likewise.
1482         * julia: likewise.
1483         * katie.py: likewise.
1484         * kelly: likewise.
1485         * lisa: likewise.
1486         * logging.py: likewise.
1487         * madison: likewise.
1488         * melanie: likewise.
1489         * natalie: likewise.
1490         * neve: likewise.
1491         * rene: likewise.
1492         * tea: likewise.
1493         * utils.py: likewise.
1494         * ziyi: likewise.
1495
1496 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1497
1498         * utils.py (parse_changes): use <string>.startswith() rather than
1499         string.find().
1500
1501 2002-08-27  Anthony Towns  <ajt@debian.org>
1502
1503         * katie.py (in_override_p): when searching for a source override,
1504         and the dsc query misses, search for both udeb and deb overrides
1505         as well. Should fix the UNACCEPT issues with udebs.
1506
1507 2002-08-24  James Troup  <james@nocrew.org>
1508
1509         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1510         source+binary package finding code which was causing severe
1511         performance degradation with postgres 7.2.
1512
1513 2002-08-14  James Troup  <james@nocrew.org>
1514
1515         * julia (main): use the pwd.getpwall() to get system user info
1516         rather than trying to read a password file.  Add a -n/--no-action
1517         option.
1518
1519         * cron.hourly: julia no longer takes any arguments.
1520         * cron.hourly-non-US: likewise.
1521
1522 2002-08-07  James Troup  <james@nocrew.org>
1523
1524         * katie (install): handle multi-suite uploads when CopyChanges
1525         and/or CopyKatie are in use, ensuring we only copy stuff once.
1526
1527 2002-08-01  Ryan Murray  <rmurray@debian.org>
1528
1529         * wanna-build/trigger.daily: initial commit, with locking
1530         * cron.buildd: add locking against daily run
1531
1532 2002-07-30  James Troup  <james@nocrew.org>
1533
1534         * melanie (main): readd creation of suite_ids_list so melanie is
1535         remotely useful again.
1536
1537         * katie.conf: adopt for woody release; diable
1538         StableDislocationSupport, add oldstable, adjust other suites and
1539         mappings, fix up location.
1540         * katie.conf-non-US: likewise.
1541         * katie.conf-security: likewise.
1542
1543         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1544         stable.
1545         * apt.conf.stable-non-US: likewise.
1546
1547         * apt.conf-security: adapt for woody release; adding oldstable,
1548         oldstable, adjust stable and testing.
1549         * cron.daily-security: likewise.
1550         * cron.buildd-security: likewise.
1551
1552         * apt.conf: adapt for woody release; rename woody-proposed-updates
1553         to testing-proposed-updates and proposed-updates to
1554         old-proposed-updates.
1555         * apt.conf-non-US: likewise.
1556
1557         * vars-non-US (copyoverrides): add sarge.
1558         * vars (copyoverrides): likewise.
1559
1560         * vars-security (suites): add oldstable.
1561
1562 2002-07-22  Ryan Murray  <rmurray@debian.org>
1563
1564         * apt.conf.security-buildd: use suite codenames instead of
1565           distnames.
1566
1567 2002-07-16  James Troup  <james@nocrew.org>
1568
1569         * denise (main): fix filenames for testing override files.
1570
1571 2002-07-14  James Troup  <james@nocrew.org>
1572
1573         * jennifer (process_it): call check_md5sums later so we can check
1574         files in the .dsc too
1575         (check_md5sums): check files in the .dsc too.  Check both md5sum
1576         and size.
1577
1578         * melanie (main): use parse_args() and join_with_commas_and() from
1579         utils.  If there's nothing to do, say so and exit, don't ask for
1580         confirmation etc.
1581
1582         * amber (join_with_commas_and): moved from here to ...
1583         * utils.py (join_with_commas_and): here.
1584
1585 2002-07-13  James Troup  <james@nocrew.org>
1586
1587         * madison (main): use parse_args() from utils.  Support
1588         -c/--component.
1589
1590         * jenna (parse_args): moved from here to ...
1591         * utils.py (parse_args): here.
1592
1593         * katie.conf (Architectures): minor corrections to the description
1594         for arm, mips and mipsel.
1595         * katie.conf-non-US (Architectures): likewise.
1596         * katie.conf-security (Architectures): likewise.
1597
1598         * cron.daily-security: use natalie's new -a/--add functionality to
1599         flesh out the security overrides.
1600
1601 2002-07-12  James Troup  <james@nocrew.org>
1602
1603         * cron.buildd (ARCHS): add arm.
1604
1605         * katie.conf: 2.2r7 was released.
1606         * katie.conf-non-US: likewise.
1607
1608         * utils.py (parse_changes): handle a multi-line field with no
1609         starting line.
1610
1611 2002-06-25  James Troup  <james@nocrew.org>
1612
1613         * templates/amber.advisory (To): add missing email address since
1614         __WHOAMI__ is only a name.
1615
1616         * katie.conf-security (Melane::LogFile): correct to go somewhere
1617         katie has write access to.
1618         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1619         Testing.
1620
1621         * natalie: add support for -a/-add which adds packages only
1622         (ignoring changes and deletions).
1623
1624         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1625         use FindB, not get.
1626
1627 2002-06-22  James Troup  <james@nocrew.org>
1628
1629         * jennifer (check_files): validate the package name and version
1630         field.  If 'Package', 'Version' or 'Architecture' are missing,
1631         don't try any further checks.
1632         (check_dsc): likewise.
1633
1634         * utils.py (re_taint_free): add '~' as a valid character.
1635
1636 2002-06-20  Anthony Towns  <ajt@debian.org>
1637
1638         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1639
1640 2002-06-09  James Troup  <james@nocrew.org>
1641
1642         * jennifer (check_files): reduce useless code.
1643
1644         * cron.daily-security: run symlinks -dr on $ftpdir.
1645
1646         * vars-security (ftpdir): add.
1647
1648 2002-06-08  James Troup  <james@nocrew.org>
1649
1650         * neve (update_override_type): transaction is handled higher up in
1651         main().
1652         (update_priority): likewise.
1653         (process_sources): remove code that makes testing a duplicate of
1654         stable.
1655         (process_packages): likewise.
1656
1657         * templates/amber.advisory: add missing mail headers.
1658
1659         * cron.daily-security: also call apt-ftparchive clean for
1660         apt.conf.buildd-security.
1661         * cron.weekly: likewise.
1662
1663         * amber (do_upload): write out a list of source packages (and
1664         their version) uploaded for testing.
1665         (make_advisory): add more Subst mappings for the mail headers.
1666         (spawn): check for suspicious characters in the command and abort
1667         if their found.
1668
1669 2002-06-07  James Troup  <james@nocrew.org>
1670
1671         * ziyi (main): remove the 'nonus'/'security' hacks and use
1672         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1673         the lower level Release files, even if they don't exist.  fubar
1674         out if we can't open a lower level Release file for writing.
1675
1676         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1677         ziyi.
1678         * katie.conf-security (Dinstall): likewise.
1679
1680         * amber (do_upload): renamed from get_file_list().  Determine the
1681         upload host from the original component.
1682         (init): Add a -n/--no-action option.  Fix how we get changes_files
1683         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1684         sys.argv).  Add an Options global.
1685         (make_advisory): support -n/--no-action.
1686         (spawn): likewise.
1687         (main): likewise.
1688         (usage): document -n/--no-action.
1689
1690         * cron.buildd-security: fix path to Packages-arch-specific in
1691         quinn-diff invocation.
1692
1693         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1694         to proper suite names (i.e. stable, testing) rather than codenames
1695         (potato, woody).
1696         (Dinstall::DefaultSuite): likewise.
1697         (Suite): likewise.
1698         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1699         * vars-security (suites): likewise.
1700         * apt.conf-security: likewise.
1701
1702         * katie.conf-security (Component): add "updates/" prefix.
1703         (Suite::*::Components): likewise.
1704         (ComponentMappings): new; map all {ftp-master,non-US} components
1705         -> updates/<foo>.
1706
1707         * katie.conf-security (Natalie): removed; the options have
1708         defaults and ComponentPosition is used by alyson which doesn't
1709         work on security.d.o.
1710         (Amber): replace UploadHost and UploadDir with ComponentMappings
1711         which is a mapping of components -> URI.
1712         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1713         (SuiteMappings): use "silent-map" in preference to "map".
1714
1715         * cron.unchecked-security: fix call to cron.buildd-security.
1716
1717         * cron.daily-security: map local suite (stable) -> override suite
1718         (potato) when fixing overrides.  Correct component in natalie call
1719         to take into account "updates/" prefix.  Fix cut'n'waste in
1720         override.$dist.all3 generation, the old files weren't being
1721         removed, so they were endlessly growing.
1722
1723         * neve (main): don't use .Find for the CodeName since we require
1724         it.  Location::*::Suites is a ValueList.
1725         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
1726         out on expired keys, just warn.
1727         (update_override_type): new function; lifted from alyson.
1728         (update_priority): likewise.
1729         (main): use update_{override_type,priority}().
1730
1731         * jennifer (check_distributions): remove redunant test for
1732         SuiteMappings; ValueList("does-not-exist") returns [] which is
1733         fine.  Add support for a "silent-map" type which doesn't warn
1734         about the mapping to the user.
1735         (check_files): add support for ComponentMappings, similar to
1736         SuiteMappings, but there's no type, just a source and a
1737         destination and the original component is stored in "original
1738         component".
1739         * katie.py (Katie.dump_vars): add "original component" as an
1740         optionsal files[file] dump variable.
1741
1742         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
1743         query.  Add support for section-less legacy locations like current
1744         security.debian.org through YetAnotherConfigBoolean
1745         'LegacyStableHasNoSections'.
1746         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
1747
1748         * utils.py (real_arch): moved here from ziyi.
1749         * ziyi (real_arch): moved to utils.py.
1750         * ziyi (main): likewise.
1751
1752         * claire.py (find_dislocated_stable): use real_arch() with
1753         filter() to strip out source and all.
1754         * neve (main): likewise.
1755         * rene (main): likewise.
1756         * jeri (parse_packages): likewise.
1757
1758 2002-06-06  James Troup  <james@nocrew.org>
1759
1760         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
1761         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
1762         doing.
1763
1764 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1765
1766         * jeri (check_joey): check if the line contains two elements
1767         before accessing the second.  Also, strip trailing spaces as well
1768         as the newline.
1769         * halle (check_joey): likewise.
1770
1771 2002-06-05  James Troup  <james@nocrew.org>
1772
1773         * cron.unchecked-security: new file; like cron.unchecked but if
1774         there's nothing to do exit so we don't call cron.buildd-security.
1775
1776         * apt.conf.buildd-security: new file.
1777
1778         * vars (archs): alphabetize.
1779         * vars-non-US (archs): likewise.
1780
1781         * vars-security: add unchecked.
1782
1783         * madison (main): reduce rather bizarrely verbose and purposeless
1784         code to print arches to a simple string.join.
1785
1786         * katie.conf (Suites::Unstable): add UdebComponents, a new
1787         valuelist of suites, used by jenna to flesh out the list of
1788         <suite>_main-debian-installer-binary-<arch>.list files generated.
1789         (Dinstall): add StableDislocationSupport, a new boolean used by
1790         jenna to enable or disable stable dislocation support
1791         (i.e. claire), as true.
1792
1793         * katie.conf (Dinstall): add StableDislocationSupport, a new
1794         boolean used by jenna to enable or disable stable dislocation
1795         support (i.e. claire), as true.
1796         * katie.conf-non-US: likewise.
1797         * katie.conf-security: likewise.
1798
1799         * cron.daily-security: generate .all3 overrides for the buildd
1800         support.  Freshen a local copy of Packages-arch-specific from
1801         buildd.debian.org.
1802
1803         * claire.py (find_dislocated_stable): disable the support for
1804         files in legacy-mixed locations since none of the Debian archives
1805         have any anymore.
1806
1807         * helena: new script; produces a report on NEW and BYHAND
1808         packages.
1809
1810         * jenna: rewritten from scratch to fix speed problems.  Run time
1811         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
1812         minutes, 105 seconds are the monster query and 70 odd seconds is
1813         claire.
1814
1815         * apt.conf.buildd (Default): remove MaxContentsChange as it's
1816         irrelevant.
1817
1818 2002-06-05  Ryan Murray  <rmurray@debian.org>
1819
1820         * cron.buildd-security: new file.
1821
1822 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
1823
1824         * denise (list): take a file argument and use it.
1825         (main): don't abuse sys.stdout, just write to the file.
1826
1827         * claire.py (usage): Fix misspelling.
1828         (clean_symlink): Simplify.
1829         (find_dislocated_stable): Avoid unnecessary work.
1830
1831 2002-05-29  James Troup  <james@nocrew.org>
1832
1833         * cameron: removed; apt-ftparchive can simply walk the directory.
1834
1835 2002-05-26  Anthony Towns  <ajt@debian.org>
1836
1837         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
1838         for the autobuilders.
1839
1840 2002-05-24  Ryan Murray  <rmurray@debian.org>
1841
1842         * cron.buildd: update override files before running apt-ftparchive
1843
1844 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1845
1846         * amber (main): remove extra space in prompt.
1847
1848         * utils.py (validate_changes_file_arg): use original filename in
1849         error messages.
1850
1851         * jeri (check_joey): close file after use.
1852         (parse_packages): likewise.
1853         (main): setup debug option properly.
1854
1855         * melanie (main): remove unused packages variable and simplify the
1856         code to build up con_packages by using repr().
1857
1858 2002-05-23  James Troup  <james@nocrew.org>
1859
1860         * lisa (recheck): when we reject, also return 0 so the package is
1861         skipped.
1862         (sg_compare): fix note sorting.
1863         (recheck): remove the .katie file after rejection.
1864
1865         * katie.py (Katie.accept): accepted auto-build support take 3;
1866         this time adding support for security.  Security needs a) non-pool
1867         files copied rather than symlinked since accepted is readable only
1868         by katie/security and www-data needs to be able to see the files,
1869         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
1870         AcceptedAutoBuildSuites and is a ValueList containing the suites.
1871         SecurityAcceptedAutoBuild is a new boolean which controls whether
1872         or not normal or security style is used.  The unstable_accepted
1873         table was renamed to accepted_autobuild and a suite column added.
1874         Also fix a bug noticed by Ryan where an existent orig.tar.gz
1875         didn't have it's last_used/in_accepted flags correctly updated.
1876         * katie (install): likewise.
1877         * rhona (clean_accepted_autobuild): likewise.
1878
1879 2002-05-22  James Troup  <james@nocrew.org>
1880
1881         * lisa (sort_changes): new function; sorts changes properly.
1882         Finally.
1883         (sg_compare): new function; helper for sort_changes().  Sorts by
1884         have note and time of oldest upload.
1885         (indiv_sg_compare): new function; helper for sort_changes().
1886         Sorts by source version, have source and filename.
1887         (main): use sort_changes().
1888         (changes_compare): obsoleted; removed.
1889
1890 2002-05-20  James Troup  <james@nocrew.org>
1891
1892         * rhona (clean_accepted_autobuild): don't die if a file we're
1893         trying to remove doesn't exist.  Makes rhona more friendly to
1894         katie/katie.py crashes/bugs without any undue cost.
1895
1896 2002-05-19  James Troup  <james@nocrew.org>
1897
1898         * lisa (main): if sorting a large number of changes give some
1899         feedback.
1900         (recheck): new function, run the same checks (modulo NEW,
1901         obviously) as katie does, if they fail do the standard
1902         reject/skip/quit dance.
1903         (do_pkg): use it.
1904
1905         * katie (install): don't try to unlink the symlink in the
1906         AcceptedAutoBuild support if the destination is not a symlink (or
1907         doesn't exist).  Avoids unnecessary bombs on previous partial
1908         accepts and will still bomb hard if the file exists and isn't a
1909         symlink.
1910
1911         * utils.py: blah, commands _is_ used when the mail stuff isn't
1912         commented out like it is in my test environment.
1913
1914         * lisa (changes_compare): "has note" overrides everything else.
1915         Use .katie files rather than running parse_changes, faster and
1916         allows "has note" to work.  Correct version compare, it was
1917         reversed.  Ctime check should only kick in if the source packages
1918         are not the same.
1919         (print_new): print out and return any note.  Rename 'ret_code' to
1920         'broken'.
1921         (edit_new): renamed from spawn_editor.  Don't leak file
1922         descriptors.  Clean up error message if editor fails.
1923         (edit_note): new function, allows one to edit notes.
1924         (do_new): add note support, editing and removing.
1925         (init): kill -s/--sort; with notes we always want to use our
1926         sorting method.
1927         (usage): likewise.
1928
1929         * katie.py (Katie.dump_vars): add "lisa note" as an optional
1930         changes field.
1931
1932         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
1933         it default to 0.  Adapt tests to assume it's boolean.
1934         * fernanda.py (check_changes): adjust call appropriately.
1935         * halle (check_changes): likewise.
1936         * jennifer (check_changes): likewise.
1937         * jeri (check_changes): likewise.
1938         * shania (flush_orphans): likewise.
1939
1940         * jennifer (check_dsc): pass is_a_dsc by name when calling
1941         build_file_list() for clarity.
1942         * shania (flush_orphans): likewise.
1943         * tea (check_missing_tar_gz_in_dsc): likewise.
1944
1945         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
1946         calling parse_changes() for clarity.
1947         * tea (check_dscs): likewise.
1948
1949         * utils.py (parse_changes): make dsc_whitespace_rules default to
1950         not true.
1951         * halle (check_changes): adjust call appropriately.
1952         * jennifer (check_changes): likewise.
1953         * jeri (check_changes): likewise.
1954         * lisa (changes_compare): likewise.
1955         * utils.py (changes_compare): likewise.
1956         * melanie (main): likewise.
1957         * shania (flush_orphans): likewise.
1958         * fernanda.py (check_changes): likewise.
1959
1960 2002-05-18  James Troup  <james@nocrew.org>
1961
1962         * katie.py (Katie.dump_vars): make the .katie file unreadable,
1963         it's not useful and by and large a duplication of information
1964         available in readable format in other files.
1965
1966 2002-05-16  Ryan Murray  <rmurray@debian.org>
1967
1968         * melanie: Dir::TemplatesDir -> Dir::Templates
1969
1970 2002-05-15  Ryan Murray  <rmurray@debian.org>
1971
1972         * cameron: correct the use of os.path.join
1973
1974 2002-05-15  Anthony Towns  <ajt@debian.org>
1975
1976         * ziyi: Update to match the new format for Architectures/Components
1977         in katie.conf.
1978
1979 2002-05-14  James Troup  <james@nocrew.org>
1980
1981         * amber: new script; 'installer' wrapper script for the security
1982         team.
1983
1984         * katie.py (Katie.announce): remove unused 'dsc' local
1985         variable. (pychecker)
1986
1987         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
1988
1989         * neve: don't import sys, we don't use it. (pychecker)
1990         (check_signature): fix return type mismatch. (pychecker)
1991
1992         * utils.py: don't import commands, we don't use it.  (pychecker)
1993
1994         * katie (install): SpecialAcceptedAutoBuild is a boolean.
1995
1996         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
1997         obsoleted by the change to "othercomponents" handling in jennifer
1998         detailed below.
1999         (Katie.cross_suite_version_check): new function; implements
2000         cross-suite version checking rules specified in the conf file
2001         while also enforcing the standard "must be newer than target
2002         suite" rule.
2003         (Katie.check_binary_against_db): renamed, since it's invoked once
2004         per-binary, "binaries" was inaccurate.  Use
2005         cross_suite_version_check() and don't bother with the "oldfiles"
2006         rubbish as jennifer works out "othercomponents" herself now.
2007         (Katie.check_source_against_db): use cross_suite_version_check().
2008
2009         * katie (check): the version and file overwrite checks
2010         (check_{binary,source,dsc}_against_db) are not per-suite.
2011
2012         * jennifer (check_files): less duplication of
2013         'control.Find("Architecture", "")' by putting it in a local
2014         variable.
2015         (check_files): call check_binary_against_db higher up since it's
2016         not a per-suite check.
2017         (check_files): get "othercomponents" directly rather than having
2018         check_binary_against_db do it for us.
2019
2020         * heidi (main): 'if x:', not 'if x != []:'.
2021         * katie.py (Katie.in_override_p): likewise.
2022         (Katie.check_dsc_against_db): likewise.
2023         * natalie (main): likewise.
2024         * rene (main): likewise.
2025         * ziyi (real_arch): likewise.
2026
2027         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2028         and OverrideType are now value lists, not lists.
2029         * andrea (main): likewise.
2030         * cindy (main): likewise.
2031         * claire.py (find_dislocated_stable): likewise.
2032         * denise (main): likewise.
2033         * jenna (main): likewise.
2034         * jennifer (check_distributions): likewise.
2035         (check_files): likewise.
2036         (check_urgency): likewise (Urgency::Valid).
2037         * jeri (parse_packages): likewise.
2038         * neve (main): likewise (and Location::%s::Suites).
2039         * rene (main): likewise.
2040
2041 2002-05-13  James Troup  <james@nocrew.org>
2042
2043         * katie.py (Katie.check_source_against_db): correct case of reject
2044         message to be consistent with binary checks.
2045
2046         * jennifer (get_status_output): don't leak 2 file descriptors per
2047         invocation.
2048         (check_signature): add missing '\n' to "duplicate status token"
2049         error message.
2050
2051 2002-05-09  James Troup  <james@nocrew.org>
2052
2053         * utils.py (validate_changes_file_arg): new function; validates an
2054         argument which should be a .changes file.
2055         * ashley (main): use it.
2056         * lisa (main): likewise.
2057
2058         * katie.py (Katie.check_dsc_against_db): since there can be more
2059         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2060         entry still exists in files.
2061
2062         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2063         files, since check_dsc_against_db() deletes the .orig.tar.gz
2064         entry.
2065
2066         * cameron: cleanups.
2067
2068         * utils.py (changes_compare): change sort order so that source
2069         name and source version trump 'have source'; this should fix
2070         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2071         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2072         by Ryan.
2073
2074         * lisa (main): allow the arguments to be .katie files too.
2075
2076 2002-05-07  Ryan Murray  <rmurray@debian.org>
2077
2078         * cron.buildd: add s390 to arch list again
2079
2080 2002-05-05  Ryan Murray  <rmurray@debian.org>
2081
2082         * cron.buildd: new script, update w-b database from unstable_accepted
2083         table
2084         * cameron: new script, take list in unstable_accepted and write out
2085         a file list for apt-ftparchive
2086         * apt.conf.buildd: new apt configuration for Packages/Sources for
2087         unstable_accepted
2088         * vars: add s390 to arch list.
2089
2090 2002-05-03  James Troup  <james@nocrew.org>
2091
2092         * neve (main): don't hard code the calling user as that doesn't
2093         work with modern postgres installs.  Fix psql invocation for
2094         init_pool.sql (database name required).  Dont' hard code the
2095         database name.
2096         (process_sources): add support for fingerprint and install_date.
2097         (process_packages): add support for fingerprint.
2098         (do_sources): pass in the directory, fingerprint support needs it.
2099         (get_status_output): borrowed from jennifer.
2100         (reject): likewise.
2101         (check_signature): likewise.
2102
2103         * katie (install): only try to log urgencies if Urgency_Logger is
2104         defined.
2105         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2106         defined; only close Urgency_Logger if it's defined.
2107
2108         * catherine (poolize): adapt for Dir rationalization.
2109         * claire.py (find_dislocated_stable): likewise.
2110         * denise (main): likewise.
2111         * halle (check_joey): likewise.
2112         * jenna: likewise.
2113         * jennifer: likewise.
2114         * jeri: likewise.
2115         * katie.py: likewise.
2116         * katie: likewise.
2117         * lisa (do_bxa_notification): likewise.
2118         * logging.py (Logger.__init__): likewise
2119         * rene (main): likewise.
2120         * rhona (clean): likewise.
2121         * shania (init): likewise.
2122         * tea: likewise.
2123         * ziyi: likewise.
2124
2125         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2126         FindB, not FindI.
2127
2128         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2129         boolean, use FindB, not get.
2130
2131         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2132         .orig.tar.gz's which are an exact (size/md5sum) match.
2133
2134         * ashley (main): really allow *.katie files as arguments too;
2135         noticed by aj.
2136
2137         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2138
2139 2002-05-03  Anthony Towns  <ajt@debian.org>
2140
2141         * ziyi: support for security.
2142
2143 2002-05-02  James Troup  <james@nocrew.org>
2144
2145         * jennifer (accept): call Katie.check_override() unconditional as
2146         no-mail check moved into that function.
2147         (do_byhand): likewise.
2148
2149         * katie.py (Katie.check_override): don't do anything if we're a)
2150         not sending mail or b) the override disparity checks have been
2151         disbled via Dinstall::OverrideDisparityCheck.
2152
2153         * jennifer (check_files): don't hard code Unstable as the suite
2154         used to check for architecture validity; use
2155         Dinstall::DefaultSuite instead, if it exists.
2156         (accept): conditionalize
2157
2158         * katie.py (Katie.update_subst): support global maintainer
2159         override with Dinstall::OverrideMaintainer.
2160
2161         * jennifer (check_distributions): new function, Distribution
2162         validation and mapping.  Uses new SuiteMappings variable from
2163         config file to abstract suite mappings.
2164         (check_changes): call it.
2165
2166         * natalie: renamed; nothing imports or likely will for some time.
2167
2168         * denise (main): remove unused natalie import and init().
2169
2170         * natalie.py (init): removed.
2171         (main): initalize here instead and don't hardcode the database
2172         name.
2173
2174 2002-04-30  James Troup  <james@nocrew.org>
2175
2176         * katie.py (Katie.close_bugs): new function, split out from
2177         announce().
2178         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2179         true.
2180         (Katie.close_bugs): new function, split out
2181         (Katie.close_bugs): return immediately if there are no bugs to
2182         close.
2183
2184         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2185         * katie (do_reject): likewise.
2186         (stable_install): likewise.
2187         * katie.py (Katie.announce): likewise.
2188         (Katie.accept): likewise.
2189         (Katie.check_override): likewise.
2190         (Katie.do_reject): likewise.
2191         * lisa (do_bxa_notification): likewise.
2192         * melanie (main): likewise.
2193
2194         * utils.py (TemplateSubst): change second argument to be a
2195         filename rather than a template since every caller opened a file
2196         on the fly which was ugly and leaked file descriptor.
2197
2198 2002-04-29  James Troup  <james@nocrew.org>
2199
2200         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2201         <hertzog@debian.org> to send 'accepted' announce mails to the
2202         PTS. [#128140]
2203
2204 2002-04-24  James Troup  <james@nocrew.org>
2205
2206         * init_pool.sql (unstable_accepted): add two new fields to
2207         unstable_accepted; in_accepted is a boolean indicating whether or
2208         not the file is in accepted and last_used is a timestamp used by
2209         rhona to determine when to remove symlinks for installed packages.
2210
2211         * katie.py (Katie.accept): auto-build support take 2.  Create
2212         symlinks for all files into a seperate directory.  Add files to
2213         unstable_accepted as paths to the new directory; mark them as
2214         being in accepted for cameron.  Properly conditionalize it on a
2215         configuration variable.
2216
2217         * katie (install): likewise.  Update symlinks to point into the
2218         pool; mark the files for later deletion by rhona and mark them as
2219         not being in accepted for cameron.
2220
2221         * rhona (clean_accepted_autobuild): new function.
2222
2223 2002-04-22  James Troup  <james@nocrew.org>
2224
2225         * jennifer (check_files): handle db_access.get_location_id()
2226         returning -1 properly/better.
2227
2228         * rhona (clean_fingerprints): new function.
2229
2230 2002-04-21  James Troup  <james@nocrew.org>
2231
2232         * utils.py (touch_file): unused; remove.
2233         (plural): likewise.
2234
2235         * jennifer (check_files): close file descriptor used to get the
2236         control file.
2237         (check_md5sums): likewise.
2238         (callback): likewise.
2239
2240         * katie.py (Katie.do_reject): handle manual rejects much better;
2241         call the editor first and get confirmation from the user before
2242         proceeding.
2243
2244         * jennifer (check_signature): prefix_multi_line_string() moved to
2245         utils.
2246
2247         * utils.py (prefix_multi_line_string): moved here from jennifer.
2248
2249 2002-04-20  James Troup  <james@nocrew.org>
2250
2251         * lisa (main): handle non-existent files.
2252
2253         * ashley (main): allow *.katie files as arguments too.
2254
2255 2002-04-19  James Troup  <james@nocrew.org>
2256
2257         * katie.py (Katie.accept): add stuff to help auto-building from
2258         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2259         in the pool), create a symlink to it in the accepted directory and
2260         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2261
2262         * katie (install): undo the "auto-building from accepted" stuff
2263         (i.e. remove the .orig.tar.gz symlink and remove the files from
2264         unstable_accepted table).
2265
2266 2002-04-16  James Troup  <james@nocrew.org>
2267
2268         * jennifer (upload_too_new): fix typo which was causing all
2269         timestamp comparisons to be against the .changes file.  Also move
2270         back to the original directory so we do the comparisons against
2271         accurate timestamps.
2272
2273         * tea (check_missing_tar_gz_in_dsc): new function.
2274
2275         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2276         file mentioned in the .dsc.
2277
2278         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2279         way mails reach debian-{devel-,}changes@l.d.o.
2280
2281 2002-04-02  Ryan Murray  <rmurray@debian.org>
2282
2283         * cron.daily: run shania after rhona
2284         * cron.daily-non-US: likewise.
2285
2286 2002-04-01  James Troup  <james@nocrew.org>
2287
2288         * katie: re-add proposed-updates/stable install support.
2289
2290         * katie.py (Katie.dump_vars): add changes["changes"] as an
2291         optional field; should be mandatory later.
2292
2293 2002-03-31  James Troup  <james@nocrew.org>
2294
2295         * katie (install): support a Suite::<foo>::CopyKatie similar to
2296         CopyChanges.  Done seperately because .katie files don't need to
2297         be mirrored and will probably be copied to another directory as a
2298         result.
2299
2300         * halle (main): add missing debug to options.
2301
2302 2002-03-29  James Troup  <james@nocrew.org>
2303
2304         * madison (main): add a -r/--regex option.
2305
2306 2002-03-26  James Troup  <james@nocrew.org>
2307
2308         * lisa: don't trample on changes["distribution"]; make a copy of
2309         it as changes["suite"] instead and use that.
2310
2311 2002-03-16  Anthony Towns  <ajt@debian.org>
2312
2313         * templates/lisa.bxa_notification: Fix some grammatical errors.
2314         Encourage contact via bxa@ftp-master email address.
2315
2316 2002-03-15  James Troup  <james@nocrew.org>
2317
2318         * jennifer (check_timestamps): remove bogus raise in except.
2319
2320 2002-03-15  Anthony Towns  <ajt@debian.org>
2321
2322         * cron.monthly: rotate mail/archive/bxamail as well as
2323         mail/archive/mail. This is for a complete archive of
2324         correspondence with the BXA.
2325
2326 2002-03-14  Anthony Towns  <ajt@debian.org>
2327
2328         * crypto-in-main changes.
2329
2330         * utils.py (move, copy): add an optional perms= parameter to let you
2331         set the resulting permissions of the moved/copied file
2332         * katie.py (force_move): rejected/morgued files should be unreadable
2333         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2334         should be unreadable.
2335
2336 2002-03-07  Ryan Murray  <rmurray@debian.org>
2337
2338         * katie (install): check for existance of "files id" key as well as
2339         it being set to a valid value.
2340         * katie (install): check for existense and valid value for location
2341         id as well
2342
2343 2002-03-05  Ryan Murray  <rmurray@debian.org>
2344
2345         * katie.py (do_reject): reread the reason file after editing it.
2346
2347 2002-02-25  James Troup  <james@nocrew.org>
2348
2349         * jennifer (check_changes): don't enforce sanity in .changes file
2350         names since it doesn't seem to be possible; pcmica-cs and similar
2351         freak show packages in particular cause real problems.
2352
2353         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2354         each dsc_file since the .orig.tar.gz checking code now uses it as
2355         a boolean.  Fixes bizarro rejections which bogusly claimed
2356         .diff.gz md5sum/size was incorrect.
2357
2358 2002-02-24  James Troup  <james@nocrew.org>
2359
2360         * katie (process_it): reset reject_message.
2361
2362 2002-02-22  James Troup  <james@nocrew.org>
2363
2364         * db_access.py(set_files_id): disable use of
2365         currval('files_id_seq') because it was taking 3 seconds on auric
2366         which is insane (most calls take < 0.01) and simply call
2367         get_files_id() for the return value instead.
2368
2369         * katie.py (Katie.do_query): convenience function; unused by
2370         default, useful for profiling.
2371         * db_access.py (do_query): likewise.
2372
2373         * katie (install): fix insert SQL call when binary has no source.
2374
2375         * lisa (determine_new): auto-correct non-US/main to non-US.
2376         (determine_new): add a warning when adding things to stable.
2377         (edit_index): use our_raw_input().
2378         (edit_overrides): likewise.
2379         (do_new): likewise.  Use re.search() not re.match() since the
2380         default answer may not be the first one.
2381         (do_byhand): likewise.
2382         (do_new): Default to 'S'kip and never 'A'dd.
2383
2384         * jennifer (action): pass prompt to our_raw_input().
2385         * melanie (game_over): likewise.
2386         * katie (action): likewise.
2387
2388         * utils.py (our_raw_input): add an optional prompt argument to
2389         make the function more usable as a drop in replacement for
2390         raw_input().
2391
2392         * jennifer (check_files): correct reject() to not double prefix
2393         when using katie.py based functions.
2394         (check_dsc): likewise.
2395
2396         * katie.py (Katie.reject): prepend a new line if appropriate
2397         rathen than appending one to avoid double new lines when caller
2398         adds one of his own.
2399
2400         * lisa (determine_new): warn if the package is also in other
2401         components.
2402
2403 2002-02-20  James Troup  <james@nocrew.org>
2404
2405         * jennifer (check_files): if .changes file lists "source" in
2406         Architecture field, there must be a .dsc.
2407
2408 2002-02-15  James Troup  <james@nocrew.org>
2409
2410         * ashley (main): add some missing fields.
2411
2412         * katie.py (Katie.check_dsc_against_db): fix to take into account
2413         the fact that the .orig.tar.gz might be in byhand, accepted or
2414         new.  Also fix calling of reject().
2415         (Katie.check_binaries_against_db): fix calling of reject().
2416         (Katie.check_source_against_db): likewise.
2417         (Katie.dump_vars): add missing variables used for bug closures.
2418
2419         * lisa (changes_compare_by_time): sort by reverse time.
2420
2421         * katie.py (Katie.accept): log.
2422         (Katie.dump_vars): missing has_key test for optional changes fields.
2423
2424         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2425         (process_it): traceback goes to stderr, not stdout.
2426         (acknowledge_new): log.
2427         (do_byhand): likewise.
2428
2429         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2430
2431         * add_constraints.sql: add grants for the new fingerprint table.
2432
2433 2002-02-13  James Troup  <james@nocrew.org>
2434
2435         * katie (do_reject): basename the .changes filename before trying
2436         to use it to construct the .reason filename.
2437         (process_it): call Katie.update_subst() so do_reject() DTRT with
2438         the mail template.
2439         (do_reject): setup the mail template correctly.
2440
2441 2002-02-12  James Troup  <james@nocrew.org>
2442
2443         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2444         (check_files): don't abuse global dictionaries.
2445         (Ent): use all variables.
2446         (check_timestamps): don't abuse global dictionaries.
2447
2448         * fernanda.py: renamed to .py so lisa can import it.
2449         (check_dsc): remove unused local variables (pychecker).
2450         (display_changes): split off from check_changes.
2451
2452         * katie: rewritten; most of the functionality moves to jennifer;
2453         what's left is the code to install packages once a day from the
2454         'accepted' directory.
2455
2456         * jennifer: new program, processes packages in 'unchecked'
2457         (i.e. most of the non-install functionality of old katie).
2458
2459         * katie.py: common functions shared between the clique of
2460         jennifer, lisa and katie.
2461
2462         * lisa: new program; handles NEW and BYHAND packages.
2463
2464         * jeri (usage): new function.
2465         (main): use it.
2466         (check_package): remove unused local variable (pychecker).
2467
2468         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2469         binaries and source.  Add install_date to source.
2470
2471         * halle (usage): new function.
2472         (main): use it.  Remove unused options.
2473         (check_changes): remove unused local variable (pychecker).
2474
2475         * add_constraints.sql: add fingerprint references.
2476
2477         * db_access.py (get_or_set_fingerprint_id): new function.
2478
2479         * ashley (main): new program; dumps the contents of a .katie file
2480         to stdout.
2481
2482         * alyson (main): remove option handling since we don't actually
2483         support any.
2484         * cindy (main): likewise.
2485
2486         * remove unnecessary imports and pre-define globals (pychecker).
2487
2488 2002-02-11  Anthony Towns  <ajt@debian.org>
2489
2490         * added installation-report and upgrade-report pseudo-packages
2491
2492 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2493
2494         * katie (update_subst): use Dinstall::TrackingServer.
2495         * melanie (main): likewise.
2496
2497 2002-01-27  James Troup  <james@nocrew.org>
2498
2499         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2500         noticing, jgg@ for fix.
2501
2502 2002-01-19  James Troup  <james@nocrew.org>
2503
2504         * utils.py (extract_component_from_section): handle non-US
2505         non-main properly.
2506
2507 2002-01-12  James Troup  <james@nocrew.org>
2508
2509         * madison: add support for -S/--source-and-binary which displays
2510         information for the source package and all it's binary children.
2511
2512 2002-01-13  Anthony Towns  <ajt@debian.org>
2513
2514         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2515         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2516           and 2002 key ids.
2517         * katie.conf-non-US: Likewise.
2518         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2519           multiple keys automatically. This is probably only useful for
2520           transitioning from an expired (or revoked?) key.
2521
2522 2002-01-08  Ryan Murray  <rmurray@debian.org>
2523
2524         * debian/python-dep: new file that prints out python:Depends for
2525           substvars
2526         * debian/control: use python:Depends, build-depend on python
2527           lower Depends: on postgresql to Suggests:
2528         * debian/rules: determine python version, install to the correct
2529           versioned dir
2530
2531 2001-12-18  Anthony Towns  <ajt@debian.org>
2532
2533         * ziyi: unlink Release files before overwriting them (in case they've
2534           been merged)
2535         * ziyi: always include checksums/sizes for the uncompressed versions
2536           of Sources and Packages, even if they're not present on disk
2537
2538 2001-11-26  Ryan Murray  <rmurray@debian.org>
2539
2540         * ziyi (main): add SigningPubKey config option
2541         * katie.conf: use SigningPubKey config option
2542         * katie.conf-non-US: likewise
2543
2544 2001-11-24  James Troup  <james@nocrew.org>
2545
2546         * katie (acknowledge_new): log newness.
2547
2548 2001-11-24  Anthony Towns  <ajt@debian.org>
2549
2550         * ziyi (real_arch): bail out if some moron forgot to reset
2551         untouchable on stable.
2552         (real_arch): source Release files.
2553
2554 2001-11-19  James Troup  <james@nocrew.org>
2555
2556         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2557         utils.get_conf().
2558         * shania (main): likewise.
2559
2560         * rhona (main): add default options.
2561
2562         * db_access.py (get_archive_id): case independent.
2563
2564         * katie (action): sort files so that ordering is consistent
2565         between mails; noticed/requested by Joey.
2566
2567 2001-11-17  Ryan Murray  <rmurray@debian.org>
2568
2569         * utils.py: add get_conf function, change startup code to read all
2570           config files to the Cnf that get_conf returns
2571           use the component list from the katie conf rather than the hardcoded
2572           list.
2573         * all scripts: use new get_conf function
2574         * shania: fix try/except around changes files
2575         * jenna: only do debian-installer if it is a section in Cnf
2576
2577 2001-11-16  Ryan Murray  <rmurray@debian.org>
2578
2579         * shania (main): Initialize days to a string of a number.
2580                  (main): Initialize Cnf vars before reading in Cnf
2581
2582 2001-11-14  Ryan Murray  <rmurray@debian.org>
2583
2584         * shania (main): Initialize days to a number.
2585
2586 2001-11-04  James Troup  <james@nocrew.org>
2587
2588         * docs/Makefile: use docbook-utils' docbook2man binary.
2589
2590         * Change all "if foo == []" constructs into "if not foo".
2591
2592         * katie (check_changes): when installing into stable from
2593         proposed-updates, remove all non-stable target distributions.
2594         (check_override): don't check for override disparities on stable
2595         installs.
2596         (stable_install): update install_bytes appropriately.
2597         (reject): stable rejection support; i.e. don't remove files when
2598         rejecting files in the pool, rather remove them from the
2599         proposed-update suite instead, rhona will do the rest.
2600         (manual_reject): support for a stable specific template.
2601         (main): setup up stable rejector in subst.
2602
2603 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2604
2605         * debian/control (Build-Depends): docbook2man has been superseded
2606         by docbook-utils.
2607
2608         * neve (main): exit with a more useful error message.
2609         (update_suites): Suite::<suite>::Version, Origin and Description
2610         are not required, so don't fail if they don't exist.
2611
2612         * db_access.py (get_archive_id): return -1 on error rather than
2613         raise an exception.
2614         (get_location_id): likewise.
2615
2616         * madison (main): don't exit on the first not-found package,
2617         rather exit with an appropriate return code after processing all
2618         packages.
2619
2620 2001-11-03  James Troup  <james@nocrew.org>
2621
2622         * claire.py (find_dislocated_stable): add per-architecture
2623         symlinks for dislocated architecture: all debs.
2624
2625 2001-10-19  Anthony Towns  <ajt@debian.org>
2626
2627         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2628
2629 2001-10-10  Anthony Towns  <ajt@debian.org>
2630
2631         * claire.py (fix_component_section): do _not_ assign to None under
2632         any circumstances
2633
2634 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2635
2636         * melanie (main): don't duplicate architectures when removing from
2637         more than one suite.
2638
2639         * heidi (main, process_file, get_list): report suite name not ID.
2640
2641         * naima (nmu_p): be case insensitive.
2642
2643         * naima (action): more list handling clean ups.
2644
2645         * melanie (main): clean up lists handling to use string.join and
2646         IN's.
2647
2648         * madison (main): clean up suite and architecture argument parsing
2649         to use slices less and string.join more.
2650
2651         * utils.py (parse_changes): Use string.find() instead of slices for
2652         string comparisons thereby avoid hardcoding the length of strings.
2653         * ziyi (main): likewise.
2654
2655 2001-10-07  James Troup  <james@nocrew.org>
2656
2657         * Remove mode argument from utils.open_files() calls if it's the
2658         default, i.e. 'r'.
2659
2660 2001-09-27  James Troup  <james@nocrew.org>
2661
2662         * katie (init): new function; options clean up.
2663         (usage): add missing options, remove obsolete ones.
2664         (main): adapt for the two changes above.  If the lock file or
2665         new-ack log file don't exist, create them.  Don't try to open the
2666         new-ack log file except running in new-ack mode.
2667
2668         * alyson (main): initialize all the tables that are based on the
2669         conf file.
2670
2671         * utils.py (touch_file): like touch(1).
2672         (where_am_i): typo.
2673
2674         * catherine (usage): new.
2675         (main): use it.  options cleanup.
2676         * claire.py: likewise.
2677         * fernanda: likewise.
2678         * heidi: likewise.
2679         * jenna: likewise.
2680         * shania: likewise.
2681         * ziyi: likewise.
2682
2683         * andrea: options cleanup.
2684         * charisma: likewise.
2685         * julia: likewise.
2686         * madison: likewise.
2687         * melanie: likewise.
2688         * natalie: likewise.
2689         * rhona: likewise.
2690         * tea: likewise.
2691
2692 2001-09-26  James Troup  <james@nocrew.org>
2693
2694         * utils.py: default to sane config file locations
2695         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2696         or they can point to the real ones through use of a new Config
2697         section.  Based on an old patch by Adam Heath.
2698         (where_am_i): use the new default config stuff.
2699         (which_conf_file): likewise.
2700         (which_apt_conf_file): likewise.
2701
2702         * charisma (main): output defaults to
2703         `Package~Version\tMaintainer'; input can be of either form.  When
2704         parsing the new format do version comparisons, when parsing the
2705         old format assume anything in the extra file wins.  This fixes the
2706         problem of newer non-US packages being overwhelmed by older
2707         versions still in stable on main.
2708
2709 2001-09-17  James Troup  <james@nocrew.org>
2710
2711         * natalie.py (list): use result_join().
2712
2713         * denise (main): result_join() moved to utils.
2714
2715         * utils.py (result_join): move to utils; add an optional seperator
2716         argument.
2717
2718 2001-09-14  James Troup  <james@nocrew.org>
2719
2720         * heidi (set_suite): new function; does --set like natalie does,
2721         i.e. turns it into a sequence of --add's and --remove's
2722         internally.  This is a major win (~20 minute run time > ~20
2723         seconds) in the common, everday (i.e. testing) case.
2724         (get_id): common code used by set_suite() and process_file().
2725         (process_file): call set_suite() and get_id().
2726         (main): add logging support.
2727
2728         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
2729         files.
2730
2731         * utils.py (parse_changes): use slices or simple string comparison
2732         in favour of regexes where possible.
2733
2734         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
2735         fact that the string VARDATA() points to are not null terminated.
2736
2737         * denise (result_join): new function; like string.join() but
2738         handles None's.
2739         (list): use it.
2740         (main): likewise.
2741
2742         * charisma (main): python-pygresql 7.1 returns None not "".
2743
2744 2001-09-14  Ryan Murray  <rmurray@debian.org>
2745
2746         * natalie.py (list): handle python-pygresql 7.1 returning None.
2747
2748 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
2749
2750         * madison (main): return 1 if no package is found.
2751
2752 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
2753
2754         * madison (main): better error handling for incorrect
2755         -a/--architecture or -s/--suite arguments.
2756         (usage): new.
2757         (main): use it.
2758
2759 2001-09-05  Ryan Murray  <rmurray@debian.org>
2760
2761         * charisma, madison, katie: remove use of ROUser
2762         * katie.conf,katie.conf-non-US: remove defintion of ROUser
2763
2764 2001-08-26  James Troup  <james@nocrew.org>
2765
2766         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
2767         maintained packages at cjwatson@'s request.
2768
2769 2001-08-21  James Troup  <james@nocrew.org>
2770
2771         * madison (main): add -a/--architecture support.
2772
2773         * jenna: use logging instead of being overly verbose on stdout.
2774
2775 2001-08-11  Ryan Murray  <rmurray@debian.org>
2776
2777         * melanie: add functional help option
2778
2779 2001-08-07  Anthony Towns  <ajt@debian.org>
2780
2781         * apt.conf, katie.conf: Add ia64 and hppa to testing.
2782
2783 2001-07-28  James Troup  <james@nocrew.org>
2784
2785         * katie (check_dsc): ensure source version is >> than existing
2786         source in target suite.
2787
2788 2001-07-25  James Troup  <james@nocrew.org>
2789
2790         * natalie.py: add logging support.
2791
2792         * utils.py (open_file): make the second argument optional and
2793         default to read-only.
2794
2795         * rene (main): work around broken source packages that duplicate
2796         arch: all packages with arch: !all packages (no longer allowed
2797         into the archive by katie).
2798
2799 2001-07-13  James Troup  <james@nocrew.org>
2800
2801         * katie (action): don't assume distribution is a dictionary.
2802         (update_subst): don't assume architecture is a dictionary and that
2803         maintainer822 is defined.
2804         (check_changes): recognise nk_format exceptions.
2805         (check_changes): reject on 'testing' only uploads.
2806         (check_files): when checking to ensure all packages are newer
2807         versions check against arch-all packages too.
2808         (check_dsc): enforce the existent of a sane set of mandatory
2809         fields.  Ensure the version number in the .dsc (modulo epoch)
2810         matches the version number in the .changes file.
2811
2812         * utils.py (changes_compare): ignore all exceptions when parsing
2813         the changes files.
2814         (build_file_list): don't UNDEF on a changes file with no format
2815         field.
2816
2817 2001-07-07  James Troup  <james@nocrew.org>
2818
2819         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
2820         rather than 'changedbyname' to avoid false negatives on uploads
2821         with an email-address-only Changed-By field.
2822         (check_dsc): don't overwrite reject_message; append to it.
2823         (check_signature): likewise.
2824         (check_changes): likewise.
2825         (announce): condition logging on 'action'.
2826
2827         * logging.py: new logging module.
2828
2829         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
2830         sub-tree into a separate (global) variable.
2831         (check_dsc): ensure format is 1.0 to retain backwards
2832         compatability with dpkg-source in potato.
2833         (main): only try to obtain the lock when not running in no-action
2834         mode.
2835         Use the new logging module.
2836
2837         * christina: initial version; only partially usable.
2838
2839 2001-06-28  Anthony Towns  <ajt@debian.org>
2840
2841         * apt.conf: Add ExtraOverrides to auric.
2842
2843 2001-06-25  James Troup  <james@nocrew.org>
2844
2845         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
2846         they preferred the name 'Uploaders'.
2847
2848 2001-06-23  James Troup  <james@nocrew.org>
2849
2850         * katie (check_files): fix typo in uncommon rejection message,
2851         s/sourceversion/source version/.
2852
2853         * denise (main): we can't use print because stdout has been
2854         redirected.
2855
2856         * katie (source_exists): new function; moved out of check_files()
2857         and added support for binary-only NMUs of earlier sourceful NMUs.
2858
2859         * rhona (clean): find_next_free has moved.
2860
2861         * utils.py (find_next_free): new function; moved here from rhona.
2862         Change too_many to be an argument with a default value, rather
2863         than a hardcoded variable.
2864
2865         * shania: rewritten to work better; REJECTion reminder mail
2866         handling got lost though.
2867
2868 2001-06-22  James Troup  <james@nocrew.org>
2869
2870         * rhona (main): remove unused override code.
2871
2872         * fernanda (main): remove extraneous \n's from utils.warn calls.
2873         * natalie.py (list): likewise.
2874
2875         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
2876         use utils.{warn,fubar} where appropriate.
2877
2878 2001-06-21  James Troup  <james@nocrew.org>
2879
2880         * katie (nmu_p): new class that encapsulates the "is a nmu?"
2881         functionality.
2882         (nmu_p.is_an_nmu): add support for multiple maintainers specified
2883         by the "Maintainers" field in the .dsc file and maintainer groups.
2884         (nmu_p.__init__): read in the list of group maintainer names.
2885         (announce): use nmu_p.
2886
2887 2001-06-20  James Troup  <james@nocrew.org>
2888
2889         * rene (main): hardcode the suite experimental is compared to by
2890         name rather than number.
2891
2892         * katie (check_files): differentiate between doesn't-exist and
2893         permission-denied in "can not read" rejections; requested by edd@.
2894         (check_dsc): use os.path.exists rather than os.access to allow the
2895         above check to kick in.
2896
2897         * heidi (process_file): read all input before doing anything and
2898         use transactions.
2899
2900 2001-06-15  James Troup  <james@nocrew.org>
2901
2902         * fernanda: new script; replaces old 'check' shell script
2903         nastiness.
2904
2905 2001-06-14  James Troup  <james@nocrew.org>
2906
2907         * katie: actually import traceback module to avoid amusing
2908         infinite loop.
2909
2910 2001-06-10  James Troup  <james@nocrew.org>
2911
2912         * utils.py (extract_component_from_section): fix to handle just
2913         'non-free' and 'contrib'.  Also fix to handle non-US in a
2914         completely case insensitive manner as a component.
2915
2916 2001-06-08  James Troup  <james@nocrew.org>
2917
2918         * madison (arch_compare): sort function that sorts 'source' first
2919         then alphabetically.
2920         (main): use it.
2921
2922 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
2923
2924         * catherine (poolize): explicitly make poolized_size a long so it
2925         doesn't overflow when poolizing e.g. entire archives.
2926
2927 2001-06-01  James Troup  <james@nocrew.org>
2928
2929         * utils.py (send_mail): throw exceptions rather than exiting.
2930
2931         * katie (process_it): catch exceptions and ignore them.
2932
2933 2001-06-01  Michael Beattie  <mjb@debian.org>
2934
2935         * added update-mailingliststxt and update-readmenonus to update
2936         those files, respectively. modified cron.daily{,-non-US} to
2937         use them.
2938
2939 2001-05-31  Anthony Towns  <ajt@debian.org>
2940
2941         * rhona: make StayOfExecution work.
2942
2943 2001-05-31  James Troup  <james@nocrew.org>
2944
2945         * rhona (find_next_free): fixes to not overwrite files but rename
2946         them by appending .<n> instead.
2947         (clean): use find_next_free and use dated sub-directories in the
2948         morgue.
2949
2950         * utils.py (move): don't overwrite files unless forced to.
2951         (copy): likewise.
2952
2953 2001-05-24  James Troup  <james@nocrew.org>
2954
2955         * katie (check_files): determine the source version here instead
2956         of during install().
2957         (check_files): check for existent source with bin-only NMU
2958         support.
2959         (main): sort the list of changes so that the source-must-exist
2960         check Does The Right Thing(tm).
2961
2962         * utils.py (changes_compare): new function; sorts a list of
2963         changes files by 'have-source', source, version.
2964         (cc_fix_changes): helper function.
2965         (parse_changes): use compiled regexes.
2966         (fix_maintainer): likewise.
2967
2968         * rene (main): warn about packages in experimental that are
2969         superseded by newer versions in unstable.
2970
2971 2001-05-21  James Troup  <james@nocrew.org>
2972
2973         * rene (main): add support for checking for ANAIS (Architecture
2974         Not Allowed In Source) packages.
2975
2976 2001-05-17  James Troup  <james@nocrew.org>
2977
2978         * katie (check_changes): initalize `architecture' dictionary in
2979         changes global so that if we can't parse the changes file for
2980         whatever reason we don't undef later on.
2981
2982         * utils.py (parse_changes): fix handling of multi-line fields
2983         where the first line did have data.
2984
2985 2001-05-05  Anthony Towns  <ajt@debian.org>
2986
2987         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
2988         (It should always have been there. Ooopsy.)
2989
2990 2001-05-03  Anthony Towns  <ajt@debian.org>
2991
2992         * jenna: Cleanup packages that move from arch:any to arch:all or
2993         vice-versa.
2994
2995 2001-04-24  Anthony Towns  <ajt@debian.org>
2996
2997         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
2998         cope with debian-installer and boot-floppies' md5sum.txt.
2999
3000 2001-04-16  James Troup  <james@nocrew.org>
3001
3002         * katie (check_changes): add missing %s format string argument.
3003         (stable_install): temporary work around for morgue location to
3004         move installed changes files into.
3005         (stable_install): helps if you actually read in the template.
3006         (manual_reject): fix for editing of reject messages which was
3007         using the wrong variable name.
3008
3009         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3010
3011 2001-04-13  James Troup  <james@nocrew.org>
3012
3013         * katie (manual_reject): Cc the installer.
3014         (reject): don't.
3015         (check_changes): remove unused maintainer-determination code.
3016         (update_subst): add support for Changed-By when setting the
3017         *MAINTAINER* variables.
3018
3019         * rene (bar): new function to check for packages on architectures
3020         when they shouldn't be.
3021
3022         * natalie.py (main): use fubar() and warn() from utils.
3023
3024         * utils.py (whoami): new mini-function().
3025         * melanie (main): use it.
3026         * katie (manual_reject): likewise.
3027
3028 2001-04-03  James Troup  <james@nocrew.org>
3029
3030         * katie (action): ignore exceptions from os.path.getmtime() so we
3031         don't crash on non-existent changes files (e.g. when they are
3032         moved between the start of the install run in cron.daily and the
3033         time we get round to processing them).
3034
3035         * madison (main): also list source and accept -s/--suite.
3036
3037         * jenna (generate_src_list): missing \n in error message.
3038
3039         * katie (update_subst): add sane defaults for when changes is
3040         skeletal.
3041
3042 2001-03-29  James Troup  <james@nocrew.org>
3043
3044         * melanie (main): use fubar() and warn() from utils.  Remember who
3045         the maintainer for the removed packages are and display that info
3046         to the user.  Readd support for melanie-specific Bcc-ing that got
3047         lost in the TemplateSubst transition.
3048
3049         * utils.py (fubar): new function.
3050         (warn): like wise.
3051
3052         * db_access.py (get_maintainer): as below.
3053
3054         * charisma (get_maintainer): moved the bulk of this function to
3055         db_access so that melanie can use it too.
3056
3057         * claire.py (find_dislocated_stable): restrict the override join
3058         to those entries where the suite is stable; this avoids problems
3059         with packages which have moved to new sections (e.g. science)
3060         between stable and unstable.
3061
3062 2001-03-24  James Troup  <james@nocrew.org>
3063
3064         * catherine (poolize): new function; not really independent of
3065         main() fully, yet.
3066         (main): use it.
3067
3068         * katie (stable_install): __SUITE__ needs to be space prefixed
3069         because buildd's check for 'INSTALLED$'.
3070
3071 2001-03-22  James Troup  <james@nocrew.org>
3072
3073         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3074
3075         * jenna: rewritten; now does deletions on a per-suite level
3076         instead of a per-suite-component-architecture-type level.  This
3077         allows mutli-component packages to be auto-cleaned (and as a
3078         bonus, reduces the code size and duplication).
3079
3080 2001-03-22  Anthony Towns  <ajt@debian.org>
3081
3082         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3083         instead of just giving a gpg error.
3084
3085 2001-03-21  James Troup  <james@nocrew.org>
3086
3087         * madison (main): use apt_pkg.VersionCompare to sort versions so
3088         that output is correctly sorted for packages like debhlper.
3089         Noticed by ajt@.
3090
3091         * tea (check_source_in_one_dir): actually find problematic source
3092         packages.
3093
3094         * katie (check_dsc): remember the orig.tar.gz's location ID if
3095         it's not in a legacy suite.
3096         (check_diff): we don't use orig_tar_id.
3097         (install): add code to handle sourceful diff-only upload of
3098         packages which change components by copying the .orig.tar.gz into
3099         the new component, if it doesn't already exist there.
3100         (process_it): reset orig_tar_location (as above).
3101
3102         * melanie (main): use template substiution for the bug closing
3103         emails.
3104         (main): don't hardcode bugs.debian.org or packages.debian.org
3105         either; use configuration items.
3106
3107         * katie: likewise.
3108
3109         * natalie.py (init): use None rather than 'localhost' for the
3110         hostname given to pg.connect.
3111
3112         * utils.py (TemplateSubst): new function; lifted from
3113         userdir-ldap.
3114
3115 2001-03-21  Ryan Murray  <rmurray@debian.org>
3116
3117         * katie (announce): fix the case of non-existent
3118         Suite::$SUITE::Announce.
3119
3120 2001-03-20  Ryan Murray  <rmurray@debian.org>
3121
3122         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3123         /usr/.
3124
3125         * alyson (main): use config variable for database name.
3126         * andrea (main): likewise.
3127         * catherine (main): likewise.
3128         * charisma (main): likewise.
3129         * cindy (main): likewise.
3130         * claire.py (main): likewise.
3131         * denise (main): likewise.
3132         * heidi (main): likewise.
3133         * jenna (main): likewise.
3134         * katie (main): likewise.
3135         * madison (main): likewise.
3136         * melanie (main): likewise.
3137         * neve (main): likewise.
3138         * rhona (main): likewise.
3139         * tea (main): likewise.
3140
3141 2001-03-15  James Troup  <james@nocrew.org>
3142
3143         * rhona (check_sources): fixed evil off by one (letter) error
3144         which was causing only .dsc files to be deleted when cleaning
3145         source packages.
3146
3147         * charisma (get_maintainer_from_source): remove really stupid and
3148         gratuitous IN sub-query and replace with normal inner join.
3149         (main): connect as read-only user nobody.
3150
3151         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3152         with EXISTS.
3153         (check_files): likewise; still disabled by default though.
3154         (clean_binaries): add ' seconds' to the mysterious number in the
3155         output.
3156         (clean): likewise.
3157
3158         * tea (check_files): add missing global declaration on db_files.
3159
3160 2001-03-14  James Troup  <james@nocrew.org>
3161
3162         * rhona: rewritten large chunks. Removed a lot of the silly
3163         selecting into dictionaries and replaced it with 'where exists'
3164         based sub queries.  Added support for StayOfExecution.  Fix the
3165         problem with deleting dsc_files too early and disable cleaning of
3166         unattached files.
3167
3168 2001-03-14  Anthony Towns  <ajt@debian.org>
3169
3170         * katie (announce): also check Changed-By when trying to detect
3171         NMUs.
3172
3173 2001-03-06  Anthony Towns  <ajt@debian.org>
3174
3175         * ziyi (main): Generate Release.gpg files as well, using the key from
3176         Dinstall::SigningKey in katie.conf, if present. That key has to be
3177         passwordless, and hence kept fairly secretly.
3178
3179 2001-03-02  James Troup  <james@nocrew.org>
3180
3181         * utils.py (str_isnum): new function; checks to see if the string
3182         is a number.
3183
3184         * shania (main): fix _hideous_ bug which was causing all files > 2
3185         weeks old to be deleted from incoming, even if they were part of a
3186         valid upload.
3187
3188 2001-02-27  James Troup  <james@nocrew.org>
3189
3190         * melanie (main): accept new argument -C/--carbon-copy which
3191         allows arbitarty carbon-copying of the bug closure messages.
3192         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3193         separate variable.
3194
3195 2001-02-27  Anthony Towns  <ajt@debian.org>
3196
3197         * ziyi: new program; generates Release files.
3198
3199 2001-02-25  James Troup  <james@nocrew.org>
3200
3201         * katie (reject): add missing '\n' to error message.
3202         (manual_reject): likewise.
3203         (install): catch exceptions from moving the changes file into DONE
3204         and ignore them.
3205
3206         * tea (check_md5sums): new function.
3207
3208 2001-02-25  Michael Beattie  <mjb@debian.org>
3209
3210         * melanie: use $EDITOR if available.
3211
3212 2001-02-15  James Troup  <james@nocrew.org>
3213
3214         * utils.py (parse_changes): don't crash and burn on empty .changes
3215         files.  Symptoms noticed by mjb@.
3216
3217 2001-02-15  Adam Heath  <doogie@debian.org>
3218
3219         * denise (main): use an absolute path for the output filename.
3220
3221         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3222         compile errors with postgresql-dev >= 7.0.
3223
3224 2001-02-12  James Troup  <james@nocrew.org>
3225
3226         * rene: initial version.
3227
3228         * andrea: initial version.
3229
3230         * catherine (main): remove obsolete assignment of arguments.
3231
3232 2001-02-09  James Troup  <james@nocrew.org>
3233
3234         * catherine: first working version.
3235
3236 2001-02-06  James Troup  <james@nocrew.org>
3237
3238         * katie (check_files): validate the priority field; i.e. ensure it
3239         doesn't contain a '/' (to catch people prepending the priority
3240         with the component rather than the section).
3241         (check_override): don't warn about source packages; the only check
3242         is on section and we have no GUI tools that would use the Section
3243         field for a Sources file.
3244         (announce): use tags rather than severities for NMUs.  Requested
3245         by Josip Rodin <joy@>. [#78035]
3246
3247 2001-02-04  James Troup  <james@nocrew.org>
3248
3249         * tea (check_override): new function; ensures packages in suites
3250         are also in the override file.  Thanks to bod@ for noticing that
3251         such packages existed.
3252
3253         * katie: move file type compiled regular expressions to utils as
3254         catherine uses them too.
3255         (check_changes): always default maintainer822 to the installer
3256         address so that any bail out won't cause undefs later.
3257         (check_files): update file type re's to match above.
3258         (stable_install): likewise.
3259         (reject): handle any except from moving the changes files.  Fixes
3260         crashes on unreadable changes files.
3261
3262         * melanie (main): add an explanation of why things are not removed
3263         from testing.
3264
3265 2001-01-31  James Troup  <james@nocrew.org>
3266
3267         * melanie (main): ignore a) no message, b) removing from stable or
3268         testing when invoked with -n/--no-action.
3269
3270         * katie (check_override): lower section before checking to see if
3271         we're whining about 'non-US' versus 'non-US/main'.
3272
3273         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3274         function so that we can use inside of PostgreSQL.
3275
3276 2001-01-28  James Troup  <james@nocrew.org>
3277
3278         * katie: updated to pass new flag to parse_changes() and deal with
3279         the exception raised on invalid .dsc's if appropriate.
3280         * shania (main): likewise.
3281         * melanie (main): likewise.
3282
3283         * tea (check_dscs): new function to validate all .dsc files in
3284         unstable.
3285
3286         * utils.py (parse_changes): if passed an additional flag, validate
3287         the .dsc file to ensure it's extractable by dpkg-source.
3288         Requested by Ben Collins <bcollins@>.
3289
3290 2001-01-27  James Troup  <james@nocrew.org>
3291
3292         * madison (main): connect to the DB as nobody.
3293
3294         * katie (check_files): remove support for -r/--no-version-check
3295         since it makes no sense under katie (jenna will automatically
3296         remove the (new) older version) and was evil in any event.
3297         (check_changes): add missing new line to rejection message.
3298         (check_dsc): likewise.
3299         (process_it): reset reject_message here.
3300         (main): not here.  Also remove support for -r.
3301
3302 2001-01-26  James Troup  <james@nocrew.org>
3303
3304         * katie (check_override): don't whine about 'non-US/main' versus
3305         'non-US'.
3306
3307 2001-01-26  Michael Beattie  <mjb@debian.org>
3308
3309         * natalie.py (usage): new function.
3310         (main): use it.
3311
3312 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3313
3314         * update-mirrorlists: Update README.non-US too (request from Joy).
3315
3316 2001-01-25  James Troup  <james@nocrew.org>
3317
3318         * katie (reject): catch any exception from utils.move() and just
3319         pass, we previously only caught can't-overwrite errors and not
3320         can't-read ones.
3321
3322         * jenna (generate_src_list): use ORDER BY in selects to avoid
3323         unnecessary changes to Packages files.
3324         (generate_bin_list): likewise.
3325
3326         * utils.py (extract_component_from_section): separated out from
3327         build_file_list() as it's now used by claire too.
3328
3329         * claire.py (find_dislocated_stable): rewrite the query to extract
3330         section information and handle component-less locations properly.
3331         Thanks to ajt@ for the improved queries.
3332         (fix_component_section): new function to fix components and
3333         sections.
3334
3335 2001-01-23  James Troup  <james@nocrew.org>
3336
3337         * katie (check_files): set file type for (u?)debs first thing, so
3338         that if we continue, other functions which rely on file type
3339         existing don't bomb out.  If apt_pkg or apt_inst raise an
3340         exception when parsing the control file, don't try any other
3341         checks, just drop out.
3342         (check_changes): new test to ensure there is actually a target
3343         distribution.
3344
3345 2001-01-22  James Troup  <james@nocrew.org>
3346
3347         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3348         <grin@>.
3349         (check_changes): when mapping to unstable, remember to actually
3350         add unstable to the suite list and not just remove the invalid
3351         suite.
3352
3353 2001-01-21  James Troup  <james@nocrew.org>
3354
3355         * katie (check_files): catch exceptions from debExtractControl()
3356         and reject packages which raise any.
3357
3358 2001-01-19  James Troup  <james@nocrew.org>
3359
3360         * katie (check_signature): basename() file name in rejection
3361         message.
3362
3363 2001-01-18  James Troup  <james@nocrew.org>
3364
3365         * katie (in_override_p): remember the section and priority from
3366         the override file so we can check them against the package later.
3367         (check_override): new function; checks section and priority (for
3368         binaries) from the package against the override file and mails the
3369         maintainer about any disparities.
3370         (install): call check_override after announcing the upload.
3371
3372 2001-01-16  James Troup  <james@nocrew.org>
3373
3374         * utils.py (build_file_list): catch ValueError's from splitting up
3375         the files field and translate it into a parse error.
3376
3377         * tea: add support for finding unreferenced files.
3378
3379         * katie (in_override_p): add support for suite-aliasing so that
3380         proposed-updates uploads work again.
3381         (check_changes): catch parses errors from utils.build_file_list().
3382         (check_dsc): likewise.
3383         (check_diff): yet more dpkg breakage so we require even newer a
3384         version.
3385
3386         * jenna (generate_bin_list): don't do nasty path munging that's no
3387         longer needed.
3388
3389         * denise (main): support for non-US; and rename testing's override
3390         files so they're based on testing's codename.
3391
3392 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3393
3394         * melanie: add to the bug closing message explaining what happens
3395         (or rather doesn't) with bugs against packages that have been
3396         removed.
3397
3398 2001-01-14  James Troup  <james@nocrew.org>
3399
3400         * charisma (main): fix silly off-by-one error; suite priority
3401         checking was done using "less than" rather than "less than or
3402         equal to" which was causing weird hesienbugs with wrong Maintainer
3403         fields.
3404
3405 2001-01-10  James Troup  <james@nocrew.org>
3406
3407         * katie (in_override_p): adapted to use SQL-based overrides.
3408         read_override_file function disappears.
3409
3410         * db_access.py: add new functions get_section_id, get_priority_id
3411         and get_override_type_id.
3412         (get_architecture_id): return -1 if the architecture is not found.
3413
3414         * heidi: switch %d -> %d in all SQL queries.
3415         (get_list): Use string.join where appropriate.
3416
3417         * rhona (in_override_p): don't die if the override file doesn't
3418         exist.
3419         (main): warn if the override file doesn't exist.
3420
3421         * alyson: new script; will eventually sync the config file and the
3422         SQL database.
3423
3424         * natalie.py: new script; manipulates overrides.
3425
3426         * melanie: new script; removes packages from suites.
3427
3428 2001-01-08  James Troup  <james@nocrew.org>
3429
3430         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3431         anything it just changed the symptom.  Recognise the new breakage
3432         and reject them too.
3433
3434 2001-01-07  James Troup  <james@nocrew.org>
3435
3436         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3437         to the .changes file, be sure to set up files[filename]["type"]
3438         too.
3439
3440 2001-01-06  James Troup  <james@nocrew.org>
3441
3442         * katie (check_diff): new function; detects bad diff files
3443         produced by dpkg 1.8.1 and rejects thems.
3444         (process_it): call check_diff().
3445         (check_dsc): gar.  Add support for multiple versions of the
3446         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3447         and size against all versions and use one which matches if
3448         possible and exclude any that don't from being poolized to avoid
3449         file overwrites.  Thanks to broonie@ for providing the example.
3450         (install): skip any files marked as excluded as above.
3451
3452 2001-01-05  James Troup  <james@nocrew.org>
3453
3454         * heidi (process_file): add missing argument to error message.
3455
3456 2001-01-04  James Troup  <james@nocrew.org>
3457
3458         * heidi (main): fix handling of multiple files by reading all
3459         files not just the first file n times (where n = the number of
3460         files passed as arguments).
3461
3462 2001-01-04  Anthony Towns  <ajt@debian.org>
3463
3464         * katie (check_dsc): proper fix for the code which locates the
3465         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3466
3467 2000-12-20  James Troup  <james@nocrew.org>
3468
3469         * rhona: replace IN's with EXISTS's to make DELETE time for
3470         binaries and source sane on auric.  Add a -n/--no-action flag and
3471         make it stop actions if used.  Fixed a bug in binaries deletion
3472         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3473         -V/--version.  Giving timing info on deletion till I'm sure it's
3474         sane.
3475
3476         * katie (check_changes): map testing to unstable.
3477
3478         * madison: new script; shows versions in different architectures.
3479
3480         * katie (check_dsc): ensure size matches as well as md5sum;
3481         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3482         #69702.
3483
3484 2000-12-19  James Troup  <james@nocrew.org>
3485
3486         * katie (reject): ignore the "can't overwrite file" exception from
3487         utils.move() and leave the files where they are.
3488         (reject): doh! os.access() test was reversed so we only tried to
3489         move files which didn't exist... replaced with os.path.exists()
3490         test the right way round.
3491
3492         * utils.py (move): raise an exception if we can't overwrite the
3493         destination file.
3494         (copy): likewise.
3495
3496 2000-12-18  James Troup  <james@nocrew.org>
3497
3498         * rhona: first working version.
3499
3500         * db_access.py (get_files_id): force both sizes to be integers.
3501
3502         * katie (main): use size_type().
3503
3504         * utils.py (size_type): new function; pretty prints a file size.
3505
3506 2000-12-17  James Troup  <james@nocrew.org>
3507
3508         * charisma (main): do version compares so that older packages do
3509         not override newer ones and process source first as source wins
3510         over binaries in terms of who we think of as the Maintainer.
3511
3512 2000-12-15  James Troup  <james@nocrew.org>
3513
3514         * katie (install): use the files id for the .orig.tar.gz from
3515         check_dsc().
3516         (install): limit select for legacy source to a) source in legacy
3517         or legacy-mixed type locations and b) distinct on files.id.
3518         (install): rather than the bizarre insert new, delete old method
3519         for moving legacy source into the pool, use a simple update of
3520         files.
3521         (process_it): initalize some globals before each process.
3522
3523 2000-12-14  James Troup  <james@nocrew.org>
3524
3525         * katie (in_override_p): index on binary_type too since .udeb
3526         overrides are in a different file.
3527         (read_override_file): likewise.
3528         (check_files): correct filename passed to get_files_id().
3529         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3530         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3531         (check_dsc): remember the files id of the .orig.tar.gz, not the
3532         location id.
3533
3534 2000-12-13  James Troup  <james@nocrew.org>
3535
3536         * utils.py (poolify): force the component to lower case except for
3537         non-US.
3538
3539         * katie (in_override_p): handle .udeb-specific override files.
3540         (check_files): pass the binary type to in_override_p().
3541         (check_dsc): remember the location id of the old .orig.tar.gz in
3542         case it's not in the pool.
3543         (install): use location id from dsc_files; which is where
3544         check_dsc() puts it for old .orig.tar.gz files.
3545         (install): install files after all DB work is complete.
3546         (reject): basename() the changes filename.
3547         (manual_reject): likewise.
3548
3549         * shania: new progam; replaces incomingcleaner.
3550
3551 2000-12-05  James Troup  <james@nocrew.org>
3552
3553         * katie (check_changes): if inside stable and can't find files
3554         from the .changes; assume it's installed in the pool and chdir()
3555         to there.
3556         (check_files): we are not installing for stable installs, so don't
3557         check for overwriting existing files.
3558         (check_dsc): likewise.
3559         (check_dsc): reorder .orig.tar.gz handling so that we search in
3560         the pool first and only then fall back on any .orig.tar.gz in the
3561         cwd; this avoids false positives on the overwrite check when
3562         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3563         (install): if this is a stable install, bail out to
3564         stable_install() immediately.
3565         (install): dsc_files handling was horribly broken. a) we need to
3566         add files from the .dsc and not the .changes (duh), b) we need to
3567         add the .dsc file itself to dsc_files (to be consistent with neve
3568         if for no other reason).
3569         (stable_install): new function; handles installs from inside
3570         proposed-updates to stable.
3571         (acknowledge_new): basename changes_filename before doing
3572         anything.
3573         (process_it): absolutize the changes filename to avoid the
3574         requirement of being in the same directory as the .changes file.
3575         (process_it): save and restore the cwd as stable installs can
3576         potentially jump into the pool to find files.
3577
3578         * jenna: dislocated_files support using claire.
3579
3580         * heidi (process_file): select package field from binaries
3581         explicitly.
3582
3583         * db_access.py (get_files_id): fix cache key used.
3584
3585         * utils.py (build_file_list): fix 'non-US/non-free' case in
3586         section/component splitting.
3587         (move): use os.path.isdir() rather than stat.
3588         (copy): likewise.
3589
3590         * claire.py: new file; stable in non-stable munger.
3591
3592         * tea: new file; simply ensures all files in the DB exist.
3593
3594 2000-12-01  James Troup  <james@nocrew.org>
3595
3596         * katie (check_dsc): use regex_safe().
3597         (check_changes): typo in changes{} key:
3598         s/distributions/distribution/.
3599         (install): use changes["source"], not files[file]["source"] as the
3600         latter may not exist and the former is used elsewhere.  Commit the
3601         SQL transaction earlier.
3602
3603         * utils.py (regex_safe): new function; escapes characters which
3604         have meaning to SQL's regex comparison operator ('~').
3605
3606 2000-11-30  James Troup  <james@nocrew.org>
3607
3608         * katie (install): pool_location is based on source package name,
3609         not binary package.
3610
3611         * utils.py (move): if dest is a directory, append the filename
3612         before chmod-ing.
3613         (copy): ditto.
3614
3615         * katie (check_files): don't allow overwriting of existing .debs.
3616         (check_dsc): don't allow overwriting of existing source files.
3617
3618 2000-11-27  James Troup  <james@nocrew.org>
3619
3620         * katie (check_signature): don't try to load rsaref; it's
3621         obsolete.
3622         (in_override_p): don't try to lookup override entries for packages
3623         with an invalid suite name.
3624         (announce): don't assume the suite name is valid; use Find() to
3625         lookup the mailing list name for announcements.
3626
3627         * utils.py (where_am_i): typo; hostname is in the first element,
3628         not second.
3629
3630         * db_access.py (get_suite_id): return -1 on an unknown suite.
3631
3632 2000-11-26  James Troup  <james@nocrew.org>
3633
3634         * katie (install): fix CopyChanges handling; typo in in checking
3635         Cnf for CopyChanges flag and was calling non-existent function
3636         copy_file.
3637
3638         * utils.py (copy): new function; clone of move without the
3639         unlink().
3640
3641 2000-11-25  James Troup  <james@nocrew.org>
3642
3643         * utils.py (build_file_list): handle non-US prefixes properly
3644         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3645         + 'libs' not 'non-US/libs').
3646         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3647         delays.  This is possibly(/probably) exim speicifc and (like other
3648         sendmail options) needs to be in the config file.
3649
3650 2000-11-24  James Troup  <james@nocrew.org>
3651
3652         * rhona (check_sources): we need file id from dsc_files; not id.
3653         Handle non .dsc source files being re-referenced in dsc_files.
3654
3655         * katie (in_override_p): strip out any 'non-US' prefix.
3656         (check_files): use utils.where_am_i() rather than hardcoding.
3657         (check_files): validate the component.
3658         (install): use utils.where_am_i() rather than hardcoding.
3659         (install): fix mail to go to actual recepient.
3660         (reject): likewise.
3661         (manual_reject): likewise.
3662         (acknowledge_new): likewise.
3663         (announce): likewise.
3664
3665         * db_access.py (get_component_id): ignore case when searching for
3666         the component and don't crash if the component can't be found, but
3667         return -1.
3668         (get_location_id): handle -1 from get_component_id().
3669
3670         * jenna (generate_src_list): don't bring 'suite' into our big
3671         multi-table-joining select as we already know the 'suite_id'.
3672         (generate_bin_list): likewise.
3673
3674         * neve (main): don't quit if not on ftp-master.
3675         (process_packages): remove unused variable 'suite_codename'.
3676
3677         * utils.py (move): actually move the file.
3678         (build_file_list): handle non-US prefixes in the section.
3679
3680         * catherine (main): use which_conf_file().
3681         * charisma (main): likewise.
3682         * heidi (main): likewise.
3683         * jenna (main): likewise.
3684         * katie (main): likewise.
3685         * neve (main): likewise.
3686         * rhona (main): likewise.
3687
3688         * utils.py (where_am_i): new routine; determines the archive as
3689         understood by other 'dak' programs.
3690         (which_conf_file): new routine; determines the conf file to read.
3691
3692 2000-11-17  James Troup  <james@nocrew.org>
3693
3694         * katie (install): fix where .changes files for proposed-updates
3695         go.
3696
3697 2000-11-04  James Troup  <james@nocrew.org>
3698
3699         * jenna (main): handle architecture properly if no
3700         -a/--architecture argument is given, i.e. reset architecture with
3701         the values for the suite for each suite.
3702
3703         * Add apt_pkg.init() to the start of all scripts as it's now
3704         required by python-apt.
3705
3706 2000-10-29  James Troup  <james@nocrew.org>
3707
3708         * jenna (generate_bin_list): take an additional argument 'type'
3709         and use it in the SELECT.
3710         (main): if processing component 'main', process udebs and debs.
3711
3712         * neve (process_packages): set up 'type' in 'binaries' (by
3713         assuming .deb).
3714
3715         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3716         (check_files): set up files[file]["dbtype"].
3717         (install): use files[file]["dbtype"] to set up the 'type' field in
3718         the 'binaries' table.
3719
3720         * init_pool.sql: add a 'type' field to the 'binaries' table to
3721         distinguisgh between ".udeb" and ".deb" files.
3722
3723         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3724         dest ? dirname(dest)" type check instead.
3725
3726         * katie (check_dsc): handle the case of an .orig.tar.gz not found
3727         in the pool without crashing.  Also handle the case of being asked
3728         to look for something other than an .orig.tar.gz in the pool.
3729
3730 2000-10-26  James Troup  <james@nocrew.org>
3731
3732         * katie (install): fix filenames put into files table during
3733         poolification of legacy source.
3734
3735         * utils.py (move): work around a bug in os.path.basename() which
3736         cunningly returns '' if there is a trailing slash on the path
3737         passed to it.
3738
3739         * katie (check_dsc): Remove more cruft.  If we find the
3740         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
3741         location, make a note of that so we can fix things in install().
3742         (install): as above.  Move any old source out of legacy locations
3743         so that 'apt-get source' will work.
3744         (process_it): reset the flag that indicates to install that the
3745         source needs moved.
3746
3747         * cron.daily: more.  Nowhere near complete yet though.
3748
3749         * katie (install): don't run os.makedirs, a) utils.move() does
3750         this now, b) we weren't removing the user's umask and were
3751         creating dirs with SNAFU permissions.
3752         (check_dsc): rewrite the .orig.tar.gz handling to take into
3753         account, err, package pools.  i.e. look anywhere in the pool
3754         rather than faffing around with two simple paths.
3755
3756         * neve (process_sources): add the .dsc to dsc_files too.
3757
3758 2000-10-25  James Troup  <james@nocrew.org>
3759
3760         * neve (process_sources): don't duplicate .orig.tar.gz's.
3761
3762 2000-10-23  James Troup  <james@nocrew.org>
3763
3764         * utils.py (re_extract_src_version): moved here.
3765
3766         * neve: move re_extract_src_version to utils.
3767         (process_packages): reflect change.
3768
3769         * katie (install): reflect change.
3770
3771 2000-10-19  James Troup  <james@nocrew.org>
3772
3773         * jenna (generate_src_list): handle locations with null
3774         components.
3775         (generate_bin_list): likewise.
3776