]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Changed accepted_autobuild to queue_build everywhere.Add a queue table.Add a "queue...
[dak.git] / ChangeLog
1 2005-11-25  Anthony Towns  <aj@erisian.com.au>
2
3         * Changed accepted_autobuild to queue_build everywhere.
4         * Add a queue table.
5         * Add a "queue" field in the queue_build table (currently always 0)
6
7 2005-11-25  Anthony Towns  <aj@erisian.com.au>
8
9         * Finishing merge of changes from spohr, by various people still
10
11         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
12         works
13         * jennifer: Re-enable .deb ar format checking
14         * katie.py: Convert to +bX binNMU special casing
15         * rhona: Add some debug output when deleting binaries
16         * cron.daily: Add emilie
17         * cron.unchecked: Add lock files
18
19 2005-11-15  Anthony Towns  <aj@erisian.com.au>
20
21         * Merge of changes from spohr, by various people.
22
23         * tiffani: new script to do patches to Packages, Sources and Contents
24         files for quicker downloads.
25         * ziyi: update to authenticate tiffani generated files
26
27         * dak: new script to provide a single binary with less arbitrary names
28         for access to dak functionality.
29
30         * cindy: script implemented
31
32         * saffron: cope with suites that don't have a Priority specified
33         * heidi: use get_suite_id()
34         * denise: don't hardcode stable and unstable, or limit udebs to unstable
35         * denise: remove override munging for testing (now done by cindy)
36         * helena: expanded help, added new, sort and age options, and fancy headers
37         * jennifer: require description, add a reject for missing dsc file
38         * jennifer: change lock file
39         * kelly: propogation support
40         * lisa: honour accepted lock, use mtime not ctime, add override type_id
41         * madison: don't say "dep-retry"
42         * melanie: bug fix in output (missing %)
43         * natalie: cope with maintainer_override == None; add type_id for overrides
44         * nina: use mtime, not ctime
45
46         * katie.py: propogation bug fixes
47         * logging.py: add debugging support, use | as the logfile separator
48
49         * katie.conf: updated signing key (4F368D5D)
50         * katie.conf: changed lockfile to dinstall.lock
51         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
52         * katie.conf: added tiffani, cindy support
53         * katie.conf: updated to match 3.0r6 release
54         * katie.conf: updated to match sarge's release
55
56         * apt.conf: update for sarge's release
57         * apt.conf.stable: update for sarge's release
58         * apt.conf: bump daily max Contents change to 25MB from 12MB
59
60         * cron.daily: add accepted lock and invoke cindy  
61         * cron.daily: add daily.lock
62         * cron.daily: invoke tiffani
63         * cron.daily: rebuild accepted buildd stuff
64         * cron.daily: save rene-daily output on the web site
65         * cron.daily: disable billie
66         * cron.daily: add stats pr0n
67
68         * cron.hourly: invoke helena
69
70         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
71         * vars: add lockdir, add etch to copyoverrides
72         * Makefile: add -Ipostgresql/server to CXXFLAGS
73
74         * docs/: added README.quotes
75         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
76         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
77
78         * TODO: correct spelling of "conflicts"
79
80 2005-05-28  James Troup  <james@nocrew.org>
81
82         * helena (process_changes_files): use MTIME rather than CTIME (the
83         C's not for 'creation', stupid).
84         * lisa (sort_changes): likewise.
85
86         * jennifer (check_distributions): use has_key rather than an 'in'
87         test which doesn't work with python2.1.  [Probably by AJ]
88
89 2005-03-19  James Troup  <james@nocrew.org>
90
91         * rene (main): use Suite::<suite>::UdebComponents to determine
92         what components have udebs rather than assuming only 'main' does.
93
94 2005-03-18  James Troup  <james@nocrew.org>
95
96         * utils.py (rfc2047_encode): use codecs.lookup() rather than
97         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
98         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
99         <andrew@ubuntu.com>.
100
101 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
102
103         * helena: add -n/--new HTML output option and improved sorting
104         options.
105
106 2005-03-06  Ryan Murray  <rmurray@debian.org>
107
108         * shania(main): use Cnf::Dir::Reject instead of REJECT
109
110 2005-02-08  James Troup  <james@nocrew.org>
111
112         * rene (main): add partial NBS support by checking that binary
113         packages are built by their real parent and not some random
114         stranger.
115         (do_partial_nbs): likewise.
116
117 2005-01-18  James Troup  <james@nocrew.org>
118
119         * katie.py (Katie.build_summaries): avoid leaking file handle when
120         extracting package description.
121         (Katie.force_reject): remember and close each file descriptor we
122         use.
123         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
124         s/reason_file/reason_fd/ because it's a file descriptor.
125         (Katie.check_dsc_against_db): avoid leaking file handle whenever
126         invoking apt_pkg.md5sum().
127
128         * jennifer (check_deb_ar): new function: sanity check the ar
129         contents of a .deb.
130         (check_files): use it.
131         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
132         found.
133         (check_files): accept 'raw-installer' as an alias for 'byhand'.
134
135 2005-01-14  Anthony Towns  <ajt@debian.org>
136
137         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
138
139         * propup stuff (thanks to Andreas Barth)
140         * katie.conf: add stable MustBeOlderThan testing, add -security
141           propup
142         * jennifer: set distribution-version in .katie if propup may be needed
143         * katie.py: add propogation to cross_suite_version_check
144
145 2004-11-27  James Troup  <james@nocrew.org>
146
147         * nina: new script to split monolithic queue/done into date-based
148         hierarchy.
149
150         * rene (usage): document -s/--suite.
151         (add_nbs): use .setdefault().
152         (do_anais): likewise.
153         (do_nbs): don't set a string to "" and then += it.
154         (do_obsolete_source): new function - looks for obsolete source
155         packages (i.e source packages whose binary packages are ALL a)
156         claimed by someone else and b) newer when built from the other
157         source package).
158         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
159         and 'full' check modes.  Check for obsolete source packages.
160         linux-wlan-ng has been fixed - remove hideous bodge.
161
162         * jennifer (check_distributions): support 'reject' suite map type.
163
164         * utils.py (validate_changes_file_arg): s/file/filename/.
165         s/fatal/require_changes/.  If require_changes is -1, ignore errors
166         and return the .changes filename regardless.
167         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
168         (re_no_revision): don't escape '-', it's not a special character.
169         s/\*/+/ as there must be at least one non-dash character after the
170         dash in a revision.  Thanks to Christian Reis for noticing both of
171         these.
172
173         * ashley (main): pass require_changes=-1 to
174         utils.validate_changes_file_arg().
175
176         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
177         Team <debian-kernel@lists.debian.org>'.
178
179         * katie.py (Katie.in_override_p): fix .startswith() usage.
180
181         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
182         (Lauren::MoreInfoURL): update to 3.0r3.
183         (Suite::Stable::Version): likewise.
184         (Suite::Stable::Description): likewise.
185
186         * cron.daily: disable automatic task override generation.
187
188         * cindy (process): restrict "find all packages" queries by
189         component.  Respect Options["No-Action"].
190         (main): add -n/--no-action support.  Only run on unstable.  Rename
191         type to otype (pychecker).
192
193 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
194
195         * katie.conf (Billie::BasicTrees): add all architectures.
196         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
197         'everything'.
198
199         * cron.daily: Update a 'current' symlink when creating the
200         post-daily-cron-job database backup to aid mirroring to merkel.
201         Run billie.
202
203         * billie (BillieTarget.poolish_match): handle .udeb too.
204
205 2004-10-13  Ryan Murray  <rmurray@debian.org>
206
207         * amber (do_upload): Sort changes files in "katie" order so that
208           source always arrives before binary-only rebuilds
209         
210 2004-10-05  James Troup  <james@nocrew.org>
211
212         * jennifer (check_dsc): correct reject message on invalid
213         Maintainer field.
214
215 2004-09-20  James Troup  <james@nocrew.org>
216
217         * alicia: remove unused 'pwd' import.
218
219         * tea (check_override): underline suite name in output properly.
220
221         * rene (main): read a compressed Packages file.
222         * tea (validate_packages): likewise.
223
224         * katie.py (re_fdnic): add 'r' prefix.
225         (re_bin_only_nmu_of_mu): likewise.
226         (re_bin_only_nmu_of_nmu): likewise.
227
228         * madison (main): retrieve component information too and display
229         it if it's not 'main'.
230         * melanie (reverse_depends_check): likewise.
231
232         * utils.py (pp_dep): renamed...
233         (pp_deps): ... to this.
234         * jeri (check_dep): update calls to utils.pp_deps().
235         * melanie (reverse_depends_check): likewise.
236
237         * jennifer (check_changes): move initalization of email variables
238         from here...
239         (process_it): ...to here as we no longer always run
240         check_changes().  Don't bother to initialize
241         changes["architecture"].
242
243         * denise (list): renamed to...
244         (do_list): ...this to avoid name clash with builtin 'list'.
245         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
246         for dictionaries.
247         (main): Likewise for name clash avoidance and also
248         s/override_type/suffix/.  Adjust call to do_list().
249
250 2004-09-01  Ryan Murray  <rmurray@debian.org>
251
252         * tea (check_files): check the pool/ directory instead of dists/
253
254 2004-08-04  James Troup  <james@nocrew.org>
255
256         * jenna (cleanup): use .setdefault() for dictionaries.
257         (write_filelists): likewise.
258
259         (write_filelists): Use utils.split_args() not split() to split
260         command line arguments.
261         (stable_dislocation_p): likewise.
262
263         (write_filelists): Add support for mapping side of suite-based
264         "Arch: all mapping".
265         (do_da_do_da): ensure that if we're not doing all suites that we
266         process enough to be able correct map arch: all packages.
267
268         * utils.py (cant_open_exc): correct exception string,
269         s/read/open/, s/.$//.
270
271         * templates/amber.advisory: update to match reality a little
272         better.
273
274         * melanie (reverse_depends_check): read Packages.gz rather than
275         Packages.
276
277         * jennifer (check_files): check for unknown component before
278         checking for NEWness.
279
280         * katie.py (Katie.in_override_p): use .startswith in favour of a
281         slice.
282
283         * docs/melanie.1.sgml: document -R/--rdep-check.
284
285 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
286
287         * billie (main): Make the verbatim lists include all the README
288           elements.
289         * docs/README.names: Add billie in (correcting oversight)
290
291 2004-07-01  James Troup  <james@nocrew.org>
292
293         * emilie (main): handle woody's case-sensitive python-ldap,
294         s/keyfingerprint/keyFingerPrint/.
295
296 2004-06-25  James Troup  <james@nocrew.org>
297
298         * debian/control (Depends): add dpkg-dev since jennifer uses
299         dpkg-source.
300
301 2004-06-24  James Troup  <james@nocrew.org>
302
303         * melanie (main): s/file/temp_file/ and close file handle before
304         removing the temporary file.
305         (main): don't warn about needing a --carbon-copy if in no-action
306         mode.
307
308         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
309         (main): likewise.
310
311         * test/006/test.py (main): check bracketed email-only form.
312
313         * utils.py (fix_maintainer): if the Maintainer string is bracketed
314         email-only, strip the brackets so we don't end up with
315         <<james@nocrew.org>>.
316
317 2004-06-20  James Troup  <james@nocrew.org>
318
319         * jennifer (process_it): only run check_changes() if
320         check_signature() returns something.  (Likewise)
321
322         * utils.py (changes_compare): if there's no changes["version"] use
323         "0" rather than None.  (Avoids a crash on unsigned changes file.)
324
325 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
326
327         * jeri (pp_dep): moved from here to ...
328         * utils.py (pp_dep): here.
329
330         * melanie (main): add reverse dependency checking.
331
332 2004-06-17  James Troup  <james@nocrew.org>
333
334         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
335         * tea (check_dscs): likewise.
336
337         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
338         change from boolean to a variable with 3 possible values, 0 and 1
339         as before, -1 means don't require a signature.  Makes
340         parse_changes() useful for parsing arbitary RFC822-style files,
341         e.g. 'Release' files.
342         (check_signature): add support for detached signatures by passing
343         the files the signature is for as an optional third argument.
344         s/filename/sig_filename/g.  Add a fourth optional argument to
345         choose the keyring(s) to use.  Don't os.path.basename() the
346         sig_filename before checking it for taint.
347         (re_taint_free): allow '/'.
348
349 2004-06-11  James Troup  <james@nocrew.org>
350
351         * tea (check_files): make override.unreadable optional.
352         (validate_sources): close the Sources file handle.
353
354         * docs/README.first: clarify that 'alyson' and running
355         add_constraints.sql by hand is something you only want to do if
356         you're not running 'neve'.
357
358         * docs/README.config (Location::$LOCATION::Suites): document.
359
360         * db_access.py (do_query): also print out the result of the query.
361
362 2004-06-10  James Troup  <james@nocrew.org>
363
364         * katie.py (Katie.cross_suite_version_check): post-woody versions
365         of python-apt's apt_pkg.VersionCompare() function apparently
366         returns variable integers for less than or greater than results -
367         update our result checking to match.
368         * jenna (resolve_arch_all_vs_any): likewise.
369         * charisma (main): likewise.
370
371 2004-06-09  James Troup  <james@nocrew.org>
372
373         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
374         valid_dsc_p and don't run check_source() if check_dsc() failed.
375         (check_dsc): on fatal failures return 0 so check_source() isn't
376         run (since it makes fatal assumptions about the presence of
377         mandatory .dsc fields).  
378         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
379
380 2004-05-07  James Troup  <james@nocrew.org>
381
382         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
383         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
384
385         * katie.conf (Dir::Override): remove duplicate definition.
386
387         * neve (get_or_set_files_id): add an always-NULL last_used column
388         to output.
389
390 2004-04-27  James Troup  <james@nocrew.org>
391
392         * apt.conf-security (tree "dists/stable/updates"): add
393         ExtraOverride - noticed by Joey Hess (#246050).
394         (tree "dists/testing/updates"): likewise.
395
396 2004-04-20  James Troup  <james@nocrew.org>
397
398         * jennifer (check_files): check for existing .changes or .katie
399         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
400         directories.
401
402 2004-04-19  James Troup  <james@nocrew.org>
403
404         * jennifer (check_source): handle failure to remove the temporary
405          directory (used for source tree extraction) better, specifically:
406          if we fail with -EACCES, chmod -R u+rwx the temporary directory
407          and try again and if that works, REJECT the package.
408
409 2004-04-17  James Troup  <james@nocrew.org>
410
411         * docs/madison.1.sgml: document -b/--binary-type,
412         -g/--greaterorequal and -G/--greaterthan.
413
414         * madison (usage): -b/--binary-type only takes a single argument.
415         Document -g/--greaterorequal and -G/--greaterthan.
416         (main): add support for -g/--greaterorequal and -G/--greaterthan.
417
418 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
419
420         * billie: Cleaned up a load of comments, added /README.non-US to
421           the verbatim matches list.
422
423 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
424
425         * utils.py (size_type): Make it use real binary megabytes and
426           kilobytes, instead of the marketing terms used before.
427
428 2004-04-07  James Troup  <james@nocrew.org>
429
430         * katie.py (Katie.check_dsc_against_db): in the case we're
431         ignoring an identical-to-existing orig.tar.gz remember the path to
432         the existent version in pkg.orig_tar_gz.  Adjust query to grab
433         location.path too to be able to do so.
434
435 2004-04-03  James Troup  <james@nocrew.org>
436
437         * debian/control (Depends): add python2.1-email | python (>= 2.2)
438         needed for new utils.rfc2047_encode() function.
439
440         * utils.py (re_parse_maintainer): allow whitespace inside the
441         email address.
442         (Error): new exception base class.
443         (ParseMaintError): new exception class.
444         (force_to_utf8): new function.
445         (rfc2047_encode): likewise.
446         (fix_maintainer): rework.  use force_to_utf8() to force name and
447         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
448         return an rfc2047 value.  Validate the address to catch missing
449         email addresses and (some) broken ones.
450
451         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
452         by adopting foo2047 return value.
453         (Katie.dump_vars): add changedby2047 and maintainer2047 as
454         mandatory changes fields.  Promote changes and maintainer822 to
455         mandatory fields.
456         (Katie.update_subst): default maintainer2047 rather than
457         maintainer822.  User foo2047 rather than foo822 when setting
458         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
459
460         * jennifer (check_changes): set default changes["maintainer2047"]
461         and changes["changedby2047"] values rather than their 822
462         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
463         to new utils.fix_maintainer() - reject on exception and adopt
464         foo2047 return value.
465         (check_dsc): if a mandatory field is missing don't do any further
466         checks and as a result reduce paranoia about dsc[var] existence.
467         Validate the maintainer field by calling new
468         utils.fix_maintainer().
469
470         * ashley (main): add changedby2047 and maintainer2047 to mandatory
471         changes fields.  Promote maintainer822 to a mandatory changes
472         field.  add "pool name" to files fields.
473
474         * test/006/test.py: new file - tests for new
475         utils.fix_maintainer().
476
477 2004-04-01  James Troup  <james@nocrew.org>
478
479         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
480
481         * jennifer (get_changelog_versions): create a symlink mirror of
482         the source files in the temporary directory.
483         (check_source): if check_dsc_against_db() couldn't find the
484         orig.tar.gz bail out.
485
486         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
487         part of the upload store the path to it in pkg.orig_tar_gz and if
488         it can't be found set pkg.orig_tar_gz to -1.
489
490         Explicitly return the second value as None in the (usual) case
491         where we don't have to reprocess.  Remove obsolete diagnostic
492         logs.
493
494         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
495
496         * utils.py (temp_filename): new helper function that wraps around
497         tempfile.mktemp().
498
499         * katie.py (Katie.do_reject): use it and don't import tempfile.
500         * lisa (prod_maintainer): likewise.
501         (edit_note): likewise.
502         (edit_new): likewise.
503         * lauren (reject): likewise.
504         * melanie (main): likewise.
505         * neve (do_sources): likewise.
506         * rene (main): likewise.
507         * tea (validate_sources): likewise.
508
509 2004-03-31  James Troup  <james@nocrew.org>
510
511         * tea (validate_sources): remove unused 's' temporary variable.
512
513 2004-03-15  James Troup  <james@nocrew.org>
514
515         * jennifer (check_dsc): check changes["architecture"] for
516         source before we do anything else.
517
518 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
519
520         * billie: Added
521         * katie.conf (Billie): Added sample Billie stanza to katie.conf
522
523 2004-03-12  James Troup  <james@nocrew.org>
524
525         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
526
527         * katie.conf (Dir::Queue::BTSVersionTrack): define.
528
529         * katie.py (Katie.accept): add support for DebBugs Version
530         Tracking by writing out .versions (generated in jennifer's
531         get_changelog_versions()) and .debinfo (mapping of binary ->
532         source) files.
533
534         * ashley (main): add dsc["bts changelog"].
535
536         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
537
538         * jennifer (check_diff): obsoleted by check_source(), removed.
539         (check_source): new function: create a temporary directory and
540         move into it and call get_changelog_versions().
541         (get_changelog_versions): new function: extract the source package
542         and optionally parse debian/changelog to obtain the version
543         history for the BTS.
544         (process_it): call check_source() rather than check_diff().
545
546 2004-03-08  James Troup  <james@nocrew.org>
547
548         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
549         listbar" rather than "if listbar.count(varfoo)"' change on
550         2004-02-24.
551
552 2004-03-05  James Troup  <james@nocrew.org>
553
554         * alicia (main): don't warn about not closing bugs - we don't
555         manage overrides through the BTS.
556
557 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
558
559         * docs/README.config: lots of updates and corrections.
560         * docs/README.first: likewise.
561
562         * docs/README.config: drop unused Dir::Queue::Root.
563         * katie.conf-non-US: likewise.
564         * katie.conf: likewise.
565         * katie.conf-security: likewise.
566
567 2004-02-27  James Troup  <james@nocrew.org>
568
569         * rose (process_tree): use 'if var in [ list ]' rather than long
570         'if var == foo or var == bar or var == baz'.  Suggested by Martin
571         Michlmayr.
572
573         * jennifer (check_files): reduce 'if var != None' to 'if var' as
574         suggested by Martin Michlmayr.
575         * catherine (poolize): likewise.
576         * charisma (main): likewise.
577         * halle (check_changes): likewise.
578         * heidi (main): likewise.
579         (process_file): likewise.
580         * kelly (install): likewise.
581         (stable_install): likewise.
582         * utils.py (fix_maintainer): likewise.
583
584         * apt.conf: add support for debian-installer in testing-proposed-updates.
585         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
586         add - set to main.
587
588         * mkmaintainers: add "-T15" option to wget of non-US packages file
589         so that we don't hang cron.daily if non-US is down.
590
591         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
592
593         * templates/jennifer.bug-close: add Source and Source-Version
594         pseudo-headers that may be used for BTS Version Tracking someday
595         [ajt@].
596
597         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
598         (main): likewise.
599
600         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
601
602 2004-02-25  James Troup  <james@nocrew.org>
603
604         * katie.conf (SuiteMappings): don't map testing-security to
605         proposed-updates.
606
607 2004-02-24  James Troup  <james@nocrew.org>
608
609         * katie.py (Katie.__init__): remove unused 'values' field.
610
611         * utils.py (extract_component_from_section): use 's.find(c) != -1'
612         rather than 's.count(c) > 0'.
613
614         * katie.py (Katie.source_exists): use "if varfoo in listbar"
615         rather than "if listbar.count(varfoo)".
616         * halle (check_joey): likewise.
617         * jeri (check_joey): likewise.
618         * lisa (edit_index): likewise.
619         * jenna (stable_dislocation_p): likewise.
620
621         * jennifer (main): remove unused global 'nmu'.
622
623 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
624
625         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
626           to be ftpmaster@ftp-master.debian.org to bring it into line with how
627           the dak tools close bugs.
628
629 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
630
631         * katie.conf (Alicia): Added an Alicia section with email address
632         * templates/alicia.bug-close: Added
633         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
634         * alicia (main): Added a -d/--done argument
635
636 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
637
638         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
639
640 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
641
642         * lisa (prod_maintainer): Added function to prod the maintainer without
643           accepting or rejecting the package
644         * templates/lisa.prod: Added this template for the prodding mail
645
646         * .cvsignore: Added neve-files which turns up in new installations
647
648 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
649
650         * alicia (usage): Fixed usage message to offer section and priority
651           as seperately optional arguments.
652         * alicia (main): Added a % (arg) interpolation needed when only
653           one of section or priority is provided and it cannot be found.
654
655 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
656
657         * alicia: Added
658         * docs/alicia.1.sgml: Added
659         * docs/Makefile: Added alicia to the list of manpages to build
660         * docs/README.names: Noted what alicia does
661         * docs/README.first: Noted where alicia is useful
662
663 2004-01-21  James Troup  <james@nocrew.org>
664
665         * madison (main): add -b/--binary-type.
666         (usage): likewise.
667
668         * denise (main): generate debian-installer overrides for testing
669         too.
670         * apt.conf: add support for debian-installer in testing.
671         * katie.conf (Suite::Testing::UdebComponents): set to main.
672
673         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
674         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
675         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
676
677         * utils.py (parse_changes): don't process data not inside the
678         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
679         pointing this out.
680         * test/005/test.py (main): new test to test for above.
681
682 2004-01-04  James Troup  <james@nocrew.org>
683
684         * jenna (write_filelists): correct typo, s/Components/Component/
685         for Options.
686
687 2004-01-04  Ryan Murray  <rmurray@debian.org>
688
689         * cron.buildd: move update of overrides and Packages file...
690         * cron.unchecked: to here.
691         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
692         * katie.conf-security: likewise
693
694 2003-11-20  James Troup  <james@nocrew.org>
695
696         * jenna (main): don't use utils.try_with_debug(), it produces way
697         too much output.
698
699         * halle (check_changes): don't error out if a .changes refers to a
700         non-existent package, just warn and skip the file.
701
702         * docs/README.stable-point-release: mention halle and .changes
703         obsoleted by removal through melanie.  Update for 3.0r2.
704
705         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
706         (Suite::Stable::Description): update for 3.0r2.
707         (Lauren::MoreInfoURL): likewise.
708         * katie.conf-non-US (Suite::Stable::Version): likewise.
709         (Suite::Stable::Description): likewise.
710         (Lauren::MoreInfoURL): likewise.
711
712         * apt.conf.stable (Default): don't define MaxContentsChange.
713         * apt.conf.stable-non-US (Default): likewise.
714
715         * lauren (reject): hack to work around partial replacement of an
716         upload, i.e. one or more binaries superseded by another source
717         package.
718
719 2003-11-17  James Troup  <james@nocrew.org>
720
721         * pseudo-packages.maintainers: point installation-reports at
722         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
723         request.
724
725         * utils.py (parse_changes): calculate the number of lines once
726         with len() rather than max().
727
728         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
729         files, since check_dsc_against_db() deletes the .orig.tar.gz
730         entry.
731
732 2003-11-13  Ryan Murray  <rmurray@debian.org>
733
734         * apt.conf: specify a src override file for debian-installer
735
736 2003-11-10  James Troup  <james@nocrew.org>
737
738         * fernanda.py (strip_pgp_signature): new function - strips PGP
739         signature from a file and returns the modified contents of the
740         file in a string.
741         (display_changes): use it.
742         (read_dsc): likewise.
743
744 2003-11-09  Ryan Murray  <rmurray@debian.org>
745
746         * cron.buildd: export accepted_autobuild table for unstable, and use
747         it to generate the incoming Packages/Sources rather than having apt
748         walk the directory.
749         * apt.conf.buildd: use exported table from cron.buildd to generate
750         Packages/Sources
751
752 2003-11-07  James Troup  <james@nocrew.org>
753
754         * kelly: import errno.
755
756         * katie.py (Katie.build_summaries): sort override disparities.
757
758         * kelly (install): set dsc_component based on the .dsc's component
759         not a random binaries.
760
761 2003-10-29  James Troup  <james@nocrew.org>
762
763         * katie.py (Katie.build_summaries): don't assume changes["source"]
764         exists since it might not.
765
766 2003-10-20  James Troup  <james@nocrew.org>
767
768         * pseudo-packages.maintainers: update security.d.o to use
769         team@s.d.o at joy@'s request.
770
771 2003-10-17  James Troup  <james@nocrew.org>
772
773         * jennifer (check_dsc): use .startswith rather than .find() == 0.
774
775 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
776
777         * tea (chk_bd_process_dir): use .endswith rather than slice.
778
779 2003-10-14  James Troup  <james@nocrew.org>
780
781         * tea (check_build_depends): new function.
782         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
783         in the archive.
784         (main): update for new function.
785         (usage): likewise.
786
787         * katie.py (Katie.do_reject): sanitize variable names,
788         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
789         os.close() to outside if clause.
790
791         * jennifer (check_dsc): check build-depends and
792         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
793         Fold the ARRAY check into the same code block and tidy up it's
794         rejection message.
795         (check_changes): ensure that the Files field is non-empty.
796         Suggested by Santiago Vila <sanvila@unex.es>
797         (check_changes): normalize reject messages.
798         (check_dsc): instead of doing most of the checks inside a for loop
799         and an if, find the dsc_filename in a short loop over files first
800         and then do all the checks.  Add check for more than one .dsc in a
801         .changes which we can't handle.  Normalize reject messages.
802
803 2003-10-13  James Troup  <james@nocrew.org>
804
805         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
806         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
807
808         * jennifer (check_files): Set 'has_binaries' and 'has_source'
809         variables while iterating over 'files'.  Don't regenerate it when
810         checking for source if source is mentioned.
811
812         Reject source only uploads if the config variable
813         Dinstall::Reject::NoSourceOnly is set.
814
815 2003-10-03  James Troup  <james@nocrew.org>
816
817         * rene (main): add nasty hardcoded reference to debian-installer
818         so we detect NBS .udebs.
819
820 2003-09-29  James Troup  <james@nocrew.org>
821
822         * apt.conf (old-proposed-updates): remove.
823         * apt.conf-non-US (old-proposed-updates): likewise.
824
825 2003-09-24  James Troup  <james@nocrew.org>
826
827         * tea (check_files_not_symlinks): new function, ensure files
828         mentioned in the database aren't symlinks.  Includes code to
829         update any files that are like this to their real filenames +
830         location; commented out by though.
831         (usage): update for new function.
832         (main): likewise.
833
834 2003-09-24  Anthony Towns  <ajt@debian.org>
835
836         * vars: external-overrides variable added
837         * cron.daily: Update testing/unstable Task: overrides from joeyh
838         managed external source.
839
840 2003-09-22  James Troup  <james@nocrew.org>
841
842         * kelly (install): if we can't move the .changes into queue/done,
843         fail don't warn and carry on.  The old behaviour pre-dates NI and
844         doesn't make much sense now since jennifer checks both
845         queue/accepted and queue/done for any .changes files she's
846         processing.
847
848         * utils.py (move): don't throw exceptions on existing files or
849         can't overwrite, instead just fubar out.
850
851         * jennifer (check_dsc): also check Build-Depends-Indep for
852         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
853
854 2003-09-18  James Troup  <james@nocrew.org>
855
856         * katie.py (Katie.close_bugs): only log the bugs we've closed
857         once.
858
859         * kelly (main): log as 'kelly', not 'katie'.
860
861 2003-09-16  James Troup  <james@nocrew.org>
862
863         * katie.py (Katie.check_binary_against_db): likewise noramlize.
864
865         * jennifer (check_changes): normalize reject message for "changes
866         file already exists" to be %s: <foo>.
867         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
868         produced by broken dpkg-source in 1.10.11.  Tone down and
869         normalize rejection message for incompatible 'Format' version
870         numbers.
871         (check_diff): likewise tone down and normalize.
872
873 2003-09-07  James Troup  <james@nocrew.org>
874
875         * utils.py (parse_changes): if dsc_whitespace_rules is false,
876         don't bomb out on bogus empty lines.
877         (build_file_list): check for changes["files"] earlier.  use Dict
878         to create files[name] dictionary.
879         (send_mail): don't bother validating arguments.
880         (check_signature): minor improvements to some of the rejection
881         messages including listing the key id of the key that wasn't found
882         in the keyring.
883         (wrap): new function.
884
885         * tea: add new check 'validate-indices' that ensures all files
886         mentioned in indices (Packages, Sources) files do in fact exist.
887
888         * catherine (poolize): use a local re_isadeb which handles legacy
889         (i.e. no architecture) style .deb filenames.
890
891         * rosamund: new script.
892
893         * rhona (check_binaries): when checking for binary packages not in
894         a suite, don't bother selecting files that already have a
895         last_used date.
896         (check_sources): likewise.
897
898         * rhona: change all SQL EXISTS sub-query clauses to use the
899         postgres suggested convention of "SELECT 1 FROM".
900         * andrea (main): likewise.
901         * tea (check_override): likewise.
902         * catherine (main): likewise.
903
904         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
905         entries and in other suites MustBeNewerThan's.
906         (SuiteMappings): likewise
907         * katie.conf-non-US: likewise.
908         * katie.conf-security: likewise.
909
910         * apt.conf-security: remove oldstable.
911         * apt.conf.stable: likewise.
912         * apt.conf.stable-non-US: likewise.
913         * cron.buildd-security: likewise.
914         * cron.daily-security: likewise.
915         * vars-security (suites): likewise.
916         * wanna-build/trigger.daily: likewise.
917
918         * claire.py (clean_symlink): move...
919         * utils.py (clean_symlink): here.
920
921         * claire.py (find_dislocated_stable): update accordingly.
922
923 2003-08-16  Anthony Towns  <ajt@debian.org>
924
925         * katie.py (source_exists): expand the list of distributions
926         the source may exist in to include any suite that's mapped to
927         the destination suite (even transitively (a->b->c)). This should
928         unbreak binary uploads to *-proposed-updates.
929
930 2003-08-09  Randall Donald  <rdonald@debian.org>
931
932         * lisa (recheck): change changes["distribution"].keys() to
933         Katie.pkg.changes...
934
935 2003-08-08  Randall Donald  <rdonald@debian.org>
936
937         * katie.py: only tag bugs as fixed-in-experimental for
938         experimental uploads
939
940 2003-07-26  Anthony Towns  <ajt@debian.org>
941
942         * katie.py (source_exists): add an extra parameter to limit the
943         distribution(s) the source must exist in.
944         * kelly, lisa, jennifer: update to use the new source_exists
945
946 2003-07-15  Anthony Towns  <ajt@debian.org>
947
948         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
949         checksums for debian-installer stuff even when it's just a symlink to
950         another suite
951
952         * apt.conf: add the FakeDI line
953
954 2003-06-09  James Troup  <james@nocrew.org>
955
956         * kelly (check): make sure the 'file' we're looking for in 'files'
957         hasn't been deleted by katie.check_dsc_against_db().
958
959 2003-05-07  James Troup  <james@nocrew.org>
960
961         * helena (time_pp): fix s/years/year/ typo.
962
963 2003-04-29  James Troup  <james@nocrew.org>
964
965         * madison (usage): document -c/--component.
966
967         * madison (usage): Fix s/seperated/separated/.
968         * melanie (usage): likewise.
969         * jenna (usage): likewise.
970
971 2003-04-24  James Troup  <james@nocrew.org>
972
973         * cron.daily-non-US: if there's nothing for kelly to install, say
974         so.
975
976         * jennifer (check_timestamps): print sys.exc_value as well as
977         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
978         failed' with 'deb contents' to make it clearer what timestamp(s)
979         are being checked.
980
981 2003-04-15  James Troup  <james@nocrew.org>
982
983         * cron.daily-non-US: only run kelly if there are some .changes
984         files in accepted.
985
986         * rene: add -m/--mode argument which can be either daily (default)
987         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
988         Various changes to make this possible including a poor attempt at
989         splitting main() up a little.  De-hardcode suite numbers from SQL
990         queries and return quietly from do_nviu() if experimental doesn't
991         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
992         is.
993
994         * debian/control (Depends): remove python-zlib as it's obsolete.
995
996         * charisma (main): don't slice the \n off strings when we're
997         strip()-ing it anyway.
998         * heidi (set_suite): likewise.
999         (process_file): likewise.
1000         * natalie (process_file): likewise.
1001
1002 2003-04-08  James Troup  <james@nocrew.org>
1003
1004         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1005         slow queries by using one LIKE '%foo%' and then matching against
1006         '%s' or '/%s$' in python.  Also only join location when we need it
1007         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1008         query, so 6s for each sourceful package.
1009
1010         * cron.daily: invoke rene and send the report to ftpmaster.
1011         * cron.daily-non-US: likewise.
1012
1013 2003-03-14  James Troup  <james@nocrew.org>
1014
1015         * utils.py (send_mail): default filename to blank.
1016         * amber (make_advisory): adapt.
1017         * jennifer (acknowledge_new): likewise.
1018         * katie.py (Katie.close_bugs): likewise.
1019         (Katie.announce): likewise.
1020         (Katie.accept): likewise.
1021         (Katie.check_override): likewise.
1022         (Katie.do_reject): likewise.
1023         * kelly (do_reject): likewise.
1024         (stable_install): likewise.
1025         * lisa (do_bxa_notification): likewise.
1026         * lauren (reject): likewise.
1027         * melanie (main): likewise.
1028
1029         * rene (add_nbs): check any NBS packages against unstable to see
1030         if they haven't been removed already.
1031
1032         * templates/katie.rejected: remove paragraph about rejected files
1033         since they're o-rwx due to c-i-m and the uploader can't do
1034         anything about them and shania will take care of them anyway.
1035
1036         * madison (usage): update usage example to use comma seperation.
1037         * melanie (usage): likewise.
1038
1039         * utils.py (split_args): new function; splits command line
1040         arguments either by space or comma (whichever is used).  Also has
1041         optional-but-default DWIM spurious space detection to avoid
1042         'command -a i386, m68k' problems.
1043         (parse_args): use it.
1044         * melanie (main): likewise.
1045
1046         * melanie (main): force the admin to tell someone if we're not
1047         doing a rene-led removal (or closing a bug, which counts as
1048         telling someone).
1049
1050 2003-03-05  James Troup  <james@nocrew.org>
1051
1052         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1053         and python sections.
1054         * katie.conf-security (Section): likewise.
1055
1056         * add_constraints.sql: add uid and uid_id_seq to grants.
1057
1058         * lisa (determine_new): also warn about adding overrides to
1059         oldstable.
1060
1061         * madison (main): make the -S/--source-and-binary query obey
1062         -s/--suite restrictions.
1063
1064 2003-03-03  James Troup  <james@nocrew.org>
1065
1066         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1067         exists, warn the user that our output might seem strange.  (People
1068         get confused by multiple versions in a suite which happens
1069         post-kelly but pre-jenna.)
1070
1071 2003-02-21  James Troup  <james@nocrew.org>
1072
1073         * kelly (main): we don't need to worry about StableRejector.
1074
1075         * melanie (main): sort versions with apt_pkg.VersionCompare()
1076         prior to output.
1077
1078         * lauren: new script to manually reject packages from
1079         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1080
1081 2003-02-20  James Troup  <james@nocrew.org>
1082
1083         * kelly (init): remove unused -m/--manual-reject argument.
1084
1085         * katie.py (Katie.force_reject): renamed from force_move to make
1086         it more explicit what this function does.
1087         (Katie.do_reject): update to match.
1088
1089         * utils.py (prefix_multi_line_string): add an optional argument
1090         include_blank_lines which defaults to 0.  If non-zero, blank lines
1091         will be includes in the output.
1092
1093         * katie.py (Katie.do_reject): don't add leading space to each line
1094         of the reject message.  Include blank lines when showing the
1095         message to the user.
1096
1097 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1098
1099         * utils.py (fix_maintainer): replace pointless re.sub() with
1100         simple string format.
1101
1102 2003-02-11  James Troup  <james@nocrew.org>
1103
1104         * lisa (edit_overrides): only strip-to-one-char and upper-case
1105         non-numeric answers.  Fixes editing of items with indices >= 10;
1106         noticed by Randall.
1107         (edit_overrides): correct order of arguments to "not a valid
1108         index" error message.
1109
1110         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1111         remove_duplicate_versions(); thanks to aj for the initial
1112         diagnosis.
1113         (remove_duplicate_versions): correct how we return
1114         dominant_versions.
1115         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1116         a tuple rather than just a tuple.
1117
1118 2003-02-10  James Troup  <james@nocrew.org>
1119
1120         * emilie: new script - sync fingerprint and uid tables with a
1121         debian.org LDAP DB.
1122
1123         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1124         in 'fingerprint'.
1125
1126         * db_access.py (get_or_set_uid_id): new function.
1127
1128         * jennifer (main): update locking to a) not used FCNTL (deprecated
1129         in python >= 2.2) and b) acknowledge upstream's broken
1130         implementation of lockf (see Debian bug #74777), c) try to acquire
1131         the lock non-blocking.
1132         * kelly (main): likewise.
1133
1134         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1135
1136         * madison (main): only append the package to new_packages if it's
1137         not already in there; fixes -S/--source-and-binary for cases where
1138         the source builds a binary package of the same name.
1139
1140 2003-02-10  Anthony Towns  <ajt@debian.org>
1141
1142         * madison (main): use explicit JOIN syntax for
1143         -S/--source-and-binary queries to reduce the query's runtime from
1144         >10 seconds to negligible.
1145
1146 2003-02-08  James Troup  <james@nocrew.org>
1147
1148         * rene (main): in the NVIU output, append items to lists, not
1149         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1150         should be removed.
1151
1152 2003-02-07  James Troup  <james@nocrew.org>
1153
1154         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1155         Sources [aj].
1156
1157         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1158         O. Benham/Adam Heath/.
1159
1160         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1161         (Suite::Stable::Description): update for 3.0r1a.
1162         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1163
1164         * utils.py (gpgv_get_status_output): rename from
1165         get_status_output().
1166
1167         * neve (check_signature): use gpgv_get_status_output and Dict from
1168         utils().  Add missing newline to error message about duplicate tokens.
1169
1170         * saffron (per_arch_space_use): also print space used by source.
1171         (output_format): correct string.join() invocation.
1172
1173         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1174
1175 2003-02-04  James Troup  <james@nocrew.org>
1176
1177         * cron.buildd: correct generation of Packages/Sources and grep out
1178         non-US/non-free as well as non-free.
1179
1180 2003-02-03  Ryan Murray  <rmurray@debian.org>
1181
1182         * cron.buildd: generate quinn-diff output with full Packages/Sources
1183           files to get out-of-date vs. uncompiled right.
1184         * apt.conf.buildd: no longer generate uncompressed files, as they
1185           are generated in cron.buildd instead
1186         * add -i option to quinn-diff to ignore binary-all packages
1187         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1188           aren't in the packages file, the arch that uploaded them will build
1189           them anyways...
1190
1191 2003-01-30  James Troup  <james@nocrew.org>
1192
1193         * rene (main): only print suggested melanie command when there's
1194         some NBS to remove.
1195
1196 2003-01-30  Ryan Murray  <rmurray@debian.org>
1197
1198         * cron.buildd: fix incorrectly inverted lockfile check
1199
1200 2003-01-29  Ryan Murray  <rmurray@debian.org>
1201
1202         * cron.buildd: generate override.sid.all3.src
1203         * apt.conf.buildd: use generated override.sid.all3.src
1204
1205 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1206
1207         * utils.py (get_status_output): moved from jennifer.
1208         (Dict): likewise.
1209         (check_signature): likewise.
1210
1211         * jennifer (get_status_output): moved to utils.py.
1212         (Dict): likewise.
1213         (check_signature): likewise.
1214
1215         * utils.py (check_signature): add an argument to specifiy which
1216         function to call when an error was found.
1217         (check_signature): document this function better.
1218
1219         * jennifer (check_files): pass the reject function as an argument
1220         to utils.check_signature.
1221         (process_it): likewise.
1222
1223 2003-01-20  James Troup  <james@nocrew.org>
1224
1225         * rene (main): lots of changes to improve the output and make it
1226         more useful.
1227
1228         * katie.py (Katie.check_override): make the override messages
1229         clearer (hopefully).
1230
1231 2002-12-26  James Troup  <james@nocrew.org>
1232
1233         * ziyi (usage): document the ability to pass suite(s) as
1234         argument(s).
1235         (main): read apt.conf after checking for -h/--help.
1236
1237         * tea (main): take the check to run as an argument.
1238
1239         * saffron.R: R script to graph daily install runs.
1240
1241         * saffron: new script; various stats functions.
1242
1243         * rhona (main): connect to the database after checking for -h/--help.
1244
1245         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1246
1247         * melanie (main): sort versions with utils.arch_compare_sw().
1248
1249         * madison (usage): alphabetize order of options.
1250         * melanie (usage): likewise.
1251
1252         * kelly (usage): fix usage short description (we aren't dinstall).
1253
1254         * julia (usage): fix usage description and alphabetize order of
1255         options.
1256
1257         * jeri (usage): fix usage short description.
1258
1259         * jennifer (main): move --help and --version checks from here...
1260         (init): to here so that they work with an empty katie.conf.
1261         * kelly: likewise.
1262
1263         * alyson (usage): new function.
1264         (main): use it.
1265         * andrea: likewise.
1266         * ashley: likewise.
1267         * cindy: likewise.
1268         * denise: likewise.
1269         * helena: likewise.
1270         * neve: likewise.
1271         * rene: likewise.
1272         * rose: likewise.
1273         * tea: likewise.
1274
1275         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1276         entry that caused tasks to be omitted from 3.0r1.
1277
1278 2002-12-10  James Troup  <james@nocrew.org>
1279
1280         * jennifer (check_files): sanity check the Depends field to ensure
1281         it's non-empty if present since apt chokes on an empty one.
1282         Thanks to Ryan Murray for the idea.
1283
1284 2002-12-08  James Troup  <james@nocrew.org>
1285
1286         * katie.conf-security (Helena::Directories): new; include accepted
1287         in addition to byhand and new.
1288
1289         * helena (process_changes_files): use utils.arch_compare_sw().
1290         Justify things based on the longest [package, version,
1291         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1292         the commas in architecture and version lists for the same reason.
1293         (main): make directories we process configurable through
1294         Helena::Directories in the config file; if that doesn't exist
1295         default to the old hardcoded values (byhand & new).
1296
1297         * utils.py (arch_compare_sw): moved here from madison.
1298         * madison (main): adjust to compensate.
1299
1300 2002-12-06  James Troup  <james@nocrew.org>
1301
1302         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1303         right filename.
1304
1305 2002-12-05  James Troup  <james@nocrew.org>
1306
1307         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1308
1309 2002-11-28  Randall Donald  <rdonald@debian.org>
1310
1311         * fernanda.py (read_control): fix typo of 'Architecture'.
1312
1313 2002-11-26  James Troup  <james@nocrew.org>
1314
1315         * lisa (check_pkg): call less with '-R' so we see the colour from
1316         Randall's fernanda changes.
1317
1318         * neve (process_sources): if Directory points to a legacy location
1319         but the .dsc isn't there; assume it's broken and look in the pool.
1320         (update_section): new, borroed from alyson.
1321         (do_da_do_da): use it.
1322         (process_packages): add suite_it to the cache key used for
1323         arch_all_cache since otherwise we only add a package to the first
1324         suite it's in and ignore any subsequent ones.
1325
1326         * katie.conf-non-US (Location): fixed to reflect reality (all
1327         suites, except old-proposed-updates (which is legacy-mixed)) are
1328         pool.
1329
1330         * utils.py (try_with_debug): wrapper for print_exc().
1331         * jenna (main): use it.
1332         * neve (main): likewise.
1333
1334 2002-11-25  Randall Donald  <rdonald@debian.org>
1335
1336         * fernanda.py (main): added -R to less command line for raw control
1337         character support to print colours
1338         (check_deb): Instead of running dpkg -I on deb file, call
1339         output_deb_info, the new colourized control reporter.
1340         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1341         of printing out each .dsc line.
1342         (output_deb_info): new function. Outputs each key/value pair from
1343         read_control except in special cases where we highlight section,
1344         maintainer, architecture, depends and recommends.
1345         (create_depends_string): new function. Takes Depends tree and looks
1346         up it's compontent via projectb db, colourizes and constructs a
1347         depends string in original order.
1348         (read_dsc): new function. reads and parses .dsc info via
1349         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1350         colourized.
1351         (read_control): new function. reads and parses control info via
1352         apt_pkg. Depends and Recommends are split in to list structures,
1353         Section and Architecture are colourized. Maintainer is colourized
1354         if it has a localhost.localdomain address.
1355         (split_depends): new function. Creates a list of lists of
1356         dictionaries of depends (package,version relation). Top list is
1357         colected from comma delimited items. Sub lists are | delimited.
1358         (get_comma_list): new function. splits string input among commas
1359         (get_or_list): new function. splits string input among | delimiters
1360         (get_depends_parts): new function. Creates dictionary of package name
1361         and version relation from dependancy string.
1362         Colours for section and depends are per component. Unfound depends
1363         are in bold. Lookups using version info is not supported yet.
1364
1365 2002-11-22  James Troup  <james@nocrew.org>
1366
1367         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1368         'udmsearch'.
1369
1370         * amber (make_advisory): string.atol() is deprecated and hasn't
1371         been ported to string methods.  Use long() instead.
1372
1373         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1374         creating the database since we'll fail badly if it's created with
1375         e.g. UNICODE encoding.
1376
1377         * rose (main): AptCnf is a global.
1378
1379         * neve (get_location_path): new function determines the location
1380         from the the first (left-most) directory of a Filename/Directory.
1381         (process_sources): don't need 'location' anymore.  Use
1382         utils.warn().  Use the Directory: field for each package to find
1383         the .dsc.  Use get_location_path() to determine the location for
1384         each .dsc.
1385         (process_packages): do't need 'location' anymore.  Use
1386         utils.warn().  Use get_location_path().
1387         (do_sources): don't need 'location', drop 'prefix' in favour of
1388         being told the full path to the Sources file, like
1389         process_packages().
1390         (do_da_do_da): main() renamed, so that main can call us in a
1391         try/except.  Adapt for the changes in do_sources() and
1392         process_packages() above.  Assume Sources and Packages file are in
1393         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1394
1395         * katie.conf-security (Location): fixed to reflect reality (all
1396         suites are pool, not legacy).
1397
1398         * utils.py (print_exc): more useful (i.e. much more verbose)
1399         traceback; a recipe from the Python cookbook.
1400         * jenna (main): use it.
1401         * neve (main): likewise.
1402
1403 2002-11-19  James Troup  <james@nocrew.org>
1404
1405         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1406         handling which was FUBAR for multi-suite uploads.  Now we just
1407         make a dictionary of destinations to copy to and iterate over
1408         those.
1409
1410         * fernanda.py (check_deb): run linda as well as lintian.
1411
1412 2002-10-21  James Troup  <james@nocrew.org>
1413
1414         * melanie (main): change X-Melanie to X-Katie and prefix it with
1415         'melanie '.
1416
1417         * lisa (main): prefix X-Katie with 'lisa '.
1418
1419         * jennifer (clean_holding): fix typo in string method changes;
1420         s/file.find(file/file.find(/.
1421
1422         * cron.daily: invoke helena and send the report to ftpmaster.
1423         * cron.daily-non-US: likewise.
1424
1425 2002-10-16  James Troup  <james@nocrew.org>
1426
1427         * kelly (check): call reject() with a blank prefix when parsing
1428         the return of check_dsc_against_db() since it does its own
1429         prefix-ing.
1430
1431         * rose: new script; only handles directory creation initally.
1432
1433         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1434         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1435
1436 2002-10-06  James Troup  <james@nocrew.org>
1437
1438         * rene (main): remove bogus argument handling.
1439
1440         * kelly: katie, renamed.
1441         * cron.daily: adapt for katie being renamed to kelly.
1442         * cron.daily-non-US: likewise.
1443         * amber (main): likewise.
1444
1445         * Changes for python 2.1.
1446
1447         * kelly: time.strftime no longer requires a second argument of
1448         "time.localtime(time.time())".
1449         * logging.py: likewise.
1450         * rhona: likewise.
1451         * shania (init): likewise.
1452
1453         * amber: use augmented assignment.
1454         * catherine (poolize): likewise.
1455         * claire.py (fix_component_section): likewise.
1456         * halle (check_changes): likewise.
1457         * helena: likewise.
1458         * jenna: likewise.
1459         * jennifer: likewise.
1460         * jeri: likewise.
1461         * katie.py: likewise.
1462         * kelly: likewise.
1463         * lisa: likewise.
1464         * madison (main): likewise.
1465         * melanie: likewise.
1466         * natalie: likewise.
1467         * neve: likewise.
1468         * rhona: likewise.
1469         * tea: likewise.
1470         * utils.py: likewise.
1471         * ziyi: likewise.
1472
1473         * amber: use .endswith.
1474         * fernanda.py: likewise.
1475         * halle (main): likewise.
1476         * jennifer: likewise.
1477         * jeri: likewise.
1478         * katie.py: likewise.
1479         * kelly: likewise.
1480         * lisa: likewise.
1481         * neve: likewise.
1482         * shania (main): likewise.
1483         * utils.py: likewise.
1484
1485         * alyson: use string methods.
1486         * amber: likewise.
1487         * andrea: likewise.
1488         * ashley: likewise.
1489         * catherine: likewise.
1490         * charisma: likewise.
1491         * claire.py: likewise.
1492         * db_access.py: likewise.
1493         * denise: likewise.
1494         * halle: likewise.
1495         * heidi: likewise.
1496         * helena: likewise.
1497         * jenna: likewise.
1498         * jennifer: likewise.
1499         * jeri: likewise.
1500         * julia: likewise.
1501         * katie.py: likewise.
1502         * kelly: likewise.
1503         * lisa: likewise.
1504         * logging.py: likewise.
1505         * madison: likewise.
1506         * melanie: likewise.
1507         * natalie: likewise.
1508         * neve: likewise.
1509         * rene: likewise.
1510         * tea: likewise.
1511         * utils.py: likewise.
1512         * ziyi: likewise.
1513
1514 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1515
1516         * utils.py (parse_changes): use <string>.startswith() rather than
1517         string.find().
1518
1519 2002-08-27  Anthony Towns  <ajt@debian.org>
1520
1521         * katie.py (in_override_p): when searching for a source override,
1522         and the dsc query misses, search for both udeb and deb overrides
1523         as well. Should fix the UNACCEPT issues with udebs.
1524
1525 2002-08-24  James Troup  <james@nocrew.org>
1526
1527         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1528         source+binary package finding code which was causing severe
1529         performance degradation with postgres 7.2.
1530
1531 2002-08-14  James Troup  <james@nocrew.org>
1532
1533         * julia (main): use the pwd.getpwall() to get system user info
1534         rather than trying to read a password file.  Add a -n/--no-action
1535         option.
1536
1537         * cron.hourly: julia no longer takes any arguments.
1538         * cron.hourly-non-US: likewise.
1539
1540 2002-08-07  James Troup  <james@nocrew.org>
1541
1542         * katie (install): handle multi-suite uploads when CopyChanges
1543         and/or CopyKatie are in use, ensuring we only copy stuff once.
1544
1545 2002-08-01  Ryan Murray  <rmurray@debian.org>
1546
1547         * wanna-build/trigger.daily: initial commit, with locking
1548         * cron.buildd: add locking against daily run
1549
1550 2002-07-30  James Troup  <james@nocrew.org>
1551
1552         * melanie (main): readd creation of suite_ids_list so melanie is
1553         remotely useful again.
1554
1555         * katie.conf: adopt for woody release; diable
1556         StableDislocationSupport, add oldstable, adjust other suites and
1557         mappings, fix up location.
1558         * katie.conf-non-US: likewise.
1559         * katie.conf-security: likewise.
1560
1561         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1562         stable.
1563         * apt.conf.stable-non-US: likewise.
1564
1565         * apt.conf-security: adapt for woody release; adding oldstable,
1566         oldstable, adjust stable and testing.
1567         * cron.daily-security: likewise.
1568         * cron.buildd-security: likewise.
1569
1570         * apt.conf: adapt for woody release; rename woody-proposed-updates
1571         to testing-proposed-updates and proposed-updates to
1572         old-proposed-updates.
1573         * apt.conf-non-US: likewise.
1574
1575         * vars-non-US (copyoverrides): add sarge.
1576         * vars (copyoverrides): likewise.
1577
1578         * vars-security (suites): add oldstable.
1579
1580 2002-07-22  Ryan Murray  <rmurray@debian.org>
1581
1582         * apt.conf.security-buildd: use suite codenames instead of
1583           distnames.
1584
1585 2002-07-16  James Troup  <james@nocrew.org>
1586
1587         * denise (main): fix filenames for testing override files.
1588
1589 2002-07-14  James Troup  <james@nocrew.org>
1590
1591         * jennifer (process_it): call check_md5sums later so we can check
1592         files in the .dsc too
1593         (check_md5sums): check files in the .dsc too.  Check both md5sum
1594         and size.
1595
1596         * melanie (main): use parse_args() and join_with_commas_and() from
1597         utils.  If there's nothing to do, say so and exit, don't ask for
1598         confirmation etc.
1599
1600         * amber (join_with_commas_and): moved from here to ...
1601         * utils.py (join_with_commas_and): here.
1602
1603 2002-07-13  James Troup  <james@nocrew.org>
1604
1605         * madison (main): use parse_args() from utils.  Support
1606         -c/--component.
1607
1608         * jenna (parse_args): moved from here to ...
1609         * utils.py (parse_args): here.
1610
1611         * katie.conf (Architectures): minor corrections to the description
1612         for arm, mips and mipsel.
1613         * katie.conf-non-US (Architectures): likewise.
1614         * katie.conf-security (Architectures): likewise.
1615
1616         * cron.daily-security: use natalie's new -a/--add functionality to
1617         flesh out the security overrides.
1618
1619 2002-07-12  James Troup  <james@nocrew.org>
1620
1621         * cron.buildd (ARCHS): add arm.
1622
1623         * katie.conf: 2.2r7 was released.
1624         * katie.conf-non-US: likewise.
1625
1626         * utils.py (parse_changes): handle a multi-line field with no
1627         starting line.
1628
1629 2002-06-25  James Troup  <james@nocrew.org>
1630
1631         * templates/amber.advisory (To): add missing email address since
1632         __WHOAMI__ is only a name.
1633
1634         * katie.conf-security (Melane::LogFile): correct to go somewhere
1635         katie has write access to.
1636         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1637         Testing.
1638
1639         * natalie: add support for -a/-add which adds packages only
1640         (ignoring changes and deletions).
1641
1642         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1643         use FindB, not get.
1644
1645 2002-06-22  James Troup  <james@nocrew.org>
1646
1647         * jennifer (check_files): validate the package name and version
1648         field.  If 'Package', 'Version' or 'Architecture' are missing,
1649         don't try any further checks.
1650         (check_dsc): likewise.
1651
1652         * utils.py (re_taint_free): add '~' as a valid character.
1653
1654 2002-06-20  Anthony Towns  <ajt@debian.org>
1655
1656         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1657
1658 2002-06-09  James Troup  <james@nocrew.org>
1659
1660         * jennifer (check_files): reduce useless code.
1661
1662         * cron.daily-security: run symlinks -dr on $ftpdir.
1663
1664         * vars-security (ftpdir): add.
1665
1666 2002-06-08  James Troup  <james@nocrew.org>
1667
1668         * neve (update_override_type): transaction is handled higher up in
1669         main().
1670         (update_priority): likewise.
1671         (process_sources): remove code that makes testing a duplicate of
1672         stable.
1673         (process_packages): likewise.
1674
1675         * templates/amber.advisory: add missing mail headers.
1676
1677         * cron.daily-security: also call apt-ftparchive clean for
1678         apt.conf.buildd-security.
1679         * cron.weekly: likewise.
1680
1681         * amber (do_upload): write out a list of source packages (and
1682         their version) uploaded for testing.
1683         (make_advisory): add more Subst mappings for the mail headers.
1684         (spawn): check for suspicious characters in the command and abort
1685         if their found.
1686
1687 2002-06-07  James Troup  <james@nocrew.org>
1688
1689         * ziyi (main): remove the 'nonus'/'security' hacks and use
1690         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1691         the lower level Release files, even if they don't exist.  fubar
1692         out if we can't open a lower level Release file for writing.
1693
1694         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1695         ziyi.
1696         * katie.conf-security (Dinstall): likewise.
1697
1698         * amber (do_upload): renamed from get_file_list().  Determine the
1699         upload host from the original component.
1700         (init): Add a -n/--no-action option.  Fix how we get changes_files
1701         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1702         sys.argv).  Add an Options global.
1703         (make_advisory): support -n/--no-action.
1704         (spawn): likewise.
1705         (main): likewise.
1706         (usage): document -n/--no-action.
1707
1708         * cron.buildd-security: fix path to Packages-arch-specific in
1709         quinn-diff invocation.
1710
1711         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1712         to proper suite names (i.e. stable, testing) rather than codenames
1713         (potato, woody).
1714         (Dinstall::DefaultSuite): likewise.
1715         (Suite): likewise.
1716         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1717         * vars-security (suites): likewise.
1718         * apt.conf-security: likewise.
1719
1720         * katie.conf-security (Component): add "updates/" prefix.
1721         (Suite::*::Components): likewise.
1722         (ComponentMappings): new; map all {ftp-master,non-US} components
1723         -> updates/<foo>.
1724
1725         * katie.conf-security (Natalie): removed; the options have
1726         defaults and ComponentPosition is used by alyson which doesn't
1727         work on security.d.o.
1728         (Amber): replace UploadHost and UploadDir with ComponentMappings
1729         which is a mapping of components -> URI.
1730         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1731         (SuiteMappings): use "silent-map" in preference to "map".
1732
1733         * cron.unchecked-security: fix call to cron.buildd-security.
1734
1735         * cron.daily-security: map local suite (stable) -> override suite
1736         (potato) when fixing overrides.  Correct component in natalie call
1737         to take into account "updates/" prefix.  Fix cut'n'waste in
1738         override.$dist.all3 generation, the old files weren't being
1739         removed, so they were endlessly growing.
1740
1741         * neve (main): don't use .Find for the CodeName since we require
1742         it.  Location::*::Suites is a ValueList.
1743         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
1744         out on expired keys, just warn.
1745         (update_override_type): new function; lifted from alyson.
1746         (update_priority): likewise.
1747         (main): use update_{override_type,priority}().
1748
1749         * jennifer (check_distributions): remove redunant test for
1750         SuiteMappings; ValueList("does-not-exist") returns [] which is
1751         fine.  Add support for a "silent-map" type which doesn't warn
1752         about the mapping to the user.
1753         (check_files): add support for ComponentMappings, similar to
1754         SuiteMappings, but there's no type, just a source and a
1755         destination and the original component is stored in "original
1756         component".
1757         * katie.py (Katie.dump_vars): add "original component" as an
1758         optionsal files[file] dump variable.
1759
1760         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
1761         query.  Add support for section-less legacy locations like current
1762         security.debian.org through YetAnotherConfigBoolean
1763         'LegacyStableHasNoSections'.
1764         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
1765
1766         * utils.py (real_arch): moved here from ziyi.
1767         * ziyi (real_arch): moved to utils.py.
1768         * ziyi (main): likewise.
1769
1770         * claire.py (find_dislocated_stable): use real_arch() with
1771         filter() to strip out source and all.
1772         * neve (main): likewise.
1773         * rene (main): likewise.
1774         * jeri (parse_packages): likewise.
1775
1776 2002-06-06  James Troup  <james@nocrew.org>
1777
1778         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
1779         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
1780         doing.
1781
1782 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1783
1784         * jeri (check_joey): check if the line contains two elements
1785         before accessing the second.  Also, strip trailing spaces as well
1786         as the newline.
1787         * halle (check_joey): likewise.
1788
1789 2002-06-05  James Troup  <james@nocrew.org>
1790
1791         * cron.unchecked-security: new file; like cron.unchecked but if
1792         there's nothing to do exit so we don't call cron.buildd-security.
1793
1794         * apt.conf.buildd-security: new file.
1795
1796         * vars (archs): alphabetize.
1797         * vars-non-US (archs): likewise.
1798
1799         * vars-security: add unchecked.
1800
1801         * madison (main): reduce rather bizarrely verbose and purposeless
1802         code to print arches to a simple string.join.
1803
1804         * katie.conf (Suites::Unstable): add UdebComponents, a new
1805         valuelist of suites, used by jenna to flesh out the list of
1806         <suite>_main-debian-installer-binary-<arch>.list files generated.
1807         (Dinstall): add StableDislocationSupport, a new boolean used by
1808         jenna to enable or disable stable dislocation support
1809         (i.e. claire), as true.
1810
1811         * katie.conf (Dinstall): add StableDislocationSupport, a new
1812         boolean used by jenna to enable or disable stable dislocation
1813         support (i.e. claire), as true.
1814         * katie.conf-non-US: likewise.
1815         * katie.conf-security: likewise.
1816
1817         * cron.daily-security: generate .all3 overrides for the buildd
1818         support.  Freshen a local copy of Packages-arch-specific from
1819         buildd.debian.org.
1820
1821         * claire.py (find_dislocated_stable): disable the support for
1822         files in legacy-mixed locations since none of the Debian archives
1823         have any anymore.
1824
1825         * helena: new script; produces a report on NEW and BYHAND
1826         packages.
1827
1828         * jenna: rewritten from scratch to fix speed problems.  Run time
1829         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
1830         minutes, 105 seconds are the monster query and 70 odd seconds is
1831         claire.
1832
1833         * apt.conf.buildd (Default): remove MaxContentsChange as it's
1834         irrelevant.
1835
1836 2002-06-05  Ryan Murray  <rmurray@debian.org>
1837
1838         * cron.buildd-security: new file.
1839
1840 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
1841
1842         * denise (list): take a file argument and use it.
1843         (main): don't abuse sys.stdout, just write to the file.
1844
1845         * claire.py (usage): Fix misspelling.
1846         (clean_symlink): Simplify.
1847         (find_dislocated_stable): Avoid unnecessary work.
1848
1849 2002-05-29  James Troup  <james@nocrew.org>
1850
1851         * cameron: removed; apt-ftparchive can simply walk the directory.
1852
1853 2002-05-26  Anthony Towns  <ajt@debian.org>
1854
1855         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
1856         for the autobuilders.
1857
1858 2002-05-24  Ryan Murray  <rmurray@debian.org>
1859
1860         * cron.buildd: update override files before running apt-ftparchive
1861
1862 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1863
1864         * amber (main): remove extra space in prompt.
1865
1866         * utils.py (validate_changes_file_arg): use original filename in
1867         error messages.
1868
1869         * jeri (check_joey): close file after use.
1870         (parse_packages): likewise.
1871         (main): setup debug option properly.
1872
1873         * melanie (main): remove unused packages variable and simplify the
1874         code to build up con_packages by using repr().
1875
1876 2002-05-23  James Troup  <james@nocrew.org>
1877
1878         * lisa (recheck): when we reject, also return 0 so the package is
1879         skipped.
1880         (sg_compare): fix note sorting.
1881         (recheck): remove the .katie file after rejection.
1882
1883         * katie.py (Katie.accept): accepted auto-build support take 3;
1884         this time adding support for security.  Security needs a) non-pool
1885         files copied rather than symlinked since accepted is readable only
1886         by katie/security and www-data needs to be able to see the files,
1887         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
1888         AcceptedAutoBuildSuites and is a ValueList containing the suites.
1889         SecurityAcceptedAutoBuild is a new boolean which controls whether
1890         or not normal or security style is used.  The unstable_accepted
1891         table was renamed to accepted_autobuild and a suite column added.
1892         Also fix a bug noticed by Ryan where an existent orig.tar.gz
1893         didn't have it's last_used/in_accepted flags correctly updated.
1894         * katie (install): likewise.
1895         * rhona (clean_accepted_autobuild): likewise.
1896
1897 2002-05-22  James Troup  <james@nocrew.org>
1898
1899         * lisa (sort_changes): new function; sorts changes properly.
1900         Finally.
1901         (sg_compare): new function; helper for sort_changes().  Sorts by
1902         have note and time of oldest upload.
1903         (indiv_sg_compare): new function; helper for sort_changes().
1904         Sorts by source version, have source and filename.
1905         (main): use sort_changes().
1906         (changes_compare): obsoleted; removed.
1907
1908 2002-05-20  James Troup  <james@nocrew.org>
1909
1910         * rhona (clean_accepted_autobuild): don't die if a file we're
1911         trying to remove doesn't exist.  Makes rhona more friendly to
1912         katie/katie.py crashes/bugs without any undue cost.
1913
1914 2002-05-19  James Troup  <james@nocrew.org>
1915
1916         * lisa (main): if sorting a large number of changes give some
1917         feedback.
1918         (recheck): new function, run the same checks (modulo NEW,
1919         obviously) as katie does, if they fail do the standard
1920         reject/skip/quit dance.
1921         (do_pkg): use it.
1922
1923         * katie (install): don't try to unlink the symlink in the
1924         AcceptedAutoBuild support if the destination is not a symlink (or
1925         doesn't exist).  Avoids unnecessary bombs on previous partial
1926         accepts and will still bomb hard if the file exists and isn't a
1927         symlink.
1928
1929         * utils.py: blah, commands _is_ used when the mail stuff isn't
1930         commented out like it is in my test environment.
1931
1932         * lisa (changes_compare): "has note" overrides everything else.
1933         Use .katie files rather than running parse_changes, faster and
1934         allows "has note" to work.  Correct version compare, it was
1935         reversed.  Ctime check should only kick in if the source packages
1936         are not the same.
1937         (print_new): print out and return any note.  Rename 'ret_code' to
1938         'broken'.
1939         (edit_new): renamed from spawn_editor.  Don't leak file
1940         descriptors.  Clean up error message if editor fails.
1941         (edit_note): new function, allows one to edit notes.
1942         (do_new): add note support, editing and removing.
1943         (init): kill -s/--sort; with notes we always want to use our
1944         sorting method.
1945         (usage): likewise.
1946
1947         * katie.py (Katie.dump_vars): add "lisa note" as an optional
1948         changes field.
1949
1950         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
1951         it default to 0.  Adapt tests to assume it's boolean.
1952         * fernanda.py (check_changes): adjust call appropriately.
1953         * halle (check_changes): likewise.
1954         * jennifer (check_changes): likewise.
1955         * jeri (check_changes): likewise.
1956         * shania (flush_orphans): likewise.
1957
1958         * jennifer (check_dsc): pass is_a_dsc by name when calling
1959         build_file_list() for clarity.
1960         * shania (flush_orphans): likewise.
1961         * tea (check_missing_tar_gz_in_dsc): likewise.
1962
1963         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
1964         calling parse_changes() for clarity.
1965         * tea (check_dscs): likewise.
1966
1967         * utils.py (parse_changes): make dsc_whitespace_rules default to
1968         not true.
1969         * halle (check_changes): adjust call appropriately.
1970         * jennifer (check_changes): likewise.
1971         * jeri (check_changes): likewise.
1972         * lisa (changes_compare): likewise.
1973         * utils.py (changes_compare): likewise.
1974         * melanie (main): likewise.
1975         * shania (flush_orphans): likewise.
1976         * fernanda.py (check_changes): likewise.
1977
1978 2002-05-18  James Troup  <james@nocrew.org>
1979
1980         * katie.py (Katie.dump_vars): make the .katie file unreadable,
1981         it's not useful and by and large a duplication of information
1982         available in readable format in other files.
1983
1984 2002-05-16  Ryan Murray  <rmurray@debian.org>
1985
1986         * melanie: Dir::TemplatesDir -> Dir::Templates
1987
1988 2002-05-15  Ryan Murray  <rmurray@debian.org>
1989
1990         * cameron: correct the use of os.path.join
1991
1992 2002-05-15  Anthony Towns  <ajt@debian.org>
1993
1994         * ziyi: Update to match the new format for Architectures/Components
1995         in katie.conf.
1996
1997 2002-05-14  James Troup  <james@nocrew.org>
1998
1999         * amber: new script; 'installer' wrapper script for the security
2000         team.
2001
2002         * katie.py (Katie.announce): remove unused 'dsc' local
2003         variable. (pychecker)
2004
2005         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2006
2007         * neve: don't import sys, we don't use it. (pychecker)
2008         (check_signature): fix return type mismatch. (pychecker)
2009
2010         * utils.py: don't import commands, we don't use it.  (pychecker)
2011
2012         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2013
2014         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2015         obsoleted by the change to "othercomponents" handling in jennifer
2016         detailed below.
2017         (Katie.cross_suite_version_check): new function; implements
2018         cross-suite version checking rules specified in the conf file
2019         while also enforcing the standard "must be newer than target
2020         suite" rule.
2021         (Katie.check_binary_against_db): renamed, since it's invoked once
2022         per-binary, "binaries" was inaccurate.  Use
2023         cross_suite_version_check() and don't bother with the "oldfiles"
2024         rubbish as jennifer works out "othercomponents" herself now.
2025         (Katie.check_source_against_db): use cross_suite_version_check().
2026
2027         * katie (check): the version and file overwrite checks
2028         (check_{binary,source,dsc}_against_db) are not per-suite.
2029
2030         * jennifer (check_files): less duplication of
2031         'control.Find("Architecture", "")' by putting it in a local
2032         variable.
2033         (check_files): call check_binary_against_db higher up since it's
2034         not a per-suite check.
2035         (check_files): get "othercomponents" directly rather than having
2036         check_binary_against_db do it for us.
2037
2038         * heidi (main): 'if x:', not 'if x != []:'.
2039         * katie.py (Katie.in_override_p): likewise.
2040         (Katie.check_dsc_against_db): likewise.
2041         * natalie (main): likewise.
2042         * rene (main): likewise.
2043         * ziyi (real_arch): likewise.
2044
2045         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2046         and OverrideType are now value lists, not lists.
2047         * andrea (main): likewise.
2048         * cindy (main): likewise.
2049         * claire.py (find_dislocated_stable): likewise.
2050         * denise (main): likewise.
2051         * jenna (main): likewise.
2052         * jennifer (check_distributions): likewise.
2053         (check_files): likewise.
2054         (check_urgency): likewise (Urgency::Valid).
2055         * jeri (parse_packages): likewise.
2056         * neve (main): likewise (and Location::%s::Suites).
2057         * rene (main): likewise.
2058
2059 2002-05-13  James Troup  <james@nocrew.org>
2060
2061         * katie.py (Katie.check_source_against_db): correct case of reject
2062         message to be consistent with binary checks.
2063
2064         * jennifer (get_status_output): don't leak 2 file descriptors per
2065         invocation.
2066         (check_signature): add missing '\n' to "duplicate status token"
2067         error message.
2068
2069 2002-05-09  James Troup  <james@nocrew.org>
2070
2071         * utils.py (validate_changes_file_arg): new function; validates an
2072         argument which should be a .changes file.
2073         * ashley (main): use it.
2074         * lisa (main): likewise.
2075
2076         * katie.py (Katie.check_dsc_against_db): since there can be more
2077         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2078         entry still exists in files.
2079
2080         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2081         files, since check_dsc_against_db() deletes the .orig.tar.gz
2082         entry.
2083
2084         * cameron: cleanups.
2085
2086         * utils.py (changes_compare): change sort order so that source
2087         name and source version trump 'have source'; this should fix
2088         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2089         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2090         by Ryan.
2091
2092         * lisa (main): allow the arguments to be .katie files too.
2093
2094 2002-05-07  Ryan Murray  <rmurray@debian.org>
2095
2096         * cron.buildd: add s390 to arch list again
2097
2098 2002-05-05  Ryan Murray  <rmurray@debian.org>
2099
2100         * cron.buildd: new script, update w-b database from unstable_accepted
2101         table
2102         * cameron: new script, take list in unstable_accepted and write out
2103         a file list for apt-ftparchive
2104         * apt.conf.buildd: new apt configuration for Packages/Sources for
2105         unstable_accepted
2106         * vars: add s390 to arch list.
2107
2108 2002-05-03  James Troup  <james@nocrew.org>
2109
2110         * neve (main): don't hard code the calling user as that doesn't
2111         work with modern postgres installs.  Fix psql invocation for
2112         init_pool.sql (database name required).  Dont' hard code the
2113         database name.
2114         (process_sources): add support for fingerprint and install_date.
2115         (process_packages): add support for fingerprint.
2116         (do_sources): pass in the directory, fingerprint support needs it.
2117         (get_status_output): borrowed from jennifer.
2118         (reject): likewise.
2119         (check_signature): likewise.
2120
2121         * katie (install): only try to log urgencies if Urgency_Logger is
2122         defined.
2123         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2124         defined; only close Urgency_Logger if it's defined.
2125
2126         * catherine (poolize): adapt for Dir rationalization.
2127         * claire.py (find_dislocated_stable): likewise.
2128         * denise (main): likewise.
2129         * halle (check_joey): likewise.
2130         * jenna: likewise.
2131         * jennifer: likewise.
2132         * jeri: likewise.
2133         * katie.py: likewise.
2134         * katie: likewise.
2135         * lisa (do_bxa_notification): likewise.
2136         * logging.py (Logger.__init__): likewise
2137         * rene (main): likewise.
2138         * rhona (clean): likewise.
2139         * shania (init): likewise.
2140         * tea: likewise.
2141         * ziyi: likewise.
2142
2143         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2144         FindB, not FindI.
2145
2146         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2147         boolean, use FindB, not get.
2148
2149         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2150         .orig.tar.gz's which are an exact (size/md5sum) match.
2151
2152         * ashley (main): really allow *.katie files as arguments too;
2153         noticed by aj.
2154
2155         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2156
2157 2002-05-03  Anthony Towns  <ajt@debian.org>
2158
2159         * ziyi: support for security.
2160
2161 2002-05-02  James Troup  <james@nocrew.org>
2162
2163         * jennifer (accept): call Katie.check_override() unconditional as
2164         no-mail check moved into that function.
2165         (do_byhand): likewise.
2166
2167         * katie.py (Katie.check_override): don't do anything if we're a)
2168         not sending mail or b) the override disparity checks have been
2169         disbled via Dinstall::OverrideDisparityCheck.
2170
2171         * jennifer (check_files): don't hard code Unstable as the suite
2172         used to check for architecture validity; use
2173         Dinstall::DefaultSuite instead, if it exists.
2174         (accept): conditionalize
2175
2176         * katie.py (Katie.update_subst): support global maintainer
2177         override with Dinstall::OverrideMaintainer.
2178
2179         * jennifer (check_distributions): new function, Distribution
2180         validation and mapping.  Uses new SuiteMappings variable from
2181         config file to abstract suite mappings.
2182         (check_changes): call it.
2183
2184         * natalie: renamed; nothing imports or likely will for some time.
2185
2186         * denise (main): remove unused natalie import and init().
2187
2188         * natalie.py (init): removed.
2189         (main): initalize here instead and don't hardcode the database
2190         name.
2191
2192 2002-04-30  James Troup  <james@nocrew.org>
2193
2194         * katie.py (Katie.close_bugs): new function, split out from
2195         announce().
2196         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2197         true.
2198         (Katie.close_bugs): new function, split out
2199         (Katie.close_bugs): return immediately if there are no bugs to
2200         close.
2201
2202         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2203         * katie (do_reject): likewise.
2204         (stable_install): likewise.
2205         * katie.py (Katie.announce): likewise.
2206         (Katie.accept): likewise.
2207         (Katie.check_override): likewise.
2208         (Katie.do_reject): likewise.
2209         * lisa (do_bxa_notification): likewise.
2210         * melanie (main): likewise.
2211
2212         * utils.py (TemplateSubst): change second argument to be a
2213         filename rather than a template since every caller opened a file
2214         on the fly which was ugly and leaked file descriptor.
2215
2216 2002-04-29  James Troup  <james@nocrew.org>
2217
2218         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2219         <hertzog@debian.org> to send 'accepted' announce mails to the
2220         PTS. [#128140]
2221
2222 2002-04-24  James Troup  <james@nocrew.org>
2223
2224         * init_pool.sql (unstable_accepted): add two new fields to
2225         unstable_accepted; in_accepted is a boolean indicating whether or
2226         not the file is in accepted and last_used is a timestamp used by
2227         rhona to determine when to remove symlinks for installed packages.
2228
2229         * katie.py (Katie.accept): auto-build support take 2.  Create
2230         symlinks for all files into a seperate directory.  Add files to
2231         unstable_accepted as paths to the new directory; mark them as
2232         being in accepted for cameron.  Properly conditionalize it on a
2233         configuration variable.
2234
2235         * katie (install): likewise.  Update symlinks to point into the
2236         pool; mark the files for later deletion by rhona and mark them as
2237         not being in accepted for cameron.
2238
2239         * rhona (clean_accepted_autobuild): new function.
2240
2241 2002-04-22  James Troup  <james@nocrew.org>
2242
2243         * jennifer (check_files): handle db_access.get_location_id()
2244         returning -1 properly/better.
2245
2246         * rhona (clean_fingerprints): new function.
2247
2248 2002-04-21  James Troup  <james@nocrew.org>
2249
2250         * utils.py (touch_file): unused; remove.
2251         (plural): likewise.
2252
2253         * jennifer (check_files): close file descriptor used to get the
2254         control file.
2255         (check_md5sums): likewise.
2256         (callback): likewise.
2257
2258         * katie.py (Katie.do_reject): handle manual rejects much better;
2259         call the editor first and get confirmation from the user before
2260         proceeding.
2261
2262         * jennifer (check_signature): prefix_multi_line_string() moved to
2263         utils.
2264
2265         * utils.py (prefix_multi_line_string): moved here from jennifer.
2266
2267 2002-04-20  James Troup  <james@nocrew.org>
2268
2269         * lisa (main): handle non-existent files.
2270
2271         * ashley (main): allow *.katie files as arguments too.
2272
2273 2002-04-19  James Troup  <james@nocrew.org>
2274
2275         * katie.py (Katie.accept): add stuff to help auto-building from
2276         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2277         in the pool), create a symlink to it in the accepted directory and
2278         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2279
2280         * katie (install): undo the "auto-building from accepted" stuff
2281         (i.e. remove the .orig.tar.gz symlink and remove the files from
2282         unstable_accepted table).
2283
2284 2002-04-16  James Troup  <james@nocrew.org>
2285
2286         * jennifer (upload_too_new): fix typo which was causing all
2287         timestamp comparisons to be against the .changes file.  Also move
2288         back to the original directory so we do the comparisons against
2289         accurate timestamps.
2290
2291         * tea (check_missing_tar_gz_in_dsc): new function.
2292
2293         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2294         file mentioned in the .dsc.
2295
2296         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2297         way mails reach debian-{devel-,}changes@l.d.o.
2298
2299 2002-04-02  Ryan Murray  <rmurray@debian.org>
2300
2301         * cron.daily: run shania after rhona
2302         * cron.daily-non-US: likewise.
2303
2304 2002-04-01  James Troup  <james@nocrew.org>
2305
2306         * katie: re-add proposed-updates/stable install support.
2307
2308         * katie.py (Katie.dump_vars): add changes["changes"] as an
2309         optional field; should be mandatory later.
2310
2311 2002-03-31  James Troup  <james@nocrew.org>
2312
2313         * katie (install): support a Suite::<foo>::CopyKatie similar to
2314         CopyChanges.  Done seperately because .katie files don't need to
2315         be mirrored and will probably be copied to another directory as a
2316         result.
2317
2318         * halle (main): add missing debug to options.
2319
2320 2002-03-29  James Troup  <james@nocrew.org>
2321
2322         * madison (main): add a -r/--regex option.
2323
2324 2002-03-26  James Troup  <james@nocrew.org>
2325
2326         * lisa: don't trample on changes["distribution"]; make a copy of
2327         it as changes["suite"] instead and use that.
2328
2329 2002-03-16  Anthony Towns  <ajt@debian.org>
2330
2331         * templates/lisa.bxa_notification: Fix some grammatical errors.
2332         Encourage contact via bxa@ftp-master email address.
2333
2334 2002-03-15  James Troup  <james@nocrew.org>
2335
2336         * jennifer (check_timestamps): remove bogus raise in except.
2337
2338 2002-03-15  Anthony Towns  <ajt@debian.org>
2339
2340         * cron.monthly: rotate mail/archive/bxamail as well as
2341         mail/archive/mail. This is for a complete archive of
2342         correspondence with the BXA.
2343
2344 2002-03-14  Anthony Towns  <ajt@debian.org>
2345
2346         * crypto-in-main changes.
2347
2348         * utils.py (move, copy): add an optional perms= parameter to let you
2349         set the resulting permissions of the moved/copied file
2350         * katie.py (force_move): rejected/morgued files should be unreadable
2351         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2352         should be unreadable.
2353
2354 2002-03-07  Ryan Murray  <rmurray@debian.org>
2355
2356         * katie (install): check for existance of "files id" key as well as
2357         it being set to a valid value.
2358         * katie (install): check for existense and valid value for location
2359         id as well
2360
2361 2002-03-05  Ryan Murray  <rmurray@debian.org>
2362
2363         * katie.py (do_reject): reread the reason file after editing it.
2364
2365 2002-02-25  James Troup  <james@nocrew.org>
2366
2367         * jennifer (check_changes): don't enforce sanity in .changes file
2368         names since it doesn't seem to be possible; pcmica-cs and similar
2369         freak show packages in particular cause real problems.
2370
2371         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2372         each dsc_file since the .orig.tar.gz checking code now uses it as
2373         a boolean.  Fixes bizarro rejections which bogusly claimed
2374         .diff.gz md5sum/size was incorrect.
2375
2376 2002-02-24  James Troup  <james@nocrew.org>
2377
2378         * katie (process_it): reset reject_message.
2379
2380 2002-02-22  James Troup  <james@nocrew.org>
2381
2382         * db_access.py(set_files_id): disable use of
2383         currval('files_id_seq') because it was taking 3 seconds on auric
2384         which is insane (most calls take < 0.01) and simply call
2385         get_files_id() for the return value instead.
2386
2387         * katie.py (Katie.do_query): convenience function; unused by
2388         default, useful for profiling.
2389         * db_access.py (do_query): likewise.
2390
2391         * katie (install): fix insert SQL call when binary has no source.
2392
2393         * lisa (determine_new): auto-correct non-US/main to non-US.
2394         (determine_new): add a warning when adding things to stable.
2395         (edit_index): use our_raw_input().
2396         (edit_overrides): likewise.
2397         (do_new): likewise.  Use re.search() not re.match() since the
2398         default answer may not be the first one.
2399         (do_byhand): likewise.
2400         (do_new): Default to 'S'kip and never 'A'dd.
2401
2402         * jennifer (action): pass prompt to our_raw_input().
2403         * melanie (game_over): likewise.
2404         * katie (action): likewise.
2405
2406         * utils.py (our_raw_input): add an optional prompt argument to
2407         make the function more usable as a drop in replacement for
2408         raw_input().
2409
2410         * jennifer (check_files): correct reject() to not double prefix
2411         when using katie.py based functions.
2412         (check_dsc): likewise.
2413
2414         * katie.py (Katie.reject): prepend a new line if appropriate
2415         rathen than appending one to avoid double new lines when caller
2416         adds one of his own.
2417
2418         * lisa (determine_new): warn if the package is also in other
2419         components.
2420
2421 2002-02-20  James Troup  <james@nocrew.org>
2422
2423         * jennifer (check_files): if .changes file lists "source" in
2424         Architecture field, there must be a .dsc.
2425
2426 2002-02-15  James Troup  <james@nocrew.org>
2427
2428         * ashley (main): add some missing fields.
2429
2430         * katie.py (Katie.check_dsc_against_db): fix to take into account
2431         the fact that the .orig.tar.gz might be in byhand, accepted or
2432         new.  Also fix calling of reject().
2433         (Katie.check_binaries_against_db): fix calling of reject().
2434         (Katie.check_source_against_db): likewise.
2435         (Katie.dump_vars): add missing variables used for bug closures.
2436
2437         * lisa (changes_compare_by_time): sort by reverse time.
2438
2439         * katie.py (Katie.accept): log.
2440         (Katie.dump_vars): missing has_key test for optional changes fields.
2441
2442         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2443         (process_it): traceback goes to stderr, not stdout.
2444         (acknowledge_new): log.
2445         (do_byhand): likewise.
2446
2447         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2448
2449         * add_constraints.sql: add grants for the new fingerprint table.
2450
2451 2002-02-13  James Troup  <james@nocrew.org>
2452
2453         * katie (do_reject): basename the .changes filename before trying
2454         to use it to construct the .reason filename.
2455         (process_it): call Katie.update_subst() so do_reject() DTRT with
2456         the mail template.
2457         (do_reject): setup the mail template correctly.
2458
2459 2002-02-12  James Troup  <james@nocrew.org>
2460
2461         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2462         (check_files): don't abuse global dictionaries.
2463         (Ent): use all variables.
2464         (check_timestamps): don't abuse global dictionaries.
2465
2466         * fernanda.py: renamed to .py so lisa can import it.
2467         (check_dsc): remove unused local variables (pychecker).
2468         (display_changes): split off from check_changes.
2469
2470         * katie: rewritten; most of the functionality moves to jennifer;
2471         what's left is the code to install packages once a day from the
2472         'accepted' directory.
2473
2474         * jennifer: new program, processes packages in 'unchecked'
2475         (i.e. most of the non-install functionality of old katie).
2476
2477         * katie.py: common functions shared between the clique of
2478         jennifer, lisa and katie.
2479
2480         * lisa: new program; handles NEW and BYHAND packages.
2481
2482         * jeri (usage): new function.
2483         (main): use it.
2484         (check_package): remove unused local variable (pychecker).
2485
2486         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2487         binaries and source.  Add install_date to source.
2488
2489         * halle (usage): new function.
2490         (main): use it.  Remove unused options.
2491         (check_changes): remove unused local variable (pychecker).
2492
2493         * add_constraints.sql: add fingerprint references.
2494
2495         * db_access.py (get_or_set_fingerprint_id): new function.
2496
2497         * ashley (main): new program; dumps the contents of a .katie file
2498         to stdout.
2499
2500         * alyson (main): remove option handling since we don't actually
2501         support any.
2502         * cindy (main): likewise.
2503
2504         * remove unnecessary imports and pre-define globals (pychecker).
2505
2506 2002-02-11  Anthony Towns  <ajt@debian.org>
2507
2508         * added installation-report and upgrade-report pseudo-packages
2509
2510 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2511
2512         * katie (update_subst): use Dinstall::TrackingServer.
2513         * melanie (main): likewise.
2514
2515 2002-01-27  James Troup  <james@nocrew.org>
2516
2517         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2518         noticing, jgg@ for fix.
2519
2520 2002-01-19  James Troup  <james@nocrew.org>
2521
2522         * utils.py (extract_component_from_section): handle non-US
2523         non-main properly.
2524
2525 2002-01-12  James Troup  <james@nocrew.org>
2526
2527         * madison: add support for -S/--source-and-binary which displays
2528         information for the source package and all it's binary children.
2529
2530 2002-01-13  Anthony Towns  <ajt@debian.org>
2531
2532         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2533         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2534           and 2002 key ids.
2535         * katie.conf-non-US: Likewise.
2536         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2537           multiple keys automatically. This is probably only useful for
2538           transitioning from an expired (or revoked?) key.
2539
2540 2002-01-08  Ryan Murray  <rmurray@debian.org>
2541
2542         * debian/python-dep: new file that prints out python:Depends for
2543           substvars
2544         * debian/control: use python:Depends, build-depend on python
2545           lower Depends: on postgresql to Suggests:
2546         * debian/rules: determine python version, install to the correct
2547           versioned dir
2548
2549 2001-12-18  Anthony Towns  <ajt@debian.org>
2550
2551         * ziyi: unlink Release files before overwriting them (in case they've
2552           been merged)
2553         * ziyi: always include checksums/sizes for the uncompressed versions
2554           of Sources and Packages, even if they're not present on disk
2555
2556 2001-11-26  Ryan Murray  <rmurray@debian.org>
2557
2558         * ziyi (main): add SigningPubKey config option
2559         * katie.conf: use SigningPubKey config option
2560         * katie.conf-non-US: likewise
2561
2562 2001-11-24  James Troup  <james@nocrew.org>
2563
2564         * katie (acknowledge_new): log newness.
2565
2566 2001-11-24  Anthony Towns  <ajt@debian.org>
2567
2568         * ziyi (real_arch): bail out if some moron forgot to reset
2569         untouchable on stable.
2570         (real_arch): source Release files.
2571
2572 2001-11-19  James Troup  <james@nocrew.org>
2573
2574         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2575         utils.get_conf().
2576         * shania (main): likewise.
2577
2578         * rhona (main): add default options.
2579
2580         * db_access.py (get_archive_id): case independent.
2581
2582         * katie (action): sort files so that ordering is consistent
2583         between mails; noticed/requested by Joey.
2584
2585 2001-11-17  Ryan Murray  <rmurray@debian.org>
2586
2587         * utils.py: add get_conf function, change startup code to read all
2588           config files to the Cnf that get_conf returns
2589           use the component list from the katie conf rather than the hardcoded
2590           list.
2591         * all scripts: use new get_conf function
2592         * shania: fix try/except around changes files
2593         * jenna: only do debian-installer if it is a section in Cnf
2594
2595 2001-11-16  Ryan Murray  <rmurray@debian.org>
2596
2597         * shania (main): Initialize days to a string of a number.
2598                  (main): Initialize Cnf vars before reading in Cnf
2599
2600 2001-11-14  Ryan Murray  <rmurray@debian.org>
2601
2602         * shania (main): Initialize days to a number.
2603
2604 2001-11-04  James Troup  <james@nocrew.org>
2605
2606         * docs/Makefile: use docbook-utils' docbook2man binary.
2607
2608         * Change all "if foo == []" constructs into "if not foo".
2609
2610         * katie (check_changes): when installing into stable from
2611         proposed-updates, remove all non-stable target distributions.
2612         (check_override): don't check for override disparities on stable
2613         installs.
2614         (stable_install): update install_bytes appropriately.
2615         (reject): stable rejection support; i.e. don't remove files when
2616         rejecting files in the pool, rather remove them from the
2617         proposed-update suite instead, rhona will do the rest.
2618         (manual_reject): support for a stable specific template.
2619         (main): setup up stable rejector in subst.
2620
2621 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2622
2623         * debian/control (Build-Depends): docbook2man has been superseded
2624         by docbook-utils.
2625
2626         * neve (main): exit with a more useful error message.
2627         (update_suites): Suite::<suite>::Version, Origin and Description
2628         are not required, so don't fail if they don't exist.
2629
2630         * db_access.py (get_archive_id): return -1 on error rather than
2631         raise an exception.
2632         (get_location_id): likewise.
2633
2634         * madison (main): don't exit on the first not-found package,
2635         rather exit with an appropriate return code after processing all
2636         packages.
2637
2638 2001-11-03  James Troup  <james@nocrew.org>
2639
2640         * claire.py (find_dislocated_stable): add per-architecture
2641         symlinks for dislocated architecture: all debs.
2642
2643 2001-10-19  Anthony Towns  <ajt@debian.org>
2644
2645         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2646
2647 2001-10-10  Anthony Towns  <ajt@debian.org>
2648
2649         * claire.py (fix_component_section): do _not_ assign to None under
2650         any circumstances
2651
2652 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2653
2654         * melanie (main): don't duplicate architectures when removing from
2655         more than one suite.
2656
2657         * heidi (main, process_file, get_list): report suite name not ID.
2658
2659         * naima (nmu_p): be case insensitive.
2660
2661         * naima (action): more list handling clean ups.
2662
2663         * melanie (main): clean up lists handling to use string.join and
2664         IN's.
2665
2666         * madison (main): clean up suite and architecture argument parsing
2667         to use slices less and string.join more.
2668
2669         * utils.py (parse_changes): Use string.find() instead of slices for
2670         string comparisons thereby avoid hardcoding the length of strings.
2671         * ziyi (main): likewise.
2672
2673 2001-10-07  James Troup  <james@nocrew.org>
2674
2675         * Remove mode argument from utils.open_files() calls if it's the
2676         default, i.e. 'r'.
2677
2678 2001-09-27  James Troup  <james@nocrew.org>
2679
2680         * katie (init): new function; options clean up.
2681         (usage): add missing options, remove obsolete ones.
2682         (main): adapt for the two changes above.  If the lock file or
2683         new-ack log file don't exist, create them.  Don't try to open the
2684         new-ack log file except running in new-ack mode.
2685
2686         * alyson (main): initialize all the tables that are based on the
2687         conf file.
2688
2689         * utils.py (touch_file): like touch(1).
2690         (where_am_i): typo.
2691
2692         * catherine (usage): new.
2693         (main): use it.  options cleanup.
2694         * claire.py: likewise.
2695         * fernanda: likewise.
2696         * heidi: likewise.
2697         * jenna: likewise.
2698         * shania: likewise.
2699         * ziyi: likewise.
2700
2701         * andrea: options cleanup.
2702         * charisma: likewise.
2703         * julia: likewise.
2704         * madison: likewise.
2705         * melanie: likewise.
2706         * natalie: likewise.
2707         * rhona: likewise.
2708         * tea: likewise.
2709
2710 2001-09-26  James Troup  <james@nocrew.org>
2711
2712         * utils.py: default to sane config file locations
2713         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2714         or they can point to the real ones through use of a new Config
2715         section.  Based on an old patch by Adam Heath.
2716         (where_am_i): use the new default config stuff.
2717         (which_conf_file): likewise.
2718         (which_apt_conf_file): likewise.
2719
2720         * charisma (main): output defaults to
2721         `Package~Version\tMaintainer'; input can be of either form.  When
2722         parsing the new format do version comparisons, when parsing the
2723         old format assume anything in the extra file wins.  This fixes the
2724         problem of newer non-US packages being overwhelmed by older
2725         versions still in stable on main.
2726
2727 2001-09-17  James Troup  <james@nocrew.org>
2728
2729         * natalie.py (list): use result_join().
2730
2731         * denise (main): result_join() moved to utils.
2732
2733         * utils.py (result_join): move to utils; add an optional seperator
2734         argument.
2735
2736 2001-09-14  James Troup  <james@nocrew.org>
2737
2738         * heidi (set_suite): new function; does --set like natalie does,
2739         i.e. turns it into a sequence of --add's and --remove's
2740         internally.  This is a major win (~20 minute run time > ~20
2741         seconds) in the common, everday (i.e. testing) case.
2742         (get_id): common code used by set_suite() and process_file().
2743         (process_file): call set_suite() and get_id().
2744         (main): add logging support.
2745
2746         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
2747         files.
2748
2749         * utils.py (parse_changes): use slices or simple string comparison
2750         in favour of regexes where possible.
2751
2752         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
2753         fact that the string VARDATA() points to are not null terminated.
2754
2755         * denise (result_join): new function; like string.join() but
2756         handles None's.
2757         (list): use it.
2758         (main): likewise.
2759
2760         * charisma (main): python-pygresql 7.1 returns None not "".
2761
2762 2001-09-14  Ryan Murray  <rmurray@debian.org>
2763
2764         * natalie.py (list): handle python-pygresql 7.1 returning None.
2765
2766 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
2767
2768         * madison (main): return 1 if no package is found.
2769
2770 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
2771
2772         * madison (main): better error handling for incorrect
2773         -a/--architecture or -s/--suite arguments.
2774         (usage): new.
2775         (main): use it.
2776
2777 2001-09-05  Ryan Murray  <rmurray@debian.org>
2778
2779         * charisma, madison, katie: remove use of ROUser
2780         * katie.conf,katie.conf-non-US: remove defintion of ROUser
2781
2782 2001-08-26  James Troup  <james@nocrew.org>
2783
2784         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
2785         maintained packages at cjwatson@'s request.
2786
2787 2001-08-21  James Troup  <james@nocrew.org>
2788
2789         * madison (main): add -a/--architecture support.
2790
2791         * jenna: use logging instead of being overly verbose on stdout.
2792
2793 2001-08-11  Ryan Murray  <rmurray@debian.org>
2794
2795         * melanie: add functional help option
2796
2797 2001-08-07  Anthony Towns  <ajt@debian.org>
2798
2799         * apt.conf, katie.conf: Add ia64 and hppa to testing.
2800
2801 2001-07-28  James Troup  <james@nocrew.org>
2802
2803         * katie (check_dsc): ensure source version is >> than existing
2804         source in target suite.
2805
2806 2001-07-25  James Troup  <james@nocrew.org>
2807
2808         * natalie.py: add logging support.
2809
2810         * utils.py (open_file): make the second argument optional and
2811         default to read-only.
2812
2813         * rene (main): work around broken source packages that duplicate
2814         arch: all packages with arch: !all packages (no longer allowed
2815         into the archive by katie).
2816
2817 2001-07-13  James Troup  <james@nocrew.org>
2818
2819         * katie (action): don't assume distribution is a dictionary.
2820         (update_subst): don't assume architecture is a dictionary and that
2821         maintainer822 is defined.
2822         (check_changes): recognise nk_format exceptions.
2823         (check_changes): reject on 'testing' only uploads.
2824         (check_files): when checking to ensure all packages are newer
2825         versions check against arch-all packages too.
2826         (check_dsc): enforce the existent of a sane set of mandatory
2827         fields.  Ensure the version number in the .dsc (modulo epoch)
2828         matches the version number in the .changes file.
2829
2830         * utils.py (changes_compare): ignore all exceptions when parsing
2831         the changes files.
2832         (build_file_list): don't UNDEF on a changes file with no format
2833         field.
2834
2835 2001-07-07  James Troup  <james@nocrew.org>
2836
2837         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
2838         rather than 'changedbyname' to avoid false negatives on uploads
2839         with an email-address-only Changed-By field.
2840         (check_dsc): don't overwrite reject_message; append to it.
2841         (check_signature): likewise.
2842         (check_changes): likewise.
2843         (announce): condition logging on 'action'.
2844
2845         * logging.py: new logging module.
2846
2847         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
2848         sub-tree into a separate (global) variable.
2849         (check_dsc): ensure format is 1.0 to retain backwards
2850         compatability with dpkg-source in potato.
2851         (main): only try to obtain the lock when not running in no-action
2852         mode.
2853         Use the new logging module.
2854
2855         * christina: initial version; only partially usable.
2856
2857 2001-06-28  Anthony Towns  <ajt@debian.org>
2858
2859         * apt.conf: Add ExtraOverrides to auric.
2860
2861 2001-06-25  James Troup  <james@nocrew.org>
2862
2863         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
2864         they preferred the name 'Uploaders'.
2865
2866 2001-06-23  James Troup  <james@nocrew.org>
2867
2868         * katie (check_files): fix typo in uncommon rejection message,
2869         s/sourceversion/source version/.
2870
2871         * denise (main): we can't use print because stdout has been
2872         redirected.
2873
2874         * katie (source_exists): new function; moved out of check_files()
2875         and added support for binary-only NMUs of earlier sourceful NMUs.
2876
2877         * rhona (clean): find_next_free has moved.
2878
2879         * utils.py (find_next_free): new function; moved here from rhona.
2880         Change too_many to be an argument with a default value, rather
2881         than a hardcoded variable.
2882
2883         * shania: rewritten to work better; REJECTion reminder mail
2884         handling got lost though.
2885
2886 2001-06-22  James Troup  <james@nocrew.org>
2887
2888         * rhona (main): remove unused override code.
2889
2890         * fernanda (main): remove extraneous \n's from utils.warn calls.
2891         * natalie.py (list): likewise.
2892
2893         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
2894         use utils.{warn,fubar} where appropriate.
2895
2896 2001-06-21  James Troup  <james@nocrew.org>
2897
2898         * katie (nmu_p): new class that encapsulates the "is a nmu?"
2899         functionality.
2900         (nmu_p.is_an_nmu): add support for multiple maintainers specified
2901         by the "Maintainers" field in the .dsc file and maintainer groups.
2902         (nmu_p.__init__): read in the list of group maintainer names.
2903         (announce): use nmu_p.
2904
2905 2001-06-20  James Troup  <james@nocrew.org>
2906
2907         * rene (main): hardcode the suite experimental is compared to by
2908         name rather than number.
2909
2910         * katie (check_files): differentiate between doesn't-exist and
2911         permission-denied in "can not read" rejections; requested by edd@.
2912         (check_dsc): use os.path.exists rather than os.access to allow the
2913         above check to kick in.
2914
2915         * heidi (process_file): read all input before doing anything and
2916         use transactions.
2917
2918 2001-06-15  James Troup  <james@nocrew.org>
2919
2920         * fernanda: new script; replaces old 'check' shell script
2921         nastiness.
2922
2923 2001-06-14  James Troup  <james@nocrew.org>
2924
2925         * katie: actually import traceback module to avoid amusing
2926         infinite loop.
2927
2928 2001-06-10  James Troup  <james@nocrew.org>
2929
2930         * utils.py (extract_component_from_section): fix to handle just
2931         'non-free' and 'contrib'.  Also fix to handle non-US in a
2932         completely case insensitive manner as a component.
2933
2934 2001-06-08  James Troup  <james@nocrew.org>
2935
2936         * madison (arch_compare): sort function that sorts 'source' first
2937         then alphabetically.
2938         (main): use it.
2939
2940 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
2941
2942         * catherine (poolize): explicitly make poolized_size a long so it
2943         doesn't overflow when poolizing e.g. entire archives.
2944
2945 2001-06-01  James Troup  <james@nocrew.org>
2946
2947         * utils.py (send_mail): throw exceptions rather than exiting.
2948
2949         * katie (process_it): catch exceptions and ignore them.
2950
2951 2001-06-01  Michael Beattie  <mjb@debian.org>
2952
2953         * added update-mailingliststxt and update-readmenonus to update
2954         those files, respectively. modified cron.daily{,-non-US} to
2955         use them.
2956
2957 2001-05-31  Anthony Towns  <ajt@debian.org>
2958
2959         * rhona: make StayOfExecution work.
2960
2961 2001-05-31  James Troup  <james@nocrew.org>
2962
2963         * rhona (find_next_free): fixes to not overwrite files but rename
2964         them by appending .<n> instead.
2965         (clean): use find_next_free and use dated sub-directories in the
2966         morgue.
2967
2968         * utils.py (move): don't overwrite files unless forced to.
2969         (copy): likewise.
2970
2971 2001-05-24  James Troup  <james@nocrew.org>
2972
2973         * katie (check_files): determine the source version here instead
2974         of during install().
2975         (check_files): check for existent source with bin-only NMU
2976         support.
2977         (main): sort the list of changes so that the source-must-exist
2978         check Does The Right Thing(tm).
2979
2980         * utils.py (changes_compare): new function; sorts a list of
2981         changes files by 'have-source', source, version.
2982         (cc_fix_changes): helper function.
2983         (parse_changes): use compiled regexes.
2984         (fix_maintainer): likewise.
2985
2986         * rene (main): warn about packages in experimental that are
2987         superseded by newer versions in unstable.
2988
2989 2001-05-21  James Troup  <james@nocrew.org>
2990
2991         * rene (main): add support for checking for ANAIS (Architecture
2992         Not Allowed In Source) packages.
2993
2994 2001-05-17  James Troup  <james@nocrew.org>
2995
2996         * katie (check_changes): initalize `architecture' dictionary in
2997         changes global so that if we can't parse the changes file for
2998         whatever reason we don't undef later on.
2999
3000         * utils.py (parse_changes): fix handling of multi-line fields
3001         where the first line did have data.
3002
3003 2001-05-05  Anthony Towns  <ajt@debian.org>
3004
3005         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3006         (It should always have been there. Ooopsy.)
3007
3008 2001-05-03  Anthony Towns  <ajt@debian.org>
3009
3010         * jenna: Cleanup packages that move from arch:any to arch:all or
3011         vice-versa.
3012
3013 2001-04-24  Anthony Towns  <ajt@debian.org>
3014
3015         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3016         cope with debian-installer and boot-floppies' md5sum.txt.
3017
3018 2001-04-16  James Troup  <james@nocrew.org>
3019
3020         * katie (check_changes): add missing %s format string argument.
3021         (stable_install): temporary work around for morgue location to
3022         move installed changes files into.
3023         (stable_install): helps if you actually read in the template.
3024         (manual_reject): fix for editing of reject messages which was
3025         using the wrong variable name.
3026
3027         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3028
3029 2001-04-13  James Troup  <james@nocrew.org>
3030
3031         * katie (manual_reject): Cc the installer.
3032         (reject): don't.
3033         (check_changes): remove unused maintainer-determination code.
3034         (update_subst): add support for Changed-By when setting the
3035         *MAINTAINER* variables.
3036
3037         * rene (bar): new function to check for packages on architectures
3038         when they shouldn't be.
3039
3040         * natalie.py (main): use fubar() and warn() from utils.
3041
3042         * utils.py (whoami): new mini-function().
3043         * melanie (main): use it.
3044         * katie (manual_reject): likewise.
3045
3046 2001-04-03  James Troup  <james@nocrew.org>
3047
3048         * katie (action): ignore exceptions from os.path.getmtime() so we
3049         don't crash on non-existent changes files (e.g. when they are
3050         moved between the start of the install run in cron.daily and the
3051         time we get round to processing them).
3052
3053         * madison (main): also list source and accept -s/--suite.
3054
3055         * jenna (generate_src_list): missing \n in error message.
3056
3057         * katie (update_subst): add sane defaults for when changes is
3058         skeletal.
3059
3060 2001-03-29  James Troup  <james@nocrew.org>
3061
3062         * melanie (main): use fubar() and warn() from utils.  Remember who
3063         the maintainer for the removed packages are and display that info
3064         to the user.  Readd support for melanie-specific Bcc-ing that got
3065         lost in the TemplateSubst transition.
3066
3067         * utils.py (fubar): new function.
3068         (warn): like wise.
3069
3070         * db_access.py (get_maintainer): as below.
3071
3072         * charisma (get_maintainer): moved the bulk of this function to
3073         db_access so that melanie can use it too.
3074
3075         * claire.py (find_dislocated_stable): restrict the override join
3076         to those entries where the suite is stable; this avoids problems
3077         with packages which have moved to new sections (e.g. science)
3078         between stable and unstable.
3079
3080 2001-03-24  James Troup  <james@nocrew.org>
3081
3082         * catherine (poolize): new function; not really independent of
3083         main() fully, yet.
3084         (main): use it.
3085
3086         * katie (stable_install): __SUITE__ needs to be space prefixed
3087         because buildd's check for 'INSTALLED$'.
3088
3089 2001-03-22  James Troup  <james@nocrew.org>
3090
3091         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3092
3093         * jenna: rewritten; now does deletions on a per-suite level
3094         instead of a per-suite-component-architecture-type level.  This
3095         allows mutli-component packages to be auto-cleaned (and as a
3096         bonus, reduces the code size and duplication).
3097
3098 2001-03-22  Anthony Towns  <ajt@debian.org>
3099
3100         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3101         instead of just giving a gpg error.
3102
3103 2001-03-21  James Troup  <james@nocrew.org>
3104
3105         * madison (main): use apt_pkg.VersionCompare to sort versions so
3106         that output is correctly sorted for packages like debhlper.
3107         Noticed by ajt@.
3108
3109         * tea (check_source_in_one_dir): actually find problematic source
3110         packages.
3111
3112         * katie (check_dsc): remember the orig.tar.gz's location ID if
3113         it's not in a legacy suite.
3114         (check_diff): we don't use orig_tar_id.
3115         (install): add code to handle sourceful diff-only upload of
3116         packages which change components by copying the .orig.tar.gz into
3117         the new component, if it doesn't already exist there.
3118         (process_it): reset orig_tar_location (as above).
3119
3120         * melanie (main): use template substiution for the bug closing
3121         emails.
3122         (main): don't hardcode bugs.debian.org or packages.debian.org
3123         either; use configuration items.
3124
3125         * katie: likewise.
3126
3127         * natalie.py (init): use None rather than 'localhost' for the
3128         hostname given to pg.connect.
3129
3130         * utils.py (TemplateSubst): new function; lifted from
3131         userdir-ldap.
3132
3133 2001-03-21  Ryan Murray  <rmurray@debian.org>
3134
3135         * katie (announce): fix the case of non-existent
3136         Suite::$SUITE::Announce.
3137
3138 2001-03-20  Ryan Murray  <rmurray@debian.org>
3139
3140         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3141         /usr/.
3142
3143         * alyson (main): use config variable for database name.
3144         * andrea (main): likewise.
3145         * catherine (main): likewise.
3146         * charisma (main): likewise.
3147         * cindy (main): likewise.
3148         * claire.py (main): likewise.
3149         * denise (main): likewise.
3150         * heidi (main): likewise.
3151         * jenna (main): likewise.
3152         * katie (main): likewise.
3153         * madison (main): likewise.
3154         * melanie (main): likewise.
3155         * neve (main): likewise.
3156         * rhona (main): likewise.
3157         * tea (main): likewise.
3158
3159 2001-03-15  James Troup  <james@nocrew.org>
3160
3161         * rhona (check_sources): fixed evil off by one (letter) error
3162         which was causing only .dsc files to be deleted when cleaning
3163         source packages.
3164
3165         * charisma (get_maintainer_from_source): remove really stupid and
3166         gratuitous IN sub-query and replace with normal inner join.
3167         (main): connect as read-only user nobody.
3168
3169         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3170         with EXISTS.
3171         (check_files): likewise; still disabled by default though.
3172         (clean_binaries): add ' seconds' to the mysterious number in the
3173         output.
3174         (clean): likewise.
3175
3176         * tea (check_files): add missing global declaration on db_files.
3177
3178 2001-03-14  James Troup  <james@nocrew.org>
3179
3180         * rhona: rewritten large chunks. Removed a lot of the silly
3181         selecting into dictionaries and replaced it with 'where exists'
3182         based sub queries.  Added support for StayOfExecution.  Fix the
3183         problem with deleting dsc_files too early and disable cleaning of
3184         unattached files.
3185
3186 2001-03-14  Anthony Towns  <ajt@debian.org>
3187
3188         * katie (announce): also check Changed-By when trying to detect
3189         NMUs.
3190
3191 2001-03-06  Anthony Towns  <ajt@debian.org>
3192
3193         * ziyi (main): Generate Release.gpg files as well, using the key from
3194         Dinstall::SigningKey in katie.conf, if present. That key has to be
3195         passwordless, and hence kept fairly secretly.
3196
3197 2001-03-02  James Troup  <james@nocrew.org>
3198
3199         * utils.py (str_isnum): new function; checks to see if the string
3200         is a number.
3201
3202         * shania (main): fix _hideous_ bug which was causing all files > 2
3203         weeks old to be deleted from incoming, even if they were part of a
3204         valid upload.
3205
3206 2001-02-27  James Troup  <james@nocrew.org>
3207
3208         * melanie (main): accept new argument -C/--carbon-copy which
3209         allows arbitarty carbon-copying of the bug closure messages.
3210         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3211         separate variable.
3212
3213 2001-02-27  Anthony Towns  <ajt@debian.org>
3214
3215         * ziyi: new program; generates Release files.
3216
3217 2001-02-25  James Troup  <james@nocrew.org>
3218
3219         * katie (reject): add missing '\n' to error message.
3220         (manual_reject): likewise.
3221         (install): catch exceptions from moving the changes file into DONE
3222         and ignore them.
3223
3224         * tea (check_md5sums): new function.
3225
3226 2001-02-25  Michael Beattie  <mjb@debian.org>
3227
3228         * melanie: use $EDITOR if available.
3229
3230 2001-02-15  James Troup  <james@nocrew.org>
3231
3232         * utils.py (parse_changes): don't crash and burn on empty .changes
3233         files.  Symptoms noticed by mjb@.
3234
3235 2001-02-15  Adam Heath  <doogie@debian.org>
3236
3237         * denise (main): use an absolute path for the output filename.
3238
3239         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3240         compile errors with postgresql-dev >= 7.0.
3241
3242 2001-02-12  James Troup  <james@nocrew.org>
3243
3244         * rene: initial version.
3245
3246         * andrea: initial version.
3247
3248         * catherine (main): remove obsolete assignment of arguments.
3249
3250 2001-02-09  James Troup  <james@nocrew.org>
3251
3252         * catherine: first working version.
3253
3254 2001-02-06  James Troup  <james@nocrew.org>
3255
3256         * katie (check_files): validate the priority field; i.e. ensure it
3257         doesn't contain a '/' (to catch people prepending the priority
3258         with the component rather than the section).
3259         (check_override): don't warn about source packages; the only check
3260         is on section and we have no GUI tools that would use the Section
3261         field for a Sources file.
3262         (announce): use tags rather than severities for NMUs.  Requested
3263         by Josip Rodin <joy@>. [#78035]
3264
3265 2001-02-04  James Troup  <james@nocrew.org>
3266
3267         * tea (check_override): new function; ensures packages in suites
3268         are also in the override file.  Thanks to bod@ for noticing that
3269         such packages existed.
3270
3271         * katie: move file type compiled regular expressions to utils as
3272         catherine uses them too.
3273         (check_changes): always default maintainer822 to the installer
3274         address so that any bail out won't cause undefs later.
3275         (check_files): update file type re's to match above.
3276         (stable_install): likewise.
3277         (reject): handle any except from moving the changes files.  Fixes
3278         crashes on unreadable changes files.
3279
3280         * melanie (main): add an explanation of why things are not removed
3281         from testing.
3282
3283 2001-01-31  James Troup  <james@nocrew.org>
3284
3285         * melanie (main): ignore a) no message, b) removing from stable or
3286         testing when invoked with -n/--no-action.
3287
3288         * katie (check_override): lower section before checking to see if
3289         we're whining about 'non-US' versus 'non-US/main'.
3290
3291         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3292         function so that we can use inside of PostgreSQL.
3293
3294 2001-01-28  James Troup  <james@nocrew.org>
3295
3296         * katie: updated to pass new flag to parse_changes() and deal with
3297         the exception raised on invalid .dsc's if appropriate.
3298         * shania (main): likewise.
3299         * melanie (main): likewise.
3300
3301         * tea (check_dscs): new function to validate all .dsc files in
3302         unstable.
3303
3304         * utils.py (parse_changes): if passed an additional flag, validate
3305         the .dsc file to ensure it's extractable by dpkg-source.
3306         Requested by Ben Collins <bcollins@>.
3307
3308 2001-01-27  James Troup  <james@nocrew.org>
3309
3310         * madison (main): connect to the DB as nobody.
3311
3312         * katie (check_files): remove support for -r/--no-version-check
3313         since it makes no sense under katie (jenna will automatically
3314         remove the (new) older version) and was evil in any event.
3315         (check_changes): add missing new line to rejection message.
3316         (check_dsc): likewise.
3317         (process_it): reset reject_message here.
3318         (main): not here.  Also remove support for -r.
3319
3320 2001-01-26  James Troup  <james@nocrew.org>
3321
3322         * katie (check_override): don't whine about 'non-US/main' versus
3323         'non-US'.
3324
3325 2001-01-26  Michael Beattie  <mjb@debian.org>
3326
3327         * natalie.py (usage): new function.
3328         (main): use it.
3329
3330 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3331
3332         * update-mirrorlists: Update README.non-US too (request from Joy).
3333
3334 2001-01-25  James Troup  <james@nocrew.org>
3335
3336         * katie (reject): catch any exception from utils.move() and just
3337         pass, we previously only caught can't-overwrite errors and not
3338         can't-read ones.
3339
3340         * jenna (generate_src_list): use ORDER BY in selects to avoid
3341         unnecessary changes to Packages files.
3342         (generate_bin_list): likewise.
3343
3344         * utils.py (extract_component_from_section): separated out from
3345         build_file_list() as it's now used by claire too.
3346
3347         * claire.py (find_dislocated_stable): rewrite the query to extract
3348         section information and handle component-less locations properly.
3349         Thanks to ajt@ for the improved queries.
3350         (fix_component_section): new function to fix components and
3351         sections.
3352
3353 2001-01-23  James Troup  <james@nocrew.org>
3354
3355         * katie (check_files): set file type for (u?)debs first thing, so
3356         that if we continue, other functions which rely on file type
3357         existing don't bomb out.  If apt_pkg or apt_inst raise an
3358         exception when parsing the control file, don't try any other
3359         checks, just drop out.
3360         (check_changes): new test to ensure there is actually a target
3361         distribution.
3362
3363 2001-01-22  James Troup  <james@nocrew.org>
3364
3365         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3366         <grin@>.
3367         (check_changes): when mapping to unstable, remember to actually
3368         add unstable to the suite list and not just remove the invalid
3369         suite.
3370
3371 2001-01-21  James Troup  <james@nocrew.org>
3372
3373         * katie (check_files): catch exceptions from debExtractControl()
3374         and reject packages which raise any.
3375
3376 2001-01-19  James Troup  <james@nocrew.org>
3377
3378         * katie (check_signature): basename() file name in rejection
3379         message.
3380
3381 2001-01-18  James Troup  <james@nocrew.org>
3382
3383         * katie (in_override_p): remember the section and priority from
3384         the override file so we can check them against the package later.
3385         (check_override): new function; checks section and priority (for
3386         binaries) from the package against the override file and mails the
3387         maintainer about any disparities.
3388         (install): call check_override after announcing the upload.
3389
3390 2001-01-16  James Troup  <james@nocrew.org>
3391
3392         * utils.py (build_file_list): catch ValueError's from splitting up
3393         the files field and translate it into a parse error.
3394
3395         * tea: add support for finding unreferenced files.
3396
3397         * katie (in_override_p): add support for suite-aliasing so that
3398         proposed-updates uploads work again.
3399         (check_changes): catch parses errors from utils.build_file_list().
3400         (check_dsc): likewise.
3401         (check_diff): yet more dpkg breakage so we require even newer a
3402         version.
3403
3404         * jenna (generate_bin_list): don't do nasty path munging that's no
3405         longer needed.
3406
3407         * denise (main): support for non-US; and rename testing's override
3408         files so they're based on testing's codename.
3409
3410 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3411
3412         * melanie: add to the bug closing message explaining what happens
3413         (or rather doesn't) with bugs against packages that have been
3414         removed.
3415
3416 2001-01-14  James Troup  <james@nocrew.org>
3417
3418         * charisma (main): fix silly off-by-one error; suite priority
3419         checking was done using "less than" rather than "less than or
3420         equal to" which was causing weird hesienbugs with wrong Maintainer
3421         fields.
3422
3423 2001-01-10  James Troup  <james@nocrew.org>
3424
3425         * katie (in_override_p): adapted to use SQL-based overrides.
3426         read_override_file function disappears.
3427
3428         * db_access.py: add new functions get_section_id, get_priority_id
3429         and get_override_type_id.
3430         (get_architecture_id): return -1 if the architecture is not found.
3431
3432         * heidi: switch %d -> %d in all SQL queries.
3433         (get_list): Use string.join where appropriate.
3434
3435         * rhona (in_override_p): don't die if the override file doesn't
3436         exist.
3437         (main): warn if the override file doesn't exist.
3438
3439         * alyson: new script; will eventually sync the config file and the
3440         SQL database.
3441
3442         * natalie.py: new script; manipulates overrides.
3443
3444         * melanie: new script; removes packages from suites.
3445
3446 2001-01-08  James Troup  <james@nocrew.org>
3447
3448         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3449         anything it just changed the symptom.  Recognise the new breakage
3450         and reject them too.
3451
3452 2001-01-07  James Troup  <james@nocrew.org>
3453
3454         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3455         to the .changes file, be sure to set up files[filename]["type"]
3456         too.
3457
3458 2001-01-06  James Troup  <james@nocrew.org>
3459
3460         * katie (check_diff): new function; detects bad diff files
3461         produced by dpkg 1.8.1 and rejects thems.
3462         (process_it): call check_diff().
3463         (check_dsc): gar.  Add support for multiple versions of the
3464         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3465         and size against all versions and use one which matches if
3466         possible and exclude any that don't from being poolized to avoid
3467         file overwrites.  Thanks to broonie@ for providing the example.
3468         (install): skip any files marked as excluded as above.
3469
3470 2001-01-05  James Troup  <james@nocrew.org>
3471
3472         * heidi (process_file): add missing argument to error message.
3473
3474 2001-01-04  James Troup  <james@nocrew.org>
3475
3476         * heidi (main): fix handling of multiple files by reading all
3477         files not just the first file n times (where n = the number of
3478         files passed as arguments).
3479
3480 2001-01-04  Anthony Towns  <ajt@debian.org>
3481
3482         * katie (check_dsc): proper fix for the code which locates the
3483         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3484
3485 2000-12-20  James Troup  <james@nocrew.org>
3486
3487         * rhona: replace IN's with EXISTS's to make DELETE time for
3488         binaries and source sane on auric.  Add a -n/--no-action flag and
3489         make it stop actions if used.  Fixed a bug in binaries deletion
3490         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3491         -V/--version.  Giving timing info on deletion till I'm sure it's
3492         sane.
3493
3494         * katie (check_changes): map testing to unstable.
3495
3496         * madison: new script; shows versions in different architectures.
3497
3498         * katie (check_dsc): ensure size matches as well as md5sum;
3499         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3500         #69702.
3501
3502 2000-12-19  James Troup  <james@nocrew.org>
3503
3504         * katie (reject): ignore the "can't overwrite file" exception from
3505         utils.move() and leave the files where they are.
3506         (reject): doh! os.access() test was reversed so we only tried to
3507         move files which didn't exist... replaced with os.path.exists()
3508         test the right way round.
3509
3510         * utils.py (move): raise an exception if we can't overwrite the
3511         destination file.
3512         (copy): likewise.
3513
3514 2000-12-18  James Troup  <james@nocrew.org>
3515
3516         * rhona: first working version.
3517
3518         * db_access.py (get_files_id): force both sizes to be integers.
3519
3520         * katie (main): use size_type().
3521
3522         * utils.py (size_type): new function; pretty prints a file size.
3523
3524 2000-12-17  James Troup  <james@nocrew.org>
3525
3526         * charisma (main): do version compares so that older packages do
3527         not override newer ones and process source first as source wins
3528         over binaries in terms of who we think of as the Maintainer.
3529
3530 2000-12-15  James Troup  <james@nocrew.org>
3531
3532         * katie (install): use the files id for the .orig.tar.gz from
3533         check_dsc().
3534         (install): limit select for legacy source to a) source in legacy
3535         or legacy-mixed type locations and b) distinct on files.id.
3536         (install): rather than the bizarre insert new, delete old method
3537         for moving legacy source into the pool, use a simple update of
3538         files.
3539         (process_it): initalize some globals before each process.
3540
3541 2000-12-14  James Troup  <james@nocrew.org>
3542
3543         * katie (in_override_p): index on binary_type too since .udeb
3544         overrides are in a different file.
3545         (read_override_file): likewise.
3546         (check_files): correct filename passed to get_files_id().
3547         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3548         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3549         (check_dsc): remember the files id of the .orig.tar.gz, not the
3550         location id.
3551
3552 2000-12-13  James Troup  <james@nocrew.org>
3553
3554         * utils.py (poolify): force the component to lower case except for
3555         non-US.
3556
3557         * katie (in_override_p): handle .udeb-specific override files.
3558         (check_files): pass the binary type to in_override_p().
3559         (check_dsc): remember the location id of the old .orig.tar.gz in
3560         case it's not in the pool.
3561         (install): use location id from dsc_files; which is where
3562         check_dsc() puts it for old .orig.tar.gz files.
3563         (install): install files after all DB work is complete.
3564         (reject): basename() the changes filename.
3565         (manual_reject): likewise.
3566
3567         * shania: new progam; replaces incomingcleaner.
3568
3569 2000-12-05  James Troup  <james@nocrew.org>
3570
3571         * katie (check_changes): if inside stable and can't find files
3572         from the .changes; assume it's installed in the pool and chdir()
3573         to there.
3574         (check_files): we are not installing for stable installs, so don't
3575         check for overwriting existing files.
3576         (check_dsc): likewise.
3577         (check_dsc): reorder .orig.tar.gz handling so that we search in
3578         the pool first and only then fall back on any .orig.tar.gz in the
3579         cwd; this avoids false positives on the overwrite check when
3580         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3581         (install): if this is a stable install, bail out to
3582         stable_install() immediately.
3583         (install): dsc_files handling was horribly broken. a) we need to
3584         add files from the .dsc and not the .changes (duh), b) we need to
3585         add the .dsc file itself to dsc_files (to be consistent with neve
3586         if for no other reason).
3587         (stable_install): new function; handles installs from inside
3588         proposed-updates to stable.
3589         (acknowledge_new): basename changes_filename before doing
3590         anything.
3591         (process_it): absolutize the changes filename to avoid the
3592         requirement of being in the same directory as the .changes file.
3593         (process_it): save and restore the cwd as stable installs can
3594         potentially jump into the pool to find files.
3595
3596         * jenna: dislocated_files support using claire.
3597
3598         * heidi (process_file): select package field from binaries
3599         explicitly.
3600
3601         * db_access.py (get_files_id): fix cache key used.
3602
3603         * utils.py (build_file_list): fix 'non-US/non-free' case in
3604         section/component splitting.
3605         (move): use os.path.isdir() rather than stat.
3606         (copy): likewise.
3607
3608         * claire.py: new file; stable in non-stable munger.
3609
3610         * tea: new file; simply ensures all files in the DB exist.
3611
3612 2000-12-01  James Troup  <james@nocrew.org>
3613
3614         * katie (check_dsc): use regex_safe().
3615         (check_changes): typo in changes{} key:
3616         s/distributions/distribution/.
3617         (install): use changes["source"], not files[file]["source"] as the
3618         latter may not exist and the former is used elsewhere.  Commit the
3619         SQL transaction earlier.
3620
3621         * utils.py (regex_safe): new function; escapes characters which
3622         have meaning to SQL's regex comparison operator ('~').
3623
3624 2000-11-30  James Troup  <james@nocrew.org>
3625
3626         * katie (install): pool_location is based on source package name,
3627         not binary package.
3628
3629         * utils.py (move): if dest is a directory, append the filename
3630         before chmod-ing.
3631         (copy): ditto.
3632
3633         * katie (check_files): don't allow overwriting of existing .debs.
3634         (check_dsc): don't allow overwriting of existing source files.
3635
3636 2000-11-27  James Troup  <james@nocrew.org>
3637
3638         * katie (check_signature): don't try to load rsaref; it's
3639         obsolete.
3640         (in_override_p): don't try to lookup override entries for packages
3641         with an invalid suite name.
3642         (announce): don't assume the suite name is valid; use Find() to
3643         lookup the mailing list name for announcements.
3644
3645         * utils.py (where_am_i): typo; hostname is in the first element,
3646         not second.
3647
3648         * db_access.py (get_suite_id): return -1 on an unknown suite.
3649
3650 2000-11-26  James Troup  <james@nocrew.org>
3651
3652         * katie (install): fix CopyChanges handling; typo in in checking
3653         Cnf for CopyChanges flag and was calling non-existent function
3654         copy_file.
3655
3656         * utils.py (copy): new function; clone of move without the
3657         unlink().
3658
3659 2000-11-25  James Troup  <james@nocrew.org>
3660
3661         * utils.py (build_file_list): handle non-US prefixes properly
3662         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3663         + 'libs' not 'non-US/libs').
3664         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3665         delays.  This is possibly(/probably) exim speicifc and (like other
3666         sendmail options) needs to be in the config file.
3667
3668 2000-11-24  James Troup  <james@nocrew.org>
3669
3670         * rhona (check_sources): we need file id from dsc_files; not id.
3671         Handle non .dsc source files being re-referenced in dsc_files.
3672
3673         * katie (in_override_p): strip out any 'non-US' prefix.
3674         (check_files): use utils.where_am_i() rather than hardcoding.
3675         (check_files): validate the component.
3676         (install): use utils.where_am_i() rather than hardcoding.
3677         (install): fix mail to go to actual recepient.
3678         (reject): likewise.
3679         (manual_reject): likewise.
3680         (acknowledge_new): likewise.
3681         (announce): likewise.
3682
3683         * db_access.py (get_component_id): ignore case when searching for
3684         the component and don't crash if the component can't be found, but
3685         return -1.
3686         (get_location_id): handle -1 from get_component_id().
3687
3688         * jenna (generate_src_list): don't bring 'suite' into our big
3689         multi-table-joining select as we already know the 'suite_id'.
3690         (generate_bin_list): likewise.
3691
3692         * neve (main): don't quit if not on ftp-master.
3693         (process_packages): remove unused variable 'suite_codename'.
3694
3695         * utils.py (move): actually move the file.
3696         (build_file_list): handle non-US prefixes in the section.
3697
3698         * catherine (main): use which_conf_file().
3699         * charisma (main): likewise.
3700         * heidi (main): likewise.
3701         * jenna (main): likewise.
3702         * katie (main): likewise.
3703         * neve (main): likewise.
3704         * rhona (main): likewise.
3705
3706         * utils.py (where_am_i): new routine; determines the archive as
3707         understood by other 'dak' programs.
3708         (which_conf_file): new routine; determines the conf file to read.
3709
3710 2000-11-17  James Troup  <james@nocrew.org>
3711
3712         * katie (install): fix where .changes files for proposed-updates
3713         go.
3714
3715 2000-11-04  James Troup  <james@nocrew.org>
3716
3717         * jenna (main): handle architecture properly if no
3718         -a/--architecture argument is given, i.e. reset architecture with
3719         the values for the suite for each suite.
3720
3721         * Add apt_pkg.init() to the start of all scripts as it's now
3722         required by python-apt.
3723
3724 2000-10-29  James Troup  <james@nocrew.org>
3725
3726         * jenna (generate_bin_list): take an additional argument 'type'
3727         and use it in the SELECT.
3728         (main): if processing component 'main', process udebs and debs.
3729
3730         * neve (process_packages): set up 'type' in 'binaries' (by
3731         assuming .deb).
3732
3733         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3734         (check_files): set up files[file]["dbtype"].
3735         (install): use files[file]["dbtype"] to set up the 'type' field in
3736         the 'binaries' table.
3737
3738         * init_pool.sql: add a 'type' field to the 'binaries' table to
3739         distinguisgh between ".udeb" and ".deb" files.
3740
3741         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3742         dest ? dirname(dest)" type check instead.
3743
3744         * katie (check_dsc): handle the case of an .orig.tar.gz not found
3745         in the pool without crashing.  Also handle the case of being asked
3746         to look for something other than an .orig.tar.gz in the pool.
3747
3748 2000-10-26  James Troup  <james@nocrew.org>
3749
3750         * katie (install): fix filenames put into files table during
3751         poolification of legacy source.
3752
3753         * utils.py (move): work around a bug in os.path.basename() which
3754         cunningly returns '' if there is a trailing slash on the path
3755         passed to it.
3756
3757         * katie (check_dsc): Remove more cruft.  If we find the
3758         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
3759         location, make a note of that so we can fix things in install().
3760         (install): as above.  Move any old source out of legacy locations
3761         so that 'apt-get source' will work.
3762         (process_it): reset the flag that indicates to install that the
3763         source needs moved.
3764
3765         * cron.daily: more.  Nowhere near complete yet though.
3766
3767         * katie (install): don't run os.makedirs, a) utils.move() does
3768         this now, b) we weren't removing the user's umask and were
3769         creating dirs with SNAFU permissions.
3770         (check_dsc): rewrite the .orig.tar.gz handling to take into
3771         account, err, package pools.  i.e. look anywhere in the pool
3772         rather than faffing around with two simple paths.
3773
3774         * neve (process_sources): add the .dsc to dsc_files too.
3775
3776 2000-10-25  James Troup  <james@nocrew.org>
3777
3778         * neve (process_sources): don't duplicate .orig.tar.gz's.
3779
3780 2000-10-23  James Troup  <james@nocrew.org>
3781
3782         * utils.py (re_extract_src_version): moved here.
3783
3784         * neve: move re_extract_src_version to utils.
3785         (process_packages): reflect change.
3786
3787         * katie (install): reflect change.
3788
3789 2000-10-19  James Troup  <james@nocrew.org>
3790
3791         * jenna (generate_src_list): handle locations with null
3792         components.
3793         (generate_bin_list): likewise.
3794