]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Check returned value from database.get_archive_id()
[dak.git] / ChangeLog
1 2006-05-18  James Troup  <james@nocrew.org>
2
3         * dak/init_db.py (main): check returned value from
4         database.get_archive_id().
5
6         * dak/dak.py: renamed from shell.py.  Update to support new source
7         layout.  Created init() and usage() functions.  Various
8         pylint-inspired cleanups.  Use daklib utils.warn() and
9         utils.fubar().  Change 'functionality' variable to only have
10         (command, description) and always invoke main() when running the
11         module.  Also support -h.
12
13 2006-05-17  James Troup  <james@nocrew.org>
14
15         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
16         imports of and calls to daklib modules.  Change script name
17         everywhere, i.e. in output, mails, comments and configuration tree
18         + filenames.  Also update references to other renamed scripts,
19         classes and templates.  Use '.dak' instead of '.katie' for the
20         queue info storage files.
21         (Renamed from tea)
22         * dak/check_overrides.py: likewise.  (Renamed from cindy)
23         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
24         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
25         * dak/clean_queues.py: likewise.  (Renamed from shania)
26         * dak/clean_suites.py: likewise.  (Renamed from rhona)
27         * dak/compare_suites.py: likewise.  (Renamed from andrea)
28         * dak/control_overrides.py: likewise.  (Renamed from natalie)
29         * dak/control_suite.py: likewise.  (Renamed from heidi)
30         * dak/cruft_report.py: likewise.  (Renamed from rene)
31         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
32         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
33         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
34         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
35         * dak/import_archive.py: likewise.  (Renamed from neve)
36         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
37         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
38         * dak/init_db.py: likewise. (Renamed from alyson)
39         * dak/init_dirs.py: likewise. (Renamed from rose)
40         * dak/ls.py: likewise. (Renamed from madison)
41         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
42         * dak/make_overrides.py: likewise.  (Renamed from denise)
43         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
44         * dak/mirror_split.py: likewise.  (Renamed from billie)
45         * dak/override.py: likewise.  (Renamed from alicia)
46         * dak/poolize.py: likewise.  (Renamed from catherine)
47         * dak/process_accepted.py: likewise.  (Renamed from kelly)
48         * dak/process_new.py: likewise.  (Renamed from lisa)
49         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
50         * dak/queue_report.py: likewise.  (Renamed from helena)
51         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
52         * dak/rm.py: likewise.  (Renamed from melanie)
53         * dak/security_install.py: likewise.  (Renamed from amber)
54         * dak/split_done.py: likewise.  (Renamed from nina)
55         * dak/stats.py: likewise.  (Renamed from saffron)
56         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
57         * daklib/database.py: likewise.  (Renamed from db_access)
58         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
59         * daklib/utils.py: likewise.
60
61         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
62         doesn't need to notify anyone" string.
63         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
64
65         * dak/process_accepted.py (init): drop -V/--version argument.
66         * dak/process_new.py (init): likewise.
67         * dak/process_unchecked.py (init): likewise.
68         * dak/reject_proposed_updates.py (init): likewise
69
70         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
71
72         * dak/stats.py: in usage() output change STAT to MODE.
73
74 2006-05-15  James Troup  <james@nocrew.org>
75
76         * dak/queue_report.py: remove unused encodings imports.
77
78         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
79         imports.  Initalize 'Cnf' as a global.
80         (BillieDB._internal_recurse): fix 'util.' typo.
81
82         * dak/import_ldap_fingerprints.py (main): drop unused time import and
83         commented out time check for LDAP search.
84
85 2005-12-16  Ryan Murray  <rmurray@debian.org>
86
87         * halle: add support for udebs
88         * kelly: stable_install: add support for binNMU versions
89
90 2005-12-05  Anthony Towns  <aj@erisian.com.au>
91
92         * katie.py: Move accept() autobuilding support into separate function 
93         (queue_build), and generalise to build different queues
94
95         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
96
97         * jennifer: Initial support for enabling embargo handling with the
98         Dinstall::SecurityQueueHandling option.
99         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
100         functions.
101
102         * katie.conf-security: Include embargo options
103         * katie.conf-security: Add Lock dir
104         * init_pool.sql-security: Create disembargo table
105         * init_pool.sql-security: Add constraints for disembargo table
106
107 2005-11-26  Anthony Towns  <aj@erisian.com.au>
108
109         * Merge of changes from klecker, by various people
110
111         * amber: special casing for not passing on amd64 and oldstable updates
112         * amber: security mirror triggering
113         * templates/amber.advisory: updated advisory structure
114         * apt.conf.buildd-security: update for sarge's release
115         * apt.conf-security: update for sarge's release
116         * cron.buildd-security: generalise suite support, update for sarge's release
117         * cron.daily-security: update for sarge's release, add udeb support
118         * vars-security: update for sarge's release
119         * katie.conf-security: update for sarge's release, add amd64 support,
120         update signing key
121
122         * docs/README.names, docs/README.quotes: include the additions
123
124 2005-11-25  Anthony Towns  <aj@erisian.com.au>
125
126         * Changed accepted_autobuild to queue_build everywhere.
127         * Add a queue table.
128         * Add a "queue" field in the queue_build table (currently always 0)
129
130         * jennifer: Restructure to make it easier to support special
131         purpose queues between unchecked and accepted.
132
133 2005-11-25  Anthony Towns  <aj@erisian.com.au>
134
135         * Finishing merge of changes from spohr, by various people still
136
137         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
138         works
139         * jennifer: Re-enable .deb ar format checking
140         * katie.py: Convert to +bX binNMU special casing
141         * rhona: Add some debug output when deleting binaries
142         * cron.daily: Add emilie
143         * cron.unchecked: Add lock files
144
145 2005-11-15  Anthony Towns  <aj@erisian.com.au>
146
147         * Merge of changes from spohr, by various people.
148
149         * tiffani: new script to do patches to Packages, Sources and Contents
150         files for quicker downloads.
151         * ziyi: update to authenticate tiffani generated files
152
153         * dak: new script to provide a single binary with less arbitrary names
154         for access to dak functionality.
155
156         * cindy: script implemented
157
158         * saffron: cope with suites that don't have a Priority specified
159         * heidi: use get_suite_id()
160         * denise: don't hardcode stable and unstable, or limit udebs to unstable
161         * denise: remove override munging for testing (now done by cindy)
162         * helena: expanded help, added new, sort and age options, and fancy headers
163         * jennifer: require description, add a reject for missing dsc file
164         * jennifer: change lock file
165         * kelly: propogation support
166         * lisa: honour accepted lock, use mtime not ctime, add override type_id
167         * madison: don't say "dep-retry"
168         * melanie: bug fix in output (missing %)
169         * natalie: cope with maintainer_override == None; add type_id for overrides
170         * nina: use mtime, not ctime
171
172         * katie.py: propogation bug fixes
173         * logging.py: add debugging support, use | as the logfile separator
174
175         * katie.conf: updated signing key (4F368D5D)
176         * katie.conf: changed lockfile to dinstall.lock
177         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
178         * katie.conf: added tiffani, cindy support
179         * katie.conf: updated to match 3.0r6 release
180         * katie.conf: updated to match sarge's release
181
182         * apt.conf: update for sarge's release
183         * apt.conf.stable: update for sarge's release
184         * apt.conf: bump daily max Contents change to 25MB from 12MB
185
186         * cron.daily: add accepted lock and invoke cindy  
187         * cron.daily: add daily.lock
188         * cron.daily: invoke tiffani
189         * cron.daily: rebuild accepted buildd stuff
190         * cron.daily: save rene-daily output on the web site
191         * cron.daily: disable billie
192         * cron.daily: add stats pr0n
193
194         * cron.hourly: invoke helena
195
196         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
197         * vars: add lockdir, add etch to copyoverrides
198         * Makefile: add -Ipostgresql/server to CXXFLAGS
199
200         * docs/: added README.quotes
201         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
202         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
203
204         * TODO: correct spelling of "conflicts"
205
206 2005-05-28  James Troup  <james@nocrew.org>
207
208         * helena (process_changes_files): use MTIME rather than CTIME (the
209         C's not for 'creation', stupid).
210         * lisa (sort_changes): likewise.
211
212         * jennifer (check_distributions): use has_key rather than an 'in'
213         test which doesn't work with python2.1.  [Probably by AJ]
214
215 2005-03-19  James Troup  <james@nocrew.org>
216
217         * rene (main): use Suite::<suite>::UdebComponents to determine
218         what components have udebs rather than assuming only 'main' does.
219
220 2005-03-18  James Troup  <james@nocrew.org>
221
222         * utils.py (rfc2047_encode): use codecs.lookup() rather than
223         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
224         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
225         <andrew@ubuntu.com>.
226
227 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
228
229         * helena: add -n/--new HTML output option and improved sorting
230         options.
231
232 2005-03-06  Ryan Murray  <rmurray@debian.org>
233
234         * shania(main): use Cnf::Dir::Reject instead of REJECT
235
236 2005-02-08  James Troup  <james@nocrew.org>
237
238         * rene (main): add partial NBS support by checking that binary
239         packages are built by their real parent and not some random
240         stranger.
241         (do_partial_nbs): likewise.
242
243 2005-01-18  James Troup  <james@nocrew.org>
244
245         * katie.py (Katie.build_summaries): avoid leaking file handle when
246         extracting package description.
247         (Katie.force_reject): remember and close each file descriptor we
248         use.
249         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
250         s/reason_file/reason_fd/ because it's a file descriptor.
251         (Katie.check_dsc_against_db): avoid leaking file handle whenever
252         invoking apt_pkg.md5sum().
253
254         * jennifer (check_deb_ar): new function: sanity check the ar
255         contents of a .deb.
256         (check_files): use it.
257         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
258         found.
259         (check_files): accept 'raw-installer' as an alias for 'byhand'.
260
261 2005-01-14  Anthony Towns  <ajt@debian.org>
262
263         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
264
265         * propup stuff (thanks to Andreas Barth)
266         * katie.conf: add stable MustBeOlderThan testing, add -security
267           propup
268         * jennifer: set distribution-version in .katie if propup may be needed
269         * katie.py: add propogation to cross_suite_version_check
270
271 2004-11-27  James Troup  <james@nocrew.org>
272
273         * nina: new script to split monolithic queue/done into date-based
274         hierarchy.
275
276         * rene (usage): document -s/--suite.
277         (add_nbs): use .setdefault().
278         (do_anais): likewise.
279         (do_nbs): don't set a string to "" and then += it.
280         (do_obsolete_source): new function - looks for obsolete source
281         packages (i.e source packages whose binary packages are ALL a)
282         claimed by someone else and b) newer when built from the other
283         source package).
284         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
285         and 'full' check modes.  Check for obsolete source packages.
286         linux-wlan-ng has been fixed - remove hideous bodge.
287
288         * jennifer (check_distributions): support 'reject' suite map type.
289
290         * utils.py (validate_changes_file_arg): s/file/filename/.
291         s/fatal/require_changes/.  If require_changes is -1, ignore errors
292         and return the .changes filename regardless.
293         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
294         (re_no_revision): don't escape '-', it's not a special character.
295         s/\*/+/ as there must be at least one non-dash character after the
296         dash in a revision.  Thanks to Christian Reis for noticing both of
297         these.
298
299         * ashley (main): pass require_changes=-1 to
300         utils.validate_changes_file_arg().
301
302         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
303         Team <debian-kernel@lists.debian.org>'.
304
305         * katie.py (Katie.in_override_p): fix .startswith() usage.
306
307         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
308         (Lauren::MoreInfoURL): update to 3.0r3.
309         (Suite::Stable::Version): likewise.
310         (Suite::Stable::Description): likewise.
311
312         * cron.daily: disable automatic task override generation.
313
314         * cindy (process): restrict "find all packages" queries by
315         component.  Respect Options["No-Action"].
316         (main): add -n/--no-action support.  Only run on unstable.  Rename
317         type to otype (pychecker).
318
319 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
320
321         * katie.conf (Billie::BasicTrees): add all architectures.
322         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
323         'everything'.
324
325         * cron.daily: Update a 'current' symlink when creating the
326         post-daily-cron-job database backup to aid mirroring to merkel.
327         Run billie.
328
329         * billie (BillieTarget.poolish_match): handle .udeb too.
330
331 2004-10-13  Ryan Murray  <rmurray@debian.org>
332
333         * amber (do_upload): Sort changes files in "katie" order so that
334           source always arrives before binary-only rebuilds
335         
336 2004-10-05  James Troup  <james@nocrew.org>
337
338         * jennifer (check_dsc): correct reject message on invalid
339         Maintainer field.
340
341 2004-09-20  James Troup  <james@nocrew.org>
342
343         * alicia: remove unused 'pwd' import.
344
345         * tea (check_override): underline suite name in output properly.
346
347         * rene (main): read a compressed Packages file.
348         * tea (validate_packages): likewise.
349
350         * katie.py (re_fdnic): add 'r' prefix.
351         (re_bin_only_nmu_of_mu): likewise.
352         (re_bin_only_nmu_of_nmu): likewise.
353
354         * madison (main): retrieve component information too and display
355         it if it's not 'main'.
356         * melanie (reverse_depends_check): likewise.
357
358         * utils.py (pp_dep): renamed...
359         (pp_deps): ... to this.
360         * jeri (check_dep): update calls to utils.pp_deps().
361         * melanie (reverse_depends_check): likewise.
362
363         * jennifer (check_changes): move initalization of email variables
364         from here...
365         (process_it): ...to here as we no longer always run
366         check_changes().  Don't bother to initialize
367         changes["architecture"].
368
369         * denise (list): renamed to...
370         (do_list): ...this to avoid name clash with builtin 'list'.
371         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
372         for dictionaries.
373         (main): Likewise for name clash avoidance and also
374         s/override_type/suffix/.  Adjust call to do_list().
375
376 2004-09-01  Ryan Murray  <rmurray@debian.org>
377
378         * tea (check_files): check the pool/ directory instead of dists/
379
380 2004-08-04  James Troup  <james@nocrew.org>
381
382         * jenna (cleanup): use .setdefault() for dictionaries.
383         (write_filelists): likewise.
384
385         (write_filelists): Use utils.split_args() not split() to split
386         command line arguments.
387         (stable_dislocation_p): likewise.
388
389         (write_filelists): Add support for mapping side of suite-based
390         "Arch: all mapping".
391         (do_da_do_da): ensure that if we're not doing all suites that we
392         process enough to be able correct map arch: all packages.
393
394         * utils.py (cant_open_exc): correct exception string,
395         s/read/open/, s/.$//.
396
397         * templates/amber.advisory: update to match reality a little
398         better.
399
400         * melanie (reverse_depends_check): read Packages.gz rather than
401         Packages.
402
403         * jennifer (check_files): check for unknown component before
404         checking for NEWness.
405
406         * katie.py (Katie.in_override_p): use .startswith in favour of a
407         slice.
408
409         * docs/melanie.1.sgml: document -R/--rdep-check.
410
411 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
412
413         * billie (main): Make the verbatim lists include all the README
414           elements.
415         * docs/README.names: Add billie in (correcting oversight)
416
417 2004-07-01  James Troup  <james@nocrew.org>
418
419         * emilie (main): handle woody's case-sensitive python-ldap,
420         s/keyfingerprint/keyFingerPrint/.
421
422 2004-06-25  James Troup  <james@nocrew.org>
423
424         * debian/control (Depends): add dpkg-dev since jennifer uses
425         dpkg-source.
426
427 2004-06-24  James Troup  <james@nocrew.org>
428
429         * melanie (main): s/file/temp_file/ and close file handle before
430         removing the temporary file.
431         (main): don't warn about needing a --carbon-copy if in no-action
432         mode.
433
434         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
435         (main): likewise.
436
437         * test/006/test.py (main): check bracketed email-only form.
438
439         * utils.py (fix_maintainer): if the Maintainer string is bracketed
440         email-only, strip the brackets so we don't end up with
441         <<james@nocrew.org>>.
442
443 2004-06-20  James Troup  <james@nocrew.org>
444
445         * jennifer (process_it): only run check_changes() if
446         check_signature() returns something.  (Likewise)
447
448         * utils.py (changes_compare): if there's no changes["version"] use
449         "0" rather than None.  (Avoids a crash on unsigned changes file.)
450
451 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
452
453         * jeri (pp_dep): moved from here to ...
454         * utils.py (pp_dep): here.
455
456         * melanie (main): add reverse dependency checking.
457
458 2004-06-17  James Troup  <james@nocrew.org>
459
460         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
461         * tea (check_dscs): likewise.
462
463         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
464         change from boolean to a variable with 3 possible values, 0 and 1
465         as before, -1 means don't require a signature.  Makes
466         parse_changes() useful for parsing arbitary RFC822-style files,
467         e.g. 'Release' files.
468         (check_signature): add support for detached signatures by passing
469         the files the signature is for as an optional third argument.
470         s/filename/sig_filename/g.  Add a fourth optional argument to
471         choose the keyring(s) to use.  Don't os.path.basename() the
472         sig_filename before checking it for taint.
473         (re_taint_free): allow '/'.
474
475 2004-06-11  James Troup  <james@nocrew.org>
476
477         * tea (check_files): make override.unreadable optional.
478         (validate_sources): close the Sources file handle.
479
480         * docs/README.first: clarify that 'alyson' and running
481         add_constraints.sql by hand is something you only want to do if
482         you're not running 'neve'.
483
484         * docs/README.config (Location::$LOCATION::Suites): document.
485
486         * db_access.py (do_query): also print out the result of the query.
487
488 2004-06-10  James Troup  <james@nocrew.org>
489
490         * katie.py (Katie.cross_suite_version_check): post-woody versions
491         of python-apt's apt_pkg.VersionCompare() function apparently
492         returns variable integers for less than or greater than results -
493         update our result checking to match.
494         * jenna (resolve_arch_all_vs_any): likewise.
495         * charisma (main): likewise.
496
497 2004-06-09  James Troup  <james@nocrew.org>
498
499         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
500         valid_dsc_p and don't run check_source() if check_dsc() failed.
501         (check_dsc): on fatal failures return 0 so check_source() isn't
502         run (since it makes fatal assumptions about the presence of
503         mandatory .dsc fields).  
504         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
505
506 2004-05-07  James Troup  <james@nocrew.org>
507
508         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
509         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
510
511         * katie.conf (Dir::Override): remove duplicate definition.
512
513         * neve (get_or_set_files_id): add an always-NULL last_used column
514         to output.
515
516 2004-04-27  James Troup  <james@nocrew.org>
517
518         * apt.conf-security (tree "dists/stable/updates"): add
519         ExtraOverride - noticed by Joey Hess (#246050).
520         (tree "dists/testing/updates"): likewise.
521
522 2004-04-20  James Troup  <james@nocrew.org>
523
524         * jennifer (check_files): check for existing .changes or .katie
525         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
526         directories.
527
528 2004-04-19  James Troup  <james@nocrew.org>
529
530         * jennifer (check_source): handle failure to remove the temporary
531          directory (used for source tree extraction) better, specifically:
532          if we fail with -EACCES, chmod -R u+rwx the temporary directory
533          and try again and if that works, REJECT the package.
534
535 2004-04-17  James Troup  <james@nocrew.org>
536
537         * docs/madison.1.sgml: document -b/--binary-type,
538         -g/--greaterorequal and -G/--greaterthan.
539
540         * madison (usage): -b/--binary-type only takes a single argument.
541         Document -g/--greaterorequal and -G/--greaterthan.
542         (main): add support for -g/--greaterorequal and -G/--greaterthan.
543
544 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
545
546         * billie: Cleaned up a load of comments, added /README.non-US to
547           the verbatim matches list.
548
549 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
550
551         * utils.py (size_type): Make it use real binary megabytes and
552           kilobytes, instead of the marketing terms used before.
553
554 2004-04-07  James Troup  <james@nocrew.org>
555
556         * katie.py (Katie.check_dsc_against_db): in the case we're
557         ignoring an identical-to-existing orig.tar.gz remember the path to
558         the existent version in pkg.orig_tar_gz.  Adjust query to grab
559         location.path too to be able to do so.
560
561 2004-04-03  James Troup  <james@nocrew.org>
562
563         * debian/control (Depends): add python2.1-email | python (>= 2.2)
564         needed for new utils.rfc2047_encode() function.
565
566         * utils.py (re_parse_maintainer): allow whitespace inside the
567         email address.
568         (Error): new exception base class.
569         (ParseMaintError): new exception class.
570         (force_to_utf8): new function.
571         (rfc2047_encode): likewise.
572         (fix_maintainer): rework.  use force_to_utf8() to force name and
573         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
574         return an rfc2047 value.  Validate the address to catch missing
575         email addresses and (some) broken ones.
576
577         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
578         by adopting foo2047 return value.
579         (Katie.dump_vars): add changedby2047 and maintainer2047 as
580         mandatory changes fields.  Promote changes and maintainer822 to
581         mandatory fields.
582         (Katie.update_subst): default maintainer2047 rather than
583         maintainer822.  User foo2047 rather than foo822 when setting
584         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
585
586         * jennifer (check_changes): set default changes["maintainer2047"]
587         and changes["changedby2047"] values rather than their 822
588         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
589         to new utils.fix_maintainer() - reject on exception and adopt
590         foo2047 return value.
591         (check_dsc): if a mandatory field is missing don't do any further
592         checks and as a result reduce paranoia about dsc[var] existence.
593         Validate the maintainer field by calling new
594         utils.fix_maintainer().
595
596         * ashley (main): add changedby2047 and maintainer2047 to mandatory
597         changes fields.  Promote maintainer822 to a mandatory changes
598         field.  add "pool name" to files fields.
599
600         * test/006/test.py: new file - tests for new
601         utils.fix_maintainer().
602
603 2004-04-01  James Troup  <james@nocrew.org>
604
605         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
606
607         * jennifer (get_changelog_versions): create a symlink mirror of
608         the source files in the temporary directory.
609         (check_source): if check_dsc_against_db() couldn't find the
610         orig.tar.gz bail out.
611
612         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
613         part of the upload store the path to it in pkg.orig_tar_gz and if
614         it can't be found set pkg.orig_tar_gz to -1.
615
616         Explicitly return the second value as None in the (usual) case
617         where we don't have to reprocess.  Remove obsolete diagnostic
618         logs.
619
620         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
621
622         * utils.py (temp_filename): new helper function that wraps around
623         tempfile.mktemp().
624
625         * katie.py (Katie.do_reject): use it and don't import tempfile.
626         * lisa (prod_maintainer): likewise.
627         (edit_note): likewise.
628         (edit_new): likewise.
629         * lauren (reject): likewise.
630         * melanie (main): likewise.
631         * neve (do_sources): likewise.
632         * rene (main): likewise.
633         * tea (validate_sources): likewise.
634
635 2004-03-31  James Troup  <james@nocrew.org>
636
637         * tea (validate_sources): remove unused 's' temporary variable.
638
639 2004-03-15  James Troup  <james@nocrew.org>
640
641         * jennifer (check_dsc): check changes["architecture"] for
642         source before we do anything else.
643
644 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
645
646         * billie: Added
647         * katie.conf (Billie): Added sample Billie stanza to katie.conf
648
649 2004-03-12  James Troup  <james@nocrew.org>
650
651         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
652
653         * katie.conf (Dir::Queue::BTSVersionTrack): define.
654
655         * katie.py (Katie.accept): add support for DebBugs Version
656         Tracking by writing out .versions (generated in jennifer's
657         get_changelog_versions()) and .debinfo (mapping of binary ->
658         source) files.
659
660         * ashley (main): add dsc["bts changelog"].
661
662         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
663
664         * jennifer (check_diff): obsoleted by check_source(), removed.
665         (check_source): new function: create a temporary directory and
666         move into it and call get_changelog_versions().
667         (get_changelog_versions): new function: extract the source package
668         and optionally parse debian/changelog to obtain the version
669         history for the BTS.
670         (process_it): call check_source() rather than check_diff().
671
672 2004-03-08  James Troup  <james@nocrew.org>
673
674         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
675         listbar" rather than "if listbar.count(varfoo)"' change on
676         2004-02-24.
677
678 2004-03-05  James Troup  <james@nocrew.org>
679
680         * alicia (main): don't warn about not closing bugs - we don't
681         manage overrides through the BTS.
682
683 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
684
685         * docs/README.config: lots of updates and corrections.
686         * docs/README.first: likewise.
687
688         * docs/README.config: drop unused Dir::Queue::Root.
689         * katie.conf-non-US: likewise.
690         * katie.conf: likewise.
691         * katie.conf-security: likewise.
692
693 2004-02-27  James Troup  <james@nocrew.org>
694
695         * rose (process_tree): use 'if var in [ list ]' rather than long
696         'if var == foo or var == bar or var == baz'.  Suggested by Martin
697         Michlmayr.
698
699         * jennifer (check_files): reduce 'if var != None' to 'if var' as
700         suggested by Martin Michlmayr.
701         * catherine (poolize): likewise.
702         * charisma (main): likewise.
703         * halle (check_changes): likewise.
704         * heidi (main): likewise.
705         (process_file): likewise.
706         * kelly (install): likewise.
707         (stable_install): likewise.
708         * utils.py (fix_maintainer): likewise.
709
710         * apt.conf: add support for debian-installer in testing-proposed-updates.
711         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
712         add - set to main.
713
714         * mkmaintainers: add "-T15" option to wget of non-US packages file
715         so that we don't hang cron.daily if non-US is down.
716
717         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
718
719         * templates/jennifer.bug-close: add Source and Source-Version
720         pseudo-headers that may be used for BTS Version Tracking someday
721         [ajt@].
722
723         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
724         (main): likewise.
725
726         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
727
728 2004-02-25  James Troup  <james@nocrew.org>
729
730         * katie.conf (SuiteMappings): don't map testing-security to
731         proposed-updates.
732
733 2004-02-24  James Troup  <james@nocrew.org>
734
735         * katie.py (Katie.__init__): remove unused 'values' field.
736
737         * utils.py (extract_component_from_section): use 's.find(c) != -1'
738         rather than 's.count(c) > 0'.
739
740         * katie.py (Katie.source_exists): use "if varfoo in listbar"
741         rather than "if listbar.count(varfoo)".
742         * halle (check_joey): likewise.
743         * jeri (check_joey): likewise.
744         * lisa (edit_index): likewise.
745         * jenna (stable_dislocation_p): likewise.
746
747         * jennifer (main): remove unused global 'nmu'.
748
749 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
750
751         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
752           to be ftpmaster@ftp-master.debian.org to bring it into line with how
753           the dak tools close bugs.
754
755 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
756
757         * katie.conf (Alicia): Added an Alicia section with email address
758         * templates/alicia.bug-close: Added
759         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
760         * alicia (main): Added a -d/--done argument
761
762 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
763
764         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
765
766 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
767
768         * lisa (prod_maintainer): Added function to prod the maintainer without
769           accepting or rejecting the package
770         * templates/lisa.prod: Added this template for the prodding mail
771
772         * .cvsignore: Added neve-files which turns up in new installations
773
774 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
775
776         * alicia (usage): Fixed usage message to offer section and priority
777           as seperately optional arguments.
778         * alicia (main): Added a % (arg) interpolation needed when only
779           one of section or priority is provided and it cannot be found.
780
781 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
782
783         * alicia: Added
784         * docs/alicia.1.sgml: Added
785         * docs/Makefile: Added alicia to the list of manpages to build
786         * docs/README.names: Noted what alicia does
787         * docs/README.first: Noted where alicia is useful
788
789 2004-01-21  James Troup  <james@nocrew.org>
790
791         * madison (main): add -b/--binary-type.
792         (usage): likewise.
793
794         * denise (main): generate debian-installer overrides for testing
795         too.
796         * apt.conf: add support for debian-installer in testing.
797         * katie.conf (Suite::Testing::UdebComponents): set to main.
798
799         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
800         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
801         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
802
803         * utils.py (parse_changes): don't process data not inside the
804         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
805         pointing this out.
806         * test/005/test.py (main): new test to test for above.
807
808 2004-01-04  James Troup  <james@nocrew.org>
809
810         * jenna (write_filelists): correct typo, s/Components/Component/
811         for Options.
812
813 2004-01-04  Ryan Murray  <rmurray@debian.org>
814
815         * cron.buildd: move update of overrides and Packages file...
816         * cron.unchecked: to here.
817         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
818         * katie.conf-security: likewise
819
820 2003-11-20  James Troup  <james@nocrew.org>
821
822         * jenna (main): don't use utils.try_with_debug(), it produces way
823         too much output.
824
825         * halle (check_changes): don't error out if a .changes refers to a
826         non-existent package, just warn and skip the file.
827
828         * docs/README.stable-point-release: mention halle and .changes
829         obsoleted by removal through melanie.  Update for 3.0r2.
830
831         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
832         (Suite::Stable::Description): update for 3.0r2.
833         (Lauren::MoreInfoURL): likewise.
834         * katie.conf-non-US (Suite::Stable::Version): likewise.
835         (Suite::Stable::Description): likewise.
836         (Lauren::MoreInfoURL): likewise.
837
838         * apt.conf.stable (Default): don't define MaxContentsChange.
839         * apt.conf.stable-non-US (Default): likewise.
840
841         * lauren (reject): hack to work around partial replacement of an
842         upload, i.e. one or more binaries superseded by another source
843         package.
844
845 2003-11-17  James Troup  <james@nocrew.org>
846
847         * pseudo-packages.maintainers: point installation-reports at
848         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
849         request.
850
851         * utils.py (parse_changes): calculate the number of lines once
852         with len() rather than max().
853
854         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
855         files, since check_dsc_against_db() deletes the .orig.tar.gz
856         entry.
857
858 2003-11-13  Ryan Murray  <rmurray@debian.org>
859
860         * apt.conf: specify a src override file for debian-installer
861
862 2003-11-10  James Troup  <james@nocrew.org>
863
864         * fernanda.py (strip_pgp_signature): new function - strips PGP
865         signature from a file and returns the modified contents of the
866         file in a string.
867         (display_changes): use it.
868         (read_dsc): likewise.
869
870 2003-11-09  Ryan Murray  <rmurray@debian.org>
871
872         * cron.buildd: export accepted_autobuild table for unstable, and use
873         it to generate the incoming Packages/Sources rather than having apt
874         walk the directory.
875         * apt.conf.buildd: use exported table from cron.buildd to generate
876         Packages/Sources
877
878 2003-11-07  James Troup  <james@nocrew.org>
879
880         * kelly: import errno.
881
882         * katie.py (Katie.build_summaries): sort override disparities.
883
884         * kelly (install): set dsc_component based on the .dsc's component
885         not a random binaries.
886
887 2003-10-29  James Troup  <james@nocrew.org>
888
889         * katie.py (Katie.build_summaries): don't assume changes["source"]
890         exists since it might not.
891
892 2003-10-20  James Troup  <james@nocrew.org>
893
894         * pseudo-packages.maintainers: update security.d.o to use
895         team@s.d.o at joy@'s request.
896
897 2003-10-17  James Troup  <james@nocrew.org>
898
899         * jennifer (check_dsc): use .startswith rather than .find() == 0.
900
901 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
902
903         * tea (chk_bd_process_dir): use .endswith rather than slice.
904
905 2003-10-14  James Troup  <james@nocrew.org>
906
907         * tea (check_build_depends): new function.
908         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
909         in the archive.
910         (main): update for new function.
911         (usage): likewise.
912
913         * katie.py (Katie.do_reject): sanitize variable names,
914         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
915         os.close() to outside if clause.
916
917         * jennifer (check_dsc): check build-depends and
918         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
919         Fold the ARRAY check into the same code block and tidy up it's
920         rejection message.
921         (check_changes): ensure that the Files field is non-empty.
922         Suggested by Santiago Vila <sanvila@unex.es>
923         (check_changes): normalize reject messages.
924         (check_dsc): instead of doing most of the checks inside a for loop
925         and an if, find the dsc_filename in a short loop over files first
926         and then do all the checks.  Add check for more than one .dsc in a
927         .changes which we can't handle.  Normalize reject messages.
928
929 2003-10-13  James Troup  <james@nocrew.org>
930
931         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
932         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
933
934         * jennifer (check_files): Set 'has_binaries' and 'has_source'
935         variables while iterating over 'files'.  Don't regenerate it when
936         checking for source if source is mentioned.
937
938         Reject source only uploads if the config variable
939         Dinstall::Reject::NoSourceOnly is set.
940
941 2003-10-03  James Troup  <james@nocrew.org>
942
943         * rene (main): add nasty hardcoded reference to debian-installer
944         so we detect NBS .udebs.
945
946 2003-09-29  James Troup  <james@nocrew.org>
947
948         * apt.conf (old-proposed-updates): remove.
949         * apt.conf-non-US (old-proposed-updates): likewise.
950
951 2003-09-24  James Troup  <james@nocrew.org>
952
953         * tea (check_files_not_symlinks): new function, ensure files
954         mentioned in the database aren't symlinks.  Includes code to
955         update any files that are like this to their real filenames +
956         location; commented out by though.
957         (usage): update for new function.
958         (main): likewise.
959
960 2003-09-24  Anthony Towns  <ajt@debian.org>
961
962         * vars: external-overrides variable added
963         * cron.daily: Update testing/unstable Task: overrides from joeyh
964         managed external source.
965
966 2003-09-22  James Troup  <james@nocrew.org>
967
968         * kelly (install): if we can't move the .changes into queue/done,
969         fail don't warn and carry on.  The old behaviour pre-dates NI and
970         doesn't make much sense now since jennifer checks both
971         queue/accepted and queue/done for any .changes files it's
972         processing.
973
974         * utils.py (move): don't throw exceptions on existing files or
975         can't overwrite, instead just fubar out.
976
977         * jennifer (check_dsc): also check Build-Depends-Indep for
978         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
979
980 2003-09-18  James Troup  <james@nocrew.org>
981
982         * katie.py (Katie.close_bugs): only log the bugs we've closed
983         once.
984
985         * kelly (main): log as 'kelly', not 'katie'.
986
987 2003-09-16  James Troup  <james@nocrew.org>
988
989         * katie.py (Katie.check_binary_against_db): likewise noramlize.
990
991         * jennifer (check_changes): normalize reject message for "changes
992         file already exists" to be %s: <foo>.
993         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
994         produced by broken dpkg-source in 1.10.11.  Tone down and
995         normalize rejection message for incompatible 'Format' version
996         numbers.
997         (check_diff): likewise tone down and normalize.
998
999 2003-09-07  James Troup  <james@nocrew.org>
1000
1001         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1002         don't bomb out on bogus empty lines.
1003         (build_file_list): check for changes["files"] earlier.  use Dict
1004         to create files[name] dictionary.
1005         (send_mail): don't bother validating arguments.
1006         (check_signature): minor improvements to some of the rejection
1007         messages including listing the key id of the key that wasn't found
1008         in the keyring.
1009         (wrap): new function.
1010
1011         * tea: add new check 'validate-indices' that ensures all files
1012         mentioned in indices (Packages, Sources) files do in fact exist.
1013
1014         * catherine (poolize): use a local re_isadeb which handles legacy
1015         (i.e. no architecture) style .deb filenames.
1016
1017         * rosamund: new script.
1018
1019         * rhona (check_binaries): when checking for binary packages not in
1020         a suite, don't bother selecting files that already have a
1021         last_used date.
1022         (check_sources): likewise.
1023
1024         * rhona: change all SQL EXISTS sub-query clauses to use the
1025         postgres suggested convention of "SELECT 1 FROM".
1026         * andrea (main): likewise.
1027         * tea (check_override): likewise.
1028         * catherine (main): likewise.
1029
1030         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1031         entries and in other suites MustBeNewerThan's.
1032         (SuiteMappings): likewise
1033         * katie.conf-non-US: likewise.
1034         * katie.conf-security: likewise.
1035
1036         * apt.conf-security: remove oldstable.
1037         * apt.conf.stable: likewise.
1038         * apt.conf.stable-non-US: likewise.
1039         * cron.buildd-security: likewise.
1040         * cron.daily-security: likewise.
1041         * vars-security (suites): likewise.
1042         * wanna-build/trigger.daily: likewise.
1043
1044         * claire.py (clean_symlink): move...
1045         * utils.py (clean_symlink): here.
1046
1047         * claire.py (find_dislocated_stable): update accordingly.
1048
1049 2003-08-16  Anthony Towns  <ajt@debian.org>
1050
1051         * katie.py (source_exists): expand the list of distributions
1052         the source may exist in to include any suite that's mapped to
1053         the destination suite (even transitively (a->b->c)). This should
1054         unbreak binary uploads to *-proposed-updates.
1055
1056 2003-08-09  Randall Donald  <rdonald@debian.org>
1057
1058         * lisa (recheck): change changes["distribution"].keys() to
1059         Katie.pkg.changes...
1060
1061 2003-08-08  Randall Donald  <rdonald@debian.org>
1062
1063         * katie.py: only tag bugs as fixed-in-experimental for
1064         experimental uploads
1065
1066 2003-07-26  Anthony Towns  <ajt@debian.org>
1067
1068         * katie.py (source_exists): add an extra parameter to limit the
1069         distribution(s) the source must exist in.
1070         * kelly, lisa, jennifer: update to use the new source_exists
1071
1072 2003-07-15  Anthony Towns  <ajt@debian.org>
1073
1074         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1075         checksums for debian-installer stuff even when it's just a symlink to
1076         another suite
1077
1078         * apt.conf: add the FakeDI line
1079
1080 2003-06-09  James Troup  <james@nocrew.org>
1081
1082         * kelly (check): make sure the 'file' we're looking for in 'files'
1083         hasn't been deleted by katie.check_dsc_against_db().
1084
1085 2003-05-07  James Troup  <james@nocrew.org>
1086
1087         * helena (time_pp): fix s/years/year/ typo.
1088
1089 2003-04-29  James Troup  <james@nocrew.org>
1090
1091         * madison (usage): document -c/--component.
1092
1093         * madison (usage): Fix s/seperated/separated/.
1094         * melanie (usage): likewise.
1095         * jenna (usage): likewise.
1096
1097 2003-04-24  James Troup  <james@nocrew.org>
1098
1099         * cron.daily-non-US: if there's nothing for kelly to install, say
1100         so.
1101
1102         * jennifer (check_timestamps): print sys.exc_value as well as
1103         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1104         failed' with 'deb contents' to make it clearer what timestamp(s)
1105         are being checked.
1106
1107 2003-04-15  James Troup  <james@nocrew.org>
1108
1109         * cron.daily-non-US: only run kelly if there are some .changes
1110         files in accepted.
1111
1112         * rene: add -m/--mode argument which can be either daily (default)
1113         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1114         Various changes to make this possible including a poor attempt at
1115         splitting main() up a little.  De-hardcode suite numbers from SQL
1116         queries and return quietly from do_nviu() if experimental doesn't
1117         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1118         is.
1119
1120         * debian/control (Depends): remove python-zlib as it's obsolete.
1121
1122         * charisma (main): don't slice the \n off strings when we're
1123         strip()-ing it anyway.
1124         * heidi (set_suite): likewise.
1125         (process_file): likewise.
1126         * natalie (process_file): likewise.
1127
1128 2003-04-08  James Troup  <james@nocrew.org>
1129
1130         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1131         slow queries by using one LIKE '%foo%' and then matching against
1132         '%s' or '/%s$' in python.  Also only join location when we need it
1133         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1134         query, so 6s for each sourceful package.
1135
1136         * cron.daily: invoke rene and send the report to ftpmaster.
1137         * cron.daily-non-US: likewise.
1138
1139 2003-03-14  James Troup  <james@nocrew.org>
1140
1141         * utils.py (send_mail): default filename to blank.
1142         * amber (make_advisory): adapt.
1143         * jennifer (acknowledge_new): likewise.
1144         * katie.py (Katie.close_bugs): likewise.
1145         (Katie.announce): likewise.
1146         (Katie.accept): likewise.
1147         (Katie.check_override): likewise.
1148         (Katie.do_reject): likewise.
1149         * kelly (do_reject): likewise.
1150         (stable_install): likewise.
1151         * lisa (do_bxa_notification): likewise.
1152         * lauren (reject): likewise.
1153         * melanie (main): likewise.
1154
1155         * rene (add_nbs): check any NBS packages against unstable to see
1156         if they haven't been removed already.
1157
1158         * templates/katie.rejected: remove paragraph about rejected files
1159         since they're o-rwx due to c-i-m and the uploader can't do
1160         anything about them and shania will take care of them anyway.
1161
1162         * madison (usage): update usage example to use comma seperation.
1163         * melanie (usage): likewise.
1164
1165         * utils.py (split_args): new function; splits command line
1166         arguments either by space or comma (whichever is used).  Also has
1167         optional-but-default DWIM spurious space detection to avoid
1168         'command -a i386, m68k' problems.
1169         (parse_args): use it.
1170         * melanie (main): likewise.
1171
1172         * melanie (main): force the admin to tell someone if we're not
1173         doing a rene-led removal (or closing a bug, which counts as
1174         telling someone).
1175
1176 2003-03-05  James Troup  <james@nocrew.org>
1177
1178         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1179         and python sections.
1180         * katie.conf-security (Section): likewise.
1181
1182         * add_constraints.sql: add uid and uid_id_seq to grants.
1183
1184         * lisa (determine_new): also warn about adding overrides to
1185         oldstable.
1186
1187         * madison (main): make the -S/--source-and-binary query obey
1188         -s/--suite restrictions.
1189
1190 2003-03-03  James Troup  <james@nocrew.org>
1191
1192         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1193         exists, warn the user that our output might seem strange.  (People
1194         get confused by multiple versions in a suite which happens
1195         post-kelly but pre-jenna.)
1196
1197 2003-02-21  James Troup  <james@nocrew.org>
1198
1199         * kelly (main): we don't need to worry about StableRejector.
1200
1201         * melanie (main): sort versions with apt_pkg.VersionCompare()
1202         prior to output.
1203
1204         * lauren: new script to manually reject packages from
1205         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1206
1207 2003-02-20  James Troup  <james@nocrew.org>
1208
1209         * kelly (init): remove unused -m/--manual-reject argument.
1210
1211         * katie.py (Katie.force_reject): renamed from force_move to make
1212         it more explicit what this function does.
1213         (Katie.do_reject): update to match.
1214
1215         * utils.py (prefix_multi_line_string): add an optional argument
1216         include_blank_lines which defaults to 0.  If non-zero, blank lines
1217         will be includes in the output.
1218
1219         * katie.py (Katie.do_reject): don't add leading space to each line
1220         of the reject message.  Include blank lines when showing the
1221         message to the user.
1222
1223 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1224
1225         * utils.py (fix_maintainer): replace pointless re.sub() with
1226         simple string format.
1227
1228 2003-02-11  James Troup  <james@nocrew.org>
1229
1230         * lisa (edit_overrides): only strip-to-one-char and upper-case
1231         non-numeric answers.  Fixes editing of items with indices >= 10;
1232         noticed by Randall.
1233         (edit_overrides): correct order of arguments to "not a valid
1234         index" error message.
1235
1236         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1237         remove_duplicate_versions(); thanks to aj for the initial
1238         diagnosis.
1239         (remove_duplicate_versions): correct how we return
1240         dominant_versions.
1241         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1242         a tuple rather than just a tuple.
1243
1244 2003-02-10  James Troup  <james@nocrew.org>
1245
1246         * emilie: new script - sync fingerprint and uid tables with a
1247         debian.org LDAP DB.
1248
1249         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1250         in 'fingerprint'.
1251
1252         * db_access.py (get_or_set_uid_id): new function.
1253
1254         * jennifer (main): update locking to a) not used FCNTL (deprecated
1255         in python >= 2.2) and b) acknowledge upstream's broken
1256         implementation of lockf (see Debian bug #74777), c) try to acquire
1257         the lock non-blocking.
1258         * kelly (main): likewise.
1259
1260         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1261
1262         * madison (main): only append the package to new_packages if it's
1263         not already in there; fixes -S/--source-and-binary for cases where
1264         the source builds a binary package of the same name.
1265
1266 2003-02-10  Anthony Towns  <ajt@debian.org>
1267
1268         * madison (main): use explicit JOIN syntax for
1269         -S/--source-and-binary queries to reduce the query's runtime from
1270         >10 seconds to negligible.
1271
1272 2003-02-08  James Troup  <james@nocrew.org>
1273
1274         * rene (main): in the NVIU output, append items to lists, not
1275         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1276         should be removed.
1277
1278 2003-02-07  James Troup  <james@nocrew.org>
1279
1280         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1281         Sources [aj].
1282
1283         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1284         O. Benham/Adam Heath/.
1285
1286         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1287         (Suite::Stable::Description): update for 3.0r1a.
1288         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1289
1290         * utils.py (gpgv_get_status_output): rename from
1291         get_status_output().
1292
1293         * neve (check_signature): use gpgv_get_status_output and Dict from
1294         utils().  Add missing newline to error message about duplicate tokens.
1295
1296         * saffron (per_arch_space_use): also print space used by source.
1297         (output_format): correct string.join() invocation.
1298
1299         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1300
1301 2003-02-04  James Troup  <james@nocrew.org>
1302
1303         * cron.buildd: correct generation of Packages/Sources and grep out
1304         non-US/non-free as well as non-free.
1305
1306 2003-02-03  Ryan Murray  <rmurray@debian.org>
1307
1308         * cron.buildd: generate quinn-diff output with full Packages/Sources
1309           files to get out-of-date vs. uncompiled right.
1310         * apt.conf.buildd: no longer generate uncompressed files, as they
1311           are generated in cron.buildd instead
1312         * add -i option to quinn-diff to ignore binary-all packages
1313         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1314           aren't in the packages file, the arch that uploaded them will build
1315           them anyways...
1316
1317 2003-01-30  James Troup  <james@nocrew.org>
1318
1319         * rene (main): only print suggested melanie command when there's
1320         some NBS to remove.
1321
1322 2003-01-30  Ryan Murray  <rmurray@debian.org>
1323
1324         * cron.buildd: fix incorrectly inverted lockfile check
1325
1326 2003-01-29  Ryan Murray  <rmurray@debian.org>
1327
1328         * cron.buildd: generate override.sid.all3.src
1329         * apt.conf.buildd: use generated override.sid.all3.src
1330
1331 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1332
1333         * utils.py (get_status_output): moved from jennifer.
1334         (Dict): likewise.
1335         (check_signature): likewise.
1336
1337         * jennifer (get_status_output): moved to utils.py.
1338         (Dict): likewise.
1339         (check_signature): likewise.
1340
1341         * utils.py (check_signature): add an argument to specifiy which
1342         function to call when an error was found.
1343         (check_signature): document this function better.
1344
1345         * jennifer (check_files): pass the reject function as an argument
1346         to utils.check_signature.
1347         (process_it): likewise.
1348
1349 2003-01-20  James Troup  <james@nocrew.org>
1350
1351         * rene (main): lots of changes to improve the output and make it
1352         more useful.
1353
1354         * katie.py (Katie.check_override): make the override messages
1355         clearer (hopefully).
1356
1357 2002-12-26  James Troup  <james@nocrew.org>
1358
1359         * ziyi (usage): document the ability to pass suite(s) as
1360         argument(s).
1361         (main): read apt.conf after checking for -h/--help.
1362
1363         * tea (main): take the check to run as an argument.
1364
1365         * saffron.R: R script to graph daily install runs.
1366
1367         * saffron: new script; various stats functions.
1368
1369         * rhona (main): connect to the database after checking for -h/--help.
1370
1371         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1372
1373         * melanie (main): sort versions with utils.arch_compare_sw().
1374
1375         * madison (usage): alphabetize order of options.
1376         * melanie (usage): likewise.
1377
1378         * kelly (usage): fix usage short description (we aren't dinstall).
1379
1380         * julia (usage): fix usage description and alphabetize order of
1381         options.
1382
1383         * jeri (usage): fix usage short description.
1384
1385         * jennifer (main): move --help and --version checks from here...
1386         (init): to here so that they work with an empty katie.conf.
1387         * kelly: likewise.
1388
1389         * alyson (usage): new function.
1390         (main): use it.
1391         * andrea: likewise.
1392         * ashley: likewise.
1393         * cindy: likewise.
1394         * denise: likewise.
1395         * helena: likewise.
1396         * neve: likewise.
1397         * rene: likewise.
1398         * rose: likewise.
1399         * tea: likewise.
1400
1401         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1402         entry that caused tasks to be omitted from 3.0r1.
1403
1404 2002-12-10  James Troup  <james@nocrew.org>
1405
1406         * jennifer (check_files): sanity check the Depends field to ensure
1407         it's non-empty if present since apt chokes on an empty one.
1408         Thanks to Ryan Murray for the idea.
1409
1410 2002-12-08  James Troup  <james@nocrew.org>
1411
1412         * katie.conf-security (Helena::Directories): new; include accepted
1413         in addition to byhand and new.
1414
1415         * helena (process_changes_files): use utils.arch_compare_sw().
1416         Justify things based on the longest [package, version,
1417         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1418         the commas in architecture and version lists for the same reason.
1419         (main): make directories we process configurable through
1420         Helena::Directories in the config file; if that doesn't exist
1421         default to the old hardcoded values (byhand & new).
1422
1423         * utils.py (arch_compare_sw): moved here from madison.
1424         * madison (main): adjust to compensate.
1425
1426 2002-12-06  James Troup  <james@nocrew.org>
1427
1428         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1429         right filename.
1430
1431 2002-12-05  James Troup  <james@nocrew.org>
1432
1433         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1434
1435 2002-11-28  Randall Donald  <rdonald@debian.org>
1436
1437         * fernanda.py (read_control): fix typo of 'Architecture'.
1438
1439 2002-11-26  James Troup  <james@nocrew.org>
1440
1441         * lisa (check_pkg): call less with '-R' so we see the colour from
1442         Randall's fernanda changes.
1443
1444         * neve (process_sources): if Directory points to a legacy location
1445         but the .dsc isn't there; assume it's broken and look in the pool.
1446         (update_section): new, borroed from alyson.
1447         (do_da_do_da): use it.
1448         (process_packages): add suite_it to the cache key used for
1449         arch_all_cache since otherwise we only add a package to the first
1450         suite it's in and ignore any subsequent ones.
1451
1452         * katie.conf-non-US (Location): fixed to reflect reality (all
1453         suites, except old-proposed-updates (which is legacy-mixed)) are
1454         pool.
1455
1456         * utils.py (try_with_debug): wrapper for print_exc().
1457         * jenna (main): use it.
1458         * neve (main): likewise.
1459
1460 2002-11-25  Randall Donald  <rdonald@debian.org>
1461
1462         * fernanda.py (main): added -R to less command line for raw control
1463         character support to print colours
1464         (check_deb): Instead of running dpkg -I on deb file, call
1465         output_deb_info, the new colourized control reporter.
1466         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1467         of printing out each .dsc line.
1468         (output_deb_info): new function. Outputs each key/value pair from
1469         read_control except in special cases where we highlight section,
1470         maintainer, architecture, depends and recommends.
1471         (create_depends_string): new function. Takes Depends tree and looks
1472         up it's compontent via projectb db, colourizes and constructs a
1473         depends string in original order.
1474         (read_dsc): new function. reads and parses .dsc info via
1475         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1476         colourized.
1477         (read_control): new function. reads and parses control info via
1478         apt_pkg. Depends and Recommends are split in to list structures,
1479         Section and Architecture are colourized. Maintainer is colourized
1480         if it has a localhost.localdomain address.
1481         (split_depends): new function. Creates a list of lists of
1482         dictionaries of depends (package,version relation). Top list is
1483         colected from comma delimited items. Sub lists are | delimited.
1484         (get_comma_list): new function. splits string input among commas
1485         (get_or_list): new function. splits string input among | delimiters
1486         (get_depends_parts): new function. Creates dictionary of package name
1487         and version relation from dependancy string.
1488         Colours for section and depends are per component. Unfound depends
1489         are in bold. Lookups using version info is not supported yet.
1490
1491 2002-11-22  James Troup  <james@nocrew.org>
1492
1493         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1494         'udmsearch'.
1495
1496         * amber (make_advisory): string.atol() is deprecated and hasn't
1497         been ported to string methods.  Use long() instead.
1498
1499         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1500         creating the database since we'll fail badly if it's created with
1501         e.g. UNICODE encoding.
1502
1503         * rose (main): AptCnf is a global.
1504
1505         * neve (get_location_path): new function determines the location
1506         from the the first (left-most) directory of a Filename/Directory.
1507         (process_sources): don't need 'location' anymore.  Use
1508         utils.warn().  Use the Directory: field for each package to find
1509         the .dsc.  Use get_location_path() to determine the location for
1510         each .dsc.
1511         (process_packages): do't need 'location' anymore.  Use
1512         utils.warn().  Use get_location_path().
1513         (do_sources): don't need 'location', drop 'prefix' in favour of
1514         being told the full path to the Sources file, like
1515         process_packages().
1516         (do_da_do_da): main() renamed, so that main can call us in a
1517         try/except.  Adapt for the changes in do_sources() and
1518         process_packages() above.  Assume Sources and Packages file are in
1519         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1520
1521         * katie.conf-security (Location): fixed to reflect reality (all
1522         suites are pool, not legacy).
1523
1524         * utils.py (print_exc): more useful (i.e. much more verbose)
1525         traceback; a recipe from the Python cookbook.
1526         * jenna (main): use it.
1527         * neve (main): likewise.
1528
1529 2002-11-19  James Troup  <james@nocrew.org>
1530
1531         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1532         handling which was FUBAR for multi-suite uploads.  Now we just
1533         make a dictionary of destinations to copy to and iterate over
1534         those.
1535
1536         * fernanda.py (check_deb): run linda as well as lintian.
1537
1538 2002-10-21  James Troup  <james@nocrew.org>
1539
1540         * melanie (main): change X-Melanie to X-Katie and prefix it with
1541         'melanie '.
1542
1543         * lisa (main): prefix X-Katie with 'lisa '.
1544
1545         * jennifer (clean_holding): fix typo in string method changes;
1546         s/file.find(file/file.find(/.
1547
1548         * cron.daily: invoke helena and send the report to ftpmaster.
1549         * cron.daily-non-US: likewise.
1550
1551 2002-10-16  James Troup  <james@nocrew.org>
1552
1553         * kelly (check): call reject() with a blank prefix when parsing
1554         the return of check_dsc_against_db() since it does its own
1555         prefix-ing.
1556
1557         * rose: new script; only handles directory creation initally.
1558
1559         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1560         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1561
1562 2002-10-06  James Troup  <james@nocrew.org>
1563
1564         * rene (main): remove bogus argument handling.
1565
1566         * kelly: katie, renamed.
1567         * cron.daily: adapt for katie being renamed to kelly.
1568         * cron.daily-non-US: likewise.
1569         * amber (main): likewise.
1570
1571         * Changes for python 2.1.
1572
1573         * kelly: time.strftime no longer requires a second argument of
1574         "time.localtime(time.time())".
1575         * logging.py: likewise.
1576         * rhona: likewise.
1577         * shania (init): likewise.
1578
1579         * amber: use augmented assignment.
1580         * catherine (poolize): likewise.
1581         * claire.py (fix_component_section): likewise.
1582         * halle (check_changes): likewise.
1583         * helena: likewise.
1584         * jenna: likewise.
1585         * jennifer: likewise.
1586         * jeri: likewise.
1587         * katie.py: likewise.
1588         * kelly: likewise.
1589         * lisa: likewise.
1590         * madison (main): likewise.
1591         * melanie: likewise.
1592         * natalie: likewise.
1593         * neve: likewise.
1594         * rhona: likewise.
1595         * tea: likewise.
1596         * utils.py: likewise.
1597         * ziyi: likewise.
1598
1599         * amber: use .endswith.
1600         * fernanda.py: likewise.
1601         * halle (main): likewise.
1602         * jennifer: likewise.
1603         * jeri: likewise.
1604         * katie.py: likewise.
1605         * kelly: likewise.
1606         * lisa: likewise.
1607         * neve: likewise.
1608         * shania (main): likewise.
1609         * utils.py: likewise.
1610
1611         * alyson: use string methods.
1612         * amber: likewise.
1613         * andrea: likewise.
1614         * ashley: likewise.
1615         * catherine: likewise.
1616         * charisma: likewise.
1617         * claire.py: likewise.
1618         * db_access.py: likewise.
1619         * denise: likewise.
1620         * halle: likewise.
1621         * heidi: likewise.
1622         * helena: likewise.
1623         * jenna: likewise.
1624         * jennifer: likewise.
1625         * jeri: likewise.
1626         * julia: likewise.
1627         * katie.py: likewise.
1628         * kelly: likewise.
1629         * lisa: likewise.
1630         * logging.py: likewise.
1631         * madison: likewise.
1632         * melanie: likewise.
1633         * natalie: likewise.
1634         * neve: likewise.
1635         * rene: likewise.
1636         * tea: likewise.
1637         * utils.py: likewise.
1638         * ziyi: likewise.
1639
1640 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1641
1642         * utils.py (parse_changes): use <string>.startswith() rather than
1643         string.find().
1644
1645 2002-08-27  Anthony Towns  <ajt@debian.org>
1646
1647         * katie.py (in_override_p): when searching for a source override,
1648         and the dsc query misses, search for both udeb and deb overrides
1649         as well. Should fix the UNACCEPT issues with udebs.
1650
1651 2002-08-24  James Troup  <james@nocrew.org>
1652
1653         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1654         source+binary package finding code which was causing severe
1655         performance degradation with postgres 7.2.
1656
1657 2002-08-14  James Troup  <james@nocrew.org>
1658
1659         * julia (main): use the pwd.getpwall() to get system user info
1660         rather than trying to read a password file.  Add a -n/--no-action
1661         option.
1662
1663         * cron.hourly: julia no longer takes any arguments.
1664         * cron.hourly-non-US: likewise.
1665
1666 2002-08-07  James Troup  <james@nocrew.org>
1667
1668         * katie (install): handle multi-suite uploads when CopyChanges
1669         and/or CopyKatie are in use, ensuring we only copy stuff once.
1670
1671 2002-08-01  Ryan Murray  <rmurray@debian.org>
1672
1673         * wanna-build/trigger.daily: initial commit, with locking
1674         * cron.buildd: add locking against daily run
1675
1676 2002-07-30  James Troup  <james@nocrew.org>
1677
1678         * melanie (main): readd creation of suite_ids_list so melanie is
1679         remotely useful again.
1680
1681         * katie.conf: adopt for woody release; diable
1682         StableDislocationSupport, add oldstable, adjust other suites and
1683         mappings, fix up location.
1684         * katie.conf-non-US: likewise.
1685         * katie.conf-security: likewise.
1686
1687         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1688         stable.
1689         * apt.conf.stable-non-US: likewise.
1690
1691         * apt.conf-security: adapt for woody release; adding oldstable,
1692         oldstable, adjust stable and testing.
1693         * cron.daily-security: likewise.
1694         * cron.buildd-security: likewise.
1695
1696         * apt.conf: adapt for woody release; rename woody-proposed-updates
1697         to testing-proposed-updates and proposed-updates to
1698         old-proposed-updates.
1699         * apt.conf-non-US: likewise.
1700
1701         * vars-non-US (copyoverrides): add sarge.
1702         * vars (copyoverrides): likewise.
1703
1704         * vars-security (suites): add oldstable.
1705
1706 2002-07-22  Ryan Murray  <rmurray@debian.org>
1707
1708         * apt.conf.security-buildd: use suite codenames instead of
1709           distnames.
1710
1711 2002-07-16  James Troup  <james@nocrew.org>
1712
1713         * denise (main): fix filenames for testing override files.
1714
1715 2002-07-14  James Troup  <james@nocrew.org>
1716
1717         * jennifer (process_it): call check_md5sums later so we can check
1718         files in the .dsc too
1719         (check_md5sums): check files in the .dsc too.  Check both md5sum
1720         and size.
1721
1722         * melanie (main): use parse_args() and join_with_commas_and() from
1723         utils.  If there's nothing to do, say so and exit, don't ask for
1724         confirmation etc.
1725
1726         * amber (join_with_commas_and): moved from here to ...
1727         * utils.py (join_with_commas_and): here.
1728
1729 2002-07-13  James Troup  <james@nocrew.org>
1730
1731         * madison (main): use parse_args() from utils.  Support
1732         -c/--component.
1733
1734         * jenna (parse_args): moved from here to ...
1735         * utils.py (parse_args): here.
1736
1737         * katie.conf (Architectures): minor corrections to the description
1738         for arm, mips and mipsel.
1739         * katie.conf-non-US (Architectures): likewise.
1740         * katie.conf-security (Architectures): likewise.
1741
1742         * cron.daily-security: use natalie's new -a/--add functionality to
1743         flesh out the security overrides.
1744
1745 2002-07-12  James Troup  <james@nocrew.org>
1746
1747         * cron.buildd (ARCHS): add arm.
1748
1749         * katie.conf: 2.2r7 was released.
1750         * katie.conf-non-US: likewise.
1751
1752         * utils.py (parse_changes): handle a multi-line field with no
1753         starting line.
1754
1755 2002-06-25  James Troup  <james@nocrew.org>
1756
1757         * templates/amber.advisory (To): add missing email address since
1758         __WHOAMI__ is only a name.
1759
1760         * katie.conf-security (Melane::LogFile): correct to go somewhere
1761         katie has write access to.
1762         (Location::/org/security.debian.org/ftp/dists/::Suites): add
1763         Testing.
1764
1765         * natalie: add support for -a/-add which adds packages only
1766         (ignoring changes and deletions).
1767
1768         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
1769         use FindB, not get.
1770
1771 2002-06-22  James Troup  <james@nocrew.org>
1772
1773         * jennifer (check_files): validate the package name and version
1774         field.  If 'Package', 'Version' or 'Architecture' are missing,
1775         don't try any further checks.
1776         (check_dsc): likewise.
1777
1778         * utils.py (re_taint_free): add '~' as a valid character.
1779
1780 2002-06-20  Anthony Towns  <ajt@debian.org>
1781
1782         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
1783
1784 2002-06-09  James Troup  <james@nocrew.org>
1785
1786         * jennifer (check_files): reduce useless code.
1787
1788         * cron.daily-security: run symlinks -dr on $ftpdir.
1789
1790         * vars-security (ftpdir): add.
1791
1792 2002-06-08  James Troup  <james@nocrew.org>
1793
1794         * neve (update_override_type): transaction is handled higher up in
1795         main().
1796         (update_priority): likewise.
1797         (process_sources): remove code that makes testing a duplicate of
1798         stable.
1799         (process_packages): likewise.
1800
1801         * templates/amber.advisory: add missing mail headers.
1802
1803         * cron.daily-security: also call apt-ftparchive clean for
1804         apt.conf.buildd-security.
1805         * cron.weekly: likewise.
1806
1807         * amber (do_upload): write out a list of source packages (and
1808         their version) uploaded for testing.
1809         (make_advisory): add more Subst mappings for the mail headers.
1810         (spawn): check for suspicious characters in the command and abort
1811         if their found.
1812
1813 2002-06-07  James Troup  <james@nocrew.org>
1814
1815         * ziyi (main): remove the 'nonus'/'security' hacks and use
1816         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
1817         the lower level Release files, even if they don't exist.  fubar
1818         out if we can't open a lower level Release file for writing.
1819
1820         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
1821         ziyi.
1822         * katie.conf-security (Dinstall): likewise.
1823
1824         * amber (do_upload): renamed from get_file_list().  Determine the
1825         upload host from the original component.
1826         (init): Add a -n/--no-action option.  Fix how we get changes_files
1827         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
1828         sys.argv).  Add an Options global.
1829         (make_advisory): support -n/--no-action.
1830         (spawn): likewise.
1831         (main): likewise.
1832         (usage): document -n/--no-action.
1833
1834         * cron.buildd-security: fix path to Packages-arch-specific in
1835         quinn-diff invocation.
1836
1837         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
1838         to proper suite names (i.e. stable, testing) rather than codenames
1839         (potato, woody).
1840         (Dinstall::DefaultSuite): likewise.
1841         (Suite): likewise.
1842         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
1843         * vars-security (suites): likewise.
1844         * apt.conf-security: likewise.
1845
1846         * katie.conf-security (Component): add "updates/" prefix.
1847         (Suite::*::Components): likewise.
1848         (ComponentMappings): new; map all {ftp-master,non-US} components
1849         -> updates/<foo>.
1850
1851         * katie.conf-security (Natalie): removed; the options have
1852         defaults and ComponentPosition is used by alyson which doesn't
1853         work on security.d.o.
1854         (Amber): replace UploadHost and UploadDir with ComponentMappings
1855         which is a mapping of components -> URI.
1856         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
1857         (SuiteMappings): use "silent-map" in preference to "map".
1858
1859         * cron.unchecked-security: fix call to cron.buildd-security.
1860
1861         * cron.daily-security: map local suite (stable) -> override suite
1862         (potato) when fixing overrides.  Correct component in natalie call
1863         to take into account "updates/" prefix.  Fix cut'n'waste in
1864         override.$dist.all3 generation, the old files weren't being
1865         removed, so they were endlessly growing.
1866
1867         * neve (main): don't use .Find for the CodeName since we require
1868         it.  Location::*::Suites is a ValueList.
1869         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
1870         out on expired keys, just warn.
1871         (update_override_type): new function; lifted from alyson.
1872         (update_priority): likewise.
1873         (main): use update_{override_type,priority}().
1874
1875         * jennifer (check_distributions): remove redunant test for
1876         SuiteMappings; ValueList("does-not-exist") returns [] which is
1877         fine.  Add support for a "silent-map" type which doesn't warn
1878         about the mapping to the user.
1879         (check_files): add support for ComponentMappings, similar to
1880         SuiteMappings, but there's no type, just a source and a
1881         destination and the original component is stored in "original
1882         component".
1883         * katie.py (Katie.dump_vars): add "original component" as an
1884         optionsal files[file] dump variable.
1885
1886         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
1887         query.  Add support for section-less legacy locations like current
1888         security.debian.org through YetAnotherConfigBoolean
1889         'LegacyStableHasNoSections'.
1890         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
1891
1892         * utils.py (real_arch): moved here from ziyi.
1893         * ziyi (real_arch): moved to utils.py.
1894         * ziyi (main): likewise.
1895
1896         * claire.py (find_dislocated_stable): use real_arch() with
1897         filter() to strip out source and all.
1898         * neve (main): likewise.
1899         * rene (main): likewise.
1900         * jeri (parse_packages): likewise.
1901
1902 2002-06-06  James Troup  <james@nocrew.org>
1903
1904         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
1905         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
1906         doing.
1907
1908 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1909
1910         * jeri (check_joey): check if the line contains two elements
1911         before accessing the second.  Also, strip trailing spaces as well
1912         as the newline.
1913         * halle (check_joey): likewise.
1914
1915 2002-06-05  James Troup  <james@nocrew.org>
1916
1917         * cron.unchecked-security: new file; like cron.unchecked but if
1918         there's nothing to do exit so we don't call cron.buildd-security.
1919
1920         * apt.conf.buildd-security: new file.
1921
1922         * vars (archs): alphabetize.
1923         * vars-non-US (archs): likewise.
1924
1925         * vars-security: add unchecked.
1926
1927         * madison (main): reduce rather bizarrely verbose and purposeless
1928         code to print arches to a simple string.join.
1929
1930         * katie.conf (Suites::Unstable): add UdebComponents, a new
1931         valuelist of suites, used by jenna to flesh out the list of
1932         <suite>_main-debian-installer-binary-<arch>.list files generated.
1933         (Dinstall): add StableDislocationSupport, a new boolean used by
1934         jenna to enable or disable stable dislocation support
1935         (i.e. claire), as true.
1936
1937         * katie.conf (Dinstall): add StableDislocationSupport, a new
1938         boolean used by jenna to enable or disable stable dislocation
1939         support (i.e. claire), as true.
1940         * katie.conf-non-US: likewise.
1941         * katie.conf-security: likewise.
1942
1943         * cron.daily-security: generate .all3 overrides for the buildd
1944         support.  Freshen a local copy of Packages-arch-specific from
1945         buildd.debian.org.
1946
1947         * claire.py (find_dislocated_stable): disable the support for
1948         files in legacy-mixed locations since none of the Debian archives
1949         have any anymore.
1950
1951         * helena: new script; produces a report on NEW and BYHAND
1952         packages.
1953
1954         * jenna: rewritten from scratch to fix speed problems.  Run time
1955         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
1956         minutes, 105 seconds are the monster query and 70 odd seconds is
1957         claire.
1958
1959         * apt.conf.buildd (Default): remove MaxContentsChange as it's
1960         irrelevant.
1961
1962 2002-06-05  Ryan Murray  <rmurray@debian.org>
1963
1964         * cron.buildd-security: new file.
1965
1966 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
1967
1968         * denise (list): take a file argument and use it.
1969         (main): don't abuse sys.stdout, just write to the file.
1970
1971         * claire.py (usage): Fix misspelling.
1972         (clean_symlink): Simplify.
1973         (find_dislocated_stable): Avoid unnecessary work.
1974
1975 2002-05-29  James Troup  <james@nocrew.org>
1976
1977         * cameron: removed; apt-ftparchive can simply walk the directory.
1978
1979 2002-05-26  Anthony Towns  <ajt@debian.org>
1980
1981         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
1982         for the autobuilders.
1983
1984 2002-05-24  Ryan Murray  <rmurray@debian.org>
1985
1986         * cron.buildd: update override files before running apt-ftparchive
1987
1988 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
1989
1990         * amber (main): remove extra space in prompt.
1991
1992         * utils.py (validate_changes_file_arg): use original filename in
1993         error messages.
1994
1995         * jeri (check_joey): close file after use.
1996         (parse_packages): likewise.
1997         (main): setup debug option properly.
1998
1999         * melanie (main): remove unused packages variable and simplify the
2000         code to build up con_packages by using repr().
2001
2002 2002-05-23  James Troup  <james@nocrew.org>
2003
2004         * lisa (recheck): when we reject, also return 0 so the package is
2005         skipped.
2006         (sg_compare): fix note sorting.
2007         (recheck): remove the .katie file after rejection.
2008
2009         * katie.py (Katie.accept): accepted auto-build support take 3;
2010         this time adding support for security.  Security needs a) non-pool
2011         files copied rather than symlinked since accepted is readable only
2012         by katie/security and www-data needs to be able to see the files,
2013         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2014         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2015         SecurityAcceptedAutoBuild is a new boolean which controls whether
2016         or not normal or security style is used.  The unstable_accepted
2017         table was renamed to accepted_autobuild and a suite column added.
2018         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2019         didn't have it's last_used/in_accepted flags correctly updated.
2020         * katie (install): likewise.
2021         * rhona (clean_accepted_autobuild): likewise.
2022
2023 2002-05-22  James Troup  <james@nocrew.org>
2024
2025         * lisa (sort_changes): new function; sorts changes properly.
2026         Finally.
2027         (sg_compare): new function; helper for sort_changes().  Sorts by
2028         have note and time of oldest upload.
2029         (indiv_sg_compare): new function; helper for sort_changes().
2030         Sorts by source version, have source and filename.
2031         (main): use sort_changes().
2032         (changes_compare): obsoleted; removed.
2033
2034 2002-05-20  James Troup  <james@nocrew.org>
2035
2036         * rhona (clean_accepted_autobuild): don't die if a file we're
2037         trying to remove doesn't exist.  Makes rhona more friendly to
2038         katie/katie.py crashes/bugs without any undue cost.
2039
2040 2002-05-19  James Troup  <james@nocrew.org>
2041
2042         * lisa (main): if sorting a large number of changes give some
2043         feedback.
2044         (recheck): new function, run the same checks (modulo NEW,
2045         obviously) as katie does, if they fail do the standard
2046         reject/skip/quit dance.
2047         (do_pkg): use it.
2048
2049         * katie (install): don't try to unlink the symlink in the
2050         AcceptedAutoBuild support if the destination is not a symlink (or
2051         doesn't exist).  Avoids unnecessary bombs on previous partial
2052         accepts and will still bomb hard if the file exists and isn't a
2053         symlink.
2054
2055         * utils.py: blah, commands _is_ used when the mail stuff isn't
2056         commented out like it is in my test environment.
2057
2058         * lisa (changes_compare): "has note" overrides everything else.
2059         Use .katie files rather than running parse_changes, faster and
2060         allows "has note" to work.  Correct version compare, it was
2061         reversed.  Ctime check should only kick in if the source packages
2062         are not the same.
2063         (print_new): print out and return any note.  Rename 'ret_code' to
2064         'broken'.
2065         (edit_new): renamed from spawn_editor.  Don't leak file
2066         descriptors.  Clean up error message if editor fails.
2067         (edit_note): new function, allows one to edit notes.
2068         (do_new): add note support, editing and removing.
2069         (init): kill -s/--sort; with notes we always want to use our
2070         sorting method.
2071         (usage): likewise.
2072
2073         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2074         changes field.
2075
2076         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2077         it default to 0.  Adapt tests to assume it's boolean.
2078         * fernanda.py (check_changes): adjust call appropriately.
2079         * halle (check_changes): likewise.
2080         * jennifer (check_changes): likewise.
2081         * jeri (check_changes): likewise.
2082         * shania (flush_orphans): likewise.
2083
2084         * jennifer (check_dsc): pass is_a_dsc by name when calling
2085         build_file_list() for clarity.
2086         * shania (flush_orphans): likewise.
2087         * tea (check_missing_tar_gz_in_dsc): likewise.
2088
2089         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2090         calling parse_changes() for clarity.
2091         * tea (check_dscs): likewise.
2092
2093         * utils.py (parse_changes): make dsc_whitespace_rules default to
2094         not true.
2095         * halle (check_changes): adjust call appropriately.
2096         * jennifer (check_changes): likewise.
2097         * jeri (check_changes): likewise.
2098         * lisa (changes_compare): likewise.
2099         * utils.py (changes_compare): likewise.
2100         * melanie (main): likewise.
2101         * shania (flush_orphans): likewise.
2102         * fernanda.py (check_changes): likewise.
2103
2104 2002-05-18  James Troup  <james@nocrew.org>
2105
2106         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2107         it's not useful and by and large a duplication of information
2108         available in readable format in other files.
2109
2110 2002-05-16  Ryan Murray  <rmurray@debian.org>
2111
2112         * melanie: Dir::TemplatesDir -> Dir::Templates
2113
2114 2002-05-15  Ryan Murray  <rmurray@debian.org>
2115
2116         * cameron: correct the use of os.path.join
2117
2118 2002-05-15  Anthony Towns  <ajt@debian.org>
2119
2120         * ziyi: Update to match the new format for Architectures/Components
2121         in katie.conf.
2122
2123 2002-05-14  James Troup  <james@nocrew.org>
2124
2125         * amber: new script; 'installer' wrapper script for the security
2126         team.
2127
2128         * katie.py (Katie.announce): remove unused 'dsc' local
2129         variable. (pychecker)
2130
2131         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2132
2133         * neve: don't import sys, we don't use it. (pychecker)
2134         (check_signature): fix return type mismatch. (pychecker)
2135
2136         * utils.py: don't import commands, we don't use it.  (pychecker)
2137
2138         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2139
2140         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2141         obsoleted by the change to "othercomponents" handling in jennifer
2142         detailed below.
2143         (Katie.cross_suite_version_check): new function; implements
2144         cross-suite version checking rules specified in the conf file
2145         while also enforcing the standard "must be newer than target
2146         suite" rule.
2147         (Katie.check_binary_against_db): renamed, since it's invoked once
2148         per-binary, "binaries" was inaccurate.  Use
2149         cross_suite_version_check() and don't bother with the "oldfiles"
2150         rubbish as jennifer works out "othercomponents" herself now.
2151         (Katie.check_source_against_db): use cross_suite_version_check().
2152
2153         * katie (check): the version and file overwrite checks
2154         (check_{binary,source,dsc}_against_db) are not per-suite.
2155
2156         * jennifer (check_files): less duplication of
2157         'control.Find("Architecture", "")' by putting it in a local
2158         variable.
2159         (check_files): call check_binary_against_db higher up since it's
2160         not a per-suite check.
2161         (check_files): get "othercomponents" directly rather than having
2162         check_binary_against_db do it for us.
2163
2164         * heidi (main): 'if x:', not 'if x != []:'.
2165         * katie.py (Katie.in_override_p): likewise.
2166         (Katie.check_dsc_against_db): likewise.
2167         * natalie (main): likewise.
2168         * rene (main): likewise.
2169         * ziyi (real_arch): likewise.
2170
2171         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2172         and OverrideType are now value lists, not lists.
2173         * andrea (main): likewise.
2174         * cindy (main): likewise.
2175         * claire.py (find_dislocated_stable): likewise.
2176         * denise (main): likewise.
2177         * jenna (main): likewise.
2178         * jennifer (check_distributions): likewise.
2179         (check_files): likewise.
2180         (check_urgency): likewise (Urgency::Valid).
2181         * jeri (parse_packages): likewise.
2182         * neve (main): likewise (and Location::%s::Suites).
2183         * rene (main): likewise.
2184
2185 2002-05-13  James Troup  <james@nocrew.org>
2186
2187         * katie.py (Katie.check_source_against_db): correct case of reject
2188         message to be consistent with binary checks.
2189
2190         * jennifer (get_status_output): don't leak 2 file descriptors per
2191         invocation.
2192         (check_signature): add missing '\n' to "duplicate status token"
2193         error message.
2194
2195 2002-05-09  James Troup  <james@nocrew.org>
2196
2197         * utils.py (validate_changes_file_arg): new function; validates an
2198         argument which should be a .changes file.
2199         * ashley (main): use it.
2200         * lisa (main): likewise.
2201
2202         * katie.py (Katie.check_dsc_against_db): since there can be more
2203         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2204         entry still exists in files.
2205
2206         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2207         files, since check_dsc_against_db() deletes the .orig.tar.gz
2208         entry.
2209
2210         * cameron: cleanups.
2211
2212         * utils.py (changes_compare): change sort order so that source
2213         name and source version trump 'have source'; this should fix
2214         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2215         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2216         by Ryan.
2217
2218         * lisa (main): allow the arguments to be .katie files too.
2219
2220 2002-05-07  Ryan Murray  <rmurray@debian.org>
2221
2222         * cron.buildd: add s390 to arch list again
2223
2224 2002-05-05  Ryan Murray  <rmurray@debian.org>
2225
2226         * cron.buildd: new script, update w-b database from unstable_accepted
2227         table
2228         * cameron: new script, take list in unstable_accepted and write out
2229         a file list for apt-ftparchive
2230         * apt.conf.buildd: new apt configuration for Packages/Sources for
2231         unstable_accepted
2232         * vars: add s390 to arch list.
2233
2234 2002-05-03  James Troup  <james@nocrew.org>
2235
2236         * neve (main): don't hard code the calling user as that doesn't
2237         work with modern postgres installs.  Fix psql invocation for
2238         init_pool.sql (database name required).  Dont' hard code the
2239         database name.
2240         (process_sources): add support for fingerprint and install_date.
2241         (process_packages): add support for fingerprint.
2242         (do_sources): pass in the directory, fingerprint support needs it.
2243         (get_status_output): borrowed from jennifer.
2244         (reject): likewise.
2245         (check_signature): likewise.
2246
2247         * katie (install): only try to log urgencies if Urgency_Logger is
2248         defined.
2249         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2250         defined; only close Urgency_Logger if it's defined.
2251
2252         * catherine (poolize): adapt for Dir rationalization.
2253         * claire.py (find_dislocated_stable): likewise.
2254         * denise (main): likewise.
2255         * halle (check_joey): likewise.
2256         * jenna: likewise.
2257         * jennifer: likewise.
2258         * jeri: likewise.
2259         * katie.py: likewise.
2260         * katie: likewise.
2261         * lisa (do_bxa_notification): likewise.
2262         * logging.py (Logger.__init__): likewise
2263         * rene (main): likewise.
2264         * rhona (clean): likewise.
2265         * shania (init): likewise.
2266         * tea: likewise.
2267         * ziyi: likewise.
2268
2269         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2270         FindB, not FindI.
2271
2272         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2273         boolean, use FindB, not get.
2274
2275         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2276         .orig.tar.gz's which are an exact (size/md5sum) match.
2277
2278         * ashley (main): really allow *.katie files as arguments too;
2279         noticed by aj.
2280
2281         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2282
2283 2002-05-03  Anthony Towns  <ajt@debian.org>
2284
2285         * ziyi: support for security.
2286
2287 2002-05-02  James Troup  <james@nocrew.org>
2288
2289         * jennifer (accept): call Katie.check_override() unconditional as
2290         no-mail check moved into that function.
2291         (do_byhand): likewise.
2292
2293         * katie.py (Katie.check_override): don't do anything if we're a)
2294         not sending mail or b) the override disparity checks have been
2295         disbled via Dinstall::OverrideDisparityCheck.
2296
2297         * jennifer (check_files): don't hard code Unstable as the suite
2298         used to check for architecture validity; use
2299         Dinstall::DefaultSuite instead, if it exists.
2300         (accept): conditionalize
2301
2302         * katie.py (Katie.update_subst): support global maintainer
2303         override with Dinstall::OverrideMaintainer.
2304
2305         * jennifer (check_distributions): new function, Distribution
2306         validation and mapping.  Uses new SuiteMappings variable from
2307         config file to abstract suite mappings.
2308         (check_changes): call it.
2309
2310         * natalie: renamed; nothing imports or likely will for some time.
2311
2312         * denise (main): remove unused natalie import and init().
2313
2314         * natalie.py (init): removed.
2315         (main): initalize here instead and don't hardcode the database
2316         name.
2317
2318 2002-04-30  James Troup  <james@nocrew.org>
2319
2320         * katie.py (Katie.close_bugs): new function, split out from
2321         announce().
2322         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2323         true.
2324         (Katie.close_bugs): new function, split out
2325         (Katie.close_bugs): return immediately if there are no bugs to
2326         close.
2327
2328         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2329         * katie (do_reject): likewise.
2330         (stable_install): likewise.
2331         * katie.py (Katie.announce): likewise.
2332         (Katie.accept): likewise.
2333         (Katie.check_override): likewise.
2334         (Katie.do_reject): likewise.
2335         * lisa (do_bxa_notification): likewise.
2336         * melanie (main): likewise.
2337
2338         * utils.py (TemplateSubst): change second argument to be a
2339         filename rather than a template since every caller opened a file
2340         on the fly which was ugly and leaked file descriptor.
2341
2342 2002-04-29  James Troup  <james@nocrew.org>
2343
2344         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2345         <hertzog@debian.org> to send 'accepted' announce mails to the
2346         PTS. [#128140]
2347
2348 2002-04-24  James Troup  <james@nocrew.org>
2349
2350         * init_pool.sql (unstable_accepted): add two new fields to
2351         unstable_accepted; in_accepted is a boolean indicating whether or
2352         not the file is in accepted and last_used is a timestamp used by
2353         rhona to determine when to remove symlinks for installed packages.
2354
2355         * katie.py (Katie.accept): auto-build support take 2.  Create
2356         symlinks for all files into a seperate directory.  Add files to
2357         unstable_accepted as paths to the new directory; mark them as
2358         being in accepted for cameron.  Properly conditionalize it on a
2359         configuration variable.
2360
2361         * katie (install): likewise.  Update symlinks to point into the
2362         pool; mark the files for later deletion by rhona and mark them as
2363         not being in accepted for cameron.
2364
2365         * rhona (clean_accepted_autobuild): new function.
2366
2367 2002-04-22  James Troup  <james@nocrew.org>
2368
2369         * jennifer (check_files): handle db_access.get_location_id()
2370         returning -1 properly/better.
2371
2372         * rhona (clean_fingerprints): new function.
2373
2374 2002-04-21  James Troup  <james@nocrew.org>
2375
2376         * utils.py (touch_file): unused; remove.
2377         (plural): likewise.
2378
2379         * jennifer (check_files): close file descriptor used to get the
2380         control file.
2381         (check_md5sums): likewise.
2382         (callback): likewise.
2383
2384         * katie.py (Katie.do_reject): handle manual rejects much better;
2385         call the editor first and get confirmation from the user before
2386         proceeding.
2387
2388         * jennifer (check_signature): prefix_multi_line_string() moved to
2389         utils.
2390
2391         * utils.py (prefix_multi_line_string): moved here from jennifer.
2392
2393 2002-04-20  James Troup  <james@nocrew.org>
2394
2395         * lisa (main): handle non-existent files.
2396
2397         * ashley (main): allow *.katie files as arguments too.
2398
2399 2002-04-19  James Troup  <james@nocrew.org>
2400
2401         * katie.py (Katie.accept): add stuff to help auto-building from
2402         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2403         in the pool), create a symlink to it in the accepted directory and
2404         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2405
2406         * katie (install): undo the "auto-building from accepted" stuff
2407         (i.e. remove the .orig.tar.gz symlink and remove the files from
2408         unstable_accepted table).
2409
2410 2002-04-16  James Troup  <james@nocrew.org>
2411
2412         * jennifer (upload_too_new): fix typo which was causing all
2413         timestamp comparisons to be against the .changes file.  Also move
2414         back to the original directory so we do the comparisons against
2415         accurate timestamps.
2416
2417         * tea (check_missing_tar_gz_in_dsc): new function.
2418
2419         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2420         file mentioned in the .dsc.
2421
2422         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2423         way mails reach debian-{devel-,}changes@l.d.o.
2424
2425 2002-04-02  Ryan Murray  <rmurray@debian.org>
2426
2427         * cron.daily: run shania after rhona
2428         * cron.daily-non-US: likewise.
2429
2430 2002-04-01  James Troup  <james@nocrew.org>
2431
2432         * katie: re-add proposed-updates/stable install support.
2433
2434         * katie.py (Katie.dump_vars): add changes["changes"] as an
2435         optional field; should be mandatory later.
2436
2437 2002-03-31  James Troup  <james@nocrew.org>
2438
2439         * katie (install): support a Suite::<foo>::CopyKatie similar to
2440         CopyChanges.  Done seperately because .katie files don't need to
2441         be mirrored and will probably be copied to another directory as a
2442         result.
2443
2444         * halle (main): add missing debug to options.
2445
2446 2002-03-29  James Troup  <james@nocrew.org>
2447
2448         * madison (main): add a -r/--regex option.
2449
2450 2002-03-26  James Troup  <james@nocrew.org>
2451
2452         * lisa: don't trample on changes["distribution"]; make a copy of
2453         it as changes["suite"] instead and use that.
2454
2455 2002-03-16  Anthony Towns  <ajt@debian.org>
2456
2457         * templates/lisa.bxa_notification: Fix some grammatical errors.
2458         Encourage contact via bxa@ftp-master email address.
2459
2460 2002-03-15  James Troup  <james@nocrew.org>
2461
2462         * jennifer (check_timestamps): remove bogus raise in except.
2463
2464 2002-03-15  Anthony Towns  <ajt@debian.org>
2465
2466         * cron.monthly: rotate mail/archive/bxamail as well as
2467         mail/archive/mail. This is for a complete archive of
2468         correspondence with the BXA.
2469
2470 2002-03-14  Anthony Towns  <ajt@debian.org>
2471
2472         * crypto-in-main changes.
2473
2474         * utils.py (move, copy): add an optional perms= parameter to let you
2475         set the resulting permissions of the moved/copied file
2476         * katie.py (force_move): rejected/morgued files should be unreadable
2477         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2478         should be unreadable.
2479
2480 2002-03-07  Ryan Murray  <rmurray@debian.org>
2481
2482         * katie (install): check for existance of "files id" key as well as
2483         it being set to a valid value.
2484         * katie (install): check for existense and valid value for location
2485         id as well
2486
2487 2002-03-05  Ryan Murray  <rmurray@debian.org>
2488
2489         * katie.py (do_reject): reread the reason file after editing it.
2490
2491 2002-02-25  James Troup  <james@nocrew.org>
2492
2493         * jennifer (check_changes): don't enforce sanity in .changes file
2494         names since it doesn't seem to be possible; pcmica-cs and similar
2495         freak show packages in particular cause real problems.
2496
2497         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2498         each dsc_file since the .orig.tar.gz checking code now uses it as
2499         a boolean.  Fixes bizarro rejections which bogusly claimed
2500         .diff.gz md5sum/size was incorrect.
2501
2502 2002-02-24  James Troup  <james@nocrew.org>
2503
2504         * katie (process_it): reset reject_message.
2505
2506 2002-02-22  James Troup  <james@nocrew.org>
2507
2508         * db_access.py(set_files_id): disable use of
2509         currval('files_id_seq') because it was taking 3 seconds on auric
2510         which is insane (most calls take < 0.01) and simply call
2511         get_files_id() for the return value instead.
2512
2513         * katie.py (Katie.do_query): convenience function; unused by
2514         default, useful for profiling.
2515         * db_access.py (do_query): likewise.
2516
2517         * katie (install): fix insert SQL call when binary has no source.
2518
2519         * lisa (determine_new): auto-correct non-US/main to non-US.
2520         (determine_new): add a warning when adding things to stable.
2521         (edit_index): use our_raw_input().
2522         (edit_overrides): likewise.
2523         (do_new): likewise.  Use re.search() not re.match() since the
2524         default answer may not be the first one.
2525         (do_byhand): likewise.
2526         (do_new): Default to 'S'kip and never 'A'dd.
2527
2528         * jennifer (action): pass prompt to our_raw_input().
2529         * melanie (game_over): likewise.
2530         * katie (action): likewise.
2531
2532         * utils.py (our_raw_input): add an optional prompt argument to
2533         make the function more usable as a drop in replacement for
2534         raw_input().
2535
2536         * jennifer (check_files): correct reject() to not double prefix
2537         when using katie.py based functions.
2538         (check_dsc): likewise.
2539
2540         * katie.py (Katie.reject): prepend a new line if appropriate
2541         rathen than appending one to avoid double new lines when caller
2542         adds one of his own.
2543
2544         * lisa (determine_new): warn if the package is also in other
2545         components.
2546
2547 2002-02-20  James Troup  <james@nocrew.org>
2548
2549         * jennifer (check_files): if .changes file lists "source" in
2550         Architecture field, there must be a .dsc.
2551
2552 2002-02-15  James Troup  <james@nocrew.org>
2553
2554         * ashley (main): add some missing fields.
2555
2556         * katie.py (Katie.check_dsc_against_db): fix to take into account
2557         the fact that the .orig.tar.gz might be in byhand, accepted or
2558         new.  Also fix calling of reject().
2559         (Katie.check_binaries_against_db): fix calling of reject().
2560         (Katie.check_source_against_db): likewise.
2561         (Katie.dump_vars): add missing variables used for bug closures.
2562
2563         * lisa (changes_compare_by_time): sort by reverse time.
2564
2565         * katie.py (Katie.accept): log.
2566         (Katie.dump_vars): missing has_key test for optional changes fields.
2567
2568         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2569         (process_it): traceback goes to stderr, not stdout.
2570         (acknowledge_new): log.
2571         (do_byhand): likewise.
2572
2573         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2574
2575         * add_constraints.sql: add grants for the new fingerprint table.
2576
2577 2002-02-13  James Troup  <james@nocrew.org>
2578
2579         * katie (do_reject): basename the .changes filename before trying
2580         to use it to construct the .reason filename.
2581         (process_it): call Katie.update_subst() so do_reject() DTRT with
2582         the mail template.
2583         (do_reject): setup the mail template correctly.
2584
2585 2002-02-12  James Troup  <james@nocrew.org>
2586
2587         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2588         (check_files): don't abuse global dictionaries.
2589         (Ent): use all variables.
2590         (check_timestamps): don't abuse global dictionaries.
2591
2592         * fernanda.py: renamed to .py so lisa can import it.
2593         (check_dsc): remove unused local variables (pychecker).
2594         (display_changes): split off from check_changes.
2595
2596         * katie: rewritten; most of the functionality moves to jennifer;
2597         what's left is the code to install packages once a day from the
2598         'accepted' directory.
2599
2600         * jennifer: new program, processes packages in 'unchecked'
2601         (i.e. most of the non-install functionality of old katie).
2602
2603         * katie.py: common functions shared between the clique of
2604         jennifer, lisa and katie.
2605
2606         * lisa: new program; handles NEW and BYHAND packages.
2607
2608         * jeri (usage): new function.
2609         (main): use it.
2610         (check_package): remove unused local variable (pychecker).
2611
2612         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2613         binaries and source.  Add install_date to source.
2614
2615         * halle (usage): new function.
2616         (main): use it.  Remove unused options.
2617         (check_changes): remove unused local variable (pychecker).
2618
2619         * add_constraints.sql: add fingerprint references.
2620
2621         * db_access.py (get_or_set_fingerprint_id): new function.
2622
2623         * ashley (main): new program; dumps the contents of a .katie file
2624         to stdout.
2625
2626         * alyson (main): remove option handling since we don't actually
2627         support any.
2628         * cindy (main): likewise.
2629
2630         * remove unnecessary imports and pre-define globals (pychecker).
2631
2632 2002-02-11  Anthony Towns  <ajt@debian.org>
2633
2634         * added installation-report and upgrade-report pseudo-packages
2635
2636 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2637
2638         * katie (update_subst): use Dinstall::TrackingServer.
2639         * melanie (main): likewise.
2640
2641 2002-01-27  James Troup  <james@nocrew.org>
2642
2643         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2644         noticing, jgg@ for fix.
2645
2646 2002-01-19  James Troup  <james@nocrew.org>
2647
2648         * utils.py (extract_component_from_section): handle non-US
2649         non-main properly.
2650
2651 2002-01-12  James Troup  <james@nocrew.org>
2652
2653         * madison: add support for -S/--source-and-binary which displays
2654         information for the source package and all it's binary children.
2655
2656 2002-01-13  Anthony Towns  <ajt@debian.org>
2657
2658         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2659         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2660           and 2002 key ids.
2661         * katie.conf-non-US: Likewise.
2662         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2663           multiple keys automatically. This is probably only useful for
2664           transitioning from an expired (or revoked?) key.
2665
2666 2002-01-08  Ryan Murray  <rmurray@debian.org>
2667
2668         * debian/python-dep: new file that prints out python:Depends for
2669           substvars
2670         * debian/control: use python:Depends, build-depend on python
2671           lower Depends: on postgresql to Suggests:
2672         * debian/rules: determine python version, install to the correct
2673           versioned dir
2674
2675 2001-12-18  Anthony Towns  <ajt@debian.org>
2676
2677         * ziyi: unlink Release files before overwriting them (in case they've
2678           been merged)
2679         * ziyi: always include checksums/sizes for the uncompressed versions
2680           of Sources and Packages, even if they're not present on disk
2681
2682 2001-11-26  Ryan Murray  <rmurray@debian.org>
2683
2684         * ziyi (main): add SigningPubKey config option
2685         * katie.conf: use SigningPubKey config option
2686         * katie.conf-non-US: likewise
2687
2688 2001-11-24  James Troup  <james@nocrew.org>
2689
2690         * katie (acknowledge_new): log newness.
2691
2692 2001-11-24  Anthony Towns  <ajt@debian.org>
2693
2694         * ziyi (real_arch): bail out if some moron forgot to reset
2695         untouchable on stable.
2696         (real_arch): source Release files.
2697
2698 2001-11-19  James Troup  <james@nocrew.org>
2699
2700         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2701         utils.get_conf().
2702         * shania (main): likewise.
2703
2704         * rhona (main): add default options.
2705
2706         * db_access.py (get_archive_id): case independent.
2707
2708         * katie (action): sort files so that ordering is consistent
2709         between mails; noticed/requested by Joey.
2710
2711 2001-11-17  Ryan Murray  <rmurray@debian.org>
2712
2713         * utils.py: add get_conf function, change startup code to read all
2714           config files to the Cnf that get_conf returns
2715           use the component list from the katie conf rather than the hardcoded
2716           list.
2717         * all scripts: use new get_conf function
2718         * shania: fix try/except around changes files
2719         * jenna: only do debian-installer if it is a section in Cnf
2720
2721 2001-11-16  Ryan Murray  <rmurray@debian.org>
2722
2723         * shania (main): Initialize days to a string of a number.
2724                  (main): Initialize Cnf vars before reading in Cnf
2725
2726 2001-11-14  Ryan Murray  <rmurray@debian.org>
2727
2728         * shania (main): Initialize days to a number.
2729
2730 2001-11-04  James Troup  <james@nocrew.org>
2731
2732         * docs/Makefile: use docbook-utils' docbook2man binary.
2733
2734         * Change all "if foo == []" constructs into "if not foo".
2735
2736         * katie (check_changes): when installing into stable from
2737         proposed-updates, remove all non-stable target distributions.
2738         (check_override): don't check for override disparities on stable
2739         installs.
2740         (stable_install): update install_bytes appropriately.
2741         (reject): stable rejection support; i.e. don't remove files when
2742         rejecting files in the pool, rather remove them from the
2743         proposed-update suite instead, rhona will do the rest.
2744         (manual_reject): support for a stable specific template.
2745         (main): setup up stable rejector in subst.
2746
2747 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
2748
2749         * debian/control (Build-Depends): docbook2man has been superseded
2750         by docbook-utils.
2751
2752         * neve (main): exit with a more useful error message.
2753         (update_suites): Suite::<suite>::Version, Origin and Description
2754         are not required, so don't fail if they don't exist.
2755
2756         * db_access.py (get_archive_id): return -1 on error rather than
2757         raise an exception.
2758         (get_location_id): likewise.
2759
2760         * madison (main): don't exit on the first not-found package,
2761         rather exit with an appropriate return code after processing all
2762         packages.
2763
2764 2001-11-03  James Troup  <james@nocrew.org>
2765
2766         * claire.py (find_dislocated_stable): add per-architecture
2767         symlinks for dislocated architecture: all debs.
2768
2769 2001-10-19  Anthony Towns  <ajt@debian.org>
2770
2771         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
2772
2773 2001-10-10  Anthony Towns  <ajt@debian.org>
2774
2775         * claire.py (fix_component_section): do _not_ assign to None under
2776         any circumstances
2777
2778 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
2779
2780         * melanie (main): don't duplicate architectures when removing from
2781         more than one suite.
2782
2783         * heidi (main, process_file, get_list): report suite name not ID.
2784
2785         * naima (nmu_p): be case insensitive.
2786
2787         * naima (action): more list handling clean ups.
2788
2789         * melanie (main): clean up lists handling to use string.join and
2790         IN's.
2791
2792         * madison (main): clean up suite and architecture argument parsing
2793         to use slices less and string.join more.
2794
2795         * utils.py (parse_changes): Use string.find() instead of slices for
2796         string comparisons thereby avoid hardcoding the length of strings.
2797         * ziyi (main): likewise.
2798
2799 2001-10-07  James Troup  <james@nocrew.org>
2800
2801         * Remove mode argument from utils.open_files() calls if it's the
2802         default, i.e. 'r'.
2803
2804 2001-09-27  James Troup  <james@nocrew.org>
2805
2806         * katie (init): new function; options clean up.
2807         (usage): add missing options, remove obsolete ones.
2808         (main): adapt for the two changes above.  If the lock file or
2809         new-ack log file don't exist, create them.  Don't try to open the
2810         new-ack log file except running in new-ack mode.
2811
2812         * alyson (main): initialize all the tables that are based on the
2813         conf file.
2814
2815         * utils.py (touch_file): like touch(1).
2816         (where_am_i): typo.
2817
2818         * catherine (usage): new.
2819         (main): use it.  options cleanup.
2820         * claire.py: likewise.
2821         * fernanda: likewise.
2822         * heidi: likewise.
2823         * jenna: likewise.
2824         * shania: likewise.
2825         * ziyi: likewise.
2826
2827         * andrea: options cleanup.
2828         * charisma: likewise.
2829         * julia: likewise.
2830         * madison: likewise.
2831         * melanie: likewise.
2832         * natalie: likewise.
2833         * rhona: likewise.
2834         * tea: likewise.
2835
2836 2001-09-26  James Troup  <james@nocrew.org>
2837
2838         * utils.py: default to sane config file locations
2839         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
2840         or they can point to the real ones through use of a new Config
2841         section.  Based on an old patch by Adam Heath.
2842         (where_am_i): use the new default config stuff.
2843         (which_conf_file): likewise.
2844         (which_apt_conf_file): likewise.
2845
2846         * charisma (main): output defaults to
2847         `Package~Version\tMaintainer'; input can be of either form.  When
2848         parsing the new format do version comparisons, when parsing the
2849         old format assume anything in the extra file wins.  This fixes the
2850         problem of newer non-US packages being overwhelmed by older
2851         versions still in stable on main.
2852
2853 2001-09-17  James Troup  <james@nocrew.org>
2854
2855         * natalie.py (list): use result_join().
2856
2857         * denise (main): result_join() moved to utils.
2858
2859         * utils.py (result_join): move to utils; add an optional seperator
2860         argument.
2861
2862 2001-09-14  James Troup  <james@nocrew.org>
2863
2864         * heidi (set_suite): new function; does --set like natalie does,
2865         i.e. turns it into a sequence of --add's and --remove's
2866         internally.  This is a major win (~20 minute run time > ~20
2867         seconds) in the common, everday (i.e. testing) case.
2868         (get_id): common code used by set_suite() and process_file().
2869         (process_file): call set_suite() and get_id().
2870         (main): add logging support.
2871
2872         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
2873         files.
2874
2875         * utils.py (parse_changes): use slices or simple string comparison
2876         in favour of regexes where possible.
2877
2878         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
2879         fact that the string VARDATA() points to are not null terminated.
2880
2881         * denise (result_join): new function; like string.join() but
2882         handles None's.
2883         (list): use it.
2884         (main): likewise.
2885
2886         * charisma (main): python-pygresql 7.1 returns None not "".
2887
2888 2001-09-14  Ryan Murray  <rmurray@debian.org>
2889
2890         * natalie.py (list): handle python-pygresql 7.1 returning None.
2891
2892 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
2893
2894         * madison (main): return 1 if no package is found.
2895
2896 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
2897
2898         * madison (main): better error handling for incorrect
2899         -a/--architecture or -s/--suite arguments.
2900         (usage): new.
2901         (main): use it.
2902
2903 2001-09-05  Ryan Murray  <rmurray@debian.org>
2904
2905         * charisma, madison, katie: remove use of ROUser
2906         * katie.conf,katie.conf-non-US: remove defintion of ROUser
2907
2908 2001-08-26  James Troup  <james@nocrew.org>
2909
2910         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
2911         maintained packages at cjwatson@'s request.
2912
2913 2001-08-21  James Troup  <james@nocrew.org>
2914
2915         * madison (main): add -a/--architecture support.
2916
2917         * jenna: use logging instead of being overly verbose on stdout.
2918
2919 2001-08-11  Ryan Murray  <rmurray@debian.org>
2920
2921         * melanie: add functional help option
2922
2923 2001-08-07  Anthony Towns  <ajt@debian.org>
2924
2925         * apt.conf, katie.conf: Add ia64 and hppa to testing.
2926
2927 2001-07-28  James Troup  <james@nocrew.org>
2928
2929         * katie (check_dsc): ensure source version is >> than existing
2930         source in target suite.
2931
2932 2001-07-25  James Troup  <james@nocrew.org>
2933
2934         * natalie.py: add logging support.
2935
2936         * utils.py (open_file): make the second argument optional and
2937         default to read-only.
2938
2939         * rene (main): work around broken source packages that duplicate
2940         arch: all packages with arch: !all packages (no longer allowed
2941         into the archive by katie).
2942
2943 2001-07-13  James Troup  <james@nocrew.org>
2944
2945         * katie (action): don't assume distribution is a dictionary.
2946         (update_subst): don't assume architecture is a dictionary and that
2947         maintainer822 is defined.
2948         (check_changes): recognise nk_format exceptions.
2949         (check_changes): reject on 'testing' only uploads.
2950         (check_files): when checking to ensure all packages are newer
2951         versions check against arch-all packages too.
2952         (check_dsc): enforce the existent of a sane set of mandatory
2953         fields.  Ensure the version number in the .dsc (modulo epoch)
2954         matches the version number in the .changes file.
2955
2956         * utils.py (changes_compare): ignore all exceptions when parsing
2957         the changes files.
2958         (build_file_list): don't UNDEF on a changes file with no format
2959         field.
2960
2961 2001-07-07  James Troup  <james@nocrew.org>
2962
2963         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
2964         rather than 'changedbyname' to avoid false negatives on uploads
2965         with an email-address-only Changed-By field.
2966         (check_dsc): don't overwrite reject_message; append to it.
2967         (check_signature): likewise.
2968         (check_changes): likewise.
2969         (announce): condition logging on 'action'.
2970
2971         * logging.py: new logging module.
2972
2973         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
2974         sub-tree into a separate (global) variable.
2975         (check_dsc): ensure format is 1.0 to retain backwards
2976         compatability with dpkg-source in potato.
2977         (main): only try to obtain the lock when not running in no-action
2978         mode.
2979         Use the new logging module.
2980
2981         * christina: initial version; only partially usable.
2982
2983 2001-06-28  Anthony Towns  <ajt@debian.org>
2984
2985         * apt.conf: Add ExtraOverrides to auric.
2986
2987 2001-06-25  James Troup  <james@nocrew.org>
2988
2989         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
2990         they preferred the name 'Uploaders'.
2991
2992 2001-06-23  James Troup  <james@nocrew.org>
2993
2994         * katie (check_files): fix typo in uncommon rejection message,
2995         s/sourceversion/source version/.
2996
2997         * denise (main): we can't use print because stdout has been
2998         redirected.
2999
3000         * katie (source_exists): new function; moved out of check_files()
3001         and added support for binary-only NMUs of earlier sourceful NMUs.
3002
3003         * rhona (clean): find_next_free has moved.
3004
3005         * utils.py (find_next_free): new function; moved here from rhona.
3006         Change too_many to be an argument with a default value, rather
3007         than a hardcoded variable.
3008
3009         * shania: rewritten to work better; REJECTion reminder mail
3010         handling got lost though.
3011
3012 2001-06-22  James Troup  <james@nocrew.org>
3013
3014         * rhona (main): remove unused override code.
3015
3016         * fernanda (main): remove extraneous \n's from utils.warn calls.
3017         * natalie.py (list): likewise.
3018
3019         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3020         use utils.{warn,fubar} where appropriate.
3021
3022 2001-06-21  James Troup  <james@nocrew.org>
3023
3024         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3025         functionality.
3026         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3027         by the "Maintainers" field in the .dsc file and maintainer groups.
3028         (nmu_p.__init__): read in the list of group maintainer names.
3029         (announce): use nmu_p.
3030
3031 2001-06-20  James Troup  <james@nocrew.org>
3032
3033         * rene (main): hardcode the suite experimental is compared to by
3034         name rather than number.
3035
3036         * katie (check_files): differentiate between doesn't-exist and
3037         permission-denied in "can not read" rejections; requested by edd@.
3038         (check_dsc): use os.path.exists rather than os.access to allow the
3039         above check to kick in.
3040
3041         * heidi (process_file): read all input before doing anything and
3042         use transactions.
3043
3044 2001-06-15  James Troup  <james@nocrew.org>
3045
3046         * fernanda: new script; replaces old 'check' shell script
3047         nastiness.
3048
3049 2001-06-14  James Troup  <james@nocrew.org>
3050
3051         * katie: actually import traceback module to avoid amusing
3052         infinite loop.
3053
3054 2001-06-10  James Troup  <james@nocrew.org>
3055
3056         * utils.py (extract_component_from_section): fix to handle just
3057         'non-free' and 'contrib'.  Also fix to handle non-US in a
3058         completely case insensitive manner as a component.
3059
3060 2001-06-08  James Troup  <james@nocrew.org>
3061
3062         * madison (arch_compare): sort function that sorts 'source' first
3063         then alphabetically.
3064         (main): use it.
3065
3066 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3067
3068         * catherine (poolize): explicitly make poolized_size a long so it
3069         doesn't overflow when poolizing e.g. entire archives.
3070
3071 2001-06-01  James Troup  <james@nocrew.org>
3072
3073         * utils.py (send_mail): throw exceptions rather than exiting.
3074
3075         * katie (process_it): catch exceptions and ignore them.
3076
3077 2001-06-01  Michael Beattie  <mjb@debian.org>
3078
3079         * added update-mailingliststxt and update-readmenonus to update
3080         those files, respectively. modified cron.daily{,-non-US} to
3081         use them.
3082
3083 2001-05-31  Anthony Towns  <ajt@debian.org>
3084
3085         * rhona: make StayOfExecution work.
3086
3087 2001-05-31  James Troup  <james@nocrew.org>
3088
3089         * rhona (find_next_free): fixes to not overwrite files but rename
3090         them by appending .<n> instead.
3091         (clean): use find_next_free and use dated sub-directories in the
3092         morgue.
3093
3094         * utils.py (move): don't overwrite files unless forced to.
3095         (copy): likewise.
3096
3097 2001-05-24  James Troup  <james@nocrew.org>
3098
3099         * katie (check_files): determine the source version here instead
3100         of during install().
3101         (check_files): check for existent source with bin-only NMU
3102         support.
3103         (main): sort the list of changes so that the source-must-exist
3104         check Does The Right Thing(tm).
3105
3106         * utils.py (changes_compare): new function; sorts a list of
3107         changes files by 'have-source', source, version.
3108         (cc_fix_changes): helper function.
3109         (parse_changes): use compiled regexes.
3110         (fix_maintainer): likewise.
3111
3112         * rene (main): warn about packages in experimental that are
3113         superseded by newer versions in unstable.
3114
3115 2001-05-21  James Troup  <james@nocrew.org>
3116
3117         * rene (main): add support for checking for ANAIS (Architecture
3118         Not Allowed In Source) packages.
3119
3120 2001-05-17  James Troup  <james@nocrew.org>
3121
3122         * katie (check_changes): initalize `architecture' dictionary in
3123         changes global so that if we can't parse the changes file for
3124         whatever reason we don't undef later on.
3125
3126         * utils.py (parse_changes): fix handling of multi-line fields
3127         where the first line did have data.
3128
3129 2001-05-05  Anthony Towns  <ajt@debian.org>
3130
3131         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3132         (It should always have been there. Ooopsy.)
3133
3134 2001-05-03  Anthony Towns  <ajt@debian.org>
3135
3136         * jenna: Cleanup packages that move from arch:any to arch:all or
3137         vice-versa.
3138
3139 2001-04-24  Anthony Towns  <ajt@debian.org>
3140
3141         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3142         cope with debian-installer and boot-floppies' md5sum.txt.
3143
3144 2001-04-16  James Troup  <james@nocrew.org>
3145
3146         * katie (check_changes): add missing %s format string argument.
3147         (stable_install): temporary work around for morgue location to
3148         move installed changes files into.
3149         (stable_install): helps if you actually read in the template.
3150         (manual_reject): fix for editing of reject messages which was
3151         using the wrong variable name.
3152
3153         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3154
3155 2001-04-13  James Troup  <james@nocrew.org>
3156
3157         * katie (manual_reject): Cc the installer.
3158         (reject): don't.
3159         (check_changes): remove unused maintainer-determination code.
3160         (update_subst): add support for Changed-By when setting the
3161         *MAINTAINER* variables.
3162
3163         * rene (bar): new function to check for packages on architectures
3164         when they shouldn't be.
3165
3166         * natalie.py (main): use fubar() and warn() from utils.
3167
3168         * utils.py (whoami): new mini-function().
3169         * melanie (main): use it.
3170         * katie (manual_reject): likewise.
3171
3172 2001-04-03  James Troup  <james@nocrew.org>
3173
3174         * katie (action): ignore exceptions from os.path.getmtime() so we
3175         don't crash on non-existent changes files (e.g. when they are
3176         moved between the start of the install run in cron.daily and the
3177         time we get round to processing them).
3178
3179         * madison (main): also list source and accept -s/--suite.
3180
3181         * jenna (generate_src_list): missing \n in error message.
3182
3183         * katie (update_subst): add sane defaults for when changes is
3184         skeletal.
3185
3186 2001-03-29  James Troup  <james@nocrew.org>
3187
3188         * melanie (main): use fubar() and warn() from utils.  Remember who
3189         the maintainer for the removed packages are and display that info
3190         to the user.  Readd support for melanie-specific Bcc-ing that got
3191         lost in the TemplateSubst transition.
3192
3193         * utils.py (fubar): new function.
3194         (warn): like wise.
3195
3196         * db_access.py (get_maintainer): as below.
3197
3198         * charisma (get_maintainer): moved the bulk of this function to
3199         db_access so that melanie can use it too.
3200
3201         * claire.py (find_dislocated_stable): restrict the override join
3202         to those entries where the suite is stable; this avoids problems
3203         with packages which have moved to new sections (e.g. science)
3204         between stable and unstable.
3205
3206 2001-03-24  James Troup  <james@nocrew.org>
3207
3208         * catherine (poolize): new function; not really independent of
3209         main() fully, yet.
3210         (main): use it.
3211
3212         * katie (stable_install): __SUITE__ needs to be space prefixed
3213         because buildd's check for 'INSTALLED$'.
3214
3215 2001-03-22  James Troup  <james@nocrew.org>
3216
3217         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3218
3219         * jenna: rewritten; now does deletions on a per-suite level
3220         instead of a per-suite-component-architecture-type level.  This
3221         allows mutli-component packages to be auto-cleaned (and as a
3222         bonus, reduces the code size and duplication).
3223
3224 2001-03-22  Anthony Towns  <ajt@debian.org>
3225
3226         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3227         instead of just giving a gpg error.
3228
3229 2001-03-21  James Troup  <james@nocrew.org>
3230
3231         * madison (main): use apt_pkg.VersionCompare to sort versions so
3232         that output is correctly sorted for packages like debhlper.
3233         Noticed by ajt@.
3234
3235         * tea (check_source_in_one_dir): actually find problematic source
3236         packages.
3237
3238         * katie (check_dsc): remember the orig.tar.gz's location ID if
3239         it's not in a legacy suite.
3240         (check_diff): we don't use orig_tar_id.
3241         (install): add code to handle sourceful diff-only upload of
3242         packages which change components by copying the .orig.tar.gz into
3243         the new component, if it doesn't already exist there.
3244         (process_it): reset orig_tar_location (as above).
3245
3246         * melanie (main): use template substiution for the bug closing
3247         emails.
3248         (main): don't hardcode bugs.debian.org or packages.debian.org
3249         either; use configuration items.
3250
3251         * katie: likewise.
3252
3253         * natalie.py (init): use None rather than 'localhost' for the
3254         hostname given to pg.connect.
3255
3256         * utils.py (TemplateSubst): new function; lifted from
3257         userdir-ldap.
3258
3259 2001-03-21  Ryan Murray  <rmurray@debian.org>
3260
3261         * katie (announce): fix the case of non-existent
3262         Suite::$SUITE::Announce.
3263
3264 2001-03-20  Ryan Murray  <rmurray@debian.org>
3265
3266         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3267         /usr/.
3268
3269         * alyson (main): use config variable for database name.
3270         * andrea (main): likewise.
3271         * catherine (main): likewise.
3272         * charisma (main): likewise.
3273         * cindy (main): likewise.
3274         * claire.py (main): likewise.
3275         * denise (main): likewise.
3276         * heidi (main): likewise.
3277         * jenna (main): likewise.
3278         * katie (main): likewise.
3279         * madison (main): likewise.
3280         * melanie (main): likewise.
3281         * neve (main): likewise.
3282         * rhona (main): likewise.
3283         * tea (main): likewise.
3284
3285 2001-03-15  James Troup  <james@nocrew.org>
3286
3287         * rhona (check_sources): fixed evil off by one (letter) error
3288         which was causing only .dsc files to be deleted when cleaning
3289         source packages.
3290
3291         * charisma (get_maintainer_from_source): remove really stupid and
3292         gratuitous IN sub-query and replace with normal inner join.
3293         (main): connect as read-only user nobody.
3294
3295         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3296         with EXISTS.
3297         (check_files): likewise; still disabled by default though.
3298         (clean_binaries): add ' seconds' to the mysterious number in the
3299         output.
3300         (clean): likewise.
3301
3302         * tea (check_files): add missing global declaration on db_files.
3303
3304 2001-03-14  James Troup  <james@nocrew.org>
3305
3306         * rhona: rewritten large chunks. Removed a lot of the silly
3307         selecting into dictionaries and replaced it with 'where exists'
3308         based sub queries.  Added support for StayOfExecution.  Fix the
3309         problem with deleting dsc_files too early and disable cleaning of
3310         unattached files.
3311
3312 2001-03-14  Anthony Towns  <ajt@debian.org>
3313
3314         * katie (announce): also check Changed-By when trying to detect
3315         NMUs.
3316
3317 2001-03-06  Anthony Towns  <ajt@debian.org>
3318
3319         * ziyi (main): Generate Release.gpg files as well, using the key from
3320         Dinstall::SigningKey in katie.conf, if present. That key has to be
3321         passwordless, and hence kept fairly secretly.
3322
3323 2001-03-02  James Troup  <james@nocrew.org>
3324
3325         * utils.py (str_isnum): new function; checks to see if the string
3326         is a number.
3327
3328         * shania (main): fix _hideous_ bug which was causing all files > 2
3329         weeks old to be deleted from incoming, even if they were part of a
3330         valid upload.
3331
3332 2001-02-27  James Troup  <james@nocrew.org>
3333
3334         * melanie (main): accept new argument -C/--carbon-copy which
3335         allows arbitarty carbon-copying of the bug closure messages.
3336         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3337         separate variable.
3338
3339 2001-02-27  Anthony Towns  <ajt@debian.org>
3340
3341         * ziyi: new program; generates Release files.
3342
3343 2001-02-25  James Troup  <james@nocrew.org>
3344
3345         * katie (reject): add missing '\n' to error message.
3346         (manual_reject): likewise.
3347         (install): catch exceptions from moving the changes file into DONE
3348         and ignore them.
3349
3350         * tea (check_md5sums): new function.
3351
3352 2001-02-25  Michael Beattie  <mjb@debian.org>
3353
3354         * melanie: use $EDITOR if available.
3355
3356 2001-02-15  James Troup  <james@nocrew.org>
3357
3358         * utils.py (parse_changes): don't crash and burn on empty .changes
3359         files.  Symptoms noticed by mjb@.
3360
3361 2001-02-15  Adam Heath  <doogie@debian.org>
3362
3363         * denise (main): use an absolute path for the output filename.
3364
3365         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3366         compile errors with postgresql-dev >= 7.0.
3367
3368 2001-02-12  James Troup  <james@nocrew.org>
3369
3370         * rene: initial version.
3371
3372         * andrea: initial version.
3373
3374         * catherine (main): remove obsolete assignment of arguments.
3375
3376 2001-02-09  James Troup  <james@nocrew.org>
3377
3378         * catherine: first working version.
3379
3380 2001-02-06  James Troup  <james@nocrew.org>
3381
3382         * katie (check_files): validate the priority field; i.e. ensure it
3383         doesn't contain a '/' (to catch people prepending the priority
3384         with the component rather than the section).
3385         (check_override): don't warn about source packages; the only check
3386         is on section and we have no GUI tools that would use the Section
3387         field for a Sources file.
3388         (announce): use tags rather than severities for NMUs.  Requested
3389         by Josip Rodin <joy@>. [#78035]
3390
3391 2001-02-04  James Troup  <james@nocrew.org>
3392
3393         * tea (check_override): new function; ensures packages in suites
3394         are also in the override file.  Thanks to bod@ for noticing that
3395         such packages existed.
3396
3397         * katie: move file type compiled regular expressions to utils as
3398         catherine uses them too.
3399         (check_changes): always default maintainer822 to the installer
3400         address so that any bail out won't cause undefs later.
3401         (check_files): update file type re's to match above.
3402         (stable_install): likewise.
3403         (reject): handle any except from moving the changes files.  Fixes
3404         crashes on unreadable changes files.
3405
3406         * melanie (main): add an explanation of why things are not removed
3407         from testing.
3408
3409 2001-01-31  James Troup  <james@nocrew.org>
3410
3411         * melanie (main): ignore a) no message, b) removing from stable or
3412         testing when invoked with -n/--no-action.
3413
3414         * katie (check_override): lower section before checking to see if
3415         we're whining about 'non-US' versus 'non-US/main'.
3416
3417         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3418         function so that we can use inside of PostgreSQL.
3419
3420 2001-01-28  James Troup  <james@nocrew.org>
3421
3422         * katie: updated to pass new flag to parse_changes() and deal with
3423         the exception raised on invalid .dsc's if appropriate.
3424         * shania (main): likewise.
3425         * melanie (main): likewise.
3426
3427         * tea (check_dscs): new function to validate all .dsc files in
3428         unstable.
3429
3430         * utils.py (parse_changes): if passed an additional flag, validate
3431         the .dsc file to ensure it's extractable by dpkg-source.
3432         Requested by Ben Collins <bcollins@>.
3433
3434 2001-01-27  James Troup  <james@nocrew.org>
3435
3436         * madison (main): connect to the DB as nobody.
3437
3438         * katie (check_files): remove support for -r/--no-version-check
3439         since it makes no sense under katie (jenna will automatically
3440         remove the (new) older version) and was evil in any event.
3441         (check_changes): add missing new line to rejection message.
3442         (check_dsc): likewise.
3443         (process_it): reset reject_message here.
3444         (main): not here.  Also remove support for -r.
3445
3446 2001-01-26  James Troup  <james@nocrew.org>
3447
3448         * katie (check_override): don't whine about 'non-US/main' versus
3449         'non-US'.
3450
3451 2001-01-26  Michael Beattie  <mjb@debian.org>
3452
3453         * natalie.py (usage): new function.
3454         (main): use it.
3455
3456 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3457
3458         * update-mirrorlists: Update README.non-US too (request from Joy).
3459
3460 2001-01-25  James Troup  <james@nocrew.org>
3461
3462         * katie (reject): catch any exception from utils.move() and just
3463         pass, we previously only caught can't-overwrite errors and not
3464         can't-read ones.
3465
3466         * jenna (generate_src_list): use ORDER BY in selects to avoid
3467         unnecessary changes to Packages files.
3468         (generate_bin_list): likewise.
3469
3470         * utils.py (extract_component_from_section): separated out from
3471         build_file_list() as it's now used by claire too.
3472
3473         * claire.py (find_dislocated_stable): rewrite the query to extract
3474         section information and handle component-less locations properly.
3475         Thanks to ajt@ for the improved queries.
3476         (fix_component_section): new function to fix components and
3477         sections.
3478
3479 2001-01-23  James Troup  <james@nocrew.org>
3480
3481         * katie (check_files): set file type for (u?)debs first thing, so
3482         that if we continue, other functions which rely on file type
3483         existing don't bomb out.  If apt_pkg or apt_inst raise an
3484         exception when parsing the control file, don't try any other
3485         checks, just drop out.
3486         (check_changes): new test to ensure there is actually a target
3487         distribution.
3488
3489 2001-01-22  James Troup  <james@nocrew.org>
3490
3491         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3492         <grin@>.
3493         (check_changes): when mapping to unstable, remember to actually
3494         add unstable to the suite list and not just remove the invalid
3495         suite.
3496
3497 2001-01-21  James Troup  <james@nocrew.org>
3498
3499         * katie (check_files): catch exceptions from debExtractControl()
3500         and reject packages which raise any.
3501
3502 2001-01-19  James Troup  <james@nocrew.org>
3503
3504         * katie (check_signature): basename() file name in rejection
3505         message.
3506
3507 2001-01-18  James Troup  <james@nocrew.org>
3508
3509         * katie (in_override_p): remember the section and priority from
3510         the override file so we can check them against the package later.
3511         (check_override): new function; checks section and priority (for
3512         binaries) from the package against the override file and mails the
3513         maintainer about any disparities.
3514         (install): call check_override after announcing the upload.
3515
3516 2001-01-16  James Troup  <james@nocrew.org>
3517
3518         * utils.py (build_file_list): catch ValueError's from splitting up
3519         the files field and translate it into a parse error.
3520
3521         * tea: add support for finding unreferenced files.
3522
3523         * katie (in_override_p): add support for suite-aliasing so that
3524         proposed-updates uploads work again.
3525         (check_changes): catch parses errors from utils.build_file_list().
3526         (check_dsc): likewise.
3527         (check_diff): yet more dpkg breakage so we require even newer a
3528         version.
3529
3530         * jenna (generate_bin_list): don't do nasty path munging that's no
3531         longer needed.
3532
3533         * denise (main): support for non-US; and rename testing's override
3534         files so they're based on testing's codename.
3535
3536 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3537
3538         * melanie: add to the bug closing message explaining what happens
3539         (or rather doesn't) with bugs against packages that have been
3540         removed.
3541
3542 2001-01-14  James Troup  <james@nocrew.org>
3543
3544         * charisma (main): fix silly off-by-one error; suite priority
3545         checking was done using "less than" rather than "less than or
3546         equal to" which was causing weird hesienbugs with wrong Maintainer
3547         fields.
3548
3549 2001-01-10  James Troup  <james@nocrew.org>
3550
3551         * katie (in_override_p): adapted to use SQL-based overrides.
3552         read_override_file function disappears.
3553
3554         * db_access.py: add new functions get_section_id, get_priority_id
3555         and get_override_type_id.
3556         (get_architecture_id): return -1 if the architecture is not found.
3557
3558         * heidi: switch %d -> %d in all SQL queries.
3559         (get_list): Use string.join where appropriate.
3560
3561         * rhona (in_override_p): don't die if the override file doesn't
3562         exist.
3563         (main): warn if the override file doesn't exist.
3564
3565         * alyson: new script; will eventually sync the config file and the
3566         SQL database.
3567
3568         * natalie.py: new script; manipulates overrides.
3569
3570         * melanie: new script; removes packages from suites.
3571
3572 2001-01-08  James Troup  <james@nocrew.org>
3573
3574         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3575         anything it just changed the symptom.  Recognise the new breakage
3576         and reject them too.
3577
3578 2001-01-07  James Troup  <james@nocrew.org>
3579
3580         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3581         to the .changes file, be sure to set up files[filename]["type"]
3582         too.
3583
3584 2001-01-06  James Troup  <james@nocrew.org>
3585
3586         * katie (check_diff): new function; detects bad diff files
3587         produced by dpkg 1.8.1 and rejects thems.
3588         (process_it): call check_diff().
3589         (check_dsc): gar.  Add support for multiple versions of the
3590         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3591         and size against all versions and use one which matches if
3592         possible and exclude any that don't from being poolized to avoid
3593         file overwrites.  Thanks to broonie@ for providing the example.
3594         (install): skip any files marked as excluded as above.
3595
3596 2001-01-05  James Troup  <james@nocrew.org>
3597
3598         * heidi (process_file): add missing argument to error message.
3599
3600 2001-01-04  James Troup  <james@nocrew.org>
3601
3602         * heidi (main): fix handling of multiple files by reading all
3603         files not just the first file n times (where n = the number of
3604         files passed as arguments).
3605
3606 2001-01-04  Anthony Towns  <ajt@debian.org>
3607
3608         * katie (check_dsc): proper fix for the code which locates the
3609         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3610
3611 2000-12-20  James Troup  <james@nocrew.org>
3612
3613         * rhona: replace IN's with EXISTS's to make DELETE time for
3614         binaries and source sane on auric.  Add a -n/--no-action flag and
3615         make it stop actions if used.  Fixed a bug in binaries deletion
3616         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3617         -V/--version.  Giving timing info on deletion till I'm sure it's
3618         sane.
3619
3620         * katie (check_changes): map testing to unstable.
3621
3622         * madison: new script; shows versions in different architectures.
3623
3624         * katie (check_dsc): ensure size matches as well as md5sum;
3625         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3626         #69702.
3627
3628 2000-12-19  James Troup  <james@nocrew.org>
3629
3630         * katie (reject): ignore the "can't overwrite file" exception from
3631         utils.move() and leave the files where they are.
3632         (reject): doh! os.access() test was reversed so we only tried to
3633         move files which didn't exist... replaced with os.path.exists()
3634         test the right way round.
3635
3636         * utils.py (move): raise an exception if we can't overwrite the
3637         destination file.
3638         (copy): likewise.
3639
3640 2000-12-18  James Troup  <james@nocrew.org>
3641
3642         * rhona: first working version.
3643
3644         * db_access.py (get_files_id): force both sizes to be integers.
3645
3646         * katie (main): use size_type().
3647
3648         * utils.py (size_type): new function; pretty prints a file size.
3649
3650 2000-12-17  James Troup  <james@nocrew.org>
3651
3652         * charisma (main): do version compares so that older packages do
3653         not override newer ones and process source first as source wins
3654         over binaries in terms of who we think of as the Maintainer.
3655
3656 2000-12-15  James Troup  <james@nocrew.org>
3657
3658         * katie (install): use the files id for the .orig.tar.gz from
3659         check_dsc().
3660         (install): limit select for legacy source to a) source in legacy
3661         or legacy-mixed type locations and b) distinct on files.id.
3662         (install): rather than the bizarre insert new, delete old method
3663         for moving legacy source into the pool, use a simple update of
3664         files.
3665         (process_it): initalize some globals before each process.
3666
3667 2000-12-14  James Troup  <james@nocrew.org>
3668
3669         * katie (in_override_p): index on binary_type too since .udeb
3670         overrides are in a different file.
3671         (read_override_file): likewise.
3672         (check_files): correct filename passed to get_files_id().
3673         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3674         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3675         (check_dsc): remember the files id of the .orig.tar.gz, not the
3676         location id.
3677
3678 2000-12-13  James Troup  <james@nocrew.org>
3679
3680         * utils.py (poolify): force the component to lower case except for
3681         non-US.
3682
3683         * katie (in_override_p): handle .udeb-specific override files.
3684         (check_files): pass the binary type to in_override_p().
3685         (check_dsc): remember the location id of the old .orig.tar.gz in
3686         case it's not in the pool.
3687         (install): use location id from dsc_files; which is where
3688         check_dsc() puts it for old .orig.tar.gz files.
3689         (install): install files after all DB work is complete.
3690         (reject): basename() the changes filename.
3691         (manual_reject): likewise.
3692
3693         * shania: new progam; replaces incomingcleaner.
3694
3695 2000-12-05  James Troup  <james@nocrew.org>
3696
3697         * katie (check_changes): if inside stable and can't find files
3698         from the .changes; assume it's installed in the pool and chdir()
3699         to there.
3700         (check_files): we are not installing for stable installs, so don't
3701         check for overwriting existing files.
3702         (check_dsc): likewise.
3703         (check_dsc): reorder .orig.tar.gz handling so that we search in
3704         the pool first and only then fall back on any .orig.tar.gz in the
3705         cwd; this avoids false positives on the overwrite check when
3706         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3707         (install): if this is a stable install, bail out to
3708         stable_install() immediately.
3709         (install): dsc_files handling was horribly broken. a) we need to
3710         add files from the .dsc and not the .changes (duh), b) we need to
3711         add the .dsc file itself to dsc_files (to be consistent with neve
3712         if for no other reason).
3713         (stable_install): new function; handles installs from inside
3714         proposed-updates to stable.
3715         (acknowledge_new): basename changes_filename before doing
3716         anything.
3717         (process_it): absolutize the changes filename to avoid the
3718         requirement of being in the same directory as the .changes file.
3719         (process_it): save and restore the cwd as stable installs can
3720         potentially jump into the pool to find files.
3721
3722         * jenna: dislocated_files support using claire.
3723
3724         * heidi (process_file): select package field from binaries
3725         explicitly.
3726
3727         * db_access.py (get_files_id): fix cache key used.
3728
3729         * utils.py (build_file_list): fix 'non-US/non-free' case in
3730         section/component splitting.
3731         (move): use os.path.isdir() rather than stat.
3732         (copy): likewise.
3733
3734         * claire.py: new file; stable in non-stable munger.
3735
3736         * tea: new file; simply ensures all files in the DB exist.
3737
3738 2000-12-01  James Troup  <james@nocrew.org>
3739
3740         * katie (check_dsc): use regex_safe().
3741         (check_changes): typo in changes{} key:
3742         s/distributions/distribution/.
3743         (install): use changes["source"], not files[file]["source"] as the
3744         latter may not exist and the former is used elsewhere.  Commit the
3745         SQL transaction earlier.
3746
3747         * utils.py (regex_safe): new function; escapes characters which
3748         have meaning to SQL's regex comparison operator ('~').
3749
3750 2000-11-30  James Troup  <james@nocrew.org>
3751
3752         * katie (install): pool_location is based on source package name,
3753         not binary package.
3754
3755         * utils.py (move): if dest is a directory, append the filename
3756         before chmod-ing.
3757         (copy): ditto.
3758
3759         * katie (check_files): don't allow overwriting of existing .debs.
3760         (check_dsc): don't allow overwriting of existing source files.
3761
3762 2000-11-27  James Troup  <james@nocrew.org>
3763
3764         * katie (check_signature): don't try to load rsaref; it's
3765         obsolete.
3766         (in_override_p): don't try to lookup override entries for packages
3767         with an invalid suite name.
3768         (announce): don't assume the suite name is valid; use Find() to
3769         lookup the mailing list name for announcements.
3770
3771         * utils.py (where_am_i): typo; hostname is in the first element,
3772         not second.
3773
3774         * db_access.py (get_suite_id): return -1 on an unknown suite.
3775
3776 2000-11-26  James Troup  <james@nocrew.org>
3777
3778         * katie (install): fix CopyChanges handling; typo in in checking
3779         Cnf for CopyChanges flag and was calling non-existent function
3780         copy_file.
3781
3782         * utils.py (copy): new function; clone of move without the
3783         unlink().
3784
3785 2000-11-25  James Troup  <james@nocrew.org>
3786
3787         * utils.py (build_file_list): handle non-US prefixes properly
3788         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
3789         + 'libs' not 'non-US/libs').
3790         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
3791         delays.  This is possibly(/probably) exim speicifc and (like other
3792         sendmail options) needs to be in the config file.
3793
3794 2000-11-24  James Troup  <james@nocrew.org>
3795
3796         * rhona (check_sources): we need file id from dsc_files; not id.
3797         Handle non .dsc source files being re-referenced in dsc_files.
3798
3799         * katie (in_override_p): strip out any 'non-US' prefix.
3800         (check_files): use utils.where_am_i() rather than hardcoding.
3801         (check_files): validate the component.
3802         (install): use utils.where_am_i() rather than hardcoding.
3803         (install): fix mail to go to actual recepient.
3804         (reject): likewise.
3805         (manual_reject): likewise.
3806         (acknowledge_new): likewise.
3807         (announce): likewise.
3808
3809         * db_access.py (get_component_id): ignore case when searching for
3810         the component and don't crash if the component can't be found, but
3811         return -1.
3812         (get_location_id): handle -1 from get_component_id().
3813
3814         * jenna (generate_src_list): don't bring 'suite' into our big
3815         multi-table-joining select as we already know the 'suite_id'.
3816         (generate_bin_list): likewise.
3817
3818         * neve (main): don't quit if not on ftp-master.
3819         (process_packages): remove unused variable 'suite_codename'.
3820
3821         * utils.py (move): actually move the file.
3822         (build_file_list): handle non-US prefixes in the section.
3823
3824         * catherine (main): use which_conf_file().
3825         * charisma (main): likewise.
3826         * heidi (main): likewise.
3827         * jenna (main): likewise.
3828         * katie (main): likewise.
3829         * neve (main): likewise.
3830         * rhona (main): likewise.
3831
3832         * utils.py (where_am_i): new routine; determines the archive as
3833         understood by other 'dak' programs.
3834         (which_conf_file): new routine; determines the conf file to read.
3835
3836 2000-11-17  James Troup  <james@nocrew.org>
3837
3838         * katie (install): fix where .changes files for proposed-updates
3839         go.
3840
3841 2000-11-04  James Troup  <james@nocrew.org>
3842
3843         * jenna (main): handle architecture properly if no
3844         -a/--architecture argument is given, i.e. reset architecture with
3845         the values for the suite for each suite.
3846
3847         * Add apt_pkg.init() to the start of all scripts as it's now
3848         required by python-apt.
3849
3850 2000-10-29  James Troup  <james@nocrew.org>
3851
3852         * jenna (generate_bin_list): take an additional argument 'type'
3853         and use it in the SELECT.
3854         (main): if processing component 'main', process udebs and debs.
3855
3856         * neve (process_packages): set up 'type' in 'binaries' (by
3857         assuming .deb).
3858
3859         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
3860         (check_files): set up files[file]["dbtype"].
3861         (install): use files[file]["dbtype"] to set up the 'type' field in
3862         the 'binaries' table.
3863
3864         * init_pool.sql: add a 'type' field to the 'binaries' table to
3865         distinguisgh between ".udeb" and ".deb" files.
3866
3867         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
3868         dest ? dirname(dest)" type check instead.
3869
3870         * katie (check_dsc): handle the case of an .orig.tar.gz not found
3871         in the pool without crashing.  Also handle the case of being asked
3872         to look for something other than an .orig.tar.gz in the pool.
3873
3874 2000-10-26  James Troup  <james@nocrew.org>
3875
3876         * katie (install): fix filenames put into files table during
3877         poolification of legacy source.
3878
3879         * utils.py (move): work around a bug in os.path.basename() which
3880         cunningly returns '' if there is a trailing slash on the path
3881         passed to it.
3882
3883         * katie (check_dsc): Remove more cruft.  If we find the
3884         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
3885         location, make a note of that so we can fix things in install().
3886         (install): as above.  Move any old source out of legacy locations
3887         so that 'apt-get source' will work.
3888         (process_it): reset the flag that indicates to install that the
3889         source needs moved.
3890
3891         * cron.daily: more.  Nowhere near complete yet though.
3892
3893         * katie (install): don't run os.makedirs, a) utils.move() does
3894         this now, b) we weren't removing the user's umask and were
3895         creating dirs with SNAFU permissions.
3896         (check_dsc): rewrite the .orig.tar.gz handling to take into
3897         account, err, package pools.  i.e. look anywhere in the pool
3898         rather than faffing around with two simple paths.
3899
3900         * neve (process_sources): add the .dsc to dsc_files too.
3901
3902 2000-10-25  James Troup  <james@nocrew.org>
3903
3904         * neve (process_sources): don't duplicate .orig.tar.gz's.
3905
3906 2000-10-23  James Troup  <james@nocrew.org>
3907
3908         * utils.py (re_extract_src_version): moved here.
3909
3910         * neve: move re_extract_src_version to utils.
3911         (process_packages): reflect change.
3912
3913         * katie (install): reflect change.
3914
3915 2000-10-19  James Troup  <james@nocrew.org>
3916
3917         * jenna (generate_src_list): handle locations with null
3918         components.
3919         (generate_bin_list): likewise.
3920