]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
4b704de33fdc46a05bc966e885893aa2bd0c8d62
[dak.git] / ChangeLog
1 2007-02-08  Ryan Murray  <rmurray@debian.org>
2
3         * config/debian/cron.daily: use $base instead of hardcoding path
4         name.
5
6         * scripts/debian/mkfilesindices: source 'vars' file and use it's
7         variables instead of hardcoding path names.
8
9         * config/debian/apt.conf: switch from /org to /srv.
10         * config/debian/apt.conf.buildd: likewise.
11         * config/debian/apt.conf.stable: likewise.
12         * config/debian/cron.daily: likewise.
13         * config/debian/cron.hourly: likewise.
14         * config/debian/cron.monthly: likewise.
15         * config/debian/cron.unchecked: likewise.
16         * config/debian/cron.weekly: likewise.
17         * config/debian/dak.conf: likewise.
18         * config/debian/vars: likewise.
19         * scripts/debian/mkfilesindices: likewise.
20         
21 2007-02-08  James Troup  <james@nocrew.org>
22
23         * dak/process_unchecked.py (check_signed_by_key): new function to
24         ensure .changes files are signed by an authorized uploader.
25         (process_it): use it.
26
27         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
28         to configure per suite/component/architecture binary upload
29         restrictions.
30
31 2006-06-26  Ryan Murray  <rmurray@debian.org>
32
33         * dak/process_unchecked.py (check_files): strip optional source version
34         from Source: field in changes file, and ensure what is left is a valid
35         package name.
36
37 2006-06-23  Ryan Murray  <rmurray@debian.org>
38
39         * dak/process_unchecked.py (check_files): also check ProposedUpdates
40         queue for source.
41
42 2006-06-18  Ryan Murray  <rmurray@debian.org>
43
44         * dak/scripts/debian/update-ftpstats: look for dak named processes in
45         the log, too.
46
47         * dak/process_unchecked.py (check_files): only check embargoed and
48         unembargoed queues if the keys are set.
49
50         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
51         and bzip2 for etch.
52
53 2006-06-16  James Troup  <james@nocrew.org>
54
55         * dak/dak.py (init): add new-security-install.
56
57         * dak/new_security_install.py: cleanups and adapt for new naming
58         scheme and other changes.
59
60 2006-06-16  Anthony Towns  <ajt@debian.org>
61
62         * dak/new_security_install.py: initial version imported from
63         klecker.
64
65 2006-06-16  James Troup  <james@nocrew.org>
66
67         [Merged changes from klecker - original author unknown.]
68
69         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
70
71         * dak/security_install.py (do_upload): fix check for oldstable and
72         upload file list handling.
73
74         * dak/process_unchecked.py (check_files): update "check for
75         source" code to also look in Embargoed and Unembargoed queues.
76         (is_unembargo): fix handling of Dir::Queue::Disembargo.
77
78         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
79
80         * config/debian-security/vars (disembargo): add.
81
82         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
83         update.
84         (Process-Unchecked::AcceptedLockFile): add.
85         (Suite::Testing): clean up Version and Description.
86         (SuiteMappings): add silent map from etch-secure to testing.
87
88         * config/debian-security/cron.unchecked: add support for
89         disembargoed queues.
90
91         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
92         files too.
93
94         * config/debian-security/apt.conf: add amd64 to architectures for
95         testing-security.
96
97 2006-06-11  James Troup  <troup@spohr.debian.org>
98
99         * config/debian/cron.daily: invoke process-accepted not
100         process-unchecked.
101
102         * config/debian/vars (scriptsdir): new variable.
103         * config/debian/cron.daily: use it.
104
105         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
106         $base/misc/ instead of versioned $masterdir.  Correct 'dak
107         make-maintainers' invocation to look in $configdir for
108         pseudo-packages.maintainers.
109
110         * daklib/queue.py (Upload.do_reject): use correct name for
111         rejection template.
112
113 2006-06-11  James Troup  <james@nocrew.org>
114
115         * dak/override.py (main): temporarily add content of old X-Katie
116         header back as the PTS apparently filters on it.
117         * dak/process_accepted.py (main): likewise.
118         * dak/process_new.py (main): likewise.
119         * dak/process_unchecked.py (main): likewise.
120         * dak/reject_proposed_updates.py (main): likewise.
121         * dak/rm.py (main): likewise.
122         * daklib/queue.py (Upload.do_reject): likewise.
123
124         * config/debian/cron.unchecked: set -u to error out on undefined
125         variables.  Preset LOCKDAILY to "" accordingly.
126         * config/debian/cron.hourly: likewise.
127         * config/debian/cron.monthly: likewise.
128         * config/debian/cron.weekly: likewise.
129
130         * config/debian/vars (configdir): add new variable pointing to
131         this directory.
132
133         * config/debian/cron.daily: use $configdir inplace of $masterdir
134         when that's what we mean, and don't cd into $masterdir just to run
135         dak scripts as we don't need to do that anymore.
136         * config/debian/cron.hourly: likewise.
137         * config/debian/cron.unchecked: likewise.
138         * config/debian/cron.weekly: likewise.
139
140         * config/debian/dak.conf
141         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
142         user back to list of known users as it's non-trivial to entirely
143         change the owner of a database with postgresql 7.4.
144
145         * daklib/queue.py (Upload.source_exists): use string object
146         methods rather than string module.
147         (Upload.get_anyversion): likewise.
148
149         * daklib/utils.py (validate_changes_file_arg): update filename
150         slicing to cope with new .dak filenames.
151
152         * dak/ls.py (main): add back 'heidi' as a valid argument for
153         -f/--format as people are using it in scripts and breaking that
154         without warning seems rude.
155
156 2006-05-21  James Troup  <james@nocrew.org>
157
158         * dak/rm.py (main): use string .isdigit() rather than
159         utils.str_isnum().
160         * dak/process_new.py (edit_overrides): likewise.
161
162         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
163         string import.
164
165 2006-05-21  James Troup  <james@nocrew.org>
166
167         * dak/check_archive.py (check_indices_files_exist): use list
168         comprehension instead of map().  No longer need to import
169         deprecated string module as a side-effect.
170         * dak/check_overrides.py (process): likewise.
171         (main): likewise.
172         * dak/cruft_report.py (do_obsolete_source): likewise.
173         (main): likewise.
174         * dak/ls.py (main): likewise.
175         * dak/make_suite_file_list.py (write_filelists): likewise.
176         * dak/process_accepted.py (stable_install): likewise.
177         * dak/rm.py (main): likewise.
178         * dak/stats.py (number_of_packages): likewise.
179         * daklib/logging.py (Logger.log): likewise.
180         * daklib/queue.py (Upload.source_exists): likewise.
181         (Upload.cross_suite_version_check): likewise.
182         * daklib/utils.py (parse_args): likewise.
183
184 2006-05-21  James Troup  <james@nocrew.org>
185
186         * daklib/utils.py (process_gpgv_output): new function, split out
187         of check_signature().
188         (check_signature): adapt accordingly.
189         (retrieve_key): new function that will try to retrieve the key
190         that signed a given file from a keyserver.
191         (check_signature): add 'autofetch' argument that if not set
192         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
193         If 'autofetch' is true, invoke retrieve_key().  
194
195         * docs/README.config: document Dinstall::KeyAutoFetch and
196         Dinstall:KeyServer.
197
198 2006-05-20  James Troup  <james@nocrew.org>
199
200         * dak/find_null_maintainers.py (main):
201         s/createtimestamp/createTimestamp/ to make things work with modern
202         slapd.
203
204         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
205         Stable::Version and Stable::Description for 3.1r2.
206
207         * config/debian-non-US/dak.conf: sync with klecker - update
208         version number of 3.0 and MoreInfoURL.
209
210         * docs/README.stable-point-release: Add notes about updating
211         dak.conf and Reject-Proposed-Updates section in particular.
212         s/woody/stable/.  Also need to update README.html.
213
214         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
215
216         * config/debian/apt.conf: Add udeb tree for proposed-updates.
217
218 2006-05-20  Ryan Murray  <rmurray@debian.org>
219
220         * scripts/debian/update-ftpstats: new script to update daily
221         architecture size graph data.
222
223         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
224         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
225         there.
226
227         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
228         before we finish.  Don't push to merkel.
229
230         * dak/process_unchecked.py (check_changes): Also look in
231         ProposedUpdates queue dir.
232         (check_files): likewise.
233
234 2006-05-20  Anthony Towns  <ajt@debian.org>
235
236         * scripts/debian/mkfilesindices: new script to generate file
237         indices used for partial mirroring.
238
239         * config/debian/cron.daily: add progress timestamps.
240
241         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
242         amd64 to testing, unstable and experimental.  Drop sh from
243         experimental.  Move Experimental to dists/experimental.  Add
244         Dir::ProposedUpdates.  Add Architectures::amd64.
245
246         * config/debian/apt.conf: add amd64 to testing, unstable and
247         experimental.  Drop uncompressed Packages files from testing. Drop
248         sh from experimental.  Move experimental to dists/experimental/.
249
250         * config/debian/vars (archs): add amd64.
251
252         * dak/process_unchecked.py (action): Add support for
253         proposed-updates approval queue.
254         (is_stableupdate): new function - checks if the upload is targeted
255         at proposed-updates.
256         (do_stableupdate): likewise - moves upload to proposed-updates
257         holding area.
258
259         * dak/process_new.py (do_new): warn if original or new target
260         suite are invalid.
261
262         * dak/generate_releases.py (print_md5sha_files): less whitespace
263         between the hash and size.
264
265         * dak/generate_index_diffs.py (genchanges): don't say we're not
266         doing anything.  Better formatting of other messages.
267         (main): don't skip experimental and remove some 'doing stuff'
268         prints.
269
270 2006-05-18  James Troup  <james@nocrew.org>
271
272         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
273         query.
274
275         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
276         docstrings, untabify, don't shadow builtins, lowercase non-global
277         variable names, spaces after commas.  Also bail if given any
278         arguments since we don't accept any.
279         * dak/init_db.py: likewise.  Also split large main() into
280         subfunctions and rename get() to sql_get().
281
282         * dak/init_db.py (main): check returned value from
283         database.get_archive_id().
284
285         * dak/dak.py: renamed from shell.py.  Update to support new source
286         layout.  Created init() and usage() functions.  Various
287         pylint-inspired cleanups.  Use daklib utils.warn() and
288         utils.fubar().  Change 'functionality' variable to only have
289         (command, description) and always invoke main() when running the
290         module.  Also support -h.
291
292 2006-05-17  James Troup  <james@nocrew.org>
293
294         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
295         imports of and calls to daklib modules.  Change script name
296         everywhere, i.e. in output, mails, comments and configuration tree
297         + filenames.  Also update references to other renamed scripts,
298         classes and templates.  Use '.dak' instead of '.katie' for the
299         queue info storage files.
300         (Renamed from tea)
301         * dak/check_overrides.py: likewise.  (Renamed from cindy)
302         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
303         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
304         * dak/clean_queues.py: likewise.  (Renamed from shania)
305         * dak/clean_suites.py: likewise.  (Renamed from rhona)
306         * dak/compare_suites.py: likewise.  (Renamed from andrea)
307         * dak/control_overrides.py: likewise.  (Renamed from natalie)
308         * dak/control_suite.py: likewise.  (Renamed from heidi)
309         * dak/cruft_report.py: likewise.  (Renamed from rene)
310         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
311         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
312         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
313         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
314         * dak/import_archive.py: likewise.  (Renamed from neve)
315         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
316         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
317         * dak/init_db.py: likewise. (Renamed from alyson)
318         * dak/init_dirs.py: likewise. (Renamed from rose)
319         * dak/ls.py: likewise. (Renamed from madison)
320         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
321         * dak/make_overrides.py: likewise.  (Renamed from denise)
322         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
323         * dak/mirror_split.py: likewise.  (Renamed from billie)
324         * dak/override.py: likewise.  (Renamed from alicia)
325         * dak/poolize.py: likewise.  (Renamed from catherine)
326         * dak/process_accepted.py: likewise.  (Renamed from kelly)
327         * dak/process_new.py: likewise.  (Renamed from lisa)
328         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
329         * dak/queue_report.py: likewise.  (Renamed from helena)
330         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
331         * dak/rm.py: likewise.  (Renamed from melanie)
332         * dak/security_install.py: likewise.  (Renamed from amber)
333         * dak/split_done.py: likewise.  (Renamed from nina)
334         * dak/stats.py: likewise.  (Renamed from saffron)
335         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
336         * daklib/database.py: likewise.  (Renamed from db_access)
337         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
338         * daklib/utils.py: likewise.
339
340         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
341         doesn't need to notify anyone" string.
342         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
343
344         * dak/process_accepted.py (init): drop -V/--version argument.
345         * dak/process_new.py (init): likewise.
346         * dak/process_unchecked.py (init): likewise.
347         * dak/reject_proposed_updates.py (init): likewise
348
349         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
350
351         * dak/stats.py: in usage() output change STAT to MODE.
352
353 2006-05-15  James Troup  <james@nocrew.org>
354
355         * dak/queue_report.py: remove unused encodings imports.
356
357         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
358         imports.  Initalize 'Cnf' as a global.
359         (BillieDB._internal_recurse): fix 'util.' typo.
360
361         * dak/import_ldap_fingerprints.py (main): drop unused time import and
362         commented out time check for LDAP search.
363
364 2005-12-16  Ryan Murray  <rmurray@debian.org>
365
366         * halle: add support for udebs
367         * kelly: stable_install: add support for binNMU versions
368
369 2005-12-05  Anthony Towns  <aj@erisian.com.au>
370
371         * katie.py: Move accept() autobuilding support into separate function 
372         (queue_build), and generalise to build different queues
373
374         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
375
376         * jennifer: Initial support for enabling embargo handling with the
377         Dinstall::SecurityQueueHandling option.
378         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
379         functions.
380
381         * katie.conf-security: Include embargo options
382         * katie.conf-security: Add Lock dir
383         * init_pool.sql-security: Create disembargo table
384         * init_pool.sql-security: Add constraints for disembargo table
385
386 2005-11-26  Anthony Towns  <aj@erisian.com.au>
387
388         * Merge of changes from klecker, by various people
389
390         * amber: special casing for not passing on amd64 and oldstable updates
391         * amber: security mirror triggering
392         * templates/amber.advisory: updated advisory structure
393         * apt.conf.buildd-security: update for sarge's release
394         * apt.conf-security: update for sarge's release
395         * cron.buildd-security: generalise suite support, update for sarge's release
396         * cron.daily-security: update for sarge's release, add udeb support
397         * vars-security: update for sarge's release
398         * katie.conf-security: update for sarge's release, add amd64 support,
399         update signing key
400
401         * docs/README.names, docs/README.quotes: include the additions
402
403 2005-11-25  Anthony Towns  <aj@erisian.com.au>
404
405         * Changed accepted_autobuild to queue_build everywhere.
406         * Add a queue table.
407         * Add a "queue" field in the queue_build table (currently always 0)
408
409         * jennifer: Restructure to make it easier to support special
410         purpose queues between unchecked and accepted.
411
412 2005-11-25  Anthony Towns  <aj@erisian.com.au>
413
414         * Finishing merge of changes from spohr, by various people still
415
416         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
417         works
418         * jennifer: Re-enable .deb ar format checking
419         * katie.py: Convert to +bX binNMU special casing
420         * rhona: Add some debug output when deleting binaries
421         * cron.daily: Add emilie
422         * cron.unchecked: Add lock files
423
424 2005-11-15  Anthony Towns  <aj@erisian.com.au>
425
426         * Merge of changes from spohr, by various people.
427
428         * tiffani: new script to do patches to Packages, Sources and Contents
429         files for quicker downloads.
430         * ziyi: update to authenticate tiffani generated files
431
432         * dak: new script to provide a single binary with less arbitrary names
433         for access to dak functionality.
434
435         * cindy: script implemented
436
437         * saffron: cope with suites that don't have a Priority specified
438         * heidi: use get_suite_id()
439         * denise: don't hardcode stable and unstable, or limit udebs to unstable
440         * denise: remove override munging for testing (now done by cindy)
441         * helena: expanded help, added new, sort and age options, and fancy headers
442         * jennifer: require description, add a reject for missing dsc file
443         * jennifer: change lock file
444         * kelly: propogation support
445         * lisa: honour accepted lock, use mtime not ctime, add override type_id
446         * madison: don't say "dep-retry"
447         * melanie: bug fix in output (missing %)
448         * natalie: cope with maintainer_override == None; add type_id for overrides
449         * nina: use mtime, not ctime
450
451         * katie.py: propogation bug fixes
452         * logging.py: add debugging support, use | as the logfile separator
453
454         * katie.conf: updated signing key (4F368D5D)
455         * katie.conf: changed lockfile to dinstall.lock
456         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
457         * katie.conf: added tiffani, cindy support
458         * katie.conf: updated to match 3.0r6 release
459         * katie.conf: updated to match sarge's release
460
461         * apt.conf: update for sarge's release
462         * apt.conf.stable: update for sarge's release
463         * apt.conf: bump daily max Contents change to 25MB from 12MB
464
465         * cron.daily: add accepted lock and invoke cindy  
466         * cron.daily: add daily.lock
467         * cron.daily: invoke tiffani
468         * cron.daily: rebuild accepted buildd stuff
469         * cron.daily: save rene-daily output on the web site
470         * cron.daily: disable billie
471         * cron.daily: add stats pr0n
472
473         * cron.hourly: invoke helena
474
475         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
476         * vars: add lockdir, add etch to copyoverrides
477         * Makefile: add -Ipostgresql/server to CXXFLAGS
478
479         * docs/: added README.quotes
480         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
481         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
482
483         * TODO: correct spelling of "conflicts"
484
485 2005-05-28  James Troup  <james@nocrew.org>
486
487         * helena (process_changes_files): use MTIME rather than CTIME (the
488         C's not for 'creation', stupid).
489         * lisa (sort_changes): likewise.
490
491         * jennifer (check_distributions): use has_key rather than an 'in'
492         test which doesn't work with python2.1.  [Probably by AJ]
493
494 2005-03-19  James Troup  <james@nocrew.org>
495
496         * rene (main): use Suite::<suite>::UdebComponents to determine
497         what components have udebs rather than assuming only 'main' does.
498
499 2005-03-18  James Troup  <james@nocrew.org>
500
501         * utils.py (rfc2047_encode): use codecs.lookup() rather than
502         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
503         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
504         <andrew@ubuntu.com>.
505
506 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
507
508         * helena: add -n/--new HTML output option and improved sorting
509         options.
510
511 2005-03-06  Ryan Murray  <rmurray@debian.org>
512
513         * shania(main): use Cnf::Dir::Reject instead of REJECT
514
515 2005-02-08  James Troup  <james@nocrew.org>
516
517         * rene (main): add partial NBS support by checking that binary
518         packages are built by their real parent and not some random
519         stranger.
520         (do_partial_nbs): likewise.
521
522 2005-01-18  James Troup  <james@nocrew.org>
523
524         * katie.py (Katie.build_summaries): avoid leaking file handle when
525         extracting package description.
526         (Katie.force_reject): remember and close each file descriptor we
527         use.
528         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
529         s/reason_file/reason_fd/ because it's a file descriptor.
530         (Katie.check_dsc_against_db): avoid leaking file handle whenever
531         invoking apt_pkg.md5sum().
532
533         * jennifer (check_deb_ar): new function: sanity check the ar
534         contents of a .deb.
535         (check_files): use it.
536         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
537         found.
538         (check_files): accept 'raw-installer' as an alias for 'byhand'.
539
540 2005-01-14  Anthony Towns  <ajt@debian.org>
541
542         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
543
544         * propup stuff (thanks to Andreas Barth)
545         * katie.conf: add stable MustBeOlderThan testing, add -security
546           propup
547         * jennifer: set distribution-version in .katie if propup may be needed
548         * katie.py: add propogation to cross_suite_version_check
549
550 2004-11-27  James Troup  <james@nocrew.org>
551
552         * nina: new script to split monolithic queue/done into date-based
553         hierarchy.
554
555         * rene (usage): document -s/--suite.
556         (add_nbs): use .setdefault().
557         (do_anais): likewise.
558         (do_nbs): don't set a string to "" and then += it.
559         (do_obsolete_source): new function - looks for obsolete source
560         packages (i.e source packages whose binary packages are ALL a)
561         claimed by someone else and b) newer when built from the other
562         source package).
563         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
564         and 'full' check modes.  Check for obsolete source packages.
565         linux-wlan-ng has been fixed - remove hideous bodge.
566
567         * jennifer (check_distributions): support 'reject' suite map type.
568
569         * utils.py (validate_changes_file_arg): s/file/filename/.
570         s/fatal/require_changes/.  If require_changes is -1, ignore errors
571         and return the .changes filename regardless.
572         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
573         (re_no_revision): don't escape '-', it's not a special character.
574         s/\*/+/ as there must be at least one non-dash character after the
575         dash in a revision.  Thanks to Christian Reis for noticing both of
576         these.
577
578         * ashley (main): pass require_changes=-1 to
579         utils.validate_changes_file_arg().
580
581         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
582         Team <debian-kernel@lists.debian.org>'.
583
584         * katie.py (Katie.in_override_p): fix .startswith() usage.
585
586         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
587         (Lauren::MoreInfoURL): update to 3.0r3.
588         (Suite::Stable::Version): likewise.
589         (Suite::Stable::Description): likewise.
590
591         * cron.daily: disable automatic task override generation.
592
593         * cindy (process): restrict "find all packages" queries by
594         component.  Respect Options["No-Action"].
595         (main): add -n/--no-action support.  Only run on unstable.  Rename
596         type to otype (pychecker).
597
598 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
599
600         * katie.conf (Billie::BasicTrees): add all architectures.
601         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
602         'everything'.
603
604         * cron.daily: Update a 'current' symlink when creating the
605         post-daily-cron-job database backup to aid mirroring to merkel.
606         Run billie.
607
608         * billie (BillieTarget.poolish_match): handle .udeb too.
609
610 2004-10-13  Ryan Murray  <rmurray@debian.org>
611
612         * amber (do_upload): Sort changes files in "katie" order so that
613           source always arrives before binary-only rebuilds
614         
615 2004-10-05  James Troup  <james@nocrew.org>
616
617         * jennifer (check_dsc): correct reject message on invalid
618         Maintainer field.
619
620 2004-09-20  James Troup  <james@nocrew.org>
621
622         * alicia: remove unused 'pwd' import.
623
624         * tea (check_override): underline suite name in output properly.
625
626         * rene (main): read a compressed Packages file.
627         * tea (validate_packages): likewise.
628
629         * katie.py (re_fdnic): add 'r' prefix.
630         (re_bin_only_nmu_of_mu): likewise.
631         (re_bin_only_nmu_of_nmu): likewise.
632
633         * madison (main): retrieve component information too and display
634         it if it's not 'main'.
635         * melanie (reverse_depends_check): likewise.
636
637         * utils.py (pp_dep): renamed...
638         (pp_deps): ... to this.
639         * jeri (check_dep): update calls to utils.pp_deps().
640         * melanie (reverse_depends_check): likewise.
641
642         * jennifer (check_changes): move initalization of email variables
643         from here...
644         (process_it): ...to here as we no longer always run
645         check_changes().  Don't bother to initialize
646         changes["architecture"].
647
648         * denise (list): renamed to...
649         (do_list): ...this to avoid name clash with builtin 'list'.
650         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
651         for dictionaries.
652         (main): Likewise for name clash avoidance and also
653         s/override_type/suffix/.  Adjust call to do_list().
654
655 2004-09-01  Ryan Murray  <rmurray@debian.org>
656
657         * tea (check_files): check the pool/ directory instead of dists/
658
659 2004-08-04  James Troup  <james@nocrew.org>
660
661         * jenna (cleanup): use .setdefault() for dictionaries.
662         (write_filelists): likewise.
663
664         (write_filelists): Use utils.split_args() not split() to split
665         command line arguments.
666         (stable_dislocation_p): likewise.
667
668         (write_filelists): Add support for mapping side of suite-based
669         "Arch: all mapping".
670         (do_da_do_da): ensure that if we're not doing all suites that we
671         process enough to be able correct map arch: all packages.
672
673         * utils.py (cant_open_exc): correct exception string,
674         s/read/open/, s/.$//.
675
676         * templates/amber.advisory: update to match reality a little
677         better.
678
679         * melanie (reverse_depends_check): read Packages.gz rather than
680         Packages.
681
682         * jennifer (check_files): check for unknown component before
683         checking for NEWness.
684
685         * katie.py (Katie.in_override_p): use .startswith in favour of a
686         slice.
687
688         * docs/melanie.1.sgml: document -R/--rdep-check.
689
690 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
691
692         * billie (main): Make the verbatim lists include all the README
693           elements.
694         * docs/README.names: Add billie in (correcting oversight)
695
696 2004-07-01  James Troup  <james@nocrew.org>
697
698         * emilie (main): handle woody's case-sensitive python-ldap,
699         s/keyfingerprint/keyFingerPrint/.
700
701 2004-06-25  James Troup  <james@nocrew.org>
702
703         * debian/control (Depends): add dpkg-dev since jennifer uses
704         dpkg-source.
705
706 2004-06-24  James Troup  <james@nocrew.org>
707
708         * melanie (main): s/file/temp_file/ and close file handle before
709         removing the temporary file.
710         (main): don't warn about needing a --carbon-copy if in no-action
711         mode.
712
713         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
714         (main): likewise.
715
716         * test/006/test.py (main): check bracketed email-only form.
717
718         * utils.py (fix_maintainer): if the Maintainer string is bracketed
719         email-only, strip the brackets so we don't end up with
720         <<james@nocrew.org>>.
721
722 2004-06-20  James Troup  <james@nocrew.org>
723
724         * jennifer (process_it): only run check_changes() if
725         check_signature() returns something.  (Likewise)
726
727         * utils.py (changes_compare): if there's no changes["version"] use
728         "0" rather than None.  (Avoids a crash on unsigned changes file.)
729
730 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
731
732         * jeri (pp_dep): moved from here to ...
733         * utils.py (pp_dep): here.
734
735         * melanie (main): add reverse dependency checking.
736
737 2004-06-17  James Troup  <james@nocrew.org>
738
739         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
740         * tea (check_dscs): likewise.
741
742         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
743         change from boolean to a variable with 3 possible values, 0 and 1
744         as before, -1 means don't require a signature.  Makes
745         parse_changes() useful for parsing arbitary RFC822-style files,
746         e.g. 'Release' files.
747         (check_signature): add support for detached signatures by passing
748         the files the signature is for as an optional third argument.
749         s/filename/sig_filename/g.  Add a fourth optional argument to
750         choose the keyring(s) to use.  Don't os.path.basename() the
751         sig_filename before checking it for taint.
752         (re_taint_free): allow '/'.
753
754 2004-06-11  James Troup  <james@nocrew.org>
755
756         * tea (check_files): make override.unreadable optional.
757         (validate_sources): close the Sources file handle.
758
759         * docs/README.first: clarify that 'alyson' and running
760         add_constraints.sql by hand is something you only want to do if
761         you're not running 'neve'.
762
763         * docs/README.config (Location::$LOCATION::Suites): document.
764
765         * db_access.py (do_query): also print out the result of the query.
766
767 2004-06-10  James Troup  <james@nocrew.org>
768
769         * katie.py (Katie.cross_suite_version_check): post-woody versions
770         of python-apt's apt_pkg.VersionCompare() function apparently
771         returns variable integers for less than or greater than results -
772         update our result checking to match.
773         * jenna (resolve_arch_all_vs_any): likewise.
774         * charisma (main): likewise.
775
776 2004-06-09  James Troup  <james@nocrew.org>
777
778         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
779         valid_dsc_p and don't run check_source() if check_dsc() failed.
780         (check_dsc): on fatal failures return 0 so check_source() isn't
781         run (since it makes fatal assumptions about the presence of
782         mandatory .dsc fields).  
783         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
784
785 2004-05-07  James Troup  <james@nocrew.org>
786
787         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
788         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
789
790         * katie.conf (Dir::Override): remove duplicate definition.
791
792         * neve (get_or_set_files_id): add an always-NULL last_used column
793         to output.
794
795 2004-04-27  James Troup  <james@nocrew.org>
796
797         * apt.conf-security (tree "dists/stable/updates"): add
798         ExtraOverride - noticed by Joey Hess (#246050).
799         (tree "dists/testing/updates"): likewise.
800
801 2004-04-20  James Troup  <james@nocrew.org>
802
803         * jennifer (check_files): check for existing .changes or .katie
804         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
805         directories.
806
807 2004-04-19  James Troup  <james@nocrew.org>
808
809         * jennifer (check_source): handle failure to remove the temporary
810          directory (used for source tree extraction) better, specifically:
811          if we fail with -EACCES, chmod -R u+rwx the temporary directory
812          and try again and if that works, REJECT the package.
813
814 2004-04-17  James Troup  <james@nocrew.org>
815
816         * docs/madison.1.sgml: document -b/--binary-type,
817         -g/--greaterorequal and -G/--greaterthan.
818
819         * madison (usage): -b/--binary-type only takes a single argument.
820         Document -g/--greaterorequal and -G/--greaterthan.
821         (main): add support for -g/--greaterorequal and -G/--greaterthan.
822
823 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
824
825         * billie: Cleaned up a load of comments, added /README.non-US to
826           the verbatim matches list.
827
828 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
829
830         * utils.py (size_type): Make it use real binary megabytes and
831           kilobytes, instead of the marketing terms used before.
832
833 2004-04-07  James Troup  <james@nocrew.org>
834
835         * katie.py (Katie.check_dsc_against_db): in the case we're
836         ignoring an identical-to-existing orig.tar.gz remember the path to
837         the existent version in pkg.orig_tar_gz.  Adjust query to grab
838         location.path too to be able to do so.
839
840 2004-04-03  James Troup  <james@nocrew.org>
841
842         * debian/control (Depends): add python2.1-email | python (>= 2.2)
843         needed for new utils.rfc2047_encode() function.
844
845         * utils.py (re_parse_maintainer): allow whitespace inside the
846         email address.
847         (Error): new exception base class.
848         (ParseMaintError): new exception class.
849         (force_to_utf8): new function.
850         (rfc2047_encode): likewise.
851         (fix_maintainer): rework.  use force_to_utf8() to force name and
852         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
853         return an rfc2047 value.  Validate the address to catch missing
854         email addresses and (some) broken ones.
855
856         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
857         by adopting foo2047 return value.
858         (Katie.dump_vars): add changedby2047 and maintainer2047 as
859         mandatory changes fields.  Promote changes and maintainer822 to
860         mandatory fields.
861         (Katie.update_subst): default maintainer2047 rather than
862         maintainer822.  User foo2047 rather than foo822 when setting
863         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
864
865         * jennifer (check_changes): set default changes["maintainer2047"]
866         and changes["changedby2047"] values rather than their 822
867         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
868         to new utils.fix_maintainer() - reject on exception and adopt
869         foo2047 return value.
870         (check_dsc): if a mandatory field is missing don't do any further
871         checks and as a result reduce paranoia about dsc[var] existence.
872         Validate the maintainer field by calling new
873         utils.fix_maintainer().
874
875         * ashley (main): add changedby2047 and maintainer2047 to mandatory
876         changes fields.  Promote maintainer822 to a mandatory changes
877         field.  add "pool name" to files fields.
878
879         * test/006/test.py: new file - tests for new
880         utils.fix_maintainer().
881
882 2004-04-01  James Troup  <james@nocrew.org>
883
884         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
885
886         * jennifer (get_changelog_versions): create a symlink mirror of
887         the source files in the temporary directory.
888         (check_source): if check_dsc_against_db() couldn't find the
889         orig.tar.gz bail out.
890
891         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
892         part of the upload store the path to it in pkg.orig_tar_gz and if
893         it can't be found set pkg.orig_tar_gz to -1.
894
895         Explicitly return the second value as None in the (usual) case
896         where we don't have to reprocess.  Remove obsolete diagnostic
897         logs.
898
899         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
900
901         * utils.py (temp_filename): new helper function that wraps around
902         tempfile.mktemp().
903
904         * katie.py (Katie.do_reject): use it and don't import tempfile.
905         * lisa (prod_maintainer): likewise.
906         (edit_note): likewise.
907         (edit_new): likewise.
908         * lauren (reject): likewise.
909         * melanie (main): likewise.
910         * neve (do_sources): likewise.
911         * rene (main): likewise.
912         * tea (validate_sources): likewise.
913
914 2004-03-31  James Troup  <james@nocrew.org>
915
916         * tea (validate_sources): remove unused 's' temporary variable.
917
918 2004-03-15  James Troup  <james@nocrew.org>
919
920         * jennifer (check_dsc): check changes["architecture"] for
921         source before we do anything else.
922
923 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
924
925         * billie: Added
926         * katie.conf (Billie): Added sample Billie stanza to katie.conf
927
928 2004-03-12  James Troup  <james@nocrew.org>
929
930         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
931
932         * katie.conf (Dir::Queue::BTSVersionTrack): define.
933
934         * katie.py (Katie.accept): add support for DebBugs Version
935         Tracking by writing out .versions (generated in jennifer's
936         get_changelog_versions()) and .debinfo (mapping of binary ->
937         source) files.
938
939         * ashley (main): add dsc["bts changelog"].
940
941         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
942
943         * jennifer (check_diff): obsoleted by check_source(), removed.
944         (check_source): new function: create a temporary directory and
945         move into it and call get_changelog_versions().
946         (get_changelog_versions): new function: extract the source package
947         and optionally parse debian/changelog to obtain the version
948         history for the BTS.
949         (process_it): call check_source() rather than check_diff().
950
951 2004-03-08  James Troup  <james@nocrew.org>
952
953         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
954         listbar" rather than "if listbar.count(varfoo)"' change on
955         2004-02-24.
956
957 2004-03-05  James Troup  <james@nocrew.org>
958
959         * alicia (main): don't warn about not closing bugs - we don't
960         manage overrides through the BTS.
961
962 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
963
964         * docs/README.config: lots of updates and corrections.
965         * docs/README.first: likewise.
966
967         * docs/README.config: drop unused Dir::Queue::Root.
968         * katie.conf-non-US: likewise.
969         * katie.conf: likewise.
970         * katie.conf-security: likewise.
971
972 2004-02-27  James Troup  <james@nocrew.org>
973
974         * rose (process_tree): use 'if var in [ list ]' rather than long
975         'if var == foo or var == bar or var == baz'.  Suggested by Martin
976         Michlmayr.
977
978         * jennifer (check_files): reduce 'if var != None' to 'if var' as
979         suggested by Martin Michlmayr.
980         * catherine (poolize): likewise.
981         * charisma (main): likewise.
982         * halle (check_changes): likewise.
983         * heidi (main): likewise.
984         (process_file): likewise.
985         * kelly (install): likewise.
986         (stable_install): likewise.
987         * utils.py (fix_maintainer): likewise.
988
989         * apt.conf: add support for debian-installer in testing-proposed-updates.
990         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
991         add - set to main.
992
993         * mkmaintainers: add "-T15" option to wget of non-US packages file
994         so that we don't hang cron.daily if non-US is down.
995
996         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
997
998         * templates/jennifer.bug-close: add Source and Source-Version
999         pseudo-headers that may be used for BTS Version Tracking someday
1000         [ajt@].
1001
1002         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1003         (main): likewise.
1004
1005         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1006
1007 2004-02-25  James Troup  <james@nocrew.org>
1008
1009         * katie.conf (SuiteMappings): don't map testing-security to
1010         proposed-updates.
1011
1012 2004-02-24  James Troup  <james@nocrew.org>
1013
1014         * katie.py (Katie.__init__): remove unused 'values' field.
1015
1016         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1017         rather than 's.count(c) > 0'.
1018
1019         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1020         rather than "if listbar.count(varfoo)".
1021         * halle (check_joey): likewise.
1022         * jeri (check_joey): likewise.
1023         * lisa (edit_index): likewise.
1024         * jenna (stable_dislocation_p): likewise.
1025
1026         * jennifer (main): remove unused global 'nmu'.
1027
1028 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1029
1030         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1031           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1032           the dak tools close bugs.
1033
1034 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1035
1036         * katie.conf (Alicia): Added an Alicia section with email address
1037         * templates/alicia.bug-close: Added
1038         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1039         * alicia (main): Added a -d/--done argument
1040
1041 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1042
1043         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1044
1045 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1046
1047         * lisa (prod_maintainer): Added function to prod the maintainer without
1048           accepting or rejecting the package
1049         * templates/lisa.prod: Added this template for the prodding mail
1050
1051         * .cvsignore: Added neve-files which turns up in new installations
1052
1053 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1054
1055         * alicia (usage): Fixed usage message to offer section and priority
1056           as seperately optional arguments.
1057         * alicia (main): Added a % (arg) interpolation needed when only
1058           one of section or priority is provided and it cannot be found.
1059
1060 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1061
1062         * alicia: Added
1063         * docs/alicia.1.sgml: Added
1064         * docs/Makefile: Added alicia to the list of manpages to build
1065         * docs/README.names: Noted what alicia does
1066         * docs/README.first: Noted where alicia is useful
1067
1068 2004-01-21  James Troup  <james@nocrew.org>
1069
1070         * madison (main): add -b/--binary-type.
1071         (usage): likewise.
1072
1073         * denise (main): generate debian-installer overrides for testing
1074         too.
1075         * apt.conf: add support for debian-installer in testing.
1076         * katie.conf (Suite::Testing::UdebComponents): set to main.
1077
1078         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1079         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1080         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1081
1082         * utils.py (parse_changes): don't process data not inside the
1083         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1084         pointing this out.
1085         * test/005/test.py (main): new test to test for above.
1086
1087 2004-01-04  James Troup  <james@nocrew.org>
1088
1089         * jenna (write_filelists): correct typo, s/Components/Component/
1090         for Options.
1091
1092 2004-01-04  Ryan Murray  <rmurray@debian.org>
1093
1094         * cron.buildd: move update of overrides and Packages file...
1095         * cron.unchecked: to here.
1096         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1097         * katie.conf-security: likewise
1098
1099 2003-11-20  James Troup  <james@nocrew.org>
1100
1101         * jenna (main): don't use utils.try_with_debug(), it produces way
1102         too much output.
1103
1104         * halle (check_changes): don't error out if a .changes refers to a
1105         non-existent package, just warn and skip the file.
1106
1107         * docs/README.stable-point-release: mention halle and .changes
1108         obsoleted by removal through melanie.  Update for 3.0r2.
1109
1110         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1111         (Suite::Stable::Description): update for 3.0r2.
1112         (Lauren::MoreInfoURL): likewise.
1113         * katie.conf-non-US (Suite::Stable::Version): likewise.
1114         (Suite::Stable::Description): likewise.
1115         (Lauren::MoreInfoURL): likewise.
1116
1117         * apt.conf.stable (Default): don't define MaxContentsChange.
1118         * apt.conf.stable-non-US (Default): likewise.
1119
1120         * lauren (reject): hack to work around partial replacement of an
1121         upload, i.e. one or more binaries superseded by another source
1122         package.
1123
1124 2003-11-17  James Troup  <james@nocrew.org>
1125
1126         * pseudo-packages.maintainers: point installation-reports at
1127         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1128         request.
1129
1130         * utils.py (parse_changes): calculate the number of lines once
1131         with len() rather than max().
1132
1133         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1134         files, since check_dsc_against_db() deletes the .orig.tar.gz
1135         entry.
1136
1137 2003-11-13  Ryan Murray  <rmurray@debian.org>
1138
1139         * apt.conf: specify a src override file for debian-installer
1140
1141 2003-11-10  James Troup  <james@nocrew.org>
1142
1143         * fernanda.py (strip_pgp_signature): new function - strips PGP
1144         signature from a file and returns the modified contents of the
1145         file in a string.
1146         (display_changes): use it.
1147         (read_dsc): likewise.
1148
1149 2003-11-09  Ryan Murray  <rmurray@debian.org>
1150
1151         * cron.buildd: export accepted_autobuild table for unstable, and use
1152         it to generate the incoming Packages/Sources rather than having apt
1153         walk the directory.
1154         * apt.conf.buildd: use exported table from cron.buildd to generate
1155         Packages/Sources
1156
1157 2003-11-07  James Troup  <james@nocrew.org>
1158
1159         * kelly: import errno.
1160
1161         * katie.py (Katie.build_summaries): sort override disparities.
1162
1163         * kelly (install): set dsc_component based on the .dsc's component
1164         not a random binaries.
1165
1166 2003-10-29  James Troup  <james@nocrew.org>
1167
1168         * katie.py (Katie.build_summaries): don't assume changes["source"]
1169         exists since it might not.
1170
1171 2003-10-20  James Troup  <james@nocrew.org>
1172
1173         * pseudo-packages.maintainers: update security.d.o to use
1174         team@s.d.o at joy@'s request.
1175
1176 2003-10-17  James Troup  <james@nocrew.org>
1177
1178         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1179
1180 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1181
1182         * tea (chk_bd_process_dir): use .endswith rather than slice.
1183
1184 2003-10-14  James Troup  <james@nocrew.org>
1185
1186         * tea (check_build_depends): new function.
1187         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1188         in the archive.
1189         (main): update for new function.
1190         (usage): likewise.
1191
1192         * katie.py (Katie.do_reject): sanitize variable names,
1193         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1194         os.close() to outside if clause.
1195
1196         * jennifer (check_dsc): check build-depends and
1197         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1198         Fold the ARRAY check into the same code block and tidy up it's
1199         rejection message.
1200         (check_changes): ensure that the Files field is non-empty.
1201         Suggested by Santiago Vila <sanvila@unex.es>
1202         (check_changes): normalize reject messages.
1203         (check_dsc): instead of doing most of the checks inside a for loop
1204         and an if, find the dsc_filename in a short loop over files first
1205         and then do all the checks.  Add check for more than one .dsc in a
1206         .changes which we can't handle.  Normalize reject messages.
1207
1208 2003-10-13  James Troup  <james@nocrew.org>
1209
1210         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1211         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1212
1213         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1214         variables while iterating over 'files'.  Don't regenerate it when
1215         checking for source if source is mentioned.
1216
1217         Reject source only uploads if the config variable
1218         Dinstall::Reject::NoSourceOnly is set.
1219
1220 2003-10-03  James Troup  <james@nocrew.org>
1221
1222         * rene (main): add nasty hardcoded reference to debian-installer
1223         so we detect NBS .udebs.
1224
1225 2003-09-29  James Troup  <james@nocrew.org>
1226
1227         * apt.conf (old-proposed-updates): remove.
1228         * apt.conf-non-US (old-proposed-updates): likewise.
1229
1230 2003-09-24  James Troup  <james@nocrew.org>
1231
1232         * tea (check_files_not_symlinks): new function, ensure files
1233         mentioned in the database aren't symlinks.  Includes code to
1234         update any files that are like this to their real filenames +
1235         location; commented out by though.
1236         (usage): update for new function.
1237         (main): likewise.
1238
1239 2003-09-24  Anthony Towns  <ajt@debian.org>
1240
1241         * vars: external-overrides variable added
1242         * cron.daily: Update testing/unstable Task: overrides from joeyh
1243         managed external source.
1244
1245 2003-09-22  James Troup  <james@nocrew.org>
1246
1247         * kelly (install): if we can't move the .changes into queue/done,
1248         fail don't warn and carry on.  The old behaviour pre-dates NI and
1249         doesn't make much sense now since jennifer checks both
1250         queue/accepted and queue/done for any .changes files it's
1251         processing.
1252
1253         * utils.py (move): don't throw exceptions on existing files or
1254         can't overwrite, instead just fubar out.
1255
1256         * jennifer (check_dsc): also check Build-Depends-Indep for
1257         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1258
1259 2003-09-18  James Troup  <james@nocrew.org>
1260
1261         * katie.py (Katie.close_bugs): only log the bugs we've closed
1262         once.
1263
1264         * kelly (main): log as 'kelly', not 'katie'.
1265
1266 2003-09-16  James Troup  <james@nocrew.org>
1267
1268         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1269
1270         * jennifer (check_changes): normalize reject message for "changes
1271         file already exists" to be %s: <foo>.
1272         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1273         produced by broken dpkg-source in 1.10.11.  Tone down and
1274         normalize rejection message for incompatible 'Format' version
1275         numbers.
1276         (check_diff): likewise tone down and normalize.
1277
1278 2003-09-07  James Troup  <james@nocrew.org>
1279
1280         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1281         don't bomb out on bogus empty lines.
1282         (build_file_list): check for changes["files"] earlier.  use Dict
1283         to create files[name] dictionary.
1284         (send_mail): don't bother validating arguments.
1285         (check_signature): minor improvements to some of the rejection
1286         messages including listing the key id of the key that wasn't found
1287         in the keyring.
1288         (wrap): new function.
1289
1290         * tea: add new check 'validate-indices' that ensures all files
1291         mentioned in indices (Packages, Sources) files do in fact exist.
1292
1293         * catherine (poolize): use a local re_isadeb which handles legacy
1294         (i.e. no architecture) style .deb filenames.
1295
1296         * rosamund: new script.
1297
1298         * rhona (check_binaries): when checking for binary packages not in
1299         a suite, don't bother selecting files that already have a
1300         last_used date.
1301         (check_sources): likewise.
1302
1303         * rhona: change all SQL EXISTS sub-query clauses to use the
1304         postgres suggested convention of "SELECT 1 FROM".
1305         * andrea (main): likewise.
1306         * tea (check_override): likewise.
1307         * catherine (main): likewise.
1308
1309         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1310         entries and in other suites MustBeNewerThan's.
1311         (SuiteMappings): likewise
1312         * katie.conf-non-US: likewise.
1313         * katie.conf-security: likewise.
1314
1315         * apt.conf-security: remove oldstable.
1316         * apt.conf.stable: likewise.
1317         * apt.conf.stable-non-US: likewise.
1318         * cron.buildd-security: likewise.
1319         * cron.daily-security: likewise.
1320         * vars-security (suites): likewise.
1321         * wanna-build/trigger.daily: likewise.
1322
1323         * claire.py (clean_symlink): move...
1324         * utils.py (clean_symlink): here.
1325
1326         * claire.py (find_dislocated_stable): update accordingly.
1327
1328 2003-08-16  Anthony Towns  <ajt@debian.org>
1329
1330         * katie.py (source_exists): expand the list of distributions
1331         the source may exist in to include any suite that's mapped to
1332         the destination suite (even transitively (a->b->c)). This should
1333         unbreak binary uploads to *-proposed-updates.
1334
1335 2003-08-09  Randall Donald  <rdonald@debian.org>
1336
1337         * lisa (recheck): change changes["distribution"].keys() to
1338         Katie.pkg.changes...
1339
1340 2003-08-08  Randall Donald  <rdonald@debian.org>
1341
1342         * katie.py: only tag bugs as fixed-in-experimental for
1343         experimental uploads
1344
1345 2003-07-26  Anthony Towns  <ajt@debian.org>
1346
1347         * katie.py (source_exists): add an extra parameter to limit the
1348         distribution(s) the source must exist in.
1349         * kelly, lisa, jennifer: update to use the new source_exists
1350
1351 2003-07-15  Anthony Towns  <ajt@debian.org>
1352
1353         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1354         checksums for debian-installer stuff even when it's just a symlink to
1355         another suite
1356
1357         * apt.conf: add the FakeDI line
1358
1359 2003-06-09  James Troup  <james@nocrew.org>
1360
1361         * kelly (check): make sure the 'file' we're looking for in 'files'
1362         hasn't been deleted by katie.check_dsc_against_db().
1363
1364 2003-05-07  James Troup  <james@nocrew.org>
1365
1366         * helena (time_pp): fix s/years/year/ typo.
1367
1368 2003-04-29  James Troup  <james@nocrew.org>
1369
1370         * madison (usage): document -c/--component.
1371
1372         * madison (usage): Fix s/seperated/separated/.
1373         * melanie (usage): likewise.
1374         * jenna (usage): likewise.
1375
1376 2003-04-24  James Troup  <james@nocrew.org>
1377
1378         * cron.daily-non-US: if there's nothing for kelly to install, say
1379         so.
1380
1381         * jennifer (check_timestamps): print sys.exc_value as well as
1382         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1383         failed' with 'deb contents' to make it clearer what timestamp(s)
1384         are being checked.
1385
1386 2003-04-15  James Troup  <james@nocrew.org>
1387
1388         * cron.daily-non-US: only run kelly if there are some .changes
1389         files in accepted.
1390
1391         * rene: add -m/--mode argument which can be either daily (default)
1392         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1393         Various changes to make this possible including a poor attempt at
1394         splitting main() up a little.  De-hardcode suite numbers from SQL
1395         queries and return quietly from do_nviu() if experimental doesn't
1396         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1397         is.
1398
1399         * debian/control (Depends): remove python-zlib as it's obsolete.
1400
1401         * charisma (main): don't slice the \n off strings when we're
1402         strip()-ing it anyway.
1403         * heidi (set_suite): likewise.
1404         (process_file): likewise.
1405         * natalie (process_file): likewise.
1406
1407 2003-04-08  James Troup  <james@nocrew.org>
1408
1409         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1410         slow queries by using one LIKE '%foo%' and then matching against
1411         '%s' or '/%s$' in python.  Also only join location when we need it
1412         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1413         query, so 6s for each sourceful package.
1414
1415         * cron.daily: invoke rene and send the report to ftpmaster.
1416         * cron.daily-non-US: likewise.
1417
1418 2003-03-14  James Troup  <james@nocrew.org>
1419
1420         * utils.py (send_mail): default filename to blank.
1421         * amber (make_advisory): adapt.
1422         * jennifer (acknowledge_new): likewise.
1423         * katie.py (Katie.close_bugs): likewise.
1424         (Katie.announce): likewise.
1425         (Katie.accept): likewise.
1426         (Katie.check_override): likewise.
1427         (Katie.do_reject): likewise.
1428         * kelly (do_reject): likewise.
1429         (stable_install): likewise.
1430         * lisa (do_bxa_notification): likewise.
1431         * lauren (reject): likewise.
1432         * melanie (main): likewise.
1433
1434         * rene (add_nbs): check any NBS packages against unstable to see
1435         if they haven't been removed already.
1436
1437         * templates/katie.rejected: remove paragraph about rejected files
1438         since they're o-rwx due to c-i-m and the uploader can't do
1439         anything about them and shania will take care of them anyway.
1440
1441         * madison (usage): update usage example to use comma seperation.
1442         * melanie (usage): likewise.
1443
1444         * utils.py (split_args): new function; splits command line
1445         arguments either by space or comma (whichever is used).  Also has
1446         optional-but-default DWIM spurious space detection to avoid
1447         'command -a i386, m68k' problems.
1448         (parse_args): use it.
1449         * melanie (main): likewise.
1450
1451         * melanie (main): force the admin to tell someone if we're not
1452         doing a rene-led removal (or closing a bug, which counts as
1453         telling someone).
1454
1455 2003-03-05  James Troup  <james@nocrew.org>
1456
1457         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1458         and python sections.
1459         * katie.conf-security (Section): likewise.
1460
1461         * add_constraints.sql: add uid and uid_id_seq to grants.
1462
1463         * lisa (determine_new): also warn about adding overrides to
1464         oldstable.
1465
1466         * madison (main): make the -S/--source-and-binary query obey
1467         -s/--suite restrictions.
1468
1469 2003-03-03  James Troup  <james@nocrew.org>
1470
1471         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1472         exists, warn the user that our output might seem strange.  (People
1473         get confused by multiple versions in a suite which happens
1474         post-kelly but pre-jenna.)
1475
1476 2003-02-21  James Troup  <james@nocrew.org>
1477
1478         * kelly (main): we don't need to worry about StableRejector.
1479
1480         * melanie (main): sort versions with apt_pkg.VersionCompare()
1481         prior to output.
1482
1483         * lauren: new script to manually reject packages from
1484         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1485
1486 2003-02-20  James Troup  <james@nocrew.org>
1487
1488         * kelly (init): remove unused -m/--manual-reject argument.
1489
1490         * katie.py (Katie.force_reject): renamed from force_move to make
1491         it more explicit what this function does.
1492         (Katie.do_reject): update to match.
1493
1494         * utils.py (prefix_multi_line_string): add an optional argument
1495         include_blank_lines which defaults to 0.  If non-zero, blank lines
1496         will be includes in the output.
1497
1498         * katie.py (Katie.do_reject): don't add leading space to each line
1499         of the reject message.  Include blank lines when showing the
1500         message to the user.
1501
1502 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1503
1504         * utils.py (fix_maintainer): replace pointless re.sub() with
1505         simple string format.
1506
1507 2003-02-11  James Troup  <james@nocrew.org>
1508
1509         * lisa (edit_overrides): only strip-to-one-char and upper-case
1510         non-numeric answers.  Fixes editing of items with indices >= 10;
1511         noticed by Randall.
1512         (edit_overrides): correct order of arguments to "not a valid
1513         index" error message.
1514
1515         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1516         remove_duplicate_versions(); thanks to aj for the initial
1517         diagnosis.
1518         (remove_duplicate_versions): correct how we return
1519         dominant_versions.
1520         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1521         a tuple rather than just a tuple.
1522
1523 2003-02-10  James Troup  <james@nocrew.org>
1524
1525         * emilie: new script - sync fingerprint and uid tables with a
1526         debian.org LDAP DB.
1527
1528         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1529         in 'fingerprint'.
1530
1531         * db_access.py (get_or_set_uid_id): new function.
1532
1533         * jennifer (main): update locking to a) not used FCNTL (deprecated
1534         in python >= 2.2) and b) acknowledge upstream's broken
1535         implementation of lockf (see Debian bug #74777), c) try to acquire
1536         the lock non-blocking.
1537         * kelly (main): likewise.
1538
1539         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1540
1541         * madison (main): only append the package to new_packages if it's
1542         not already in there; fixes -S/--source-and-binary for cases where
1543         the source builds a binary package of the same name.
1544
1545 2003-02-10  Anthony Towns  <ajt@debian.org>
1546
1547         * madison (main): use explicit JOIN syntax for
1548         -S/--source-and-binary queries to reduce the query's runtime from
1549         >10 seconds to negligible.
1550
1551 2003-02-08  James Troup  <james@nocrew.org>
1552
1553         * rene (main): in the NVIU output, append items to lists, not
1554         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1555         should be removed.
1556
1557 2003-02-07  James Troup  <james@nocrew.org>
1558
1559         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1560         Sources [aj].
1561
1562         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1563         O. Benham/Adam Heath/.
1564
1565         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1566         (Suite::Stable::Description): update for 3.0r1a.
1567         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1568
1569         * utils.py (gpgv_get_status_output): rename from
1570         get_status_output().
1571
1572         * neve (check_signature): use gpgv_get_status_output and Dict from
1573         utils().  Add missing newline to error message about duplicate tokens.
1574
1575         * saffron (per_arch_space_use): also print space used by source.
1576         (output_format): correct string.join() invocation.
1577
1578         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1579
1580 2003-02-04  James Troup  <james@nocrew.org>
1581
1582         * cron.buildd: correct generation of Packages/Sources and grep out
1583         non-US/non-free as well as non-free.
1584
1585 2003-02-03  Ryan Murray  <rmurray@debian.org>
1586
1587         * cron.buildd: generate quinn-diff output with full Packages/Sources
1588           files to get out-of-date vs. uncompiled right.
1589         * apt.conf.buildd: no longer generate uncompressed files, as they
1590           are generated in cron.buildd instead
1591         * add -i option to quinn-diff to ignore binary-all packages
1592         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1593           aren't in the packages file, the arch that uploaded them will build
1594           them anyways...
1595
1596 2003-01-30  James Troup  <james@nocrew.org>
1597
1598         * rene (main): only print suggested melanie command when there's
1599         some NBS to remove.
1600
1601 2003-01-30  Ryan Murray  <rmurray@debian.org>
1602
1603         * cron.buildd: fix incorrectly inverted lockfile check
1604
1605 2003-01-29  Ryan Murray  <rmurray@debian.org>
1606
1607         * cron.buildd: generate override.sid.all3.src
1608         * apt.conf.buildd: use generated override.sid.all3.src
1609
1610 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1611
1612         * utils.py (get_status_output): moved from jennifer.
1613         (Dict): likewise.
1614         (check_signature): likewise.
1615
1616         * jennifer (get_status_output): moved to utils.py.
1617         (Dict): likewise.
1618         (check_signature): likewise.
1619
1620         * utils.py (check_signature): add an argument to specifiy which
1621         function to call when an error was found.
1622         (check_signature): document this function better.
1623
1624         * jennifer (check_files): pass the reject function as an argument
1625         to utils.check_signature.
1626         (process_it): likewise.
1627
1628 2003-01-20  James Troup  <james@nocrew.org>
1629
1630         * rene (main): lots of changes to improve the output and make it
1631         more useful.
1632
1633         * katie.py (Katie.check_override): make the override messages
1634         clearer (hopefully).
1635
1636 2002-12-26  James Troup  <james@nocrew.org>
1637
1638         * ziyi (usage): document the ability to pass suite(s) as
1639         argument(s).
1640         (main): read apt.conf after checking for -h/--help.
1641
1642         * tea (main): take the check to run as an argument.
1643
1644         * saffron.R: R script to graph daily install runs.
1645
1646         * saffron: new script; various stats functions.
1647
1648         * rhona (main): connect to the database after checking for -h/--help.
1649
1650         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1651
1652         * melanie (main): sort versions with utils.arch_compare_sw().
1653
1654         * madison (usage): alphabetize order of options.
1655         * melanie (usage): likewise.
1656
1657         * kelly (usage): fix usage short description (we aren't dinstall).
1658
1659         * julia (usage): fix usage description and alphabetize order of
1660         options.
1661
1662         * jeri (usage): fix usage short description.
1663
1664         * jennifer (main): move --help and --version checks from here...
1665         (init): to here so that they work with an empty katie.conf.
1666         * kelly: likewise.
1667
1668         * alyson (usage): new function.
1669         (main): use it.
1670         * andrea: likewise.
1671         * ashley: likewise.
1672         * cindy: likewise.
1673         * denise: likewise.
1674         * helena: likewise.
1675         * neve: likewise.
1676         * rene: likewise.
1677         * rose: likewise.
1678         * tea: likewise.
1679
1680         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1681         entry that caused tasks to be omitted from 3.0r1.
1682
1683 2002-12-10  James Troup  <james@nocrew.org>
1684
1685         * jennifer (check_files): sanity check the Depends field to ensure
1686         it's non-empty if present since apt chokes on an empty one.
1687         Thanks to Ryan Murray for the idea.
1688
1689 2002-12-08  James Troup  <james@nocrew.org>
1690
1691         * katie.conf-security (Helena::Directories): new; include accepted
1692         in addition to byhand and new.
1693
1694         * helena (process_changes_files): use utils.arch_compare_sw().
1695         Justify things based on the longest [package, version,
1696         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1697         the commas in architecture and version lists for the same reason.
1698         (main): make directories we process configurable through
1699         Helena::Directories in the config file; if that doesn't exist
1700         default to the old hardcoded values (byhand & new).
1701
1702         * utils.py (arch_compare_sw): moved here from madison.
1703         * madison (main): adjust to compensate.
1704
1705 2002-12-06  James Troup  <james@nocrew.org>
1706
1707         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1708         right filename.
1709
1710 2002-12-05  James Troup  <james@nocrew.org>
1711
1712         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1713
1714 2002-11-28  Randall Donald  <rdonald@debian.org>
1715
1716         * fernanda.py (read_control): fix typo of 'Architecture'.
1717
1718 2002-11-26  James Troup  <james@nocrew.org>
1719
1720         * lisa (check_pkg): call less with '-R' so we see the colour from
1721         Randall's fernanda changes.
1722
1723         * neve (process_sources): if Directory points to a legacy location
1724         but the .dsc isn't there; assume it's broken and look in the pool.
1725         (update_section): new, borroed from alyson.
1726         (do_da_do_da): use it.
1727         (process_packages): add suite_it to the cache key used for
1728         arch_all_cache since otherwise we only add a package to the first
1729         suite it's in and ignore any subsequent ones.
1730
1731         * katie.conf-non-US (Location): fixed to reflect reality (all
1732         suites, except old-proposed-updates (which is legacy-mixed)) are
1733         pool.
1734
1735         * utils.py (try_with_debug): wrapper for print_exc().
1736         * jenna (main): use it.
1737         * neve (main): likewise.
1738
1739 2002-11-25  Randall Donald  <rdonald@debian.org>
1740
1741         * fernanda.py (main): added -R to less command line for raw control
1742         character support to print colours
1743         (check_deb): Instead of running dpkg -I on deb file, call
1744         output_deb_info, the new colourized control reporter.
1745         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1746         of printing out each .dsc line.
1747         (output_deb_info): new function. Outputs each key/value pair from
1748         read_control except in special cases where we highlight section,
1749         maintainer, architecture, depends and recommends.
1750         (create_depends_string): new function. Takes Depends tree and looks
1751         up it's compontent via projectb db, colourizes and constructs a
1752         depends string in original order.
1753         (read_dsc): new function. reads and parses .dsc info via
1754         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1755         colourized.
1756         (read_control): new function. reads and parses control info via
1757         apt_pkg. Depends and Recommends are split in to list structures,
1758         Section and Architecture are colourized. Maintainer is colourized
1759         if it has a localhost.localdomain address.
1760         (split_depends): new function. Creates a list of lists of
1761         dictionaries of depends (package,version relation). Top list is
1762         colected from comma delimited items. Sub lists are | delimited.
1763         (get_comma_list): new function. splits string input among commas
1764         (get_or_list): new function. splits string input among | delimiters
1765         (get_depends_parts): new function. Creates dictionary of package name
1766         and version relation from dependancy string.
1767         Colours for section and depends are per component. Unfound depends
1768         are in bold. Lookups using version info is not supported yet.
1769
1770 2002-11-22  James Troup  <james@nocrew.org>
1771
1772         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1773         'udmsearch'.
1774
1775         * amber (make_advisory): string.atol() is deprecated and hasn't
1776         been ported to string methods.  Use long() instead.
1777
1778         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1779         creating the database since we'll fail badly if it's created with
1780         e.g. UNICODE encoding.
1781
1782         * rose (main): AptCnf is a global.
1783
1784         * neve (get_location_path): new function determines the location
1785         from the the first (left-most) directory of a Filename/Directory.
1786         (process_sources): don't need 'location' anymore.  Use
1787         utils.warn().  Use the Directory: field for each package to find
1788         the .dsc.  Use get_location_path() to determine the location for
1789         each .dsc.
1790         (process_packages): do't need 'location' anymore.  Use
1791         utils.warn().  Use get_location_path().
1792         (do_sources): don't need 'location', drop 'prefix' in favour of
1793         being told the full path to the Sources file, like
1794         process_packages().
1795         (do_da_do_da): main() renamed, so that main can call us in a
1796         try/except.  Adapt for the changes in do_sources() and
1797         process_packages() above.  Assume Sources and Packages file are in
1798         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1799
1800         * katie.conf-security (Location): fixed to reflect reality (all
1801         suites are pool, not legacy).
1802
1803         * utils.py (print_exc): more useful (i.e. much more verbose)
1804         traceback; a recipe from the Python cookbook.
1805         * jenna (main): use it.
1806         * neve (main): likewise.
1807
1808 2002-11-19  James Troup  <james@nocrew.org>
1809
1810         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1811         handling which was FUBAR for multi-suite uploads.  Now we just
1812         make a dictionary of destinations to copy to and iterate over
1813         those.
1814
1815         * fernanda.py (check_deb): run linda as well as lintian.
1816
1817 2002-10-21  James Troup  <james@nocrew.org>
1818
1819         * melanie (main): change X-Melanie to X-Katie and prefix it with
1820         'melanie '.
1821
1822         * lisa (main): prefix X-Katie with 'lisa '.
1823
1824         * jennifer (clean_holding): fix typo in string method changes;
1825         s/file.find(file/file.find(/.
1826
1827         * cron.daily: invoke helena and send the report to ftpmaster.
1828         * cron.daily-non-US: likewise.
1829
1830 2002-10-16  James Troup  <james@nocrew.org>
1831
1832         * kelly (check): call reject() with a blank prefix when parsing
1833         the return of check_dsc_against_db() since it does its own
1834         prefix-ing.
1835
1836         * rose: new script; only handles directory creation initally.
1837
1838         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1839         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1840
1841 2002-10-06  James Troup  <james@nocrew.org>
1842
1843         * rene (main): remove bogus argument handling.
1844
1845         * kelly: katie, renamed.
1846         * cron.daily: adapt for katie being renamed to kelly.
1847         * cron.daily-non-US: likewise.
1848         * amber (main): likewise.
1849
1850         * Changes for python 2.1.
1851
1852         * kelly: time.strftime no longer requires a second argument of
1853         "time.localtime(time.time())".
1854         * logging.py: likewise.
1855         * rhona: likewise.
1856         * shania (init): likewise.
1857
1858         * amber: use augmented assignment.
1859         * catherine (poolize): likewise.
1860         * claire.py (fix_component_section): likewise.
1861         * halle (check_changes): likewise.
1862         * helena: likewise.
1863         * jenna: likewise.
1864         * jennifer: likewise.
1865         * jeri: likewise.
1866         * katie.py: likewise.
1867         * kelly: likewise.
1868         * lisa: likewise.
1869         * madison (main): likewise.
1870         * melanie: likewise.
1871         * natalie: likewise.
1872         * neve: likewise.
1873         * rhona: likewise.
1874         * tea: likewise.
1875         * utils.py: likewise.
1876         * ziyi: likewise.
1877
1878         * amber: use .endswith.
1879         * fernanda.py: likewise.
1880         * halle (main): likewise.
1881         * jennifer: likewise.
1882         * jeri: likewise.
1883         * katie.py: likewise.
1884         * kelly: likewise.
1885         * lisa: likewise.
1886         * neve: likewise.
1887         * shania (main): likewise.
1888         * utils.py: likewise.
1889
1890         * alyson: use string methods.
1891         * amber: likewise.
1892         * andrea: likewise.
1893         * ashley: likewise.
1894         * catherine: likewise.
1895         * charisma: likewise.
1896         * claire.py: likewise.
1897         * db_access.py: likewise.
1898         * denise: likewise.
1899         * halle: likewise.
1900         * heidi: likewise.
1901         * helena: likewise.
1902         * jenna: likewise.
1903         * jennifer: likewise.
1904         * jeri: likewise.
1905         * julia: likewise.
1906         * katie.py: likewise.
1907         * kelly: likewise.
1908         * lisa: likewise.
1909         * logging.py: likewise.
1910         * madison: likewise.
1911         * melanie: likewise.
1912         * natalie: likewise.
1913         * neve: likewise.
1914         * rene: likewise.
1915         * tea: likewise.
1916         * utils.py: likewise.
1917         * ziyi: likewise.
1918
1919 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1920
1921         * utils.py (parse_changes): use <string>.startswith() rather than
1922         string.find().
1923
1924 2002-08-27  Anthony Towns  <ajt@debian.org>
1925
1926         * katie.py (in_override_p): when searching for a source override,
1927         and the dsc query misses, search for both udeb and deb overrides
1928         as well. Should fix the UNACCEPT issues with udebs.
1929
1930 2002-08-24  James Troup  <james@nocrew.org>
1931
1932         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1933         source+binary package finding code which was causing severe
1934         performance degradation with postgres 7.2.
1935
1936 2002-08-14  James Troup  <james@nocrew.org>
1937
1938         * julia (main): use the pwd.getpwall() to get system user info
1939         rather than trying to read a password file.  Add a -n/--no-action
1940         option.
1941
1942         * cron.hourly: julia no longer takes any arguments.
1943         * cron.hourly-non-US: likewise.
1944
1945 2002-08-07  James Troup  <james@nocrew.org>
1946
1947         * katie (install): handle multi-suite uploads when CopyChanges
1948         and/or CopyKatie are in use, ensuring we only copy stuff once.
1949
1950 2002-08-01  Ryan Murray  <rmurray@debian.org>
1951
1952         * wanna-build/trigger.daily: initial commit, with locking
1953         * cron.buildd: add locking against daily run
1954
1955 2002-07-30  James Troup  <james@nocrew.org>
1956
1957         * melanie (main): readd creation of suite_ids_list so melanie is
1958         remotely useful again.
1959
1960         * katie.conf: adopt for woody release; diable
1961         StableDislocationSupport, add oldstable, adjust other suites and
1962         mappings, fix up location.
1963         * katie.conf-non-US: likewise.
1964         * katie.conf-security: likewise.
1965
1966         * apt.conf.stable: adapt for woody release; add oldstable, adjust
1967         stable.
1968         * apt.conf.stable-non-US: likewise.
1969
1970         * apt.conf-security: adapt for woody release; adding oldstable,
1971         oldstable, adjust stable and testing.
1972         * cron.daily-security: likewise.
1973         * cron.buildd-security: likewise.
1974
1975         * apt.conf: adapt for woody release; rename woody-proposed-updates
1976         to testing-proposed-updates and proposed-updates to
1977         old-proposed-updates.
1978         * apt.conf-non-US: likewise.
1979
1980         * vars-non-US (copyoverrides): add sarge.
1981         * vars (copyoverrides): likewise.
1982
1983         * vars-security (suites): add oldstable.
1984
1985 2002-07-22  Ryan Murray  <rmurray@debian.org>
1986
1987         * apt.conf.security-buildd: use suite codenames instead of
1988           distnames.
1989
1990 2002-07-16  James Troup  <james@nocrew.org>
1991
1992         * denise (main): fix filenames for testing override files.
1993
1994 2002-07-14  James Troup  <james@nocrew.org>
1995
1996         * jennifer (process_it): call check_md5sums later so we can check
1997         files in the .dsc too
1998         (check_md5sums): check files in the .dsc too.  Check both md5sum
1999         and size.
2000
2001         * melanie (main): use parse_args() and join_with_commas_and() from
2002         utils.  If there's nothing to do, say so and exit, don't ask for
2003         confirmation etc.
2004
2005         * amber (join_with_commas_and): moved from here to ...
2006         * utils.py (join_with_commas_and): here.
2007
2008 2002-07-13  James Troup  <james@nocrew.org>
2009
2010         * madison (main): use parse_args() from utils.  Support
2011         -c/--component.
2012
2013         * jenna (parse_args): moved from here to ...
2014         * utils.py (parse_args): here.
2015
2016         * katie.conf (Architectures): minor corrections to the description
2017         for arm, mips and mipsel.
2018         * katie.conf-non-US (Architectures): likewise.
2019         * katie.conf-security (Architectures): likewise.
2020
2021         * cron.daily-security: use natalie's new -a/--add functionality to
2022         flesh out the security overrides.
2023
2024 2002-07-12  James Troup  <james@nocrew.org>
2025
2026         * cron.buildd (ARCHS): add arm.
2027
2028         * katie.conf: 2.2r7 was released.
2029         * katie.conf-non-US: likewise.
2030
2031         * utils.py (parse_changes): handle a multi-line field with no
2032         starting line.
2033
2034 2002-06-25  James Troup  <james@nocrew.org>
2035
2036         * templates/amber.advisory (To): add missing email address since
2037         __WHOAMI__ is only a name.
2038
2039         * katie.conf-security (Melane::LogFile): correct to go somewhere
2040         katie has write access to.
2041         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2042         Testing.
2043
2044         * natalie: add support for -a/-add which adds packages only
2045         (ignoring changes and deletions).
2046
2047         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2048         use FindB, not get.
2049
2050 2002-06-22  James Troup  <james@nocrew.org>
2051
2052         * jennifer (check_files): validate the package name and version
2053         field.  If 'Package', 'Version' or 'Architecture' are missing,
2054         don't try any further checks.
2055         (check_dsc): likewise.
2056
2057         * utils.py (re_taint_free): add '~' as a valid character.
2058
2059 2002-06-20  Anthony Towns  <ajt@debian.org>
2060
2061         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2062
2063 2002-06-09  James Troup  <james@nocrew.org>
2064
2065         * jennifer (check_files): reduce useless code.
2066
2067         * cron.daily-security: run symlinks -dr on $ftpdir.
2068
2069         * vars-security (ftpdir): add.
2070
2071 2002-06-08  James Troup  <james@nocrew.org>
2072
2073         * neve (update_override_type): transaction is handled higher up in
2074         main().
2075         (update_priority): likewise.
2076         (process_sources): remove code that makes testing a duplicate of
2077         stable.
2078         (process_packages): likewise.
2079
2080         * templates/amber.advisory: add missing mail headers.
2081
2082         * cron.daily-security: also call apt-ftparchive clean for
2083         apt.conf.buildd-security.
2084         * cron.weekly: likewise.
2085
2086         * amber (do_upload): write out a list of source packages (and
2087         their version) uploaded for testing.
2088         (make_advisory): add more Subst mappings for the mail headers.
2089         (spawn): check for suspicious characters in the command and abort
2090         if their found.
2091
2092 2002-06-07  James Troup  <james@nocrew.org>
2093
2094         * ziyi (main): remove the 'nonus'/'security' hacks and use
2095         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2096         the lower level Release files, even if they don't exist.  fubar
2097         out if we can't open a lower level Release file for writing.
2098
2099         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2100         ziyi.
2101         * katie.conf-security (Dinstall): likewise.
2102
2103         * amber (do_upload): renamed from get_file_list().  Determine the
2104         upload host from the original component.
2105         (init): Add a -n/--no-action option.  Fix how we get changes_files
2106         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2107         sys.argv).  Add an Options global.
2108         (make_advisory): support -n/--no-action.
2109         (spawn): likewise.
2110         (main): likewise.
2111         (usage): document -n/--no-action.
2112
2113         * cron.buildd-security: fix path to Packages-arch-specific in
2114         quinn-diff invocation.
2115
2116         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2117         to proper suite names (i.e. stable, testing) rather than codenames
2118         (potato, woody).
2119         (Dinstall::DefaultSuite): likewise.
2120         (Suite): likewise.
2121         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2122         * vars-security (suites): likewise.
2123         * apt.conf-security: likewise.
2124
2125         * katie.conf-security (Component): add "updates/" prefix.
2126         (Suite::*::Components): likewise.
2127         (ComponentMappings): new; map all {ftp-master,non-US} components
2128         -> updates/<foo>.
2129
2130         * katie.conf-security (Natalie): removed; the options have
2131         defaults and ComponentPosition is used by alyson which doesn't
2132         work on security.d.o.
2133         (Amber): replace UploadHost and UploadDir with ComponentMappings
2134         which is a mapping of components -> URI.
2135         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2136         (SuiteMappings): use "silent-map" in preference to "map".
2137
2138         * cron.unchecked-security: fix call to cron.buildd-security.
2139
2140         * cron.daily-security: map local suite (stable) -> override suite
2141         (potato) when fixing overrides.  Correct component in natalie call
2142         to take into account "updates/" prefix.  Fix cut'n'waste in
2143         override.$dist.all3 generation, the old files weren't being
2144         removed, so they were endlessly growing.
2145
2146         * neve (main): don't use .Find for the CodeName since we require
2147         it.  Location::*::Suites is a ValueList.
2148         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2149         out on expired keys, just warn.
2150         (update_override_type): new function; lifted from alyson.
2151         (update_priority): likewise.
2152         (main): use update_{override_type,priority}().
2153
2154         * jennifer (check_distributions): remove redunant test for
2155         SuiteMappings; ValueList("does-not-exist") returns [] which is
2156         fine.  Add support for a "silent-map" type which doesn't warn
2157         about the mapping to the user.
2158         (check_files): add support for ComponentMappings, similar to
2159         SuiteMappings, but there's no type, just a source and a
2160         destination and the original component is stored in "original
2161         component".
2162         * katie.py (Katie.dump_vars): add "original component" as an
2163         optionsal files[file] dump variable.
2164
2165         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2166         query.  Add support for section-less legacy locations like current
2167         security.debian.org through YetAnotherConfigBoolean
2168         'LegacyStableHasNoSections'.
2169         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2170
2171         * utils.py (real_arch): moved here from ziyi.
2172         * ziyi (real_arch): moved to utils.py.
2173         * ziyi (main): likewise.
2174
2175         * claire.py (find_dislocated_stable): use real_arch() with
2176         filter() to strip out source and all.
2177         * neve (main): likewise.
2178         * rene (main): likewise.
2179         * jeri (parse_packages): likewise.
2180
2181 2002-06-06  James Troup  <james@nocrew.org>
2182
2183         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2184         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2185         doing.
2186
2187 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2188
2189         * jeri (check_joey): check if the line contains two elements
2190         before accessing the second.  Also, strip trailing spaces as well
2191         as the newline.
2192         * halle (check_joey): likewise.
2193
2194 2002-06-05  James Troup  <james@nocrew.org>
2195
2196         * cron.unchecked-security: new file; like cron.unchecked but if
2197         there's nothing to do exit so we don't call cron.buildd-security.
2198
2199         * apt.conf.buildd-security: new file.
2200
2201         * vars (archs): alphabetize.
2202         * vars-non-US (archs): likewise.
2203
2204         * vars-security: add unchecked.
2205
2206         * madison (main): reduce rather bizarrely verbose and purposeless
2207         code to print arches to a simple string.join.
2208
2209         * katie.conf (Suites::Unstable): add UdebComponents, a new
2210         valuelist of suites, used by jenna to flesh out the list of
2211         <suite>_main-debian-installer-binary-<arch>.list files generated.
2212         (Dinstall): add StableDislocationSupport, a new boolean used by
2213         jenna to enable or disable stable dislocation support
2214         (i.e. claire), as true.
2215
2216         * katie.conf (Dinstall): add StableDislocationSupport, a new
2217         boolean used by jenna to enable or disable stable dislocation
2218         support (i.e. claire), as true.
2219         * katie.conf-non-US: likewise.
2220         * katie.conf-security: likewise.
2221
2222         * cron.daily-security: generate .all3 overrides for the buildd
2223         support.  Freshen a local copy of Packages-arch-specific from
2224         buildd.debian.org.
2225
2226         * claire.py (find_dislocated_stable): disable the support for
2227         files in legacy-mixed locations since none of the Debian archives
2228         have any anymore.
2229
2230         * helena: new script; produces a report on NEW and BYHAND
2231         packages.
2232
2233         * jenna: rewritten from scratch to fix speed problems.  Run time
2234         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2235         minutes, 105 seconds are the monster query and 70 odd seconds is
2236         claire.
2237
2238         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2239         irrelevant.
2240
2241 2002-06-05  Ryan Murray  <rmurray@debian.org>
2242
2243         * cron.buildd-security: new file.
2244
2245 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2246
2247         * denise (list): take a file argument and use it.
2248         (main): don't abuse sys.stdout, just write to the file.
2249
2250         * claire.py (usage): Fix misspelling.
2251         (clean_symlink): Simplify.
2252         (find_dislocated_stable): Avoid unnecessary work.
2253
2254 2002-05-29  James Troup  <james@nocrew.org>
2255
2256         * cameron: removed; apt-ftparchive can simply walk the directory.
2257
2258 2002-05-26  Anthony Towns  <ajt@debian.org>
2259
2260         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2261         for the autobuilders.
2262
2263 2002-05-24  Ryan Murray  <rmurray@debian.org>
2264
2265         * cron.buildd: update override files before running apt-ftparchive
2266
2267 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2268
2269         * amber (main): remove extra space in prompt.
2270
2271         * utils.py (validate_changes_file_arg): use original filename in
2272         error messages.
2273
2274         * jeri (check_joey): close file after use.
2275         (parse_packages): likewise.
2276         (main): setup debug option properly.
2277
2278         * melanie (main): remove unused packages variable and simplify the
2279         code to build up con_packages by using repr().
2280
2281 2002-05-23  James Troup  <james@nocrew.org>
2282
2283         * lisa (recheck): when we reject, also return 0 so the package is
2284         skipped.
2285         (sg_compare): fix note sorting.
2286         (recheck): remove the .katie file after rejection.
2287
2288         * katie.py (Katie.accept): accepted auto-build support take 3;
2289         this time adding support for security.  Security needs a) non-pool
2290         files copied rather than symlinked since accepted is readable only
2291         by katie/security and www-data needs to be able to see the files,
2292         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2293         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2294         SecurityAcceptedAutoBuild is a new boolean which controls whether
2295         or not normal or security style is used.  The unstable_accepted
2296         table was renamed to accepted_autobuild and a suite column added.
2297         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2298         didn't have it's last_used/in_accepted flags correctly updated.
2299         * katie (install): likewise.
2300         * rhona (clean_accepted_autobuild): likewise.
2301
2302 2002-05-22  James Troup  <james@nocrew.org>
2303
2304         * lisa (sort_changes): new function; sorts changes properly.
2305         Finally.
2306         (sg_compare): new function; helper for sort_changes().  Sorts by
2307         have note and time of oldest upload.
2308         (indiv_sg_compare): new function; helper for sort_changes().
2309         Sorts by source version, have source and filename.
2310         (main): use sort_changes().
2311         (changes_compare): obsoleted; removed.
2312
2313 2002-05-20  James Troup  <james@nocrew.org>
2314
2315         * rhona (clean_accepted_autobuild): don't die if a file we're
2316         trying to remove doesn't exist.  Makes rhona more friendly to
2317         katie/katie.py crashes/bugs without any undue cost.
2318
2319 2002-05-19  James Troup  <james@nocrew.org>
2320
2321         * lisa (main): if sorting a large number of changes give some
2322         feedback.
2323         (recheck): new function, run the same checks (modulo NEW,
2324         obviously) as katie does, if they fail do the standard
2325         reject/skip/quit dance.
2326         (do_pkg): use it.
2327
2328         * katie (install): don't try to unlink the symlink in the
2329         AcceptedAutoBuild support if the destination is not a symlink (or
2330         doesn't exist).  Avoids unnecessary bombs on previous partial
2331         accepts and will still bomb hard if the file exists and isn't a
2332         symlink.
2333
2334         * utils.py: blah, commands _is_ used when the mail stuff isn't
2335         commented out like it is in my test environment.
2336
2337         * lisa (changes_compare): "has note" overrides everything else.
2338         Use .katie files rather than running parse_changes, faster and
2339         allows "has note" to work.  Correct version compare, it was
2340         reversed.  Ctime check should only kick in if the source packages
2341         are not the same.
2342         (print_new): print out and return any note.  Rename 'ret_code' to
2343         'broken'.
2344         (edit_new): renamed from spawn_editor.  Don't leak file
2345         descriptors.  Clean up error message if editor fails.
2346         (edit_note): new function, allows one to edit notes.
2347         (do_new): add note support, editing and removing.
2348         (init): kill -s/--sort; with notes we always want to use our
2349         sorting method.
2350         (usage): likewise.
2351
2352         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2353         changes field.
2354
2355         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2356         it default to 0.  Adapt tests to assume it's boolean.
2357         * fernanda.py (check_changes): adjust call appropriately.
2358         * halle (check_changes): likewise.
2359         * jennifer (check_changes): likewise.
2360         * jeri (check_changes): likewise.
2361         * shania (flush_orphans): likewise.
2362
2363         * jennifer (check_dsc): pass is_a_dsc by name when calling
2364         build_file_list() for clarity.
2365         * shania (flush_orphans): likewise.
2366         * tea (check_missing_tar_gz_in_dsc): likewise.
2367
2368         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2369         calling parse_changes() for clarity.
2370         * tea (check_dscs): likewise.
2371
2372         * utils.py (parse_changes): make dsc_whitespace_rules default to
2373         not true.
2374         * halle (check_changes): adjust call appropriately.
2375         * jennifer (check_changes): likewise.
2376         * jeri (check_changes): likewise.
2377         * lisa (changes_compare): likewise.
2378         * utils.py (changes_compare): likewise.
2379         * melanie (main): likewise.
2380         * shania (flush_orphans): likewise.
2381         * fernanda.py (check_changes): likewise.
2382
2383 2002-05-18  James Troup  <james@nocrew.org>
2384
2385         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2386         it's not useful and by and large a duplication of information
2387         available in readable format in other files.
2388
2389 2002-05-16  Ryan Murray  <rmurray@debian.org>
2390
2391         * melanie: Dir::TemplatesDir -> Dir::Templates
2392
2393 2002-05-15  Ryan Murray  <rmurray@debian.org>
2394
2395         * cameron: correct the use of os.path.join
2396
2397 2002-05-15  Anthony Towns  <ajt@debian.org>
2398
2399         * ziyi: Update to match the new format for Architectures/Components
2400         in katie.conf.
2401
2402 2002-05-14  James Troup  <james@nocrew.org>
2403
2404         * amber: new script; 'installer' wrapper script for the security
2405         team.
2406
2407         * katie.py (Katie.announce): remove unused 'dsc' local
2408         variable. (pychecker)
2409
2410         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2411
2412         * neve: don't import sys, we don't use it. (pychecker)
2413         (check_signature): fix return type mismatch. (pychecker)
2414
2415         * utils.py: don't import commands, we don't use it.  (pychecker)
2416
2417         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2418
2419         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2420         obsoleted by the change to "othercomponents" handling in jennifer
2421         detailed below.
2422         (Katie.cross_suite_version_check): new function; implements
2423         cross-suite version checking rules specified in the conf file
2424         while also enforcing the standard "must be newer than target
2425         suite" rule.
2426         (Katie.check_binary_against_db): renamed, since it's invoked once
2427         per-binary, "binaries" was inaccurate.  Use
2428         cross_suite_version_check() and don't bother with the "oldfiles"
2429         rubbish as jennifer works out "othercomponents" herself now.
2430         (Katie.check_source_against_db): use cross_suite_version_check().
2431
2432         * katie (check): the version and file overwrite checks
2433         (check_{binary,source,dsc}_against_db) are not per-suite.
2434
2435         * jennifer (check_files): less duplication of
2436         'control.Find("Architecture", "")' by putting it in a local
2437         variable.
2438         (check_files): call check_binary_against_db higher up since it's
2439         not a per-suite check.
2440         (check_files): get "othercomponents" directly rather than having
2441         check_binary_against_db do it for us.
2442
2443         * heidi (main): 'if x:', not 'if x != []:'.
2444         * katie.py (Katie.in_override_p): likewise.
2445         (Katie.check_dsc_against_db): likewise.
2446         * natalie (main): likewise.
2447         * rene (main): likewise.
2448         * ziyi (real_arch): likewise.
2449
2450         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2451         and OverrideType are now value lists, not lists.
2452         * andrea (main): likewise.
2453         * cindy (main): likewise.
2454         * claire.py (find_dislocated_stable): likewise.
2455         * denise (main): likewise.
2456         * jenna (main): likewise.
2457         * jennifer (check_distributions): likewise.
2458         (check_files): likewise.
2459         (check_urgency): likewise (Urgency::Valid).
2460         * jeri (parse_packages): likewise.
2461         * neve (main): likewise (and Location::%s::Suites).
2462         * rene (main): likewise.
2463
2464 2002-05-13  James Troup  <james@nocrew.org>
2465
2466         * katie.py (Katie.check_source_against_db): correct case of reject
2467         message to be consistent with binary checks.
2468
2469         * jennifer (get_status_output): don't leak 2 file descriptors per
2470         invocation.
2471         (check_signature): add missing '\n' to "duplicate status token"
2472         error message.
2473
2474 2002-05-09  James Troup  <james@nocrew.org>
2475
2476         * utils.py (validate_changes_file_arg): new function; validates an
2477         argument which should be a .changes file.
2478         * ashley (main): use it.
2479         * lisa (main): likewise.
2480
2481         * katie.py (Katie.check_dsc_against_db): since there can be more
2482         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2483         entry still exists in files.
2484
2485         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2486         files, since check_dsc_against_db() deletes the .orig.tar.gz
2487         entry.
2488
2489         * cameron: cleanups.
2490
2491         * utils.py (changes_compare): change sort order so that source
2492         name and source version trump 'have source'; this should fix
2493         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2494         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2495         by Ryan.
2496
2497         * lisa (main): allow the arguments to be .katie files too.
2498
2499 2002-05-07  Ryan Murray  <rmurray@debian.org>
2500
2501         * cron.buildd: add s390 to arch list again
2502
2503 2002-05-05  Ryan Murray  <rmurray@debian.org>
2504
2505         * cron.buildd: new script, update w-b database from unstable_accepted
2506         table
2507         * cameron: new script, take list in unstable_accepted and write out
2508         a file list for apt-ftparchive
2509         * apt.conf.buildd: new apt configuration for Packages/Sources for
2510         unstable_accepted
2511         * vars: add s390 to arch list.
2512
2513 2002-05-03  James Troup  <james@nocrew.org>
2514
2515         * neve (main): don't hard code the calling user as that doesn't
2516         work with modern postgres installs.  Fix psql invocation for
2517         init_pool.sql (database name required).  Dont' hard code the
2518         database name.
2519         (process_sources): add support for fingerprint and install_date.
2520         (process_packages): add support for fingerprint.
2521         (do_sources): pass in the directory, fingerprint support needs it.
2522         (get_status_output): borrowed from jennifer.
2523         (reject): likewise.
2524         (check_signature): likewise.
2525
2526         * katie (install): only try to log urgencies if Urgency_Logger is
2527         defined.
2528         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2529         defined; only close Urgency_Logger if it's defined.
2530
2531         * catherine (poolize): adapt for Dir rationalization.
2532         * claire.py (find_dislocated_stable): likewise.
2533         * denise (main): likewise.
2534         * halle (check_joey): likewise.
2535         * jenna: likewise.
2536         * jennifer: likewise.
2537         * jeri: likewise.
2538         * katie.py: likewise.
2539         * katie: likewise.
2540         * lisa (do_bxa_notification): likewise.
2541         * logging.py (Logger.__init__): likewise
2542         * rene (main): likewise.
2543         * rhona (clean): likewise.
2544         * shania (init): likewise.
2545         * tea: likewise.
2546         * ziyi: likewise.
2547
2548         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2549         FindB, not FindI.
2550
2551         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2552         boolean, use FindB, not get.
2553
2554         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2555         .orig.tar.gz's which are an exact (size/md5sum) match.
2556
2557         * ashley (main): really allow *.katie files as arguments too;
2558         noticed by aj.
2559
2560         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2561
2562 2002-05-03  Anthony Towns  <ajt@debian.org>
2563
2564         * ziyi: support for security.
2565
2566 2002-05-02  James Troup  <james@nocrew.org>
2567
2568         * jennifer (accept): call Katie.check_override() unconditional as
2569         no-mail check moved into that function.
2570         (do_byhand): likewise.
2571
2572         * katie.py (Katie.check_override): don't do anything if we're a)
2573         not sending mail or b) the override disparity checks have been
2574         disbled via Dinstall::OverrideDisparityCheck.
2575
2576         * jennifer (check_files): don't hard code Unstable as the suite
2577         used to check for architecture validity; use
2578         Dinstall::DefaultSuite instead, if it exists.
2579         (accept): conditionalize
2580
2581         * katie.py (Katie.update_subst): support global maintainer
2582         override with Dinstall::OverrideMaintainer.
2583
2584         * jennifer (check_distributions): new function, Distribution
2585         validation and mapping.  Uses new SuiteMappings variable from
2586         config file to abstract suite mappings.
2587         (check_changes): call it.
2588
2589         * natalie: renamed; nothing imports or likely will for some time.
2590
2591         * denise (main): remove unused natalie import and init().
2592
2593         * natalie.py (init): removed.
2594         (main): initalize here instead and don't hardcode the database
2595         name.
2596
2597 2002-04-30  James Troup  <james@nocrew.org>
2598
2599         * katie.py (Katie.close_bugs): new function, split out from
2600         announce().
2601         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2602         true.
2603         (Katie.close_bugs): new function, split out
2604         (Katie.close_bugs): return immediately if there are no bugs to
2605         close.
2606
2607         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2608         * katie (do_reject): likewise.
2609         (stable_install): likewise.
2610         * katie.py (Katie.announce): likewise.
2611         (Katie.accept): likewise.
2612         (Katie.check_override): likewise.
2613         (Katie.do_reject): likewise.
2614         * lisa (do_bxa_notification): likewise.
2615         * melanie (main): likewise.
2616
2617         * utils.py (TemplateSubst): change second argument to be a
2618         filename rather than a template since every caller opened a file
2619         on the fly which was ugly and leaked file descriptor.
2620
2621 2002-04-29  James Troup  <james@nocrew.org>
2622
2623         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2624         <hertzog@debian.org> to send 'accepted' announce mails to the
2625         PTS. [#128140]
2626
2627 2002-04-24  James Troup  <james@nocrew.org>
2628
2629         * init_pool.sql (unstable_accepted): add two new fields to
2630         unstable_accepted; in_accepted is a boolean indicating whether or
2631         not the file is in accepted and last_used is a timestamp used by
2632         rhona to determine when to remove symlinks for installed packages.
2633
2634         * katie.py (Katie.accept): auto-build support take 2.  Create
2635         symlinks for all files into a seperate directory.  Add files to
2636         unstable_accepted as paths to the new directory; mark them as
2637         being in accepted for cameron.  Properly conditionalize it on a
2638         configuration variable.
2639
2640         * katie (install): likewise.  Update symlinks to point into the
2641         pool; mark the files for later deletion by rhona and mark them as
2642         not being in accepted for cameron.
2643
2644         * rhona (clean_accepted_autobuild): new function.
2645
2646 2002-04-22  James Troup  <james@nocrew.org>
2647
2648         * jennifer (check_files): handle db_access.get_location_id()
2649         returning -1 properly/better.
2650
2651         * rhona (clean_fingerprints): new function.
2652
2653 2002-04-21  James Troup  <james@nocrew.org>
2654
2655         * utils.py (touch_file): unused; remove.
2656         (plural): likewise.
2657
2658         * jennifer (check_files): close file descriptor used to get the
2659         control file.
2660         (check_md5sums): likewise.
2661         (callback): likewise.
2662
2663         * katie.py (Katie.do_reject): handle manual rejects much better;
2664         call the editor first and get confirmation from the user before
2665         proceeding.
2666
2667         * jennifer (check_signature): prefix_multi_line_string() moved to
2668         utils.
2669
2670         * utils.py (prefix_multi_line_string): moved here from jennifer.
2671
2672 2002-04-20  James Troup  <james@nocrew.org>
2673
2674         * lisa (main): handle non-existent files.
2675
2676         * ashley (main): allow *.katie files as arguments too.
2677
2678 2002-04-19  James Troup  <james@nocrew.org>
2679
2680         * katie.py (Katie.accept): add stuff to help auto-building from
2681         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2682         in the pool), create a symlink to it in the accepted directory and
2683         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2684
2685         * katie (install): undo the "auto-building from accepted" stuff
2686         (i.e. remove the .orig.tar.gz symlink and remove the files from
2687         unstable_accepted table).
2688
2689 2002-04-16  James Troup  <james@nocrew.org>
2690
2691         * jennifer (upload_too_new): fix typo which was causing all
2692         timestamp comparisons to be against the .changes file.  Also move
2693         back to the original directory so we do the comparisons against
2694         accurate timestamps.
2695
2696         * tea (check_missing_tar_gz_in_dsc): new function.
2697
2698         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2699         file mentioned in the .dsc.
2700
2701         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2702         way mails reach debian-{devel-,}changes@l.d.o.
2703
2704 2002-04-02  Ryan Murray  <rmurray@debian.org>
2705
2706         * cron.daily: run shania after rhona
2707         * cron.daily-non-US: likewise.
2708
2709 2002-04-01  James Troup  <james@nocrew.org>
2710
2711         * katie: re-add proposed-updates/stable install support.
2712
2713         * katie.py (Katie.dump_vars): add changes["changes"] as an
2714         optional field; should be mandatory later.
2715
2716 2002-03-31  James Troup  <james@nocrew.org>
2717
2718         * katie (install): support a Suite::<foo>::CopyKatie similar to
2719         CopyChanges.  Done seperately because .katie files don't need to
2720         be mirrored and will probably be copied to another directory as a
2721         result.
2722
2723         * halle (main): add missing debug to options.
2724
2725 2002-03-29  James Troup  <james@nocrew.org>
2726
2727         * madison (main): add a -r/--regex option.
2728
2729 2002-03-26  James Troup  <james@nocrew.org>
2730
2731         * lisa: don't trample on changes["distribution"]; make a copy of
2732         it as changes["suite"] instead and use that.
2733
2734 2002-03-16  Anthony Towns  <ajt@debian.org>
2735
2736         * templates/lisa.bxa_notification: Fix some grammatical errors.
2737         Encourage contact via bxa@ftp-master email address.
2738
2739 2002-03-15  James Troup  <james@nocrew.org>
2740
2741         * jennifer (check_timestamps): remove bogus raise in except.
2742
2743 2002-03-15  Anthony Towns  <ajt@debian.org>
2744
2745         * cron.monthly: rotate mail/archive/bxamail as well as
2746         mail/archive/mail. This is for a complete archive of
2747         correspondence with the BXA.
2748
2749 2002-03-14  Anthony Towns  <ajt@debian.org>
2750
2751         * crypto-in-main changes.
2752
2753         * utils.py (move, copy): add an optional perms= parameter to let you
2754         set the resulting permissions of the moved/copied file
2755         * katie.py (force_move): rejected/morgued files should be unreadable
2756         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2757         should be unreadable.
2758
2759 2002-03-07  Ryan Murray  <rmurray@debian.org>
2760
2761         * katie (install): check for existance of "files id" key as well as
2762         it being set to a valid value.
2763         * katie (install): check for existense and valid value for location
2764         id as well
2765
2766 2002-03-05  Ryan Murray  <rmurray@debian.org>
2767
2768         * katie.py (do_reject): reread the reason file after editing it.
2769
2770 2002-02-25  James Troup  <james@nocrew.org>
2771
2772         * jennifer (check_changes): don't enforce sanity in .changes file
2773         names since it doesn't seem to be possible; pcmica-cs and similar
2774         freak show packages in particular cause real problems.
2775
2776         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2777         each dsc_file since the .orig.tar.gz checking code now uses it as
2778         a boolean.  Fixes bizarro rejections which bogusly claimed
2779         .diff.gz md5sum/size was incorrect.
2780
2781 2002-02-24  James Troup  <james@nocrew.org>
2782
2783         * katie (process_it): reset reject_message.
2784
2785 2002-02-22  James Troup  <james@nocrew.org>
2786
2787         * db_access.py(set_files_id): disable use of
2788         currval('files_id_seq') because it was taking 3 seconds on auric
2789         which is insane (most calls take < 0.01) and simply call
2790         get_files_id() for the return value instead.
2791
2792         * katie.py (Katie.do_query): convenience function; unused by
2793         default, useful for profiling.
2794         * db_access.py (do_query): likewise.
2795
2796         * katie (install): fix insert SQL call when binary has no source.
2797
2798         * lisa (determine_new): auto-correct non-US/main to non-US.
2799         (determine_new): add a warning when adding things to stable.
2800         (edit_index): use our_raw_input().
2801         (edit_overrides): likewise.
2802         (do_new): likewise.  Use re.search() not re.match() since the
2803         default answer may not be the first one.
2804         (do_byhand): likewise.
2805         (do_new): Default to 'S'kip and never 'A'dd.
2806
2807         * jennifer (action): pass prompt to our_raw_input().
2808         * melanie (game_over): likewise.
2809         * katie (action): likewise.
2810
2811         * utils.py (our_raw_input): add an optional prompt argument to
2812         make the function more usable as a drop in replacement for
2813         raw_input().
2814
2815         * jennifer (check_files): correct reject() to not double prefix
2816         when using katie.py based functions.
2817         (check_dsc): likewise.
2818
2819         * katie.py (Katie.reject): prepend a new line if appropriate
2820         rathen than appending one to avoid double new lines when caller
2821         adds one of his own.
2822
2823         * lisa (determine_new): warn if the package is also in other
2824         components.
2825
2826 2002-02-20  James Troup  <james@nocrew.org>
2827
2828         * jennifer (check_files): if .changes file lists "source" in
2829         Architecture field, there must be a .dsc.
2830
2831 2002-02-15  James Troup  <james@nocrew.org>
2832
2833         * ashley (main): add some missing fields.
2834
2835         * katie.py (Katie.check_dsc_against_db): fix to take into account
2836         the fact that the .orig.tar.gz might be in byhand, accepted or
2837         new.  Also fix calling of reject().
2838         (Katie.check_binaries_against_db): fix calling of reject().
2839         (Katie.check_source_against_db): likewise.
2840         (Katie.dump_vars): add missing variables used for bug closures.
2841
2842         * lisa (changes_compare_by_time): sort by reverse time.
2843
2844         * katie.py (Katie.accept): log.
2845         (Katie.dump_vars): missing has_key test for optional changes fields.
2846
2847         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2848         (process_it): traceback goes to stderr, not stdout.
2849         (acknowledge_new): log.
2850         (do_byhand): likewise.
2851
2852         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2853
2854         * add_constraints.sql: add grants for the new fingerprint table.
2855
2856 2002-02-13  James Troup  <james@nocrew.org>
2857
2858         * katie (do_reject): basename the .changes filename before trying
2859         to use it to construct the .reason filename.
2860         (process_it): call Katie.update_subst() so do_reject() DTRT with
2861         the mail template.
2862         (do_reject): setup the mail template correctly.
2863
2864 2002-02-12  James Troup  <james@nocrew.org>
2865
2866         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2867         (check_files): don't abuse global dictionaries.
2868         (Ent): use all variables.
2869         (check_timestamps): don't abuse global dictionaries.
2870
2871         * fernanda.py: renamed to .py so lisa can import it.
2872         (check_dsc): remove unused local variables (pychecker).
2873         (display_changes): split off from check_changes.
2874
2875         * katie: rewritten; most of the functionality moves to jennifer;
2876         what's left is the code to install packages once a day from the
2877         'accepted' directory.
2878
2879         * jennifer: new program, processes packages in 'unchecked'
2880         (i.e. most of the non-install functionality of old katie).
2881
2882         * katie.py: common functions shared between the clique of
2883         jennifer, lisa and katie.
2884
2885         * lisa: new program; handles NEW and BYHAND packages.
2886
2887         * jeri (usage): new function.
2888         (main): use it.
2889         (check_package): remove unused local variable (pychecker).
2890
2891         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2892         binaries and source.  Add install_date to source.
2893
2894         * halle (usage): new function.
2895         (main): use it.  Remove unused options.
2896         (check_changes): remove unused local variable (pychecker).
2897
2898         * add_constraints.sql: add fingerprint references.
2899
2900         * db_access.py (get_or_set_fingerprint_id): new function.
2901
2902         * ashley (main): new program; dumps the contents of a .katie file
2903         to stdout.
2904
2905         * alyson (main): remove option handling since we don't actually
2906         support any.
2907         * cindy (main): likewise.
2908
2909         * remove unnecessary imports and pre-define globals (pychecker).
2910
2911 2002-02-11  Anthony Towns  <ajt@debian.org>
2912
2913         * added installation-report and upgrade-report pseudo-packages
2914
2915 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2916
2917         * katie (update_subst): use Dinstall::TrackingServer.
2918         * melanie (main): likewise.
2919
2920 2002-01-27  James Troup  <james@nocrew.org>
2921
2922         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2923         noticing, jgg@ for fix.
2924
2925 2002-01-19  James Troup  <james@nocrew.org>
2926
2927         * utils.py (extract_component_from_section): handle non-US
2928         non-main properly.
2929
2930 2002-01-12  James Troup  <james@nocrew.org>
2931
2932         * madison: add support for -S/--source-and-binary which displays
2933         information for the source package and all it's binary children.
2934
2935 2002-01-13  Anthony Towns  <ajt@debian.org>
2936
2937         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2938         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2939           and 2002 key ids.
2940         * katie.conf-non-US: Likewise.
2941         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2942           multiple keys automatically. This is probably only useful for
2943           transitioning from an expired (or revoked?) key.
2944
2945 2002-01-08  Ryan Murray  <rmurray@debian.org>
2946
2947         * debian/python-dep: new file that prints out python:Depends for
2948           substvars
2949         * debian/control: use python:Depends, build-depend on python
2950           lower Depends: on postgresql to Suggests:
2951         * debian/rules: determine python version, install to the correct
2952           versioned dir
2953
2954 2001-12-18  Anthony Towns  <ajt@debian.org>
2955
2956         * ziyi: unlink Release files before overwriting them (in case they've
2957           been merged)
2958         * ziyi: always include checksums/sizes for the uncompressed versions
2959           of Sources and Packages, even if they're not present on disk
2960
2961 2001-11-26  Ryan Murray  <rmurray@debian.org>
2962
2963         * ziyi (main): add SigningPubKey config option
2964         * katie.conf: use SigningPubKey config option
2965         * katie.conf-non-US: likewise
2966
2967 2001-11-24  James Troup  <james@nocrew.org>
2968
2969         * katie (acknowledge_new): log newness.
2970
2971 2001-11-24  Anthony Towns  <ajt@debian.org>
2972
2973         * ziyi (real_arch): bail out if some moron forgot to reset
2974         untouchable on stable.
2975         (real_arch): source Release files.
2976
2977 2001-11-19  James Troup  <james@nocrew.org>
2978
2979         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
2980         utils.get_conf().
2981         * shania (main): likewise.
2982
2983         * rhona (main): add default options.
2984
2985         * db_access.py (get_archive_id): case independent.
2986
2987         * katie (action): sort files so that ordering is consistent
2988         between mails; noticed/requested by Joey.
2989
2990 2001-11-17  Ryan Murray  <rmurray@debian.org>
2991
2992         * utils.py: add get_conf function, change startup code to read all
2993           config files to the Cnf that get_conf returns
2994           use the component list from the katie conf rather than the hardcoded
2995           list.
2996         * all scripts: use new get_conf function
2997         * shania: fix try/except around changes files
2998         * jenna: only do debian-installer if it is a section in Cnf
2999
3000 2001-11-16  Ryan Murray  <rmurray@debian.org>
3001
3002         * shania (main): Initialize days to a string of a number.
3003                  (main): Initialize Cnf vars before reading in Cnf
3004
3005 2001-11-14  Ryan Murray  <rmurray@debian.org>
3006
3007         * shania (main): Initialize days to a number.
3008
3009 2001-11-04  James Troup  <james@nocrew.org>
3010
3011         * docs/Makefile: use docbook-utils' docbook2man binary.
3012
3013         * Change all "if foo == []" constructs into "if not foo".
3014
3015         * katie (check_changes): when installing into stable from
3016         proposed-updates, remove all non-stable target distributions.
3017         (check_override): don't check for override disparities on stable
3018         installs.
3019         (stable_install): update install_bytes appropriately.
3020         (reject): stable rejection support; i.e. don't remove files when
3021         rejecting files in the pool, rather remove them from the
3022         proposed-update suite instead, rhona will do the rest.
3023         (manual_reject): support for a stable specific template.
3024         (main): setup up stable rejector in subst.
3025
3026 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3027
3028         * debian/control (Build-Depends): docbook2man has been superseded
3029         by docbook-utils.
3030
3031         * neve (main): exit with a more useful error message.
3032         (update_suites): Suite::<suite>::Version, Origin and Description
3033         are not required, so don't fail if they don't exist.
3034
3035         * db_access.py (get_archive_id): return -1 on error rather than
3036         raise an exception.
3037         (get_location_id): likewise.
3038
3039         * madison (main): don't exit on the first not-found package,
3040         rather exit with an appropriate return code after processing all
3041         packages.
3042
3043 2001-11-03  James Troup  <james@nocrew.org>
3044
3045         * claire.py (find_dislocated_stable): add per-architecture
3046         symlinks for dislocated architecture: all debs.
3047
3048 2001-10-19  Anthony Towns  <ajt@debian.org>
3049
3050         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3051
3052 2001-10-10  Anthony Towns  <ajt@debian.org>
3053
3054         * claire.py (fix_component_section): do _not_ assign to None under
3055         any circumstances
3056
3057 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3058
3059         * melanie (main): don't duplicate architectures when removing from
3060         more than one suite.
3061
3062         * heidi (main, process_file, get_list): report suite name not ID.
3063
3064         * naima (nmu_p): be case insensitive.
3065
3066         * naima (action): more list handling clean ups.
3067
3068         * melanie (main): clean up lists handling to use string.join and
3069         IN's.
3070
3071         * madison (main): clean up suite and architecture argument parsing
3072         to use slices less and string.join more.
3073
3074         * utils.py (parse_changes): Use string.find() instead of slices for
3075         string comparisons thereby avoid hardcoding the length of strings.
3076         * ziyi (main): likewise.
3077
3078 2001-10-07  James Troup  <james@nocrew.org>
3079
3080         * Remove mode argument from utils.open_files() calls if it's the
3081         default, i.e. 'r'.
3082
3083 2001-09-27  James Troup  <james@nocrew.org>
3084
3085         * katie (init): new function; options clean up.
3086         (usage): add missing options, remove obsolete ones.
3087         (main): adapt for the two changes above.  If the lock file or
3088         new-ack log file don't exist, create them.  Don't try to open the
3089         new-ack log file except running in new-ack mode.
3090
3091         * alyson (main): initialize all the tables that are based on the
3092         conf file.
3093
3094         * utils.py (touch_file): like touch(1).
3095         (where_am_i): typo.
3096
3097         * catherine (usage): new.
3098         (main): use it.  options cleanup.
3099         * claire.py: likewise.
3100         * fernanda: likewise.
3101         * heidi: likewise.
3102         * jenna: likewise.
3103         * shania: likewise.
3104         * ziyi: likewise.
3105
3106         * andrea: options cleanup.
3107         * charisma: likewise.
3108         * julia: likewise.
3109         * madison: likewise.
3110         * melanie: likewise.
3111         * natalie: likewise.
3112         * rhona: likewise.
3113         * tea: likewise.
3114
3115 2001-09-26  James Troup  <james@nocrew.org>
3116
3117         * utils.py: default to sane config file locations
3118         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3119         or they can point to the real ones through use of a new Config
3120         section.  Based on an old patch by Adam Heath.
3121         (where_am_i): use the new default config stuff.
3122         (which_conf_file): likewise.
3123         (which_apt_conf_file): likewise.
3124
3125         * charisma (main): output defaults to
3126         `Package~Version\tMaintainer'; input can be of either form.  When
3127         parsing the new format do version comparisons, when parsing the
3128         old format assume anything in the extra file wins.  This fixes the
3129         problem of newer non-US packages being overwhelmed by older
3130         versions still in stable on main.
3131
3132 2001-09-17  James Troup  <james@nocrew.org>
3133
3134         * natalie.py (list): use result_join().
3135
3136         * denise (main): result_join() moved to utils.
3137
3138         * utils.py (result_join): move to utils; add an optional seperator
3139         argument.
3140
3141 2001-09-14  James Troup  <james@nocrew.org>
3142
3143         * heidi (set_suite): new function; does --set like natalie does,
3144         i.e. turns it into a sequence of --add's and --remove's
3145         internally.  This is a major win (~20 minute run time > ~20
3146         seconds) in the common, everday (i.e. testing) case.
3147         (get_id): common code used by set_suite() and process_file().
3148         (process_file): call set_suite() and get_id().
3149         (main): add logging support.
3150
3151         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3152         files.
3153
3154         * utils.py (parse_changes): use slices or simple string comparison
3155         in favour of regexes where possible.
3156
3157         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3158         fact that the string VARDATA() points to are not null terminated.
3159
3160         * denise (result_join): new function; like string.join() but
3161         handles None's.
3162         (list): use it.
3163         (main): likewise.
3164
3165         * charisma (main): python-pygresql 7.1 returns None not "".
3166
3167 2001-09-14  Ryan Murray  <rmurray@debian.org>
3168
3169         * natalie.py (list): handle python-pygresql 7.1 returning None.
3170
3171 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3172
3173         * madison (main): return 1 if no package is found.
3174
3175 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3176
3177         * madison (main): better error handling for incorrect
3178         -a/--architecture or -s/--suite arguments.
3179         (usage): new.
3180         (main): use it.
3181
3182 2001-09-05  Ryan Murray  <rmurray@debian.org>
3183
3184         * charisma, madison, katie: remove use of ROUser
3185         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3186
3187 2001-08-26  James Troup  <james@nocrew.org>
3188
3189         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3190         maintained packages at cjwatson@'s request.
3191
3192 2001-08-21  James Troup  <james@nocrew.org>
3193
3194         * madison (main): add -a/--architecture support.
3195
3196         * jenna: use logging instead of being overly verbose on stdout.
3197
3198 2001-08-11  Ryan Murray  <rmurray@debian.org>
3199
3200         * melanie: add functional help option
3201
3202 2001-08-07  Anthony Towns  <ajt@debian.org>
3203
3204         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3205
3206 2001-07-28  James Troup  <james@nocrew.org>
3207
3208         * katie (check_dsc): ensure source version is >> than existing
3209         source in target suite.
3210
3211 2001-07-25  James Troup  <james@nocrew.org>
3212
3213         * natalie.py: add logging support.
3214
3215         * utils.py (open_file): make the second argument optional and
3216         default to read-only.
3217
3218         * rene (main): work around broken source packages that duplicate
3219         arch: all packages with arch: !all packages (no longer allowed
3220         into the archive by katie).
3221
3222 2001-07-13  James Troup  <james@nocrew.org>
3223
3224         * katie (action): don't assume distribution is a dictionary.
3225         (update_subst): don't assume architecture is a dictionary and that
3226         maintainer822 is defined.
3227         (check_changes): recognise nk_format exceptions.
3228         (check_changes): reject on 'testing' only uploads.
3229         (check_files): when checking to ensure all packages are newer
3230         versions check against arch-all packages too.
3231         (check_dsc): enforce the existent of a sane set of mandatory
3232         fields.  Ensure the version number in the .dsc (modulo epoch)
3233         matches the version number in the .changes file.
3234
3235         * utils.py (changes_compare): ignore all exceptions when parsing
3236         the changes files.
3237         (build_file_list): don't UNDEF on a changes file with no format
3238         field.
3239
3240 2001-07-07  James Troup  <james@nocrew.org>
3241
3242         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3243         rather than 'changedbyname' to avoid false negatives on uploads
3244         with an email-address-only Changed-By field.
3245         (check_dsc): don't overwrite reject_message; append to it.
3246         (check_signature): likewise.
3247         (check_changes): likewise.
3248         (announce): condition logging on 'action'.
3249
3250         * logging.py: new logging module.
3251
3252         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3253         sub-tree into a separate (global) variable.
3254         (check_dsc): ensure format is 1.0 to retain backwards
3255         compatability with dpkg-source in potato.
3256         (main): only try to obtain the lock when not running in no-action
3257         mode.
3258         Use the new logging module.
3259
3260         * christina: initial version; only partially usable.
3261
3262 2001-06-28  Anthony Towns  <ajt@debian.org>
3263
3264         * apt.conf: Add ExtraOverrides to auric.
3265
3266 2001-06-25  James Troup  <james@nocrew.org>
3267
3268         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3269         they preferred the name 'Uploaders'.
3270
3271 2001-06-23  James Troup  <james@nocrew.org>
3272
3273         * katie (check_files): fix typo in uncommon rejection message,
3274         s/sourceversion/source version/.
3275
3276         * denise (main): we can't use print because stdout has been
3277         redirected.
3278
3279         * katie (source_exists): new function; moved out of check_files()
3280         and added support for binary-only NMUs of earlier sourceful NMUs.
3281
3282         * rhona (clean): find_next_free has moved.
3283
3284         * utils.py (find_next_free): new function; moved here from rhona.
3285         Change too_many to be an argument with a default value, rather
3286         than a hardcoded variable.
3287
3288         * shania: rewritten to work better; REJECTion reminder mail
3289         handling got lost though.
3290
3291 2001-06-22  James Troup  <james@nocrew.org>
3292
3293         * rhona (main): remove unused override code.
3294
3295         * fernanda (main): remove extraneous \n's from utils.warn calls.
3296         * natalie.py (list): likewise.
3297
3298         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3299         use utils.{warn,fubar} where appropriate.
3300
3301 2001-06-21  James Troup  <james@nocrew.org>
3302
3303         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3304         functionality.
3305         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3306         by the "Maintainers" field in the .dsc file and maintainer groups.
3307         (nmu_p.__init__): read in the list of group maintainer names.
3308         (announce): use nmu_p.
3309
3310 2001-06-20  James Troup  <james@nocrew.org>
3311
3312         * rene (main): hardcode the suite experimental is compared to by
3313         name rather than number.
3314
3315         * katie (check_files): differentiate between doesn't-exist and
3316         permission-denied in "can not read" rejections; requested by edd@.
3317         (check_dsc): use os.path.exists rather than os.access to allow the
3318         above check to kick in.
3319
3320         * heidi (process_file): read all input before doing anything and
3321         use transactions.
3322
3323 2001-06-15  James Troup  <james@nocrew.org>
3324
3325         * fernanda: new script; replaces old 'check' shell script
3326         nastiness.
3327
3328 2001-06-14  James Troup  <james@nocrew.org>
3329
3330         * katie: actually import traceback module to avoid amusing
3331         infinite loop.
3332
3333 2001-06-10  James Troup  <james@nocrew.org>
3334
3335         * utils.py (extract_component_from_section): fix to handle just
3336         'non-free' and 'contrib'.  Also fix to handle non-US in a
3337         completely case insensitive manner as a component.
3338
3339 2001-06-08  James Troup  <james@nocrew.org>
3340
3341         * madison (arch_compare): sort function that sorts 'source' first
3342         then alphabetically.
3343         (main): use it.
3344
3345 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3346
3347         * catherine (poolize): explicitly make poolized_size a long so it
3348         doesn't overflow when poolizing e.g. entire archives.
3349
3350 2001-06-01  James Troup  <james@nocrew.org>
3351
3352         * utils.py (send_mail): throw exceptions rather than exiting.
3353
3354         * katie (process_it): catch exceptions and ignore them.
3355
3356 2001-06-01  Michael Beattie  <mjb@debian.org>
3357
3358         * added update-mailingliststxt and update-readmenonus to update
3359         those files, respectively. modified cron.daily{,-non-US} to
3360         use them.
3361
3362 2001-05-31  Anthony Towns  <ajt@debian.org>
3363
3364         * rhona: make StayOfExecution work.
3365
3366 2001-05-31  James Troup  <james@nocrew.org>
3367
3368         * rhona (find_next_free): fixes to not overwrite files but rename
3369         them by appending .<n> instead.
3370         (clean): use find_next_free and use dated sub-directories in the
3371         morgue.
3372
3373         * utils.py (move): don't overwrite files unless forced to.
3374         (copy): likewise.
3375
3376 2001-05-24  James Troup  <james@nocrew.org>
3377
3378         * katie (check_files): determine the source version here instead
3379         of during install().
3380         (check_files): check for existent source with bin-only NMU
3381         support.
3382         (main): sort the list of changes so that the source-must-exist
3383         check Does The Right Thing(tm).
3384
3385         * utils.py (changes_compare): new function; sorts a list of
3386         changes files by 'have-source', source, version.
3387         (cc_fix_changes): helper function.
3388         (parse_changes): use compiled regexes.
3389         (fix_maintainer): likewise.
3390
3391         * rene (main): warn about packages in experimental that are
3392         superseded by newer versions in unstable.
3393
3394 2001-05-21  James Troup  <james@nocrew.org>
3395
3396         * rene (main): add support for checking for ANAIS (Architecture
3397         Not Allowed In Source) packages.
3398
3399 2001-05-17  James Troup  <james@nocrew.org>
3400
3401         * katie (check_changes): initalize `architecture' dictionary in
3402         changes global so that if we can't parse the changes file for
3403         whatever reason we don't undef later on.
3404
3405         * utils.py (parse_changes): fix handling of multi-line fields
3406         where the first line did have data.
3407
3408 2001-05-05  Anthony Towns  <ajt@debian.org>
3409
3410         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3411         (It should always have been there. Ooopsy.)
3412
3413 2001-05-03  Anthony Towns  <ajt@debian.org>
3414
3415         * jenna: Cleanup packages that move from arch:any to arch:all or
3416         vice-versa.
3417
3418 2001-04-24  Anthony Towns  <ajt@debian.org>
3419
3420         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3421         cope with debian-installer and boot-floppies' md5sum.txt.
3422
3423 2001-04-16  James Troup  <james@nocrew.org>
3424
3425         * katie (check_changes): add missing %s format string argument.
3426         (stable_install): temporary work around for morgue location to
3427         move installed changes files into.
3428         (stable_install): helps if you actually read in the template.
3429         (manual_reject): fix for editing of reject messages which was
3430         using the wrong variable name.
3431
3432         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3433
3434 2001-04-13  James Troup  <james@nocrew.org>
3435
3436         * katie (manual_reject): Cc the installer.
3437         (reject): don't.
3438         (check_changes): remove unused maintainer-determination code.
3439         (update_subst): add support for Changed-By when setting the
3440         *MAINTAINER* variables.
3441
3442         * rene (bar): new function to check for packages on architectures
3443         when they shouldn't be.
3444
3445         * natalie.py (main): use fubar() and warn() from utils.
3446
3447         * utils.py (whoami): new mini-function().
3448         * melanie (main): use it.
3449         * katie (manual_reject): likewise.
3450
3451 2001-04-03  James Troup  <james@nocrew.org>
3452
3453         * katie (action): ignore exceptions from os.path.getmtime() so we
3454         don't crash on non-existent changes files (e.g. when they are
3455         moved between the start of the install run in cron.daily and the
3456         time we get round to processing them).
3457
3458         * madison (main): also list source and accept -s/--suite.
3459
3460         * jenna (generate_src_list): missing \n in error message.
3461
3462         * katie (update_subst): add sane defaults for when changes is
3463         skeletal.
3464
3465 2001-03-29  James Troup  <james@nocrew.org>
3466
3467         * melanie (main): use fubar() and warn() from utils.  Remember who
3468         the maintainer for the removed packages are and display that info
3469         to the user.  Readd support for melanie-specific Bcc-ing that got
3470         lost in the TemplateSubst transition.
3471
3472         * utils.py (fubar): new function.
3473         (warn): like wise.
3474
3475         * db_access.py (get_maintainer): as below.
3476
3477         * charisma (get_maintainer): moved the bulk of this function to
3478         db_access so that melanie can use it too.
3479
3480         * claire.py (find_dislocated_stable): restrict the override join
3481         to those entries where the suite is stable; this avoids problems
3482         with packages which have moved to new sections (e.g. science)
3483         between stable and unstable.
3484
3485 2001-03-24  James Troup  <james@nocrew.org>
3486
3487         * catherine (poolize): new function; not really independent of
3488         main() fully, yet.
3489         (main): use it.
3490
3491         * katie (stable_install): __SUITE__ needs to be space prefixed
3492         because buildd's check for 'INSTALLED$'.
3493
3494 2001-03-22  James Troup  <james@nocrew.org>
3495
3496         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3497
3498         * jenna: rewritten; now does deletions on a per-suite level
3499         instead of a per-suite-component-architecture-type level.  This
3500         allows mutli-component packages to be auto-cleaned (and as a
3501         bonus, reduces the code size and duplication).
3502
3503 2001-03-22  Anthony Towns  <ajt@debian.org>
3504
3505         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3506         instead of just giving a gpg error.
3507
3508 2001-03-21  James Troup  <james@nocrew.org>
3509
3510         * madison (main): use apt_pkg.VersionCompare to sort versions so
3511         that output is correctly sorted for packages like debhlper.
3512         Noticed by ajt@.
3513
3514         * tea (check_source_in_one_dir): actually find problematic source
3515         packages.
3516
3517         * katie (check_dsc): remember the orig.tar.gz's location ID if
3518         it's not in a legacy suite.
3519         (check_diff): we don't use orig_tar_id.
3520         (install): add code to handle sourceful diff-only upload of
3521         packages which change components by copying the .orig.tar.gz into
3522         the new component, if it doesn't already exist there.
3523         (process_it): reset orig_tar_location (as above).
3524
3525         * melanie (main): use template substiution for the bug closing
3526         emails.
3527         (main): don't hardcode bugs.debian.org or packages.debian.org
3528         either; use configuration items.
3529
3530         * katie: likewise.
3531
3532         * natalie.py (init): use None rather than 'localhost' for the
3533         hostname given to pg.connect.
3534
3535         * utils.py (TemplateSubst): new function; lifted from
3536         userdir-ldap.
3537
3538 2001-03-21  Ryan Murray  <rmurray@debian.org>
3539
3540         * katie (announce): fix the case of non-existent
3541         Suite::$SUITE::Announce.
3542
3543 2001-03-20  Ryan Murray  <rmurray@debian.org>
3544
3545         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3546         /usr/.
3547
3548         * alyson (main): use config variable for database name.
3549         * andrea (main): likewise.
3550         * catherine (main): likewise.
3551         * charisma (main): likewise.
3552         * cindy (main): likewise.
3553         * claire.py (main): likewise.
3554         * denise (main): likewise.
3555         * heidi (main): likewise.
3556         * jenna (main): likewise.
3557         * katie (main): likewise.
3558         * madison (main): likewise.
3559         * melanie (main): likewise.
3560         * neve (main): likewise.
3561         * rhona (main): likewise.
3562         * tea (main): likewise.
3563
3564 2001-03-15  James Troup  <james@nocrew.org>
3565
3566         * rhona (check_sources): fixed evil off by one (letter) error
3567         which was causing only .dsc files to be deleted when cleaning
3568         source packages.
3569
3570         * charisma (get_maintainer_from_source): remove really stupid and
3571         gratuitous IN sub-query and replace with normal inner join.
3572         (main): connect as read-only user nobody.
3573
3574         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3575         with EXISTS.
3576         (check_files): likewise; still disabled by default though.
3577         (clean_binaries): add ' seconds' to the mysterious number in the
3578         output.
3579         (clean): likewise.
3580
3581         * tea (check_files): add missing global declaration on db_files.
3582
3583 2001-03-14  James Troup  <james@nocrew.org>
3584
3585         * rhona: rewritten large chunks. Removed a lot of the silly
3586         selecting into dictionaries and replaced it with 'where exists'
3587         based sub queries.  Added support for StayOfExecution.  Fix the
3588         problem with deleting dsc_files too early and disable cleaning of
3589         unattached files.
3590
3591 2001-03-14  Anthony Towns  <ajt@debian.org>
3592
3593         * katie (announce): also check Changed-By when trying to detect
3594         NMUs.
3595
3596 2001-03-06  Anthony Towns  <ajt@debian.org>
3597
3598         * ziyi (main): Generate Release.gpg files as well, using the key from
3599         Dinstall::SigningKey in katie.conf, if present. That key has to be
3600         passwordless, and hence kept fairly secretly.
3601
3602 2001-03-02  James Troup  <james@nocrew.org>
3603
3604         * utils.py (str_isnum): new function; checks to see if the string
3605         is a number.
3606
3607         * shania (main): fix _hideous_ bug which was causing all files > 2
3608         weeks old to be deleted from incoming, even if they were part of a
3609         valid upload.
3610
3611 2001-02-27  James Troup  <james@nocrew.org>
3612
3613         * melanie (main): accept new argument -C/--carbon-copy which
3614         allows arbitarty carbon-copying of the bug closure messages.
3615         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3616         separate variable.
3617
3618 2001-02-27  Anthony Towns  <ajt@debian.org>
3619
3620         * ziyi: new program; generates Release files.
3621
3622 2001-02-25  James Troup  <james@nocrew.org>
3623
3624         * katie (reject): add missing '\n' to error message.
3625         (manual_reject): likewise.
3626         (install): catch exceptions from moving the changes file into DONE
3627         and ignore them.
3628
3629         * tea (check_md5sums): new function.
3630
3631 2001-02-25  Michael Beattie  <mjb@debian.org>
3632
3633         * melanie: use $EDITOR if available.
3634
3635 2001-02-15  James Troup  <james@nocrew.org>
3636
3637         * utils.py (parse_changes): don't crash and burn on empty .changes
3638         files.  Symptoms noticed by mjb@.
3639
3640 2001-02-15  Adam Heath  <doogie@debian.org>
3641
3642         * denise (main): use an absolute path for the output filename.
3643
3644         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3645         compile errors with postgresql-dev >= 7.0.
3646
3647 2001-02-12  James Troup  <james@nocrew.org>
3648
3649         * rene: initial version.
3650
3651         * andrea: initial version.
3652
3653         * catherine (main): remove obsolete assignment of arguments.
3654
3655 2001-02-09  James Troup  <james@nocrew.org>
3656
3657         * catherine: first working version.
3658
3659 2001-02-06  James Troup  <james@nocrew.org>
3660
3661         * katie (check_files): validate the priority field; i.e. ensure it
3662         doesn't contain a '/' (to catch people prepending the priority
3663         with the component rather than the section).
3664         (check_override): don't warn about source packages; the only check
3665         is on section and we have no GUI tools that would use the Section
3666         field for a Sources file.
3667         (announce): use tags rather than severities for NMUs.  Requested
3668         by Josip Rodin <joy@>. [#78035]
3669
3670 2001-02-04  James Troup  <james@nocrew.org>
3671
3672         * tea (check_override): new function; ensures packages in suites
3673         are also in the override file.  Thanks to bod@ for noticing that
3674         such packages existed.
3675
3676         * katie: move file type compiled regular expressions to utils as
3677         catherine uses them too.
3678         (check_changes): always default maintainer822 to the installer
3679         address so that any bail out won't cause undefs later.
3680         (check_files): update file type re's to match above.
3681         (stable_install): likewise.
3682         (reject): handle any except from moving the changes files.  Fixes
3683         crashes on unreadable changes files.
3684
3685         * melanie (main): add an explanation of why things are not removed
3686         from testing.
3687
3688 2001-01-31  James Troup  <james@nocrew.org>
3689
3690         * melanie (main): ignore a) no message, b) removing from stable or
3691         testing when invoked with -n/--no-action.
3692
3693         * katie (check_override): lower section before checking to see if
3694         we're whining about 'non-US' versus 'non-US/main'.
3695
3696         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3697         function so that we can use inside of PostgreSQL.
3698
3699 2001-01-28  James Troup  <james@nocrew.org>
3700
3701         * katie: updated to pass new flag to parse_changes() and deal with
3702         the exception raised on invalid .dsc's if appropriate.
3703         * shania (main): likewise.
3704         * melanie (main): likewise.
3705
3706         * tea (check_dscs): new function to validate all .dsc files in
3707         unstable.
3708
3709         * utils.py (parse_changes): if passed an additional flag, validate
3710         the .dsc file to ensure it's extractable by dpkg-source.
3711         Requested by Ben Collins <bcollins@>.
3712
3713 2001-01-27  James Troup  <james@nocrew.org>
3714
3715         * madison (main): connect to the DB as nobody.
3716
3717         * katie (check_files): remove support for -r/--no-version-check
3718         since it makes no sense under katie (jenna will automatically
3719         remove the (new) older version) and was evil in any event.
3720         (check_changes): add missing new line to rejection message.
3721         (check_dsc): likewise.
3722         (process_it): reset reject_message here.
3723         (main): not here.  Also remove support for -r.
3724
3725 2001-01-26  James Troup  <james@nocrew.org>
3726
3727         * katie (check_override): don't whine about 'non-US/main' versus
3728         'non-US'.
3729
3730 2001-01-26  Michael Beattie  <mjb@debian.org>
3731
3732         * natalie.py (usage): new function.
3733         (main): use it.
3734
3735 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3736
3737         * update-mirrorlists: Update README.non-US too (request from Joy).
3738
3739 2001-01-25  James Troup  <james@nocrew.org>
3740
3741         * katie (reject): catch any exception from utils.move() and just
3742         pass, we previously only caught can't-overwrite errors and not
3743         can't-read ones.
3744
3745         * jenna (generate_src_list): use ORDER BY in selects to avoid
3746         unnecessary changes to Packages files.
3747         (generate_bin_list): likewise.
3748
3749         * utils.py (extract_component_from_section): separated out from
3750         build_file_list() as it's now used by claire too.
3751
3752         * claire.py (find_dislocated_stable): rewrite the query to extract
3753         section information and handle component-less locations properly.
3754         Thanks to ajt@ for the improved queries.
3755         (fix_component_section): new function to fix components and
3756         sections.
3757
3758 2001-01-23  James Troup  <james@nocrew.org>
3759
3760         * katie (check_files): set file type for (u?)debs first thing, so
3761         that if we continue, other functions which rely on file type
3762         existing don't bomb out.  If apt_pkg or apt_inst raise an
3763         exception when parsing the control file, don't try any other
3764         checks, just drop out.
3765         (check_changes): new test to ensure there is actually a target
3766         distribution.
3767
3768 2001-01-22  James Troup  <james@nocrew.org>
3769
3770         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3771         <grin@>.
3772         (check_changes): when mapping to unstable, remember to actually
3773         add unstable to the suite list and not just remove the invalid
3774         suite.
3775
3776 2001-01-21  James Troup  <james@nocrew.org>
3777
3778         * katie (check_files): catch exceptions from debExtractControl()
3779         and reject packages which raise any.
3780
3781 2001-01-19  James Troup  <james@nocrew.org>
3782
3783         * katie (check_signature): basename() file name in rejection
3784         message.
3785
3786 2001-01-18  James Troup  <james@nocrew.org>
3787
3788         * katie (in_override_p): remember the section and priority from
3789         the override file so we can check them against the package later.
3790         (check_override): new function; checks section and priority (for
3791         binaries) from the package against the override file and mails the
3792         maintainer about any disparities.
3793         (install): call check_override after announcing the upload.
3794
3795 2001-01-16  James Troup  <james@nocrew.org>
3796
3797         * utils.py (build_file_list): catch ValueError's from splitting up
3798         the files field and translate it into a parse error.
3799
3800         * tea: add support for finding unreferenced files.
3801
3802         * katie (in_override_p): add support for suite-aliasing so that
3803         proposed-updates uploads work again.
3804         (check_changes): catch parses errors from utils.build_file_list().
3805         (check_dsc): likewise.
3806         (check_diff): yet more dpkg breakage so we require even newer a
3807         version.
3808
3809         * jenna (generate_bin_list): don't do nasty path munging that's no
3810         longer needed.
3811
3812         * denise (main): support for non-US; and rename testing's override
3813         files so they're based on testing's codename.
3814
3815 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3816
3817         * melanie: add to the bug closing message explaining what happens
3818         (or rather doesn't) with bugs against packages that have been
3819         removed.
3820
3821 2001-01-14  James Troup  <james@nocrew.org>
3822
3823         * charisma (main): fix silly off-by-one error; suite priority
3824         checking was done using "less than" rather than "less than or
3825         equal to" which was causing weird hesienbugs with wrong Maintainer
3826         fields.
3827
3828 2001-01-10  James Troup  <james@nocrew.org>
3829
3830         * katie (in_override_p): adapted to use SQL-based overrides.
3831         read_override_file function disappears.
3832
3833         * db_access.py: add new functions get_section_id, get_priority_id
3834         and get_override_type_id.
3835         (get_architecture_id): return -1 if the architecture is not found.
3836
3837         * heidi: switch %d -> %d in all SQL queries.
3838         (get_list): Use string.join where appropriate.
3839
3840         * rhona (in_override_p): don't die if the override file doesn't
3841         exist.
3842         (main): warn if the override file doesn't exist.
3843
3844         * alyson: new script; will eventually sync the config file and the
3845         SQL database.
3846
3847         * natalie.py: new script; manipulates overrides.
3848
3849         * melanie: new script; removes packages from suites.
3850
3851 2001-01-08  James Troup  <james@nocrew.org>
3852
3853         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3854         anything it just changed the symptom.  Recognise the new breakage
3855         and reject them too.
3856
3857 2001-01-07  James Troup  <james@nocrew.org>
3858
3859         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3860         to the .changes file, be sure to set up files[filename]["type"]
3861         too.
3862
3863 2001-01-06  James Troup  <james@nocrew.org>
3864
3865         * katie (check_diff): new function; detects bad diff files
3866         produced by dpkg 1.8.1 and rejects thems.
3867         (process_it): call check_diff().
3868         (check_dsc): gar.  Add support for multiple versions of the
3869         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3870         and size against all versions and use one which matches if
3871         possible and exclude any that don't from being poolized to avoid
3872         file overwrites.  Thanks to broonie@ for providing the example.
3873         (install): skip any files marked as excluded as above.
3874
3875 2001-01-05  James Troup  <james@nocrew.org>
3876
3877         * heidi (process_file): add missing argument to error message.
3878
3879 2001-01-04  James Troup  <james@nocrew.org>
3880
3881         * heidi (main): fix handling of multiple files by reading all
3882         files not just the first file n times (where n = the number of
3883         files passed as arguments).
3884
3885 2001-01-04  Anthony Towns  <ajt@debian.org>
3886
3887         * katie (check_dsc): proper fix for the code which locates the
3888         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3889
3890 2000-12-20  James Troup  <james@nocrew.org>
3891
3892         * rhona: replace IN's with EXISTS's to make DELETE time for
3893         binaries and source sane on auric.  Add a -n/--no-action flag and
3894         make it stop actions if used.  Fixed a bug in binaries deletion
3895         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3896         -V/--version.  Giving timing info on deletion till I'm sure it's
3897         sane.
3898
3899         * katie (check_changes): map testing to unstable.
3900
3901         * madison: new script; shows versions in different architectures.
3902
3903         * katie (check_dsc): ensure size matches as well as md5sum;
3904         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3905         #69702.
3906
3907 2000-12-19  James Troup  <james@nocrew.org>
3908
3909         * katie (reject): ignore the "can't overwrite file" exception from
3910         utils.move() and leave the files where they are.
3911         (reject): doh! os.access() test was reversed so we only tried to
3912         move files which didn't exist... replaced with os.path.exists()
3913         test the right way round.
3914
3915         * utils.py (move): raise an exception if we can't overwrite the
3916         destination file.
3917         (copy): likewise.
3918
3919 2000-12-18  James Troup  <james@nocrew.org>
3920
3921         * rhona: first working version.
3922
3923         * db_access.py (get_files_id): force both sizes to be integers.
3924
3925         * katie (main): use size_type().
3926
3927         * utils.py (size_type): new function; pretty prints a file size.
3928
3929 2000-12-17  James Troup  <james@nocrew.org>
3930
3931         * charisma (main): do version compares so that older packages do
3932         not override newer ones and process source first as source wins
3933         over binaries in terms of who we think of as the Maintainer.
3934
3935 2000-12-15  James Troup  <james@nocrew.org>
3936
3937         * katie (install): use the files id for the .orig.tar.gz from
3938         check_dsc().
3939         (install): limit select for legacy source to a) source in legacy
3940         or legacy-mixed type locations and b) distinct on files.id.
3941         (install): rather than the bizarre insert new, delete old method
3942         for moving legacy source into the pool, use a simple update of
3943         files.
3944         (process_it): initalize some globals before each process.
3945
3946 2000-12-14  James Troup  <james@nocrew.org>
3947
3948         * katie (in_override_p): index on binary_type too since .udeb
3949         overrides are in a different file.
3950         (read_override_file): likewise.
3951         (check_files): correct filename passed to get_files_id().
3952         (check_dsc): we _have_ to preprend '/' to the filename to avoid
3953         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
3954         (check_dsc): remember the files id of the .orig.tar.gz, not the
3955         location id.
3956
3957 2000-12-13  James Troup  <james@nocrew.org>
3958
3959         * utils.py (poolify): force the component to lower case except for
3960         non-US.
3961
3962         * katie (in_override_p): handle .udeb-specific override files.
3963         (check_files): pass the binary type to in_override_p().
3964         (check_dsc): remember the location id of the old .orig.tar.gz in
3965         case it's not in the pool.
3966         (install): use location id from dsc_files; which is where
3967         check_dsc() puts it for old .orig.tar.gz files.
3968         (install): install files after all DB work is complete.
3969         (reject): basename() the changes filename.
3970         (manual_reject): likewise.
3971
3972         * shania: new progam; replaces incomingcleaner.
3973
3974 2000-12-05  James Troup  <james@nocrew.org>
3975
3976         * katie (check_changes): if inside stable and can't find files
3977         from the .changes; assume it's installed in the pool and chdir()
3978         to there.
3979         (check_files): we are not installing for stable installs, so don't
3980         check for overwriting existing files.
3981         (check_dsc): likewise.
3982         (check_dsc): reorder .orig.tar.gz handling so that we search in
3983         the pool first and only then fall back on any .orig.tar.gz in the
3984         cwd; this avoids false positives on the overwrite check when
3985         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
3986         (install): if this is a stable install, bail out to
3987         stable_install() immediately.
3988         (install): dsc_files handling was horribly broken. a) we need to
3989         add files from the .dsc and not the .changes (duh), b) we need to
3990         add the .dsc file itself to dsc_files (to be consistent with neve
3991         if for no other reason).
3992         (stable_install): new function; handles installs from inside
3993         proposed-updates to stable.
3994         (acknowledge_new): basename changes_filename before doing
3995         anything.
3996         (process_it): absolutize the changes filename to avoid the
3997         requirement of being in the same directory as the .changes file.
3998         (process_it): save and restore the cwd as stable installs can
3999         potentially jump into the pool to find files.
4000
4001         * jenna: dislocated_files support using claire.
4002
4003         * heidi (process_file): select package field from binaries
4004         explicitly.
4005
4006         * db_access.py (get_files_id): fix cache key used.
4007
4008         * utils.py (build_file_list): fix 'non-US/non-free' case in
4009         section/component splitting.
4010         (move): use os.path.isdir() rather than stat.
4011         (copy): likewise.
4012
4013         * claire.py: new file; stable in non-stable munger.
4014
4015         * tea: new file; simply ensures all files in the DB exist.
4016
4017 2000-12-01  James Troup  <james@nocrew.org>
4018
4019         * katie (check_dsc): use regex_safe().
4020         (check_changes): typo in changes{} key:
4021         s/distributions/distribution/.
4022         (install): use changes["source"], not files[file]["source"] as the
4023         latter may not exist and the former is used elsewhere.  Commit the
4024         SQL transaction earlier.
4025
4026         * utils.py (regex_safe): new function; escapes characters which
4027         have meaning to SQL's regex comparison operator ('~').
4028
4029 2000-11-30  James Troup  <james@nocrew.org>
4030
4031         * katie (install): pool_location is based on source package name,
4032         not binary package.
4033
4034         * utils.py (move): if dest is a directory, append the filename
4035         before chmod-ing.
4036         (copy): ditto.
4037
4038         * katie (check_files): don't allow overwriting of existing .debs.
4039         (check_dsc): don't allow overwriting of existing source files.
4040
4041 2000-11-27  James Troup  <james@nocrew.org>
4042
4043         * katie (check_signature): don't try to load rsaref; it's
4044         obsolete.
4045         (in_override_p): don't try to lookup override entries for packages
4046         with an invalid suite name.
4047         (announce): don't assume the suite name is valid; use Find() to
4048         lookup the mailing list name for announcements.
4049
4050         * utils.py (where_am_i): typo; hostname is in the first element,
4051         not second.
4052
4053         * db_access.py (get_suite_id): return -1 on an unknown suite.
4054
4055 2000-11-26  James Troup  <james@nocrew.org>
4056
4057         * katie (install): fix CopyChanges handling; typo in in checking
4058         Cnf for CopyChanges flag and was calling non-existent function
4059         copy_file.
4060
4061         * utils.py (copy): new function; clone of move without the
4062         unlink().
4063
4064 2000-11-25  James Troup  <james@nocrew.org>
4065
4066         * utils.py (build_file_list): handle non-US prefixes properly
4067         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4068         + 'libs' not 'non-US/libs').
4069         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4070         delays.  This is possibly(/probably) exim speicifc and (like other
4071         sendmail options) needs to be in the config file.
4072
4073 2000-11-24  James Troup  <james@nocrew.org>
4074
4075         * rhona (check_sources): we need file id from dsc_files; not id.
4076         Handle non .dsc source files being re-referenced in dsc_files.
4077
4078         * katie (in_override_p): strip out any 'non-US' prefix.
4079         (check_files): use utils.where_am_i() rather than hardcoding.
4080         (check_files): validate the component.
4081         (install): use utils.where_am_i() rather than hardcoding.
4082         (install): fix mail to go to actual recepient.
4083         (reject): likewise.
4084         (manual_reject): likewise.
4085         (acknowledge_new): likewise.
4086         (announce): likewise.
4087
4088         * db_access.py (get_component_id): ignore case when searching for
4089         the component and don't crash if the component can't be found, but
4090         return -1.
4091         (get_location_id): handle -1 from get_component_id().
4092
4093         * jenna (generate_src_list): don't bring 'suite' into our big
4094         multi-table-joining select as we already know the 'suite_id'.
4095         (generate_bin_list): likewise.
4096
4097         * neve (main): don't quit if not on ftp-master.
4098         (process_packages): remove unused variable 'suite_codename'.
4099
4100         * utils.py (move): actually move the file.
4101         (build_file_list): handle non-US prefixes in the section.
4102
4103         * catherine (main): use which_conf_file().
4104         * charisma (main): likewise.
4105         * heidi (main): likewise.
4106         * jenna (main): likewise.
4107         * katie (main): likewise.
4108         * neve (main): likewise.
4109         * rhona (main): likewise.
4110
4111         * utils.py (where_am_i): new routine; determines the archive as
4112         understood by other 'dak' programs.
4113         (which_conf_file): new routine; determines the conf file to read.
4114
4115 2000-11-17  James Troup  <james@nocrew.org>
4116
4117         * katie (install): fix where .changes files for proposed-updates
4118         go.
4119
4120 2000-11-04  James Troup  <james@nocrew.org>
4121
4122         * jenna (main): handle architecture properly if no
4123         -a/--architecture argument is given, i.e. reset architecture with
4124         the values for the suite for each suite.
4125
4126         * Add apt_pkg.init() to the start of all scripts as it's now
4127         required by python-apt.
4128
4129 2000-10-29  James Troup  <james@nocrew.org>
4130
4131         * jenna (generate_bin_list): take an additional argument 'type'
4132         and use it in the SELECT.
4133         (main): if processing component 'main', process udebs and debs.
4134
4135         * neve (process_packages): set up 'type' in 'binaries' (by
4136         assuming .deb).
4137
4138         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4139         (check_files): set up files[file]["dbtype"].
4140         (install): use files[file]["dbtype"] to set up the 'type' field in
4141         the 'binaries' table.
4142
4143         * init_pool.sql: add a 'type' field to the 'binaries' table to
4144         distinguisgh between ".udeb" and ".deb" files.
4145
4146         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4147         dest ? dirname(dest)" type check instead.
4148
4149         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4150         in the pool without crashing.  Also handle the case of being asked
4151         to look for something other than an .orig.tar.gz in the pool.
4152
4153 2000-10-26  James Troup  <james@nocrew.org>
4154
4155         * katie (install): fix filenames put into files table during
4156         poolification of legacy source.
4157
4158         * utils.py (move): work around a bug in os.path.basename() which
4159         cunningly returns '' if there is a trailing slash on the path
4160         passed to it.
4161
4162         * katie (check_dsc): Remove more cruft.  If we find the
4163         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4164         location, make a note of that so we can fix things in install().
4165         (install): as above.  Move any old source out of legacy locations
4166         so that 'apt-get source' will work.
4167         (process_it): reset the flag that indicates to install that the
4168         source needs moved.
4169
4170         * cron.daily: more.  Nowhere near complete yet though.
4171
4172         * katie (install): don't run os.makedirs, a) utils.move() does
4173         this now, b) we weren't removing the user's umask and were
4174         creating dirs with SNAFU permissions.
4175         (check_dsc): rewrite the .orig.tar.gz handling to take into
4176         account, err, package pools.  i.e. look anywhere in the pool
4177         rather than faffing around with two simple paths.
4178
4179         * neve (process_sources): add the .dsc to dsc_files too.
4180
4181 2000-10-25  James Troup  <james@nocrew.org>
4182
4183         * neve (process_sources): don't duplicate .orig.tar.gz's.
4184
4185 2000-10-23  James Troup  <james@nocrew.org>
4186
4187         * utils.py (re_extract_src_version): moved here.
4188
4189         * neve: move re_extract_src_version to utils.
4190         (process_packages): reflect change.
4191
4192         * katie (install): reflect change.
4193
4194 2000-10-19  James Troup  <james@nocrew.org>
4195
4196         * jenna (generate_src_list): handle locations with null
4197         components.
4198         (generate_bin_list): likewise.
4199