]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
3ebd7a4903e3a273c3473642ade5336b2161d0f1
[dak.git] / ChangeLog
1 2007-02-08  Anthony Towns  <ajt@debian.org>
2
3         * dak/generate_releases.py (print_sha256_files): new function.
4         (main): use it.
5
6         * dak/process_accepted.py (stable_install): fix name of template
7         mail.
8
9         * dak/process_unchecked.py (is_stableupdate): fix invocation of
10         database.get_suite_id().
11
12         * templates/process-new.bxa_notification: Update on request
13         of/after discussion with BIS staff.
14
15         * scripts/debian/mkfilesindices: also handle proposed-updates.
16
17 2007-02-08  Ryan Murray  <rmurray@debian.org>
18
19         * dak/override.py (main): limit to binary overrides only for now.
20         (usage): update to match.
21
22         * config/debian/cron.daily: track when we have the accepted lock
23         and clean it up on exit if we have it.  Take/check the
24         cron.unchecked lock just before traping to cleanup on exit.
25         Remove potato override handling.  Remove any dangling symlinks in
26         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
27
28         * config/debian/apt.conf: change default compression scheme for
29         both Sources and Packages to gzip and bzip2 rather than
30         uncompressed and gzip (Packages) and gzip (Sources).  Use old
31         defaults for proposed-updates.
32
33         * dak/control_overrides.py (main): refuse to operate on
34         untouchable suites.
35
36         * config/debian/pseudo-packages.maintainers: drop install,
37         installation, boot-floppy, slink-cd, potato-cd and
38         nonus.debian.org.  Update base.
39         * config/debian/pseudo-packages.description: likewise.
40
41         * daklib/utils.py (re_srchasver): new regex.
42         (parse_changes): use regex to split 'Source (Version)' style
43         Source fields into 'source' and 'source-version'.
44
45         * config/debian/cron.daily: use $base instead of hardcoding path
46         name.
47
48         * scripts/debian/mkfilesindices: source 'vars' file and use it's
49         variables instead of hardcoding path names.
50
51         * config/debian/apt.conf: switch from /org to /srv.
52         * config/debian/apt.conf.buildd: likewise.
53         * config/debian/apt.conf.stable: likewise.
54         * config/debian/cron.daily: likewise.
55         * config/debian/cron.hourly: likewise.
56         * config/debian/cron.monthly: likewise.
57         * config/debian/cron.unchecked: likewise.
58         * config/debian/cron.weekly: likewise.
59         * config/debian/dak.conf: likewise.
60         * config/debian/vars: likewise.
61         * scripts/debian/mkfilesindices: likewise.
62         
63 2007-02-08  James Troup  <james@nocrew.org>
64
65         * dak/process_unchecked.py (check_signed_by_key): new function to
66         ensure .changes files are signed by an authorized uploader.
67         (process_it): use it.
68
69         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
70         to configure per suite/component/architecture binary upload
71         restrictions.
72
73 2006-10-09  James Troup  <james.troup@canonical.com>
74
75         * dak/process_unchecked.py (check_timestamps): change match to
76         search as recent versions of python-apt prefix the string with 'E: '.
77
78 2006-06-26  Ryan Murray  <rmurray@debian.org>
79
80         * dak/process_unchecked.py (check_files): strip optional source version
81         from Source: field in changes file, and ensure what is left is a valid
82         package name.
83
84 2006-06-23  Ryan Murray  <rmurray@debian.org>
85
86         * dak/process_unchecked.py (check_files): also check ProposedUpdates
87         queue for source.
88
89 2006-06-18  Ryan Murray  <rmurray@debian.org>
90
91         * dak/scripts/debian/update-ftpstats: look for dak named processes in
92         the log, too.
93
94         * dak/process_unchecked.py (check_files): only check embargoed and
95         unembargoed queues if the keys are set.
96
97         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
98         and bzip2 for etch.
99
100 2006-06-16  James Troup  <james@nocrew.org>
101
102         * dak/dak.py (init): add new-security-install.
103
104         * dak/new_security_install.py: cleanups and adapt for new naming
105         scheme and other changes.
106
107 2006-06-16  Anthony Towns  <ajt@debian.org>
108
109         * dak/new_security_install.py: initial version imported from
110         klecker.
111
112 2006-06-16  James Troup  <james@nocrew.org>
113
114         [Merged changes from klecker - original author unknown.]
115
116         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
117
118         * dak/security_install.py (do_upload): fix check for oldstable and
119         upload file list handling.
120
121         * dak/process_unchecked.py (check_files): update "check for
122         source" code to also look in Embargoed and Unembargoed queues.
123         (is_unembargo): fix handling of Dir::Queue::Disembargo.
124
125         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
126
127         * config/debian-security/vars (disembargo): add.
128
129         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
130         update.
131         (Process-Unchecked::AcceptedLockFile): add.
132         (Suite::Testing): clean up Version and Description.
133         (SuiteMappings): add silent map from etch-secure to testing.
134
135         * config/debian-security/cron.unchecked: add support for
136         disembargoed queues.
137
138         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
139         files too.
140
141         * config/debian-security/apt.conf: add amd64 to architectures for
142         testing-security.
143
144 2006-06-11  James Troup  <troup@spohr.debian.org>
145
146         * config/debian/cron.daily: invoke process-accepted not
147         process-unchecked.
148
149         * config/debian/vars (scriptsdir): new variable.
150         * config/debian/cron.daily: use it.
151
152         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
153         $base/misc/ instead of versioned $masterdir.  Correct 'dak
154         make-maintainers' invocation to look in $configdir for
155         pseudo-packages.maintainers.
156
157         * daklib/queue.py (Upload.do_reject): use correct name for
158         rejection template.
159
160 2006-06-11  James Troup  <james@nocrew.org>
161
162         * dak/override.py (main): temporarily add content of old X-Katie
163         header back as the PTS apparently filters on it.
164         * dak/process_accepted.py (main): likewise.
165         * dak/process_new.py (main): likewise.
166         * dak/process_unchecked.py (main): likewise.
167         * dak/reject_proposed_updates.py (main): likewise.
168         * dak/rm.py (main): likewise.
169         * daklib/queue.py (Upload.do_reject): likewise.
170
171         * config/debian/cron.unchecked: set -u to error out on undefined
172         variables.  Preset LOCKDAILY to "" accordingly.
173         * config/debian/cron.hourly: likewise.
174         * config/debian/cron.monthly: likewise.
175         * config/debian/cron.weekly: likewise.
176
177         * config/debian/vars (configdir): add new variable pointing to
178         this directory.
179
180         * config/debian/cron.daily: use $configdir inplace of $masterdir
181         when that's what we mean, and don't cd into $masterdir just to run
182         dak scripts as we don't need to do that anymore.
183         * config/debian/cron.hourly: likewise.
184         * config/debian/cron.unchecked: likewise.
185         * config/debian/cron.weekly: likewise.
186
187         * config/debian/dak.conf
188         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
189         user back to list of known users as it's non-trivial to entirely
190         change the owner of a database with postgresql 7.4.
191
192         * daklib/queue.py (Upload.source_exists): use string object
193         methods rather than string module.
194         (Upload.get_anyversion): likewise.
195
196         * daklib/utils.py (validate_changes_file_arg): update filename
197         slicing to cope with new .dak filenames.
198
199         * dak/ls.py (main): add back 'heidi' as a valid argument for
200         -f/--format as people are using it in scripts and breaking that
201         without warning seems rude.
202
203 2006-05-21  James Troup  <james@nocrew.org>
204
205         * dak/rm.py (main): use string .isdigit() rather than
206         utils.str_isnum().
207         * dak/process_new.py (edit_overrides): likewise.
208
209         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
210         string import.
211
212 2006-05-21  James Troup  <james@nocrew.org>
213
214         * dak/check_archive.py (check_indices_files_exist): use list
215         comprehension instead of map().  No longer need to import
216         deprecated string module as a side-effect.
217         * dak/check_overrides.py (process): likewise.
218         (main): likewise.
219         * dak/cruft_report.py (do_obsolete_source): likewise.
220         (main): likewise.
221         * dak/ls.py (main): likewise.
222         * dak/make_suite_file_list.py (write_filelists): likewise.
223         * dak/process_accepted.py (stable_install): likewise.
224         * dak/rm.py (main): likewise.
225         * dak/stats.py (number_of_packages): likewise.
226         * daklib/logging.py (Logger.log): likewise.
227         * daklib/queue.py (Upload.source_exists): likewise.
228         (Upload.cross_suite_version_check): likewise.
229         * daklib/utils.py (parse_args): likewise.
230
231 2006-05-21  James Troup  <james@nocrew.org>
232
233         * daklib/utils.py (process_gpgv_output): new function, split out
234         of check_signature().
235         (check_signature): adapt accordingly.
236         (retrieve_key): new function that will try to retrieve the key
237         that signed a given file from a keyserver.
238         (check_signature): add 'autofetch' argument that if not set
239         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
240         If 'autofetch' is true, invoke retrieve_key().  
241
242         * docs/README.config: document Dinstall::KeyAutoFetch and
243         Dinstall:KeyServer.
244
245 2006-05-20  James Troup  <james@nocrew.org>
246
247         * dak/find_null_maintainers.py (main):
248         s/createtimestamp/createTimestamp/ to make things work with modern
249         slapd.
250
251         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
252         Stable::Version and Stable::Description for 3.1r2.
253
254         * config/debian-non-US/dak.conf: sync with klecker - update
255         version number of 3.0 and MoreInfoURL.
256
257         * docs/README.stable-point-release: Add notes about updating
258         dak.conf and Reject-Proposed-Updates section in particular.
259         s/woody/stable/.  Also need to update README.html.
260
261         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
262
263         * config/debian/apt.conf: Add udeb tree for proposed-updates.
264
265 2006-05-20  Ryan Murray  <rmurray@debian.org>
266
267         * scripts/debian/update-ftpstats: new script to update daily
268         architecture size graph data.
269
270         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
271         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
272         there.
273
274         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
275         before we finish.  Don't push to merkel.
276
277         * dak/process_unchecked.py (check_changes): Also look in
278         ProposedUpdates queue dir.
279         (check_files): likewise.
280
281 2006-05-20  Anthony Towns  <ajt@debian.org>
282
283         * scripts/debian/mkfilesindices: new script to generate file
284         indices used for partial mirroring.
285
286         * config/debian/cron.daily: add progress timestamps.
287
288         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
289         amd64 to testing, unstable and experimental.  Drop sh from
290         experimental.  Move Experimental to dists/experimental.  Add
291         Dir::ProposedUpdates.  Add Architectures::amd64.
292
293         * config/debian/apt.conf: add amd64 to testing, unstable and
294         experimental.  Drop uncompressed Packages files from testing. Drop
295         sh from experimental.  Move experimental to dists/experimental/.
296
297         * config/debian/vars (archs): add amd64.
298
299         * dak/process_unchecked.py (action): Add support for
300         proposed-updates approval queue.
301         (is_stableupdate): new function - checks if the upload is targeted
302         at proposed-updates.
303         (do_stableupdate): likewise - moves upload to proposed-updates
304         holding area.
305
306         * dak/process_new.py (do_new): warn if original or new target
307         suite are invalid.
308
309         * dak/generate_releases.py (print_md5sha_files): less whitespace
310         between the hash and size.
311
312         * dak/generate_index_diffs.py (genchanges): don't say we're not
313         doing anything.  Better formatting of other messages.
314         (main): don't skip experimental and remove some 'doing stuff'
315         prints.
316
317 2006-05-18  James Troup  <james@nocrew.org>
318
319         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
320         query.
321
322         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
323         docstrings, untabify, don't shadow builtins, lowercase non-global
324         variable names, spaces after commas.  Also bail if given any
325         arguments since we don't accept any.
326         * dak/init_db.py: likewise.  Also split large main() into
327         subfunctions and rename get() to sql_get().
328
329         * dak/init_db.py (main): check returned value from
330         database.get_archive_id().
331
332         * dak/dak.py: renamed from shell.py.  Update to support new source
333         layout.  Created init() and usage() functions.  Various
334         pylint-inspired cleanups.  Use daklib utils.warn() and
335         utils.fubar().  Change 'functionality' variable to only have
336         (command, description) and always invoke main() when running the
337         module.  Also support -h.
338
339 2006-05-17  James Troup  <james@nocrew.org>
340
341         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
342         imports of and calls to daklib modules.  Change script name
343         everywhere, i.e. in output, mails, comments and configuration tree
344         + filenames.  Also update references to other renamed scripts,
345         classes and templates.  Use '.dak' instead of '.katie' for the
346         queue info storage files.
347         (Renamed from tea)
348         * dak/check_overrides.py: likewise.  (Renamed from cindy)
349         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
350         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
351         * dak/clean_queues.py: likewise.  (Renamed from shania)
352         * dak/clean_suites.py: likewise.  (Renamed from rhona)
353         * dak/compare_suites.py: likewise.  (Renamed from andrea)
354         * dak/control_overrides.py: likewise.  (Renamed from natalie)
355         * dak/control_suite.py: likewise.  (Renamed from heidi)
356         * dak/cruft_report.py: likewise.  (Renamed from rene)
357         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
358         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
359         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
360         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
361         * dak/import_archive.py: likewise.  (Renamed from neve)
362         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
363         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
364         * dak/init_db.py: likewise. (Renamed from alyson)
365         * dak/init_dirs.py: likewise. (Renamed from rose)
366         * dak/ls.py: likewise. (Renamed from madison)
367         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
368         * dak/make_overrides.py: likewise.  (Renamed from denise)
369         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
370         * dak/mirror_split.py: likewise.  (Renamed from billie)
371         * dak/override.py: likewise.  (Renamed from alicia)
372         * dak/poolize.py: likewise.  (Renamed from catherine)
373         * dak/process_accepted.py: likewise.  (Renamed from kelly)
374         * dak/process_new.py: likewise.  (Renamed from lisa)
375         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
376         * dak/queue_report.py: likewise.  (Renamed from helena)
377         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
378         * dak/rm.py: likewise.  (Renamed from melanie)
379         * dak/security_install.py: likewise.  (Renamed from amber)
380         * dak/split_done.py: likewise.  (Renamed from nina)
381         * dak/stats.py: likewise.  (Renamed from saffron)
382         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
383         * daklib/database.py: likewise.  (Renamed from db_access)
384         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
385         * daklib/utils.py: likewise.
386
387         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
388         doesn't need to notify anyone" string.
389         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
390
391         * dak/process_accepted.py (init): drop -V/--version argument.
392         * dak/process_new.py (init): likewise.
393         * dak/process_unchecked.py (init): likewise.
394         * dak/reject_proposed_updates.py (init): likewise
395
396         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
397
398         * dak/stats.py: in usage() output change STAT to MODE.
399
400 2006-05-15  James Troup  <james@nocrew.org>
401
402         * dak/queue_report.py: remove unused encodings imports.
403
404         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
405         imports.  Initalize 'Cnf' as a global.
406         (BillieDB._internal_recurse): fix 'util.' typo.
407
408         * dak/import_ldap_fingerprints.py (main): drop unused time import and
409         commented out time check for LDAP search.
410
411 2005-12-16  Ryan Murray  <rmurray@debian.org>
412
413         * halle: add support for udebs
414         * kelly: stable_install: add support for binNMU versions
415
416 2005-12-05  Anthony Towns  <aj@erisian.com.au>
417
418         * katie.py: Move accept() autobuilding support into separate function 
419         (queue_build), and generalise to build different queues
420
421         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
422
423         * jennifer: Initial support for enabling embargo handling with the
424         Dinstall::SecurityQueueHandling option.
425         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
426         functions.
427
428         * katie.conf-security: Include embargo options
429         * katie.conf-security: Add Lock dir
430         * init_pool.sql-security: Create disembargo table
431         * init_pool.sql-security: Add constraints for disembargo table
432
433 2005-11-26  Anthony Towns  <aj@erisian.com.au>
434
435         * Merge of changes from klecker, by various people
436
437         * amber: special casing for not passing on amd64 and oldstable updates
438         * amber: security mirror triggering
439         * templates/amber.advisory: updated advisory structure
440         * apt.conf.buildd-security: update for sarge's release
441         * apt.conf-security: update for sarge's release
442         * cron.buildd-security: generalise suite support, update for sarge's release
443         * cron.daily-security: update for sarge's release, add udeb support
444         * vars-security: update for sarge's release
445         * katie.conf-security: update for sarge's release, add amd64 support,
446         update signing key
447
448         * docs/README.names, docs/README.quotes: include the additions
449
450 2005-11-25  Anthony Towns  <aj@erisian.com.au>
451
452         * Changed accepted_autobuild to queue_build everywhere.
453         * Add a queue table.
454         * Add a "queue" field in the queue_build table (currently always 0)
455
456         * jennifer: Restructure to make it easier to support special
457         purpose queues between unchecked and accepted.
458
459 2005-11-25  Anthony Towns  <aj@erisian.com.au>
460
461         * Finishing merge of changes from spohr, by various people still
462
463         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
464         works
465         * jennifer: Re-enable .deb ar format checking
466         * katie.py: Convert to +bX binNMU special casing
467         * rhona: Add some debug output when deleting binaries
468         * cron.daily: Add emilie
469         * cron.unchecked: Add lock files
470
471 2005-11-15  Anthony Towns  <aj@erisian.com.au>
472
473         * Merge of changes from spohr, by various people.
474
475         * tiffani: new script to do patches to Packages, Sources and Contents
476         files for quicker downloads.
477         * ziyi: update to authenticate tiffani generated files
478
479         * dak: new script to provide a single binary with less arbitrary names
480         for access to dak functionality.
481
482         * cindy: script implemented
483
484         * saffron: cope with suites that don't have a Priority specified
485         * heidi: use get_suite_id()
486         * denise: don't hardcode stable and unstable, or limit udebs to unstable
487         * denise: remove override munging for testing (now done by cindy)
488         * helena: expanded help, added new, sort and age options, and fancy headers
489         * jennifer: require description, add a reject for missing dsc file
490         * jennifer: change lock file
491         * kelly: propogation support
492         * lisa: honour accepted lock, use mtime not ctime, add override type_id
493         * madison: don't say "dep-retry"
494         * melanie: bug fix in output (missing %)
495         * natalie: cope with maintainer_override == None; add type_id for overrides
496         * nina: use mtime, not ctime
497
498         * katie.py: propogation bug fixes
499         * logging.py: add debugging support, use | as the logfile separator
500
501         * katie.conf: updated signing key (4F368D5D)
502         * katie.conf: changed lockfile to dinstall.lock
503         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
504         * katie.conf: added tiffani, cindy support
505         * katie.conf: updated to match 3.0r6 release
506         * katie.conf: updated to match sarge's release
507
508         * apt.conf: update for sarge's release
509         * apt.conf.stable: update for sarge's release
510         * apt.conf: bump daily max Contents change to 25MB from 12MB
511
512         * cron.daily: add accepted lock and invoke cindy  
513         * cron.daily: add daily.lock
514         * cron.daily: invoke tiffani
515         * cron.daily: rebuild accepted buildd stuff
516         * cron.daily: save rene-daily output on the web site
517         * cron.daily: disable billie
518         * cron.daily: add stats pr0n
519
520         * cron.hourly: invoke helena
521
522         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
523         * vars: add lockdir, add etch to copyoverrides
524         * Makefile: add -Ipostgresql/server to CXXFLAGS
525
526         * docs/: added README.quotes
527         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
528         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
529
530         * TODO: correct spelling of "conflicts"
531
532 2005-05-28  James Troup  <james@nocrew.org>
533
534         * helena (process_changes_files): use MTIME rather than CTIME (the
535         C's not for 'creation', stupid).
536         * lisa (sort_changes): likewise.
537
538         * jennifer (check_distributions): use has_key rather than an 'in'
539         test which doesn't work with python2.1.  [Probably by AJ]
540
541 2005-03-19  James Troup  <james@nocrew.org>
542
543         * rene (main): use Suite::<suite>::UdebComponents to determine
544         what components have udebs rather than assuming only 'main' does.
545
546 2005-03-18  James Troup  <james@nocrew.org>
547
548         * utils.py (rfc2047_encode): use codecs.lookup() rather than
549         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
550         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
551         <andrew@ubuntu.com>.
552
553 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
554
555         * helena: add -n/--new HTML output option and improved sorting
556         options.
557
558 2005-03-06  Ryan Murray  <rmurray@debian.org>
559
560         * shania(main): use Cnf::Dir::Reject instead of REJECT
561
562 2005-02-08  James Troup  <james@nocrew.org>
563
564         * rene (main): add partial NBS support by checking that binary
565         packages are built by their real parent and not some random
566         stranger.
567         (do_partial_nbs): likewise.
568
569 2005-01-18  James Troup  <james@nocrew.org>
570
571         * katie.py (Katie.build_summaries): avoid leaking file handle when
572         extracting package description.
573         (Katie.force_reject): remember and close each file descriptor we
574         use.
575         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
576         s/reason_file/reason_fd/ because it's a file descriptor.
577         (Katie.check_dsc_against_db): avoid leaking file handle whenever
578         invoking apt_pkg.md5sum().
579
580         * jennifer (check_deb_ar): new function: sanity check the ar
581         contents of a .deb.
582         (check_files): use it.
583         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
584         found.
585         (check_files): accept 'raw-installer' as an alias for 'byhand'.
586
587 2005-01-14  Anthony Towns  <ajt@debian.org>
588
589         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
590
591         * propup stuff (thanks to Andreas Barth)
592         * katie.conf: add stable MustBeOlderThan testing, add -security
593           propup
594         * jennifer: set distribution-version in .katie if propup may be needed
595         * katie.py: add propogation to cross_suite_version_check
596
597 2004-11-27  James Troup  <james@nocrew.org>
598
599         * nina: new script to split monolithic queue/done into date-based
600         hierarchy.
601
602         * rene (usage): document -s/--suite.
603         (add_nbs): use .setdefault().
604         (do_anais): likewise.
605         (do_nbs): don't set a string to "" and then += it.
606         (do_obsolete_source): new function - looks for obsolete source
607         packages (i.e source packages whose binary packages are ALL a)
608         claimed by someone else and b) newer when built from the other
609         source package).
610         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
611         and 'full' check modes.  Check for obsolete source packages.
612         linux-wlan-ng has been fixed - remove hideous bodge.
613
614         * jennifer (check_distributions): support 'reject' suite map type.
615
616         * utils.py (validate_changes_file_arg): s/file/filename/.
617         s/fatal/require_changes/.  If require_changes is -1, ignore errors
618         and return the .changes filename regardless.
619         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
620         (re_no_revision): don't escape '-', it's not a special character.
621         s/\*/+/ as there must be at least one non-dash character after the
622         dash in a revision.  Thanks to Christian Reis for noticing both of
623         these.
624
625         * ashley (main): pass require_changes=-1 to
626         utils.validate_changes_file_arg().
627
628         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
629         Team <debian-kernel@lists.debian.org>'.
630
631         * katie.py (Katie.in_override_p): fix .startswith() usage.
632
633         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
634         (Lauren::MoreInfoURL): update to 3.0r3.
635         (Suite::Stable::Version): likewise.
636         (Suite::Stable::Description): likewise.
637
638         * cron.daily: disable automatic task override generation.
639
640         * cindy (process): restrict "find all packages" queries by
641         component.  Respect Options["No-Action"].
642         (main): add -n/--no-action support.  Only run on unstable.  Rename
643         type to otype (pychecker).
644
645 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
646
647         * katie.conf (Billie::BasicTrees): add all architectures.
648         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
649         'everything'.
650
651         * cron.daily: Update a 'current' symlink when creating the
652         post-daily-cron-job database backup to aid mirroring to merkel.
653         Run billie.
654
655         * billie (BillieTarget.poolish_match): handle .udeb too.
656
657 2004-10-13  Ryan Murray  <rmurray@debian.org>
658
659         * amber (do_upload): Sort changes files in "katie" order so that
660           source always arrives before binary-only rebuilds
661         
662 2004-10-05  James Troup  <james@nocrew.org>
663
664         * jennifer (check_dsc): correct reject message on invalid
665         Maintainer field.
666
667 2004-09-20  James Troup  <james@nocrew.org>
668
669         * alicia: remove unused 'pwd' import.
670
671         * tea (check_override): underline suite name in output properly.
672
673         * rene (main): read a compressed Packages file.
674         * tea (validate_packages): likewise.
675
676         * katie.py (re_fdnic): add 'r' prefix.
677         (re_bin_only_nmu_of_mu): likewise.
678         (re_bin_only_nmu_of_nmu): likewise.
679
680         * madison (main): retrieve component information too and display
681         it if it's not 'main'.
682         * melanie (reverse_depends_check): likewise.
683
684         * utils.py (pp_dep): renamed...
685         (pp_deps): ... to this.
686         * jeri (check_dep): update calls to utils.pp_deps().
687         * melanie (reverse_depends_check): likewise.
688
689         * jennifer (check_changes): move initalization of email variables
690         from here...
691         (process_it): ...to here as we no longer always run
692         check_changes().  Don't bother to initialize
693         changes["architecture"].
694
695         * denise (list): renamed to...
696         (do_list): ...this to avoid name clash with builtin 'list'.
697         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
698         for dictionaries.
699         (main): Likewise for name clash avoidance and also
700         s/override_type/suffix/.  Adjust call to do_list().
701
702 2004-09-01  Ryan Murray  <rmurray@debian.org>
703
704         * tea (check_files): check the pool/ directory instead of dists/
705
706 2004-08-04  James Troup  <james@nocrew.org>
707
708         * jenna (cleanup): use .setdefault() for dictionaries.
709         (write_filelists): likewise.
710
711         (write_filelists): Use utils.split_args() not split() to split
712         command line arguments.
713         (stable_dislocation_p): likewise.
714
715         (write_filelists): Add support for mapping side of suite-based
716         "Arch: all mapping".
717         (do_da_do_da): ensure that if we're not doing all suites that we
718         process enough to be able correct map arch: all packages.
719
720         * utils.py (cant_open_exc): correct exception string,
721         s/read/open/, s/.$//.
722
723         * templates/amber.advisory: update to match reality a little
724         better.
725
726         * melanie (reverse_depends_check): read Packages.gz rather than
727         Packages.
728
729         * jennifer (check_files): check for unknown component before
730         checking for NEWness.
731
732         * katie.py (Katie.in_override_p): use .startswith in favour of a
733         slice.
734
735         * docs/melanie.1.sgml: document -R/--rdep-check.
736
737 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
738
739         * billie (main): Make the verbatim lists include all the README
740           elements.
741         * docs/README.names: Add billie in (correcting oversight)
742
743 2004-07-01  James Troup  <james@nocrew.org>
744
745         * emilie (main): handle woody's case-sensitive python-ldap,
746         s/keyfingerprint/keyFingerPrint/.
747
748 2004-06-25  James Troup  <james@nocrew.org>
749
750         * debian/control (Depends): add dpkg-dev since jennifer uses
751         dpkg-source.
752
753 2004-06-24  James Troup  <james@nocrew.org>
754
755         * melanie (main): s/file/temp_file/ and close file handle before
756         removing the temporary file.
757         (main): don't warn about needing a --carbon-copy if in no-action
758         mode.
759
760         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
761         (main): likewise.
762
763         * test/006/test.py (main): check bracketed email-only form.
764
765         * utils.py (fix_maintainer): if the Maintainer string is bracketed
766         email-only, strip the brackets so we don't end up with
767         <<james@nocrew.org>>.
768
769 2004-06-20  James Troup  <james@nocrew.org>
770
771         * jennifer (process_it): only run check_changes() if
772         check_signature() returns something.  (Likewise)
773
774         * utils.py (changes_compare): if there's no changes["version"] use
775         "0" rather than None.  (Avoids a crash on unsigned changes file.)
776
777 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
778
779         * jeri (pp_dep): moved from here to ...
780         * utils.py (pp_dep): here.
781
782         * melanie (main): add reverse dependency checking.
783
784 2004-06-17  James Troup  <james@nocrew.org>
785
786         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
787         * tea (check_dscs): likewise.
788
789         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
790         change from boolean to a variable with 3 possible values, 0 and 1
791         as before, -1 means don't require a signature.  Makes
792         parse_changes() useful for parsing arbitary RFC822-style files,
793         e.g. 'Release' files.
794         (check_signature): add support for detached signatures by passing
795         the files the signature is for as an optional third argument.
796         s/filename/sig_filename/g.  Add a fourth optional argument to
797         choose the keyring(s) to use.  Don't os.path.basename() the
798         sig_filename before checking it for taint.
799         (re_taint_free): allow '/'.
800
801 2004-06-11  James Troup  <james@nocrew.org>
802
803         * tea (check_files): make override.unreadable optional.
804         (validate_sources): close the Sources file handle.
805
806         * docs/README.first: clarify that 'alyson' and running
807         add_constraints.sql by hand is something you only want to do if
808         you're not running 'neve'.
809
810         * docs/README.config (Location::$LOCATION::Suites): document.
811
812         * db_access.py (do_query): also print out the result of the query.
813
814 2004-06-10  James Troup  <james@nocrew.org>
815
816         * katie.py (Katie.cross_suite_version_check): post-woody versions
817         of python-apt's apt_pkg.VersionCompare() function apparently
818         returns variable integers for less than or greater than results -
819         update our result checking to match.
820         * jenna (resolve_arch_all_vs_any): likewise.
821         * charisma (main): likewise.
822
823 2004-06-09  James Troup  <james@nocrew.org>
824
825         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
826         valid_dsc_p and don't run check_source() if check_dsc() failed.
827         (check_dsc): on fatal failures return 0 so check_source() isn't
828         run (since it makes fatal assumptions about the presence of
829         mandatory .dsc fields).  
830         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
831
832 2004-05-07  James Troup  <james@nocrew.org>
833
834         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
835         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
836
837         * katie.conf (Dir::Override): remove duplicate definition.
838
839         * neve (get_or_set_files_id): add an always-NULL last_used column
840         to output.
841
842 2004-04-27  James Troup  <james@nocrew.org>
843
844         * apt.conf-security (tree "dists/stable/updates"): add
845         ExtraOverride - noticed by Joey Hess (#246050).
846         (tree "dists/testing/updates"): likewise.
847
848 2004-04-20  James Troup  <james@nocrew.org>
849
850         * jennifer (check_files): check for existing .changes or .katie
851         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
852         directories.
853
854 2004-04-19  James Troup  <james@nocrew.org>
855
856         * jennifer (check_source): handle failure to remove the temporary
857          directory (used for source tree extraction) better, specifically:
858          if we fail with -EACCES, chmod -R u+rwx the temporary directory
859          and try again and if that works, REJECT the package.
860
861 2004-04-17  James Troup  <james@nocrew.org>
862
863         * docs/madison.1.sgml: document -b/--binary-type,
864         -g/--greaterorequal and -G/--greaterthan.
865
866         * madison (usage): -b/--binary-type only takes a single argument.
867         Document -g/--greaterorequal and -G/--greaterthan.
868         (main): add support for -g/--greaterorequal and -G/--greaterthan.
869
870 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
871
872         * billie: Cleaned up a load of comments, added /README.non-US to
873           the verbatim matches list.
874
875 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
876
877         * utils.py (size_type): Make it use real binary megabytes and
878           kilobytes, instead of the marketing terms used before.
879
880 2004-04-07  James Troup  <james@nocrew.org>
881
882         * katie.py (Katie.check_dsc_against_db): in the case we're
883         ignoring an identical-to-existing orig.tar.gz remember the path to
884         the existent version in pkg.orig_tar_gz.  Adjust query to grab
885         location.path too to be able to do so.
886
887 2004-04-03  James Troup  <james@nocrew.org>
888
889         * debian/control (Depends): add python2.1-email | python (>= 2.2)
890         needed for new utils.rfc2047_encode() function.
891
892         * utils.py (re_parse_maintainer): allow whitespace inside the
893         email address.
894         (Error): new exception base class.
895         (ParseMaintError): new exception class.
896         (force_to_utf8): new function.
897         (rfc2047_encode): likewise.
898         (fix_maintainer): rework.  use force_to_utf8() to force name and
899         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
900         return an rfc2047 value.  Validate the address to catch missing
901         email addresses and (some) broken ones.
902
903         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
904         by adopting foo2047 return value.
905         (Katie.dump_vars): add changedby2047 and maintainer2047 as
906         mandatory changes fields.  Promote changes and maintainer822 to
907         mandatory fields.
908         (Katie.update_subst): default maintainer2047 rather than
909         maintainer822.  User foo2047 rather than foo822 when setting
910         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
911
912         * jennifer (check_changes): set default changes["maintainer2047"]
913         and changes["changedby2047"] values rather than their 822
914         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
915         to new utils.fix_maintainer() - reject on exception and adopt
916         foo2047 return value.
917         (check_dsc): if a mandatory field is missing don't do any further
918         checks and as a result reduce paranoia about dsc[var] existence.
919         Validate the maintainer field by calling new
920         utils.fix_maintainer().
921
922         * ashley (main): add changedby2047 and maintainer2047 to mandatory
923         changes fields.  Promote maintainer822 to a mandatory changes
924         field.  add "pool name" to files fields.
925
926         * test/006/test.py: new file - tests for new
927         utils.fix_maintainer().
928
929 2004-04-01  James Troup  <james@nocrew.org>
930
931         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
932
933         * jennifer (get_changelog_versions): create a symlink mirror of
934         the source files in the temporary directory.
935         (check_source): if check_dsc_against_db() couldn't find the
936         orig.tar.gz bail out.
937
938         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
939         part of the upload store the path to it in pkg.orig_tar_gz and if
940         it can't be found set pkg.orig_tar_gz to -1.
941
942         Explicitly return the second value as None in the (usual) case
943         where we don't have to reprocess.  Remove obsolete diagnostic
944         logs.
945
946         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
947
948         * utils.py (temp_filename): new helper function that wraps around
949         tempfile.mktemp().
950
951         * katie.py (Katie.do_reject): use it and don't import tempfile.
952         * lisa (prod_maintainer): likewise.
953         (edit_note): likewise.
954         (edit_new): likewise.
955         * lauren (reject): likewise.
956         * melanie (main): likewise.
957         * neve (do_sources): likewise.
958         * rene (main): likewise.
959         * tea (validate_sources): likewise.
960
961 2004-03-31  James Troup  <james@nocrew.org>
962
963         * tea (validate_sources): remove unused 's' temporary variable.
964
965 2004-03-15  James Troup  <james@nocrew.org>
966
967         * jennifer (check_dsc): check changes["architecture"] for
968         source before we do anything else.
969
970 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
971
972         * billie: Added
973         * katie.conf (Billie): Added sample Billie stanza to katie.conf
974
975 2004-03-12  James Troup  <james@nocrew.org>
976
977         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
978
979         * katie.conf (Dir::Queue::BTSVersionTrack): define.
980
981         * katie.py (Katie.accept): add support for DebBugs Version
982         Tracking by writing out .versions (generated in jennifer's
983         get_changelog_versions()) and .debinfo (mapping of binary ->
984         source) files.
985
986         * ashley (main): add dsc["bts changelog"].
987
988         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
989
990         * jennifer (check_diff): obsoleted by check_source(), removed.
991         (check_source): new function: create a temporary directory and
992         move into it and call get_changelog_versions().
993         (get_changelog_versions): new function: extract the source package
994         and optionally parse debian/changelog to obtain the version
995         history for the BTS.
996         (process_it): call check_source() rather than check_diff().
997
998 2004-03-08  James Troup  <james@nocrew.org>
999
1000         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1001         listbar" rather than "if listbar.count(varfoo)"' change on
1002         2004-02-24.
1003
1004 2004-03-05  James Troup  <james@nocrew.org>
1005
1006         * alicia (main): don't warn about not closing bugs - we don't
1007         manage overrides through the BTS.
1008
1009 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1010
1011         * docs/README.config: lots of updates and corrections.
1012         * docs/README.first: likewise.
1013
1014         * docs/README.config: drop unused Dir::Queue::Root.
1015         * katie.conf-non-US: likewise.
1016         * katie.conf: likewise.
1017         * katie.conf-security: likewise.
1018
1019 2004-02-27  James Troup  <james@nocrew.org>
1020
1021         * rose (process_tree): use 'if var in [ list ]' rather than long
1022         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1023         Michlmayr.
1024
1025         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1026         suggested by Martin Michlmayr.
1027         * catherine (poolize): likewise.
1028         * charisma (main): likewise.
1029         * halle (check_changes): likewise.
1030         * heidi (main): likewise.
1031         (process_file): likewise.
1032         * kelly (install): likewise.
1033         (stable_install): likewise.
1034         * utils.py (fix_maintainer): likewise.
1035
1036         * apt.conf: add support for debian-installer in testing-proposed-updates.
1037         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1038         add - set to main.
1039
1040         * mkmaintainers: add "-T15" option to wget of non-US packages file
1041         so that we don't hang cron.daily if non-US is down.
1042
1043         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1044
1045         * templates/jennifer.bug-close: add Source and Source-Version
1046         pseudo-headers that may be used for BTS Version Tracking someday
1047         [ajt@].
1048
1049         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1050         (main): likewise.
1051
1052         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1053
1054 2004-02-25  James Troup  <james@nocrew.org>
1055
1056         * katie.conf (SuiteMappings): don't map testing-security to
1057         proposed-updates.
1058
1059 2004-02-24  James Troup  <james@nocrew.org>
1060
1061         * katie.py (Katie.__init__): remove unused 'values' field.
1062
1063         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1064         rather than 's.count(c) > 0'.
1065
1066         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1067         rather than "if listbar.count(varfoo)".
1068         * halle (check_joey): likewise.
1069         * jeri (check_joey): likewise.
1070         * lisa (edit_index): likewise.
1071         * jenna (stable_dislocation_p): likewise.
1072
1073         * jennifer (main): remove unused global 'nmu'.
1074
1075 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1076
1077         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1078           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1079           the dak tools close bugs.
1080
1081 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1082
1083         * katie.conf (Alicia): Added an Alicia section with email address
1084         * templates/alicia.bug-close: Added
1085         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1086         * alicia (main): Added a -d/--done argument
1087
1088 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1089
1090         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1091
1092 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1093
1094         * lisa (prod_maintainer): Added function to prod the maintainer without
1095           accepting or rejecting the package
1096         * templates/lisa.prod: Added this template for the prodding mail
1097
1098         * .cvsignore: Added neve-files which turns up in new installations
1099
1100 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1101
1102         * alicia (usage): Fixed usage message to offer section and priority
1103           as seperately optional arguments.
1104         * alicia (main): Added a % (arg) interpolation needed when only
1105           one of section or priority is provided and it cannot be found.
1106
1107 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1108
1109         * alicia: Added
1110         * docs/alicia.1.sgml: Added
1111         * docs/Makefile: Added alicia to the list of manpages to build
1112         * docs/README.names: Noted what alicia does
1113         * docs/README.first: Noted where alicia is useful
1114
1115 2004-01-21  James Troup  <james@nocrew.org>
1116
1117         * madison (main): add -b/--binary-type.
1118         (usage): likewise.
1119
1120         * denise (main): generate debian-installer overrides for testing
1121         too.
1122         * apt.conf: add support for debian-installer in testing.
1123         * katie.conf (Suite::Testing::UdebComponents): set to main.
1124
1125         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1126         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1127         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1128
1129         * utils.py (parse_changes): don't process data not inside the
1130         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1131         pointing this out.
1132         * test/005/test.py (main): new test to test for above.
1133
1134 2004-01-04  James Troup  <james@nocrew.org>
1135
1136         * jenna (write_filelists): correct typo, s/Components/Component/
1137         for Options.
1138
1139 2004-01-04  Ryan Murray  <rmurray@debian.org>
1140
1141         * cron.buildd: move update of overrides and Packages file...
1142         * cron.unchecked: to here.
1143         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1144         * katie.conf-security: likewise
1145
1146 2003-11-20  James Troup  <james@nocrew.org>
1147
1148         * jenna (main): don't use utils.try_with_debug(), it produces way
1149         too much output.
1150
1151         * halle (check_changes): don't error out if a .changes refers to a
1152         non-existent package, just warn and skip the file.
1153
1154         * docs/README.stable-point-release: mention halle and .changes
1155         obsoleted by removal through melanie.  Update for 3.0r2.
1156
1157         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1158         (Suite::Stable::Description): update for 3.0r2.
1159         (Lauren::MoreInfoURL): likewise.
1160         * katie.conf-non-US (Suite::Stable::Version): likewise.
1161         (Suite::Stable::Description): likewise.
1162         (Lauren::MoreInfoURL): likewise.
1163
1164         * apt.conf.stable (Default): don't define MaxContentsChange.
1165         * apt.conf.stable-non-US (Default): likewise.
1166
1167         * lauren (reject): hack to work around partial replacement of an
1168         upload, i.e. one or more binaries superseded by another source
1169         package.
1170
1171 2003-11-17  James Troup  <james@nocrew.org>
1172
1173         * pseudo-packages.maintainers: point installation-reports at
1174         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1175         request.
1176
1177         * utils.py (parse_changes): calculate the number of lines once
1178         with len() rather than max().
1179
1180         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1181         files, since check_dsc_against_db() deletes the .orig.tar.gz
1182         entry.
1183
1184 2003-11-13  Ryan Murray  <rmurray@debian.org>
1185
1186         * apt.conf: specify a src override file for debian-installer
1187
1188 2003-11-10  James Troup  <james@nocrew.org>
1189
1190         * fernanda.py (strip_pgp_signature): new function - strips PGP
1191         signature from a file and returns the modified contents of the
1192         file in a string.
1193         (display_changes): use it.
1194         (read_dsc): likewise.
1195
1196 2003-11-09  Ryan Murray  <rmurray@debian.org>
1197
1198         * cron.buildd: export accepted_autobuild table for unstable, and use
1199         it to generate the incoming Packages/Sources rather than having apt
1200         walk the directory.
1201         * apt.conf.buildd: use exported table from cron.buildd to generate
1202         Packages/Sources
1203
1204 2003-11-07  James Troup  <james@nocrew.org>
1205
1206         * kelly: import errno.
1207
1208         * katie.py (Katie.build_summaries): sort override disparities.
1209
1210         * kelly (install): set dsc_component based on the .dsc's component
1211         not a random binaries.
1212
1213 2003-10-29  James Troup  <james@nocrew.org>
1214
1215         * katie.py (Katie.build_summaries): don't assume changes["source"]
1216         exists since it might not.
1217
1218 2003-10-20  James Troup  <james@nocrew.org>
1219
1220         * pseudo-packages.maintainers: update security.d.o to use
1221         team@s.d.o at joy@'s request.
1222
1223 2003-10-17  James Troup  <james@nocrew.org>
1224
1225         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1226
1227 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1228
1229         * tea (chk_bd_process_dir): use .endswith rather than slice.
1230
1231 2003-10-14  James Troup  <james@nocrew.org>
1232
1233         * tea (check_build_depends): new function.
1234         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1235         in the archive.
1236         (main): update for new function.
1237         (usage): likewise.
1238
1239         * katie.py (Katie.do_reject): sanitize variable names,
1240         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1241         os.close() to outside if clause.
1242
1243         * jennifer (check_dsc): check build-depends and
1244         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1245         Fold the ARRAY check into the same code block and tidy up it's
1246         rejection message.
1247         (check_changes): ensure that the Files field is non-empty.
1248         Suggested by Santiago Vila <sanvila@unex.es>
1249         (check_changes): normalize reject messages.
1250         (check_dsc): instead of doing most of the checks inside a for loop
1251         and an if, find the dsc_filename in a short loop over files first
1252         and then do all the checks.  Add check for more than one .dsc in a
1253         .changes which we can't handle.  Normalize reject messages.
1254
1255 2003-10-13  James Troup  <james@nocrew.org>
1256
1257         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1258         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1259
1260         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1261         variables while iterating over 'files'.  Don't regenerate it when
1262         checking for source if source is mentioned.
1263
1264         Reject source only uploads if the config variable
1265         Dinstall::Reject::NoSourceOnly is set.
1266
1267 2003-10-03  James Troup  <james@nocrew.org>
1268
1269         * rene (main): add nasty hardcoded reference to debian-installer
1270         so we detect NBS .udebs.
1271
1272 2003-09-29  James Troup  <james@nocrew.org>
1273
1274         * apt.conf (old-proposed-updates): remove.
1275         * apt.conf-non-US (old-proposed-updates): likewise.
1276
1277 2003-09-24  James Troup  <james@nocrew.org>
1278
1279         * tea (check_files_not_symlinks): new function, ensure files
1280         mentioned in the database aren't symlinks.  Includes code to
1281         update any files that are like this to their real filenames +
1282         location; commented out by though.
1283         (usage): update for new function.
1284         (main): likewise.
1285
1286 2003-09-24  Anthony Towns  <ajt@debian.org>
1287
1288         * vars: external-overrides variable added
1289         * cron.daily: Update testing/unstable Task: overrides from joeyh
1290         managed external source.
1291
1292 2003-09-22  James Troup  <james@nocrew.org>
1293
1294         * kelly (install): if we can't move the .changes into queue/done,
1295         fail don't warn and carry on.  The old behaviour pre-dates NI and
1296         doesn't make much sense now since jennifer checks both
1297         queue/accepted and queue/done for any .changes files it's
1298         processing.
1299
1300         * utils.py (move): don't throw exceptions on existing files or
1301         can't overwrite, instead just fubar out.
1302
1303         * jennifer (check_dsc): also check Build-Depends-Indep for
1304         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1305
1306 2003-09-18  James Troup  <james@nocrew.org>
1307
1308         * katie.py (Katie.close_bugs): only log the bugs we've closed
1309         once.
1310
1311         * kelly (main): log as 'kelly', not 'katie'.
1312
1313 2003-09-16  James Troup  <james@nocrew.org>
1314
1315         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1316
1317         * jennifer (check_changes): normalize reject message for "changes
1318         file already exists" to be %s: <foo>.
1319         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1320         produced by broken dpkg-source in 1.10.11.  Tone down and
1321         normalize rejection message for incompatible 'Format' version
1322         numbers.
1323         (check_diff): likewise tone down and normalize.
1324
1325 2003-09-07  James Troup  <james@nocrew.org>
1326
1327         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1328         don't bomb out on bogus empty lines.
1329         (build_file_list): check for changes["files"] earlier.  use Dict
1330         to create files[name] dictionary.
1331         (send_mail): don't bother validating arguments.
1332         (check_signature): minor improvements to some of the rejection
1333         messages including listing the key id of the key that wasn't found
1334         in the keyring.
1335         (wrap): new function.
1336
1337         * tea: add new check 'validate-indices' that ensures all files
1338         mentioned in indices (Packages, Sources) files do in fact exist.
1339
1340         * catherine (poolize): use a local re_isadeb which handles legacy
1341         (i.e. no architecture) style .deb filenames.
1342
1343         * rosamund: new script.
1344
1345         * rhona (check_binaries): when checking for binary packages not in
1346         a suite, don't bother selecting files that already have a
1347         last_used date.
1348         (check_sources): likewise.
1349
1350         * rhona: change all SQL EXISTS sub-query clauses to use the
1351         postgres suggested convention of "SELECT 1 FROM".
1352         * andrea (main): likewise.
1353         * tea (check_override): likewise.
1354         * catherine (main): likewise.
1355
1356         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1357         entries and in other suites MustBeNewerThan's.
1358         (SuiteMappings): likewise
1359         * katie.conf-non-US: likewise.
1360         * katie.conf-security: likewise.
1361
1362         * apt.conf-security: remove oldstable.
1363         * apt.conf.stable: likewise.
1364         * apt.conf.stable-non-US: likewise.
1365         * cron.buildd-security: likewise.
1366         * cron.daily-security: likewise.
1367         * vars-security (suites): likewise.
1368         * wanna-build/trigger.daily: likewise.
1369
1370         * claire.py (clean_symlink): move...
1371         * utils.py (clean_symlink): here.
1372
1373         * claire.py (find_dislocated_stable): update accordingly.
1374
1375 2003-08-16  Anthony Towns  <ajt@debian.org>
1376
1377         * katie.py (source_exists): expand the list of distributions
1378         the source may exist in to include any suite that's mapped to
1379         the destination suite (even transitively (a->b->c)). This should
1380         unbreak binary uploads to *-proposed-updates.
1381
1382 2003-08-09  Randall Donald  <rdonald@debian.org>
1383
1384         * lisa (recheck): change changes["distribution"].keys() to
1385         Katie.pkg.changes...
1386
1387 2003-08-08  Randall Donald  <rdonald@debian.org>
1388
1389         * katie.py: only tag bugs as fixed-in-experimental for
1390         experimental uploads
1391
1392 2003-07-26  Anthony Towns  <ajt@debian.org>
1393
1394         * katie.py (source_exists): add an extra parameter to limit the
1395         distribution(s) the source must exist in.
1396         * kelly, lisa, jennifer: update to use the new source_exists
1397
1398 2003-07-15  Anthony Towns  <ajt@debian.org>
1399
1400         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1401         checksums for debian-installer stuff even when it's just a symlink to
1402         another suite
1403
1404         * apt.conf: add the FakeDI line
1405
1406 2003-06-09  James Troup  <james@nocrew.org>
1407
1408         * kelly (check): make sure the 'file' we're looking for in 'files'
1409         hasn't been deleted by katie.check_dsc_against_db().
1410
1411 2003-05-07  James Troup  <james@nocrew.org>
1412
1413         * helena (time_pp): fix s/years/year/ typo.
1414
1415 2003-04-29  James Troup  <james@nocrew.org>
1416
1417         * madison (usage): document -c/--component.
1418
1419         * madison (usage): Fix s/seperated/separated/.
1420         * melanie (usage): likewise.
1421         * jenna (usage): likewise.
1422
1423 2003-04-24  James Troup  <james@nocrew.org>
1424
1425         * cron.daily-non-US: if there's nothing for kelly to install, say
1426         so.
1427
1428         * jennifer (check_timestamps): print sys.exc_value as well as
1429         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1430         failed' with 'deb contents' to make it clearer what timestamp(s)
1431         are being checked.
1432
1433 2003-04-15  James Troup  <james@nocrew.org>
1434
1435         * cron.daily-non-US: only run kelly if there are some .changes
1436         files in accepted.
1437
1438         * rene: add -m/--mode argument which can be either daily (default)
1439         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1440         Various changes to make this possible including a poor attempt at
1441         splitting main() up a little.  De-hardcode suite numbers from SQL
1442         queries and return quietly from do_nviu() if experimental doesn't
1443         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1444         is.
1445
1446         * debian/control (Depends): remove python-zlib as it's obsolete.
1447
1448         * charisma (main): don't slice the \n off strings when we're
1449         strip()-ing it anyway.
1450         * heidi (set_suite): likewise.
1451         (process_file): likewise.
1452         * natalie (process_file): likewise.
1453
1454 2003-04-08  James Troup  <james@nocrew.org>
1455
1456         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1457         slow queries by using one LIKE '%foo%' and then matching against
1458         '%s' or '/%s$' in python.  Also only join location when we need it
1459         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1460         query, so 6s for each sourceful package.
1461
1462         * cron.daily: invoke rene and send the report to ftpmaster.
1463         * cron.daily-non-US: likewise.
1464
1465 2003-03-14  James Troup  <james@nocrew.org>
1466
1467         * utils.py (send_mail): default filename to blank.
1468         * amber (make_advisory): adapt.
1469         * jennifer (acknowledge_new): likewise.
1470         * katie.py (Katie.close_bugs): likewise.
1471         (Katie.announce): likewise.
1472         (Katie.accept): likewise.
1473         (Katie.check_override): likewise.
1474         (Katie.do_reject): likewise.
1475         * kelly (do_reject): likewise.
1476         (stable_install): likewise.
1477         * lisa (do_bxa_notification): likewise.
1478         * lauren (reject): likewise.
1479         * melanie (main): likewise.
1480
1481         * rene (add_nbs): check any NBS packages against unstable to see
1482         if they haven't been removed already.
1483
1484         * templates/katie.rejected: remove paragraph about rejected files
1485         since they're o-rwx due to c-i-m and the uploader can't do
1486         anything about them and shania will take care of them anyway.
1487
1488         * madison (usage): update usage example to use comma seperation.
1489         * melanie (usage): likewise.
1490
1491         * utils.py (split_args): new function; splits command line
1492         arguments either by space or comma (whichever is used).  Also has
1493         optional-but-default DWIM spurious space detection to avoid
1494         'command -a i386, m68k' problems.
1495         (parse_args): use it.
1496         * melanie (main): likewise.
1497
1498         * melanie (main): force the admin to tell someone if we're not
1499         doing a rene-led removal (or closing a bug, which counts as
1500         telling someone).
1501
1502 2003-03-05  James Troup  <james@nocrew.org>
1503
1504         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1505         and python sections.
1506         * katie.conf-security (Section): likewise.
1507
1508         * add_constraints.sql: add uid and uid_id_seq to grants.
1509
1510         * lisa (determine_new): also warn about adding overrides to
1511         oldstable.
1512
1513         * madison (main): make the -S/--source-and-binary query obey
1514         -s/--suite restrictions.
1515
1516 2003-03-03  James Troup  <james@nocrew.org>
1517
1518         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1519         exists, warn the user that our output might seem strange.  (People
1520         get confused by multiple versions in a suite which happens
1521         post-kelly but pre-jenna.)
1522
1523 2003-02-21  James Troup  <james@nocrew.org>
1524
1525         * kelly (main): we don't need to worry about StableRejector.
1526
1527         * melanie (main): sort versions with apt_pkg.VersionCompare()
1528         prior to output.
1529
1530         * lauren: new script to manually reject packages from
1531         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1532
1533 2003-02-20  James Troup  <james@nocrew.org>
1534
1535         * kelly (init): remove unused -m/--manual-reject argument.
1536
1537         * katie.py (Katie.force_reject): renamed from force_move to make
1538         it more explicit what this function does.
1539         (Katie.do_reject): update to match.
1540
1541         * utils.py (prefix_multi_line_string): add an optional argument
1542         include_blank_lines which defaults to 0.  If non-zero, blank lines
1543         will be includes in the output.
1544
1545         * katie.py (Katie.do_reject): don't add leading space to each line
1546         of the reject message.  Include blank lines when showing the
1547         message to the user.
1548
1549 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1550
1551         * utils.py (fix_maintainer): replace pointless re.sub() with
1552         simple string format.
1553
1554 2003-02-11  James Troup  <james@nocrew.org>
1555
1556         * lisa (edit_overrides): only strip-to-one-char and upper-case
1557         non-numeric answers.  Fixes editing of items with indices >= 10;
1558         noticed by Randall.
1559         (edit_overrides): correct order of arguments to "not a valid
1560         index" error message.
1561
1562         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1563         remove_duplicate_versions(); thanks to aj for the initial
1564         diagnosis.
1565         (remove_duplicate_versions): correct how we return
1566         dominant_versions.
1567         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1568         a tuple rather than just a tuple.
1569
1570 2003-02-10  James Troup  <james@nocrew.org>
1571
1572         * emilie: new script - sync fingerprint and uid tables with a
1573         debian.org LDAP DB.
1574
1575         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1576         in 'fingerprint'.
1577
1578         * db_access.py (get_or_set_uid_id): new function.
1579
1580         * jennifer (main): update locking to a) not used FCNTL (deprecated
1581         in python >= 2.2) and b) acknowledge upstream's broken
1582         implementation of lockf (see Debian bug #74777), c) try to acquire
1583         the lock non-blocking.
1584         * kelly (main): likewise.
1585
1586         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1587
1588         * madison (main): only append the package to new_packages if it's
1589         not already in there; fixes -S/--source-and-binary for cases where
1590         the source builds a binary package of the same name.
1591
1592 2003-02-10  Anthony Towns  <ajt@debian.org>
1593
1594         * madison (main): use explicit JOIN syntax for
1595         -S/--source-and-binary queries to reduce the query's runtime from
1596         >10 seconds to negligible.
1597
1598 2003-02-08  James Troup  <james@nocrew.org>
1599
1600         * rene (main): in the NVIU output, append items to lists, not
1601         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1602         should be removed.
1603
1604 2003-02-07  James Troup  <james@nocrew.org>
1605
1606         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1607         Sources [aj].
1608
1609         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1610         O. Benham/Adam Heath/.
1611
1612         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1613         (Suite::Stable::Description): update for 3.0r1a.
1614         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1615
1616         * utils.py (gpgv_get_status_output): rename from
1617         get_status_output().
1618
1619         * neve (check_signature): use gpgv_get_status_output and Dict from
1620         utils().  Add missing newline to error message about duplicate tokens.
1621
1622         * saffron (per_arch_space_use): also print space used by source.
1623         (output_format): correct string.join() invocation.
1624
1625         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1626
1627 2003-02-04  James Troup  <james@nocrew.org>
1628
1629         * cron.buildd: correct generation of Packages/Sources and grep out
1630         non-US/non-free as well as non-free.
1631
1632 2003-02-03  Ryan Murray  <rmurray@debian.org>
1633
1634         * cron.buildd: generate quinn-diff output with full Packages/Sources
1635           files to get out-of-date vs. uncompiled right.
1636         * apt.conf.buildd: no longer generate uncompressed files, as they
1637           are generated in cron.buildd instead
1638         * add -i option to quinn-diff to ignore binary-all packages
1639         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1640           aren't in the packages file, the arch that uploaded them will build
1641           them anyways...
1642
1643 2003-01-30  James Troup  <james@nocrew.org>
1644
1645         * rene (main): only print suggested melanie command when there's
1646         some NBS to remove.
1647
1648 2003-01-30  Ryan Murray  <rmurray@debian.org>
1649
1650         * cron.buildd: fix incorrectly inverted lockfile check
1651
1652 2003-01-29  Ryan Murray  <rmurray@debian.org>
1653
1654         * cron.buildd: generate override.sid.all3.src
1655         * apt.conf.buildd: use generated override.sid.all3.src
1656
1657 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1658
1659         * utils.py (get_status_output): moved from jennifer.
1660         (Dict): likewise.
1661         (check_signature): likewise.
1662
1663         * jennifer (get_status_output): moved to utils.py.
1664         (Dict): likewise.
1665         (check_signature): likewise.
1666
1667         * utils.py (check_signature): add an argument to specifiy which
1668         function to call when an error was found.
1669         (check_signature): document this function better.
1670
1671         * jennifer (check_files): pass the reject function as an argument
1672         to utils.check_signature.
1673         (process_it): likewise.
1674
1675 2003-01-20  James Troup  <james@nocrew.org>
1676
1677         * rene (main): lots of changes to improve the output and make it
1678         more useful.
1679
1680         * katie.py (Katie.check_override): make the override messages
1681         clearer (hopefully).
1682
1683 2002-12-26  James Troup  <james@nocrew.org>
1684
1685         * ziyi (usage): document the ability to pass suite(s) as
1686         argument(s).
1687         (main): read apt.conf after checking for -h/--help.
1688
1689         * tea (main): take the check to run as an argument.
1690
1691         * saffron.R: R script to graph daily install runs.
1692
1693         * saffron: new script; various stats functions.
1694
1695         * rhona (main): connect to the database after checking for -h/--help.
1696
1697         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1698
1699         * melanie (main): sort versions with utils.arch_compare_sw().
1700
1701         * madison (usage): alphabetize order of options.
1702         * melanie (usage): likewise.
1703
1704         * kelly (usage): fix usage short description (we aren't dinstall).
1705
1706         * julia (usage): fix usage description and alphabetize order of
1707         options.
1708
1709         * jeri (usage): fix usage short description.
1710
1711         * jennifer (main): move --help and --version checks from here...
1712         (init): to here so that they work with an empty katie.conf.
1713         * kelly: likewise.
1714
1715         * alyson (usage): new function.
1716         (main): use it.
1717         * andrea: likewise.
1718         * ashley: likewise.
1719         * cindy: likewise.
1720         * denise: likewise.
1721         * helena: likewise.
1722         * neve: likewise.
1723         * rene: likewise.
1724         * rose: likewise.
1725         * tea: likewise.
1726
1727         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1728         entry that caused tasks to be omitted from 3.0r1.
1729
1730 2002-12-10  James Troup  <james@nocrew.org>
1731
1732         * jennifer (check_files): sanity check the Depends field to ensure
1733         it's non-empty if present since apt chokes on an empty one.
1734         Thanks to Ryan Murray for the idea.
1735
1736 2002-12-08  James Troup  <james@nocrew.org>
1737
1738         * katie.conf-security (Helena::Directories): new; include accepted
1739         in addition to byhand and new.
1740
1741         * helena (process_changes_files): use utils.arch_compare_sw().
1742         Justify things based on the longest [package, version,
1743         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1744         the commas in architecture and version lists for the same reason.
1745         (main): make directories we process configurable through
1746         Helena::Directories in the config file; if that doesn't exist
1747         default to the old hardcoded values (byhand & new).
1748
1749         * utils.py (arch_compare_sw): moved here from madison.
1750         * madison (main): adjust to compensate.
1751
1752 2002-12-06  James Troup  <james@nocrew.org>
1753
1754         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1755         right filename.
1756
1757 2002-12-05  James Troup  <james@nocrew.org>
1758
1759         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1760
1761 2002-11-28  Randall Donald  <rdonald@debian.org>
1762
1763         * fernanda.py (read_control): fix typo of 'Architecture'.
1764
1765 2002-11-26  James Troup  <james@nocrew.org>
1766
1767         * lisa (check_pkg): call less with '-R' so we see the colour from
1768         Randall's fernanda changes.
1769
1770         * neve (process_sources): if Directory points to a legacy location
1771         but the .dsc isn't there; assume it's broken and look in the pool.
1772         (update_section): new, borroed from alyson.
1773         (do_da_do_da): use it.
1774         (process_packages): add suite_it to the cache key used for
1775         arch_all_cache since otherwise we only add a package to the first
1776         suite it's in and ignore any subsequent ones.
1777
1778         * katie.conf-non-US (Location): fixed to reflect reality (all
1779         suites, except old-proposed-updates (which is legacy-mixed)) are
1780         pool.
1781
1782         * utils.py (try_with_debug): wrapper for print_exc().
1783         * jenna (main): use it.
1784         * neve (main): likewise.
1785
1786 2002-11-25  Randall Donald  <rdonald@debian.org>
1787
1788         * fernanda.py (main): added -R to less command line for raw control
1789         character support to print colours
1790         (check_deb): Instead of running dpkg -I on deb file, call
1791         output_deb_info, the new colourized control reporter.
1792         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1793         of printing out each .dsc line.
1794         (output_deb_info): new function. Outputs each key/value pair from
1795         read_control except in special cases where we highlight section,
1796         maintainer, architecture, depends and recommends.
1797         (create_depends_string): new function. Takes Depends tree and looks
1798         up it's compontent via projectb db, colourizes and constructs a
1799         depends string in original order.
1800         (read_dsc): new function. reads and parses .dsc info via
1801         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1802         colourized.
1803         (read_control): new function. reads and parses control info via
1804         apt_pkg. Depends and Recommends are split in to list structures,
1805         Section and Architecture are colourized. Maintainer is colourized
1806         if it has a localhost.localdomain address.
1807         (split_depends): new function. Creates a list of lists of
1808         dictionaries of depends (package,version relation). Top list is
1809         colected from comma delimited items. Sub lists are | delimited.
1810         (get_comma_list): new function. splits string input among commas
1811         (get_or_list): new function. splits string input among | delimiters
1812         (get_depends_parts): new function. Creates dictionary of package name
1813         and version relation from dependancy string.
1814         Colours for section and depends are per component. Unfound depends
1815         are in bold. Lookups using version info is not supported yet.
1816
1817 2002-11-22  James Troup  <james@nocrew.org>
1818
1819         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1820         'udmsearch'.
1821
1822         * amber (make_advisory): string.atol() is deprecated and hasn't
1823         been ported to string methods.  Use long() instead.
1824
1825         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1826         creating the database since we'll fail badly if it's created with
1827         e.g. UNICODE encoding.
1828
1829         * rose (main): AptCnf is a global.
1830
1831         * neve (get_location_path): new function determines the location
1832         from the the first (left-most) directory of a Filename/Directory.
1833         (process_sources): don't need 'location' anymore.  Use
1834         utils.warn().  Use the Directory: field for each package to find
1835         the .dsc.  Use get_location_path() to determine the location for
1836         each .dsc.
1837         (process_packages): do't need 'location' anymore.  Use
1838         utils.warn().  Use get_location_path().
1839         (do_sources): don't need 'location', drop 'prefix' in favour of
1840         being told the full path to the Sources file, like
1841         process_packages().
1842         (do_da_do_da): main() renamed, so that main can call us in a
1843         try/except.  Adapt for the changes in do_sources() and
1844         process_packages() above.  Assume Sources and Packages file are in
1845         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1846
1847         * katie.conf-security (Location): fixed to reflect reality (all
1848         suites are pool, not legacy).
1849
1850         * utils.py (print_exc): more useful (i.e. much more verbose)
1851         traceback; a recipe from the Python cookbook.
1852         * jenna (main): use it.
1853         * neve (main): likewise.
1854
1855 2002-11-19  James Troup  <james@nocrew.org>
1856
1857         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1858         handling which was FUBAR for multi-suite uploads.  Now we just
1859         make a dictionary of destinations to copy to and iterate over
1860         those.
1861
1862         * fernanda.py (check_deb): run linda as well as lintian.
1863
1864 2002-10-21  James Troup  <james@nocrew.org>
1865
1866         * melanie (main): change X-Melanie to X-Katie and prefix it with
1867         'melanie '.
1868
1869         * lisa (main): prefix X-Katie with 'lisa '.
1870
1871         * jennifer (clean_holding): fix typo in string method changes;
1872         s/file.find(file/file.find(/.
1873
1874         * cron.daily: invoke helena and send the report to ftpmaster.
1875         * cron.daily-non-US: likewise.
1876
1877 2002-10-16  James Troup  <james@nocrew.org>
1878
1879         * kelly (check): call reject() with a blank prefix when parsing
1880         the return of check_dsc_against_db() since it does its own
1881         prefix-ing.
1882
1883         * rose: new script; only handles directory creation initally.
1884
1885         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1886         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1887
1888 2002-10-06  James Troup  <james@nocrew.org>
1889
1890         * rene (main): remove bogus argument handling.
1891
1892         * kelly: katie, renamed.
1893         * cron.daily: adapt for katie being renamed to kelly.
1894         * cron.daily-non-US: likewise.
1895         * amber (main): likewise.
1896
1897         * Changes for python 2.1.
1898
1899         * kelly: time.strftime no longer requires a second argument of
1900         "time.localtime(time.time())".
1901         * logging.py: likewise.
1902         * rhona: likewise.
1903         * shania (init): likewise.
1904
1905         * amber: use augmented assignment.
1906         * catherine (poolize): likewise.
1907         * claire.py (fix_component_section): likewise.
1908         * halle (check_changes): likewise.
1909         * helena: likewise.
1910         * jenna: likewise.
1911         * jennifer: likewise.
1912         * jeri: likewise.
1913         * katie.py: likewise.
1914         * kelly: likewise.
1915         * lisa: likewise.
1916         * madison (main): likewise.
1917         * melanie: likewise.
1918         * natalie: likewise.
1919         * neve: likewise.
1920         * rhona: likewise.
1921         * tea: likewise.
1922         * utils.py: likewise.
1923         * ziyi: likewise.
1924
1925         * amber: use .endswith.
1926         * fernanda.py: likewise.
1927         * halle (main): likewise.
1928         * jennifer: likewise.
1929         * jeri: likewise.
1930         * katie.py: likewise.
1931         * kelly: likewise.
1932         * lisa: likewise.
1933         * neve: likewise.
1934         * shania (main): likewise.
1935         * utils.py: likewise.
1936
1937         * alyson: use string methods.
1938         * amber: likewise.
1939         * andrea: likewise.
1940         * ashley: likewise.
1941         * catherine: likewise.
1942         * charisma: likewise.
1943         * claire.py: likewise.
1944         * db_access.py: likewise.
1945         * denise: likewise.
1946         * halle: likewise.
1947         * heidi: likewise.
1948         * helena: likewise.
1949         * jenna: likewise.
1950         * jennifer: likewise.
1951         * jeri: likewise.
1952         * julia: likewise.
1953         * katie.py: likewise.
1954         * kelly: likewise.
1955         * lisa: likewise.
1956         * logging.py: likewise.
1957         * madison: likewise.
1958         * melanie: likewise.
1959         * natalie: likewise.
1960         * neve: likewise.
1961         * rene: likewise.
1962         * tea: likewise.
1963         * utils.py: likewise.
1964         * ziyi: likewise.
1965
1966 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
1967
1968         * utils.py (parse_changes): use <string>.startswith() rather than
1969         string.find().
1970
1971 2002-08-27  Anthony Towns  <ajt@debian.org>
1972
1973         * katie.py (in_override_p): when searching for a source override,
1974         and the dsc query misses, search for both udeb and deb overrides
1975         as well. Should fix the UNACCEPT issues with udebs.
1976
1977 2002-08-24  James Troup  <james@nocrew.org>
1978
1979         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
1980         source+binary package finding code which was causing severe
1981         performance degradation with postgres 7.2.
1982
1983 2002-08-14  James Troup  <james@nocrew.org>
1984
1985         * julia (main): use the pwd.getpwall() to get system user info
1986         rather than trying to read a password file.  Add a -n/--no-action
1987         option.
1988
1989         * cron.hourly: julia no longer takes any arguments.
1990         * cron.hourly-non-US: likewise.
1991
1992 2002-08-07  James Troup  <james@nocrew.org>
1993
1994         * katie (install): handle multi-suite uploads when CopyChanges
1995         and/or CopyKatie are in use, ensuring we only copy stuff once.
1996
1997 2002-08-01  Ryan Murray  <rmurray@debian.org>
1998
1999         * wanna-build/trigger.daily: initial commit, with locking
2000         * cron.buildd: add locking against daily run
2001
2002 2002-07-30  James Troup  <james@nocrew.org>
2003
2004         * melanie (main): readd creation of suite_ids_list so melanie is
2005         remotely useful again.
2006
2007         * katie.conf: adopt for woody release; diable
2008         StableDislocationSupport, add oldstable, adjust other suites and
2009         mappings, fix up location.
2010         * katie.conf-non-US: likewise.
2011         * katie.conf-security: likewise.
2012
2013         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2014         stable.
2015         * apt.conf.stable-non-US: likewise.
2016
2017         * apt.conf-security: adapt for woody release; adding oldstable,
2018         oldstable, adjust stable and testing.
2019         * cron.daily-security: likewise.
2020         * cron.buildd-security: likewise.
2021
2022         * apt.conf: adapt for woody release; rename woody-proposed-updates
2023         to testing-proposed-updates and proposed-updates to
2024         old-proposed-updates.
2025         * apt.conf-non-US: likewise.
2026
2027         * vars-non-US (copyoverrides): add sarge.
2028         * vars (copyoverrides): likewise.
2029
2030         * vars-security (suites): add oldstable.
2031
2032 2002-07-22  Ryan Murray  <rmurray@debian.org>
2033
2034         * apt.conf.security-buildd: use suite codenames instead of
2035           distnames.
2036
2037 2002-07-16  James Troup  <james@nocrew.org>
2038
2039         * denise (main): fix filenames for testing override files.
2040
2041 2002-07-14  James Troup  <james@nocrew.org>
2042
2043         * jennifer (process_it): call check_md5sums later so we can check
2044         files in the .dsc too
2045         (check_md5sums): check files in the .dsc too.  Check both md5sum
2046         and size.
2047
2048         * melanie (main): use parse_args() and join_with_commas_and() from
2049         utils.  If there's nothing to do, say so and exit, don't ask for
2050         confirmation etc.
2051
2052         * amber (join_with_commas_and): moved from here to ...
2053         * utils.py (join_with_commas_and): here.
2054
2055 2002-07-13  James Troup  <james@nocrew.org>
2056
2057         * madison (main): use parse_args() from utils.  Support
2058         -c/--component.
2059
2060         * jenna (parse_args): moved from here to ...
2061         * utils.py (parse_args): here.
2062
2063         * katie.conf (Architectures): minor corrections to the description
2064         for arm, mips and mipsel.
2065         * katie.conf-non-US (Architectures): likewise.
2066         * katie.conf-security (Architectures): likewise.
2067
2068         * cron.daily-security: use natalie's new -a/--add functionality to
2069         flesh out the security overrides.
2070
2071 2002-07-12  James Troup  <james@nocrew.org>
2072
2073         * cron.buildd (ARCHS): add arm.
2074
2075         * katie.conf: 2.2r7 was released.
2076         * katie.conf-non-US: likewise.
2077
2078         * utils.py (parse_changes): handle a multi-line field with no
2079         starting line.
2080
2081 2002-06-25  James Troup  <james@nocrew.org>
2082
2083         * templates/amber.advisory (To): add missing email address since
2084         __WHOAMI__ is only a name.
2085
2086         * katie.conf-security (Melane::LogFile): correct to go somewhere
2087         katie has write access to.
2088         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2089         Testing.
2090
2091         * natalie: add support for -a/-add which adds packages only
2092         (ignoring changes and deletions).
2093
2094         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2095         use FindB, not get.
2096
2097 2002-06-22  James Troup  <james@nocrew.org>
2098
2099         * jennifer (check_files): validate the package name and version
2100         field.  If 'Package', 'Version' or 'Architecture' are missing,
2101         don't try any further checks.
2102         (check_dsc): likewise.
2103
2104         * utils.py (re_taint_free): add '~' as a valid character.
2105
2106 2002-06-20  Anthony Towns  <ajt@debian.org>
2107
2108         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2109
2110 2002-06-09  James Troup  <james@nocrew.org>
2111
2112         * jennifer (check_files): reduce useless code.
2113
2114         * cron.daily-security: run symlinks -dr on $ftpdir.
2115
2116         * vars-security (ftpdir): add.
2117
2118 2002-06-08  James Troup  <james@nocrew.org>
2119
2120         * neve (update_override_type): transaction is handled higher up in
2121         main().
2122         (update_priority): likewise.
2123         (process_sources): remove code that makes testing a duplicate of
2124         stable.
2125         (process_packages): likewise.
2126
2127         * templates/amber.advisory: add missing mail headers.
2128
2129         * cron.daily-security: also call apt-ftparchive clean for
2130         apt.conf.buildd-security.
2131         * cron.weekly: likewise.
2132
2133         * amber (do_upload): write out a list of source packages (and
2134         their version) uploaded for testing.
2135         (make_advisory): add more Subst mappings for the mail headers.
2136         (spawn): check for suspicious characters in the command and abort
2137         if their found.
2138
2139 2002-06-07  James Troup  <james@nocrew.org>
2140
2141         * ziyi (main): remove the 'nonus'/'security' hacks and use
2142         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2143         the lower level Release files, even if they don't exist.  fubar
2144         out if we can't open a lower level Release file for writing.
2145
2146         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2147         ziyi.
2148         * katie.conf-security (Dinstall): likewise.
2149
2150         * amber (do_upload): renamed from get_file_list().  Determine the
2151         upload host from the original component.
2152         (init): Add a -n/--no-action option.  Fix how we get changes_files
2153         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2154         sys.argv).  Add an Options global.
2155         (make_advisory): support -n/--no-action.
2156         (spawn): likewise.
2157         (main): likewise.
2158         (usage): document -n/--no-action.
2159
2160         * cron.buildd-security: fix path to Packages-arch-specific in
2161         quinn-diff invocation.
2162
2163         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2164         to proper suite names (i.e. stable, testing) rather than codenames
2165         (potato, woody).
2166         (Dinstall::DefaultSuite): likewise.
2167         (Suite): likewise.
2168         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2169         * vars-security (suites): likewise.
2170         * apt.conf-security: likewise.
2171
2172         * katie.conf-security (Component): add "updates/" prefix.
2173         (Suite::*::Components): likewise.
2174         (ComponentMappings): new; map all {ftp-master,non-US} components
2175         -> updates/<foo>.
2176
2177         * katie.conf-security (Natalie): removed; the options have
2178         defaults and ComponentPosition is used by alyson which doesn't
2179         work on security.d.o.
2180         (Amber): replace UploadHost and UploadDir with ComponentMappings
2181         which is a mapping of components -> URI.
2182         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2183         (SuiteMappings): use "silent-map" in preference to "map".
2184
2185         * cron.unchecked-security: fix call to cron.buildd-security.
2186
2187         * cron.daily-security: map local suite (stable) -> override suite
2188         (potato) when fixing overrides.  Correct component in natalie call
2189         to take into account "updates/" prefix.  Fix cut'n'waste in
2190         override.$dist.all3 generation, the old files weren't being
2191         removed, so they were endlessly growing.
2192
2193         * neve (main): don't use .Find for the CodeName since we require
2194         it.  Location::*::Suites is a ValueList.
2195         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2196         out on expired keys, just warn.
2197         (update_override_type): new function; lifted from alyson.
2198         (update_priority): likewise.
2199         (main): use update_{override_type,priority}().
2200
2201         * jennifer (check_distributions): remove redunant test for
2202         SuiteMappings; ValueList("does-not-exist") returns [] which is
2203         fine.  Add support for a "silent-map" type which doesn't warn
2204         about the mapping to the user.
2205         (check_files): add support for ComponentMappings, similar to
2206         SuiteMappings, but there's no type, just a source and a
2207         destination and the original component is stored in "original
2208         component".
2209         * katie.py (Katie.dump_vars): add "original component" as an
2210         optionsal files[file] dump variable.
2211
2212         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2213         query.  Add support for section-less legacy locations like current
2214         security.debian.org through YetAnotherConfigBoolean
2215         'LegacyStableHasNoSections'.
2216         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2217
2218         * utils.py (real_arch): moved here from ziyi.
2219         * ziyi (real_arch): moved to utils.py.
2220         * ziyi (main): likewise.
2221
2222         * claire.py (find_dislocated_stable): use real_arch() with
2223         filter() to strip out source and all.
2224         * neve (main): likewise.
2225         * rene (main): likewise.
2226         * jeri (parse_packages): likewise.
2227
2228 2002-06-06  James Troup  <james@nocrew.org>
2229
2230         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2231         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2232         doing.
2233
2234 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2235
2236         * jeri (check_joey): check if the line contains two elements
2237         before accessing the second.  Also, strip trailing spaces as well
2238         as the newline.
2239         * halle (check_joey): likewise.
2240
2241 2002-06-05  James Troup  <james@nocrew.org>
2242
2243         * cron.unchecked-security: new file; like cron.unchecked but if
2244         there's nothing to do exit so we don't call cron.buildd-security.
2245
2246         * apt.conf.buildd-security: new file.
2247
2248         * vars (archs): alphabetize.
2249         * vars-non-US (archs): likewise.
2250
2251         * vars-security: add unchecked.
2252
2253         * madison (main): reduce rather bizarrely verbose and purposeless
2254         code to print arches to a simple string.join.
2255
2256         * katie.conf (Suites::Unstable): add UdebComponents, a new
2257         valuelist of suites, used by jenna to flesh out the list of
2258         <suite>_main-debian-installer-binary-<arch>.list files generated.
2259         (Dinstall): add StableDislocationSupport, a new boolean used by
2260         jenna to enable or disable stable dislocation support
2261         (i.e. claire), as true.
2262
2263         * katie.conf (Dinstall): add StableDislocationSupport, a new
2264         boolean used by jenna to enable or disable stable dislocation
2265         support (i.e. claire), as true.
2266         * katie.conf-non-US: likewise.
2267         * katie.conf-security: likewise.
2268
2269         * cron.daily-security: generate .all3 overrides for the buildd
2270         support.  Freshen a local copy of Packages-arch-specific from
2271         buildd.debian.org.
2272
2273         * claire.py (find_dislocated_stable): disable the support for
2274         files in legacy-mixed locations since none of the Debian archives
2275         have any anymore.
2276
2277         * helena: new script; produces a report on NEW and BYHAND
2278         packages.
2279
2280         * jenna: rewritten from scratch to fix speed problems.  Run time
2281         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2282         minutes, 105 seconds are the monster query and 70 odd seconds is
2283         claire.
2284
2285         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2286         irrelevant.
2287
2288 2002-06-05  Ryan Murray  <rmurray@debian.org>
2289
2290         * cron.buildd-security: new file.
2291
2292 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2293
2294         * denise (list): take a file argument and use it.
2295         (main): don't abuse sys.stdout, just write to the file.
2296
2297         * claire.py (usage): Fix misspelling.
2298         (clean_symlink): Simplify.
2299         (find_dislocated_stable): Avoid unnecessary work.
2300
2301 2002-05-29  James Troup  <james@nocrew.org>
2302
2303         * cameron: removed; apt-ftparchive can simply walk the directory.
2304
2305 2002-05-26  Anthony Towns  <ajt@debian.org>
2306
2307         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2308         for the autobuilders.
2309
2310 2002-05-24  Ryan Murray  <rmurray@debian.org>
2311
2312         * cron.buildd: update override files before running apt-ftparchive
2313
2314 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2315
2316         * amber (main): remove extra space in prompt.
2317
2318         * utils.py (validate_changes_file_arg): use original filename in
2319         error messages.
2320
2321         * jeri (check_joey): close file after use.
2322         (parse_packages): likewise.
2323         (main): setup debug option properly.
2324
2325         * melanie (main): remove unused packages variable and simplify the
2326         code to build up con_packages by using repr().
2327
2328 2002-05-23  James Troup  <james@nocrew.org>
2329
2330         * lisa (recheck): when we reject, also return 0 so the package is
2331         skipped.
2332         (sg_compare): fix note sorting.
2333         (recheck): remove the .katie file after rejection.
2334
2335         * katie.py (Katie.accept): accepted auto-build support take 3;
2336         this time adding support for security.  Security needs a) non-pool
2337         files copied rather than symlinked since accepted is readable only
2338         by katie/security and www-data needs to be able to see the files,
2339         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2340         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2341         SecurityAcceptedAutoBuild is a new boolean which controls whether
2342         or not normal or security style is used.  The unstable_accepted
2343         table was renamed to accepted_autobuild and a suite column added.
2344         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2345         didn't have it's last_used/in_accepted flags correctly updated.
2346         * katie (install): likewise.
2347         * rhona (clean_accepted_autobuild): likewise.
2348
2349 2002-05-22  James Troup  <james@nocrew.org>
2350
2351         * lisa (sort_changes): new function; sorts changes properly.
2352         Finally.
2353         (sg_compare): new function; helper for sort_changes().  Sorts by
2354         have note and time of oldest upload.
2355         (indiv_sg_compare): new function; helper for sort_changes().
2356         Sorts by source version, have source and filename.
2357         (main): use sort_changes().
2358         (changes_compare): obsoleted; removed.
2359
2360 2002-05-20  James Troup  <james@nocrew.org>
2361
2362         * rhona (clean_accepted_autobuild): don't die if a file we're
2363         trying to remove doesn't exist.  Makes rhona more friendly to
2364         katie/katie.py crashes/bugs without any undue cost.
2365
2366 2002-05-19  James Troup  <james@nocrew.org>
2367
2368         * lisa (main): if sorting a large number of changes give some
2369         feedback.
2370         (recheck): new function, run the same checks (modulo NEW,
2371         obviously) as katie does, if they fail do the standard
2372         reject/skip/quit dance.
2373         (do_pkg): use it.
2374
2375         * katie (install): don't try to unlink the symlink in the
2376         AcceptedAutoBuild support if the destination is not a symlink (or
2377         doesn't exist).  Avoids unnecessary bombs on previous partial
2378         accepts and will still bomb hard if the file exists and isn't a
2379         symlink.
2380
2381         * utils.py: blah, commands _is_ used when the mail stuff isn't
2382         commented out like it is in my test environment.
2383
2384         * lisa (changes_compare): "has note" overrides everything else.
2385         Use .katie files rather than running parse_changes, faster and
2386         allows "has note" to work.  Correct version compare, it was
2387         reversed.  Ctime check should only kick in if the source packages
2388         are not the same.
2389         (print_new): print out and return any note.  Rename 'ret_code' to
2390         'broken'.
2391         (edit_new): renamed from spawn_editor.  Don't leak file
2392         descriptors.  Clean up error message if editor fails.
2393         (edit_note): new function, allows one to edit notes.
2394         (do_new): add note support, editing and removing.
2395         (init): kill -s/--sort; with notes we always want to use our
2396         sorting method.
2397         (usage): likewise.
2398
2399         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2400         changes field.
2401
2402         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2403         it default to 0.  Adapt tests to assume it's boolean.
2404         * fernanda.py (check_changes): adjust call appropriately.
2405         * halle (check_changes): likewise.
2406         * jennifer (check_changes): likewise.
2407         * jeri (check_changes): likewise.
2408         * shania (flush_orphans): likewise.
2409
2410         * jennifer (check_dsc): pass is_a_dsc by name when calling
2411         build_file_list() for clarity.
2412         * shania (flush_orphans): likewise.
2413         * tea (check_missing_tar_gz_in_dsc): likewise.
2414
2415         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2416         calling parse_changes() for clarity.
2417         * tea (check_dscs): likewise.
2418
2419         * utils.py (parse_changes): make dsc_whitespace_rules default to
2420         not true.
2421         * halle (check_changes): adjust call appropriately.
2422         * jennifer (check_changes): likewise.
2423         * jeri (check_changes): likewise.
2424         * lisa (changes_compare): likewise.
2425         * utils.py (changes_compare): likewise.
2426         * melanie (main): likewise.
2427         * shania (flush_orphans): likewise.
2428         * fernanda.py (check_changes): likewise.
2429
2430 2002-05-18  James Troup  <james@nocrew.org>
2431
2432         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2433         it's not useful and by and large a duplication of information
2434         available in readable format in other files.
2435
2436 2002-05-16  Ryan Murray  <rmurray@debian.org>
2437
2438         * melanie: Dir::TemplatesDir -> Dir::Templates
2439
2440 2002-05-15  Ryan Murray  <rmurray@debian.org>
2441
2442         * cameron: correct the use of os.path.join
2443
2444 2002-05-15  Anthony Towns  <ajt@debian.org>
2445
2446         * ziyi: Update to match the new format for Architectures/Components
2447         in katie.conf.
2448
2449 2002-05-14  James Troup  <james@nocrew.org>
2450
2451         * amber: new script; 'installer' wrapper script for the security
2452         team.
2453
2454         * katie.py (Katie.announce): remove unused 'dsc' local
2455         variable. (pychecker)
2456
2457         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2458
2459         * neve: don't import sys, we don't use it. (pychecker)
2460         (check_signature): fix return type mismatch. (pychecker)
2461
2462         * utils.py: don't import commands, we don't use it.  (pychecker)
2463
2464         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2465
2466         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2467         obsoleted by the change to "othercomponents" handling in jennifer
2468         detailed below.
2469         (Katie.cross_suite_version_check): new function; implements
2470         cross-suite version checking rules specified in the conf file
2471         while also enforcing the standard "must be newer than target
2472         suite" rule.
2473         (Katie.check_binary_against_db): renamed, since it's invoked once
2474         per-binary, "binaries" was inaccurate.  Use
2475         cross_suite_version_check() and don't bother with the "oldfiles"
2476         rubbish as jennifer works out "othercomponents" herself now.
2477         (Katie.check_source_against_db): use cross_suite_version_check().
2478
2479         * katie (check): the version and file overwrite checks
2480         (check_{binary,source,dsc}_against_db) are not per-suite.
2481
2482         * jennifer (check_files): less duplication of
2483         'control.Find("Architecture", "")' by putting it in a local
2484         variable.
2485         (check_files): call check_binary_against_db higher up since it's
2486         not a per-suite check.
2487         (check_files): get "othercomponents" directly rather than having
2488         check_binary_against_db do it for us.
2489
2490         * heidi (main): 'if x:', not 'if x != []:'.
2491         * katie.py (Katie.in_override_p): likewise.
2492         (Katie.check_dsc_against_db): likewise.
2493         * natalie (main): likewise.
2494         * rene (main): likewise.
2495         * ziyi (real_arch): likewise.
2496
2497         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2498         and OverrideType are now value lists, not lists.
2499         * andrea (main): likewise.
2500         * cindy (main): likewise.
2501         * claire.py (find_dislocated_stable): likewise.
2502         * denise (main): likewise.
2503         * jenna (main): likewise.
2504         * jennifer (check_distributions): likewise.
2505         (check_files): likewise.
2506         (check_urgency): likewise (Urgency::Valid).
2507         * jeri (parse_packages): likewise.
2508         * neve (main): likewise (and Location::%s::Suites).
2509         * rene (main): likewise.
2510
2511 2002-05-13  James Troup  <james@nocrew.org>
2512
2513         * katie.py (Katie.check_source_against_db): correct case of reject
2514         message to be consistent with binary checks.
2515
2516         * jennifer (get_status_output): don't leak 2 file descriptors per
2517         invocation.
2518         (check_signature): add missing '\n' to "duplicate status token"
2519         error message.
2520
2521 2002-05-09  James Troup  <james@nocrew.org>
2522
2523         * utils.py (validate_changes_file_arg): new function; validates an
2524         argument which should be a .changes file.
2525         * ashley (main): use it.
2526         * lisa (main): likewise.
2527
2528         * katie.py (Katie.check_dsc_against_db): since there can be more
2529         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2530         entry still exists in files.
2531
2532         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2533         files, since check_dsc_against_db() deletes the .orig.tar.gz
2534         entry.
2535
2536         * cameron: cleanups.
2537
2538         * utils.py (changes_compare): change sort order so that source
2539         name and source version trump 'have source'; this should fix
2540         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2541         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2542         by Ryan.
2543
2544         * lisa (main): allow the arguments to be .katie files too.
2545
2546 2002-05-07  Ryan Murray  <rmurray@debian.org>
2547
2548         * cron.buildd: add s390 to arch list again
2549
2550 2002-05-05  Ryan Murray  <rmurray@debian.org>
2551
2552         * cron.buildd: new script, update w-b database from unstable_accepted
2553         table
2554         * cameron: new script, take list in unstable_accepted and write out
2555         a file list for apt-ftparchive
2556         * apt.conf.buildd: new apt configuration for Packages/Sources for
2557         unstable_accepted
2558         * vars: add s390 to arch list.
2559
2560 2002-05-03  James Troup  <james@nocrew.org>
2561
2562         * neve (main): don't hard code the calling user as that doesn't
2563         work with modern postgres installs.  Fix psql invocation for
2564         init_pool.sql (database name required).  Dont' hard code the
2565         database name.
2566         (process_sources): add support for fingerprint and install_date.
2567         (process_packages): add support for fingerprint.
2568         (do_sources): pass in the directory, fingerprint support needs it.
2569         (get_status_output): borrowed from jennifer.
2570         (reject): likewise.
2571         (check_signature): likewise.
2572
2573         * katie (install): only try to log urgencies if Urgency_Logger is
2574         defined.
2575         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2576         defined; only close Urgency_Logger if it's defined.
2577
2578         * catherine (poolize): adapt for Dir rationalization.
2579         * claire.py (find_dislocated_stable): likewise.
2580         * denise (main): likewise.
2581         * halle (check_joey): likewise.
2582         * jenna: likewise.
2583         * jennifer: likewise.
2584         * jeri: likewise.
2585         * katie.py: likewise.
2586         * katie: likewise.
2587         * lisa (do_bxa_notification): likewise.
2588         * logging.py (Logger.__init__): likewise
2589         * rene (main): likewise.
2590         * rhona (clean): likewise.
2591         * shania (init): likewise.
2592         * tea: likewise.
2593         * ziyi: likewise.
2594
2595         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2596         FindB, not FindI.
2597
2598         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2599         boolean, use FindB, not get.
2600
2601         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2602         .orig.tar.gz's which are an exact (size/md5sum) match.
2603
2604         * ashley (main): really allow *.katie files as arguments too;
2605         noticed by aj.
2606
2607         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2608
2609 2002-05-03  Anthony Towns  <ajt@debian.org>
2610
2611         * ziyi: support for security.
2612
2613 2002-05-02  James Troup  <james@nocrew.org>
2614
2615         * jennifer (accept): call Katie.check_override() unconditional as
2616         no-mail check moved into that function.
2617         (do_byhand): likewise.
2618
2619         * katie.py (Katie.check_override): don't do anything if we're a)
2620         not sending mail or b) the override disparity checks have been
2621         disbled via Dinstall::OverrideDisparityCheck.
2622
2623         * jennifer (check_files): don't hard code Unstable as the suite
2624         used to check for architecture validity; use
2625         Dinstall::DefaultSuite instead, if it exists.
2626         (accept): conditionalize
2627
2628         * katie.py (Katie.update_subst): support global maintainer
2629         override with Dinstall::OverrideMaintainer.
2630
2631         * jennifer (check_distributions): new function, Distribution
2632         validation and mapping.  Uses new SuiteMappings variable from
2633         config file to abstract suite mappings.
2634         (check_changes): call it.
2635
2636         * natalie: renamed; nothing imports or likely will for some time.
2637
2638         * denise (main): remove unused natalie import and init().
2639
2640         * natalie.py (init): removed.
2641         (main): initalize here instead and don't hardcode the database
2642         name.
2643
2644 2002-04-30  James Troup  <james@nocrew.org>
2645
2646         * katie.py (Katie.close_bugs): new function, split out from
2647         announce().
2648         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2649         true.
2650         (Katie.close_bugs): new function, split out
2651         (Katie.close_bugs): return immediately if there are no bugs to
2652         close.
2653
2654         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2655         * katie (do_reject): likewise.
2656         (stable_install): likewise.
2657         * katie.py (Katie.announce): likewise.
2658         (Katie.accept): likewise.
2659         (Katie.check_override): likewise.
2660         (Katie.do_reject): likewise.
2661         * lisa (do_bxa_notification): likewise.
2662         * melanie (main): likewise.
2663
2664         * utils.py (TemplateSubst): change second argument to be a
2665         filename rather than a template since every caller opened a file
2666         on the fly which was ugly and leaked file descriptor.
2667
2668 2002-04-29  James Troup  <james@nocrew.org>
2669
2670         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2671         <hertzog@debian.org> to send 'accepted' announce mails to the
2672         PTS. [#128140]
2673
2674 2002-04-24  James Troup  <james@nocrew.org>
2675
2676         * init_pool.sql (unstable_accepted): add two new fields to
2677         unstable_accepted; in_accepted is a boolean indicating whether or
2678         not the file is in accepted and last_used is a timestamp used by
2679         rhona to determine when to remove symlinks for installed packages.
2680
2681         * katie.py (Katie.accept): auto-build support take 2.  Create
2682         symlinks for all files into a seperate directory.  Add files to
2683         unstable_accepted as paths to the new directory; mark them as
2684         being in accepted for cameron.  Properly conditionalize it on a
2685         configuration variable.
2686
2687         * katie (install): likewise.  Update symlinks to point into the
2688         pool; mark the files for later deletion by rhona and mark them as
2689         not being in accepted for cameron.
2690
2691         * rhona (clean_accepted_autobuild): new function.
2692
2693 2002-04-22  James Troup  <james@nocrew.org>
2694
2695         * jennifer (check_files): handle db_access.get_location_id()
2696         returning -1 properly/better.
2697
2698         * rhona (clean_fingerprints): new function.
2699
2700 2002-04-21  James Troup  <james@nocrew.org>
2701
2702         * utils.py (touch_file): unused; remove.
2703         (plural): likewise.
2704
2705         * jennifer (check_files): close file descriptor used to get the
2706         control file.
2707         (check_md5sums): likewise.
2708         (callback): likewise.
2709
2710         * katie.py (Katie.do_reject): handle manual rejects much better;
2711         call the editor first and get confirmation from the user before
2712         proceeding.
2713
2714         * jennifer (check_signature): prefix_multi_line_string() moved to
2715         utils.
2716
2717         * utils.py (prefix_multi_line_string): moved here from jennifer.
2718
2719 2002-04-20  James Troup  <james@nocrew.org>
2720
2721         * lisa (main): handle non-existent files.
2722
2723         * ashley (main): allow *.katie files as arguments too.
2724
2725 2002-04-19  James Troup  <james@nocrew.org>
2726
2727         * katie.py (Katie.accept): add stuff to help auto-building from
2728         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2729         in the pool), create a symlink to it in the accepted directory and
2730         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2731
2732         * katie (install): undo the "auto-building from accepted" stuff
2733         (i.e. remove the .orig.tar.gz symlink and remove the files from
2734         unstable_accepted table).
2735
2736 2002-04-16  James Troup  <james@nocrew.org>
2737
2738         * jennifer (upload_too_new): fix typo which was causing all
2739         timestamp comparisons to be against the .changes file.  Also move
2740         back to the original directory so we do the comparisons against
2741         accurate timestamps.
2742
2743         * tea (check_missing_tar_gz_in_dsc): new function.
2744
2745         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2746         file mentioned in the .dsc.
2747
2748         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2749         way mails reach debian-{devel-,}changes@l.d.o.
2750
2751 2002-04-02  Ryan Murray  <rmurray@debian.org>
2752
2753         * cron.daily: run shania after rhona
2754         * cron.daily-non-US: likewise.
2755
2756 2002-04-01  James Troup  <james@nocrew.org>
2757
2758         * katie: re-add proposed-updates/stable install support.
2759
2760         * katie.py (Katie.dump_vars): add changes["changes"] as an
2761         optional field; should be mandatory later.
2762
2763 2002-03-31  James Troup  <james@nocrew.org>
2764
2765         * katie (install): support a Suite::<foo>::CopyKatie similar to
2766         CopyChanges.  Done seperately because .katie files don't need to
2767         be mirrored and will probably be copied to another directory as a
2768         result.
2769
2770         * halle (main): add missing debug to options.
2771
2772 2002-03-29  James Troup  <james@nocrew.org>
2773
2774         * madison (main): add a -r/--regex option.
2775
2776 2002-03-26  James Troup  <james@nocrew.org>
2777
2778         * lisa: don't trample on changes["distribution"]; make a copy of
2779         it as changes["suite"] instead and use that.
2780
2781 2002-03-16  Anthony Towns  <ajt@debian.org>
2782
2783         * templates/lisa.bxa_notification: Fix some grammatical errors.
2784         Encourage contact via bxa@ftp-master email address.
2785
2786 2002-03-15  James Troup  <james@nocrew.org>
2787
2788         * jennifer (check_timestamps): remove bogus raise in except.
2789
2790 2002-03-15  Anthony Towns  <ajt@debian.org>
2791
2792         * cron.monthly: rotate mail/archive/bxamail as well as
2793         mail/archive/mail. This is for a complete archive of
2794         correspondence with the BXA.
2795
2796 2002-03-14  Anthony Towns  <ajt@debian.org>
2797
2798         * crypto-in-main changes.
2799
2800         * utils.py (move, copy): add an optional perms= parameter to let you
2801         set the resulting permissions of the moved/copied file
2802         * katie.py (force_move): rejected/morgued files should be unreadable
2803         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2804         should be unreadable.
2805
2806 2002-03-07  Ryan Murray  <rmurray@debian.org>
2807
2808         * katie (install): check for existance of "files id" key as well as
2809         it being set to a valid value.
2810         * katie (install): check for existense and valid value for location
2811         id as well
2812
2813 2002-03-05  Ryan Murray  <rmurray@debian.org>
2814
2815         * katie.py (do_reject): reread the reason file after editing it.
2816
2817 2002-02-25  James Troup  <james@nocrew.org>
2818
2819         * jennifer (check_changes): don't enforce sanity in .changes file
2820         names since it doesn't seem to be possible; pcmica-cs and similar
2821         freak show packages in particular cause real problems.
2822
2823         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2824         each dsc_file since the .orig.tar.gz checking code now uses it as
2825         a boolean.  Fixes bizarro rejections which bogusly claimed
2826         .diff.gz md5sum/size was incorrect.
2827
2828 2002-02-24  James Troup  <james@nocrew.org>
2829
2830         * katie (process_it): reset reject_message.
2831
2832 2002-02-22  James Troup  <james@nocrew.org>
2833
2834         * db_access.py(set_files_id): disable use of
2835         currval('files_id_seq') because it was taking 3 seconds on auric
2836         which is insane (most calls take < 0.01) and simply call
2837         get_files_id() for the return value instead.
2838
2839         * katie.py (Katie.do_query): convenience function; unused by
2840         default, useful for profiling.
2841         * db_access.py (do_query): likewise.
2842
2843         * katie (install): fix insert SQL call when binary has no source.
2844
2845         * lisa (determine_new): auto-correct non-US/main to non-US.
2846         (determine_new): add a warning when adding things to stable.
2847         (edit_index): use our_raw_input().
2848         (edit_overrides): likewise.
2849         (do_new): likewise.  Use re.search() not re.match() since the
2850         default answer may not be the first one.
2851         (do_byhand): likewise.
2852         (do_new): Default to 'S'kip and never 'A'dd.
2853
2854         * jennifer (action): pass prompt to our_raw_input().
2855         * melanie (game_over): likewise.
2856         * katie (action): likewise.
2857
2858         * utils.py (our_raw_input): add an optional prompt argument to
2859         make the function more usable as a drop in replacement for
2860         raw_input().
2861
2862         * jennifer (check_files): correct reject() to not double prefix
2863         when using katie.py based functions.
2864         (check_dsc): likewise.
2865
2866         * katie.py (Katie.reject): prepend a new line if appropriate
2867         rathen than appending one to avoid double new lines when caller
2868         adds one of his own.
2869
2870         * lisa (determine_new): warn if the package is also in other
2871         components.
2872
2873 2002-02-20  James Troup  <james@nocrew.org>
2874
2875         * jennifer (check_files): if .changes file lists "source" in
2876         Architecture field, there must be a .dsc.
2877
2878 2002-02-15  James Troup  <james@nocrew.org>
2879
2880         * ashley (main): add some missing fields.
2881
2882         * katie.py (Katie.check_dsc_against_db): fix to take into account
2883         the fact that the .orig.tar.gz might be in byhand, accepted or
2884         new.  Also fix calling of reject().
2885         (Katie.check_binaries_against_db): fix calling of reject().
2886         (Katie.check_source_against_db): likewise.
2887         (Katie.dump_vars): add missing variables used for bug closures.
2888
2889         * lisa (changes_compare_by_time): sort by reverse time.
2890
2891         * katie.py (Katie.accept): log.
2892         (Katie.dump_vars): missing has_key test for optional changes fields.
2893
2894         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2895         (process_it): traceback goes to stderr, not stdout.
2896         (acknowledge_new): log.
2897         (do_byhand): likewise.
2898
2899         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2900
2901         * add_constraints.sql: add grants for the new fingerprint table.
2902
2903 2002-02-13  James Troup  <james@nocrew.org>
2904
2905         * katie (do_reject): basename the .changes filename before trying
2906         to use it to construct the .reason filename.
2907         (process_it): call Katie.update_subst() so do_reject() DTRT with
2908         the mail template.
2909         (do_reject): setup the mail template correctly.
2910
2911 2002-02-12  James Troup  <james@nocrew.org>
2912
2913         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
2914         (check_files): don't abuse global dictionaries.
2915         (Ent): use all variables.
2916         (check_timestamps): don't abuse global dictionaries.
2917
2918         * fernanda.py: renamed to .py so lisa can import it.
2919         (check_dsc): remove unused local variables (pychecker).
2920         (display_changes): split off from check_changes.
2921
2922         * katie: rewritten; most of the functionality moves to jennifer;
2923         what's left is the code to install packages once a day from the
2924         'accepted' directory.
2925
2926         * jennifer: new program, processes packages in 'unchecked'
2927         (i.e. most of the non-install functionality of old katie).
2928
2929         * katie.py: common functions shared between the clique of
2930         jennifer, lisa and katie.
2931
2932         * lisa: new program; handles NEW and BYHAND packages.
2933
2934         * jeri (usage): new function.
2935         (main): use it.
2936         (check_package): remove unused local variable (pychecker).
2937
2938         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
2939         binaries and source.  Add install_date to source.
2940
2941         * halle (usage): new function.
2942         (main): use it.  Remove unused options.
2943         (check_changes): remove unused local variable (pychecker).
2944
2945         * add_constraints.sql: add fingerprint references.
2946
2947         * db_access.py (get_or_set_fingerprint_id): new function.
2948
2949         * ashley (main): new program; dumps the contents of a .katie file
2950         to stdout.
2951
2952         * alyson (main): remove option handling since we don't actually
2953         support any.
2954         * cindy (main): likewise.
2955
2956         * remove unnecessary imports and pre-define globals (pychecker).
2957
2958 2002-02-11  Anthony Towns  <ajt@debian.org>
2959
2960         * added installation-report and upgrade-report pseudo-packages
2961
2962 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
2963
2964         * katie (update_subst): use Dinstall::TrackingServer.
2965         * melanie (main): likewise.
2966
2967 2002-01-27  James Troup  <james@nocrew.org>
2968
2969         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
2970         noticing, jgg@ for fix.
2971
2972 2002-01-19  James Troup  <james@nocrew.org>
2973
2974         * utils.py (extract_component_from_section): handle non-US
2975         non-main properly.
2976
2977 2002-01-12  James Troup  <james@nocrew.org>
2978
2979         * madison: add support for -S/--source-and-binary which displays
2980         information for the source package and all it's binary children.
2981
2982 2002-01-13  Anthony Towns  <ajt@debian.org>
2983
2984         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
2985         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
2986           and 2002 key ids.
2987         * katie.conf-non-US: Likewise.
2988         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
2989           multiple keys automatically. This is probably only useful for
2990           transitioning from an expired (or revoked?) key.
2991
2992 2002-01-08  Ryan Murray  <rmurray@debian.org>
2993
2994         * debian/python-dep: new file that prints out python:Depends for
2995           substvars
2996         * debian/control: use python:Depends, build-depend on python
2997           lower Depends: on postgresql to Suggests:
2998         * debian/rules: determine python version, install to the correct
2999           versioned dir
3000
3001 2001-12-18  Anthony Towns  <ajt@debian.org>
3002
3003         * ziyi: unlink Release files before overwriting them (in case they've
3004           been merged)
3005         * ziyi: always include checksums/sizes for the uncompressed versions
3006           of Sources and Packages, even if they're not present on disk
3007
3008 2001-11-26  Ryan Murray  <rmurray@debian.org>
3009
3010         * ziyi (main): add SigningPubKey config option
3011         * katie.conf: use SigningPubKey config option
3012         * katie.conf-non-US: likewise
3013
3014 2001-11-24  James Troup  <james@nocrew.org>
3015
3016         * katie (acknowledge_new): log newness.
3017
3018 2001-11-24  Anthony Towns  <ajt@debian.org>
3019
3020         * ziyi (real_arch): bail out if some moron forgot to reset
3021         untouchable on stable.
3022         (real_arch): source Release files.
3023
3024 2001-11-19  James Troup  <james@nocrew.org>
3025
3026         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3027         utils.get_conf().
3028         * shania (main): likewise.
3029
3030         * rhona (main): add default options.
3031
3032         * db_access.py (get_archive_id): case independent.
3033
3034         * katie (action): sort files so that ordering is consistent
3035         between mails; noticed/requested by Joey.
3036
3037 2001-11-17  Ryan Murray  <rmurray@debian.org>
3038
3039         * utils.py: add get_conf function, change startup code to read all
3040           config files to the Cnf that get_conf returns
3041           use the component list from the katie conf rather than the hardcoded
3042           list.
3043         * all scripts: use new get_conf function
3044         * shania: fix try/except around changes files
3045         * jenna: only do debian-installer if it is a section in Cnf
3046
3047 2001-11-16  Ryan Murray  <rmurray@debian.org>
3048
3049         * shania (main): Initialize days to a string of a number.
3050                  (main): Initialize Cnf vars before reading in Cnf
3051
3052 2001-11-14  Ryan Murray  <rmurray@debian.org>
3053
3054         * shania (main): Initialize days to a number.
3055
3056 2001-11-04  James Troup  <james@nocrew.org>
3057
3058         * docs/Makefile: use docbook-utils' docbook2man binary.
3059
3060         * Change all "if foo == []" constructs into "if not foo".
3061
3062         * katie (check_changes): when installing into stable from
3063         proposed-updates, remove all non-stable target distributions.
3064         (check_override): don't check for override disparities on stable
3065         installs.
3066         (stable_install): update install_bytes appropriately.
3067         (reject): stable rejection support; i.e. don't remove files when
3068         rejecting files in the pool, rather remove them from the
3069         proposed-update suite instead, rhona will do the rest.
3070         (manual_reject): support for a stable specific template.
3071         (main): setup up stable rejector in subst.
3072
3073 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3074
3075         * debian/control (Build-Depends): docbook2man has been superseded
3076         by docbook-utils.
3077
3078         * neve (main): exit with a more useful error message.
3079         (update_suites): Suite::<suite>::Version, Origin and Description
3080         are not required, so don't fail if they don't exist.
3081
3082         * db_access.py (get_archive_id): return -1 on error rather than
3083         raise an exception.
3084         (get_location_id): likewise.
3085
3086         * madison (main): don't exit on the first not-found package,
3087         rather exit with an appropriate return code after processing all
3088         packages.
3089
3090 2001-11-03  James Troup  <james@nocrew.org>
3091
3092         * claire.py (find_dislocated_stable): add per-architecture
3093         symlinks for dislocated architecture: all debs.
3094
3095 2001-10-19  Anthony Towns  <ajt@debian.org>
3096
3097         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3098
3099 2001-10-10  Anthony Towns  <ajt@debian.org>
3100
3101         * claire.py (fix_component_section): do _not_ assign to None under
3102         any circumstances
3103
3104 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3105
3106         * melanie (main): don't duplicate architectures when removing from
3107         more than one suite.
3108
3109         * heidi (main, process_file, get_list): report suite name not ID.
3110
3111         * naima (nmu_p): be case insensitive.
3112
3113         * naima (action): more list handling clean ups.
3114
3115         * melanie (main): clean up lists handling to use string.join and
3116         IN's.
3117
3118         * madison (main): clean up suite and architecture argument parsing
3119         to use slices less and string.join more.
3120
3121         * utils.py (parse_changes): Use string.find() instead of slices for
3122         string comparisons thereby avoid hardcoding the length of strings.
3123         * ziyi (main): likewise.
3124
3125 2001-10-07  James Troup  <james@nocrew.org>
3126
3127         * Remove mode argument from utils.open_files() calls if it's the
3128         default, i.e. 'r'.
3129
3130 2001-09-27  James Troup  <james@nocrew.org>
3131
3132         * katie (init): new function; options clean up.
3133         (usage): add missing options, remove obsolete ones.
3134         (main): adapt for the two changes above.  If the lock file or
3135         new-ack log file don't exist, create them.  Don't try to open the
3136         new-ack log file except running in new-ack mode.
3137
3138         * alyson (main): initialize all the tables that are based on the
3139         conf file.
3140
3141         * utils.py (touch_file): like touch(1).
3142         (where_am_i): typo.
3143
3144         * catherine (usage): new.
3145         (main): use it.  options cleanup.
3146         * claire.py: likewise.
3147         * fernanda: likewise.
3148         * heidi: likewise.
3149         * jenna: likewise.
3150         * shania: likewise.
3151         * ziyi: likewise.
3152
3153         * andrea: options cleanup.
3154         * charisma: likewise.
3155         * julia: likewise.
3156         * madison: likewise.
3157         * melanie: likewise.
3158         * natalie: likewise.
3159         * rhona: likewise.
3160         * tea: likewise.
3161
3162 2001-09-26  James Troup  <james@nocrew.org>
3163
3164         * utils.py: default to sane config file locations
3165         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3166         or they can point to the real ones through use of a new Config
3167         section.  Based on an old patch by Adam Heath.
3168         (where_am_i): use the new default config stuff.
3169         (which_conf_file): likewise.
3170         (which_apt_conf_file): likewise.
3171
3172         * charisma (main): output defaults to
3173         `Package~Version\tMaintainer'; input can be of either form.  When
3174         parsing the new format do version comparisons, when parsing the
3175         old format assume anything in the extra file wins.  This fixes the
3176         problem of newer non-US packages being overwhelmed by older
3177         versions still in stable on main.
3178
3179 2001-09-17  James Troup  <james@nocrew.org>
3180
3181         * natalie.py (list): use result_join().
3182
3183         * denise (main): result_join() moved to utils.
3184
3185         * utils.py (result_join): move to utils; add an optional seperator
3186         argument.
3187
3188 2001-09-14  James Troup  <james@nocrew.org>
3189
3190         * heidi (set_suite): new function; does --set like natalie does,
3191         i.e. turns it into a sequence of --add's and --remove's
3192         internally.  This is a major win (~20 minute run time > ~20
3193         seconds) in the common, everday (i.e. testing) case.
3194         (get_id): common code used by set_suite() and process_file().
3195         (process_file): call set_suite() and get_id().
3196         (main): add logging support.
3197
3198         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3199         files.
3200
3201         * utils.py (parse_changes): use slices or simple string comparison
3202         in favour of regexes where possible.
3203
3204         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3205         fact that the string VARDATA() points to are not null terminated.
3206
3207         * denise (result_join): new function; like string.join() but
3208         handles None's.
3209         (list): use it.
3210         (main): likewise.
3211
3212         * charisma (main): python-pygresql 7.1 returns None not "".
3213
3214 2001-09-14  Ryan Murray  <rmurray@debian.org>
3215
3216         * natalie.py (list): handle python-pygresql 7.1 returning None.
3217
3218 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3219
3220         * madison (main): return 1 if no package is found.
3221
3222 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3223
3224         * madison (main): better error handling for incorrect
3225         -a/--architecture or -s/--suite arguments.
3226         (usage): new.
3227         (main): use it.
3228
3229 2001-09-05  Ryan Murray  <rmurray@debian.org>
3230
3231         * charisma, madison, katie: remove use of ROUser
3232         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3233
3234 2001-08-26  James Troup  <james@nocrew.org>
3235
3236         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3237         maintained packages at cjwatson@'s request.
3238
3239 2001-08-21  James Troup  <james@nocrew.org>
3240
3241         * madison (main): add -a/--architecture support.
3242
3243         * jenna: use logging instead of being overly verbose on stdout.
3244
3245 2001-08-11  Ryan Murray  <rmurray@debian.org>
3246
3247         * melanie: add functional help option
3248
3249 2001-08-07  Anthony Towns  <ajt@debian.org>
3250
3251         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3252
3253 2001-07-28  James Troup  <james@nocrew.org>
3254
3255         * katie (check_dsc): ensure source version is >> than existing
3256         source in target suite.
3257
3258 2001-07-25  James Troup  <james@nocrew.org>
3259
3260         * natalie.py: add logging support.
3261
3262         * utils.py (open_file): make the second argument optional and
3263         default to read-only.
3264
3265         * rene (main): work around broken source packages that duplicate
3266         arch: all packages with arch: !all packages (no longer allowed
3267         into the archive by katie).
3268
3269 2001-07-13  James Troup  <james@nocrew.org>
3270
3271         * katie (action): don't assume distribution is a dictionary.
3272         (update_subst): don't assume architecture is a dictionary and that
3273         maintainer822 is defined.
3274         (check_changes): recognise nk_format exceptions.
3275         (check_changes): reject on 'testing' only uploads.
3276         (check_files): when checking to ensure all packages are newer
3277         versions check against arch-all packages too.
3278         (check_dsc): enforce the existent of a sane set of mandatory
3279         fields.  Ensure the version number in the .dsc (modulo epoch)
3280         matches the version number in the .changes file.
3281
3282         * utils.py (changes_compare): ignore all exceptions when parsing
3283         the changes files.
3284         (build_file_list): don't UNDEF on a changes file with no format
3285         field.
3286
3287 2001-07-07  James Troup  <james@nocrew.org>
3288
3289         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3290         rather than 'changedbyname' to avoid false negatives on uploads
3291         with an email-address-only Changed-By field.
3292         (check_dsc): don't overwrite reject_message; append to it.
3293         (check_signature): likewise.
3294         (check_changes): likewise.
3295         (announce): condition logging on 'action'.
3296
3297         * logging.py: new logging module.
3298
3299         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3300         sub-tree into a separate (global) variable.
3301         (check_dsc): ensure format is 1.0 to retain backwards
3302         compatability with dpkg-source in potato.
3303         (main): only try to obtain the lock when not running in no-action
3304         mode.
3305         Use the new logging module.
3306
3307         * christina: initial version; only partially usable.
3308
3309 2001-06-28  Anthony Towns  <ajt@debian.org>
3310
3311         * apt.conf: Add ExtraOverrides to auric.
3312
3313 2001-06-25  James Troup  <james@nocrew.org>
3314
3315         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3316         they preferred the name 'Uploaders'.
3317
3318 2001-06-23  James Troup  <james@nocrew.org>
3319
3320         * katie (check_files): fix typo in uncommon rejection message,
3321         s/sourceversion/source version/.
3322
3323         * denise (main): we can't use print because stdout has been
3324         redirected.
3325
3326         * katie (source_exists): new function; moved out of check_files()
3327         and added support for binary-only NMUs of earlier sourceful NMUs.
3328
3329         * rhona (clean): find_next_free has moved.
3330
3331         * utils.py (find_next_free): new function; moved here from rhona.
3332         Change too_many to be an argument with a default value, rather
3333         than a hardcoded variable.
3334
3335         * shania: rewritten to work better; REJECTion reminder mail
3336         handling got lost though.
3337
3338 2001-06-22  James Troup  <james@nocrew.org>
3339
3340         * rhona (main): remove unused override code.
3341
3342         * fernanda (main): remove extraneous \n's from utils.warn calls.
3343         * natalie.py (list): likewise.
3344
3345         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3346         use utils.{warn,fubar} where appropriate.
3347
3348 2001-06-21  James Troup  <james@nocrew.org>
3349
3350         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3351         functionality.
3352         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3353         by the "Maintainers" field in the .dsc file and maintainer groups.
3354         (nmu_p.__init__): read in the list of group maintainer names.
3355         (announce): use nmu_p.
3356
3357 2001-06-20  James Troup  <james@nocrew.org>
3358
3359         * rene (main): hardcode the suite experimental is compared to by
3360         name rather than number.
3361
3362         * katie (check_files): differentiate between doesn't-exist and
3363         permission-denied in "can not read" rejections; requested by edd@.
3364         (check_dsc): use os.path.exists rather than os.access to allow the
3365         above check to kick in.
3366
3367         * heidi (process_file): read all input before doing anything and
3368         use transactions.
3369
3370 2001-06-15  James Troup  <james@nocrew.org>
3371
3372         * fernanda: new script; replaces old 'check' shell script
3373         nastiness.
3374
3375 2001-06-14  James Troup  <james@nocrew.org>
3376
3377         * katie: actually import traceback module to avoid amusing
3378         infinite loop.
3379
3380 2001-06-10  James Troup  <james@nocrew.org>
3381
3382         * utils.py (extract_component_from_section): fix to handle just
3383         'non-free' and 'contrib'.  Also fix to handle non-US in a
3384         completely case insensitive manner as a component.
3385
3386 2001-06-08  James Troup  <james@nocrew.org>
3387
3388         * madison (arch_compare): sort function that sorts 'source' first
3389         then alphabetically.
3390         (main): use it.
3391
3392 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3393
3394         * catherine (poolize): explicitly make poolized_size a long so it
3395         doesn't overflow when poolizing e.g. entire archives.
3396
3397 2001-06-01  James Troup  <james@nocrew.org>
3398
3399         * utils.py (send_mail): throw exceptions rather than exiting.
3400
3401         * katie (process_it): catch exceptions and ignore them.
3402
3403 2001-06-01  Michael Beattie  <mjb@debian.org>
3404
3405         * added update-mailingliststxt and update-readmenonus to update
3406         those files, respectively. modified cron.daily{,-non-US} to
3407         use them.
3408
3409 2001-05-31  Anthony Towns  <ajt@debian.org>
3410
3411         * rhona: make StayOfExecution work.
3412
3413 2001-05-31  James Troup  <james@nocrew.org>
3414
3415         * rhona (find_next_free): fixes to not overwrite files but rename
3416         them by appending .<n> instead.
3417         (clean): use find_next_free and use dated sub-directories in the
3418         morgue.
3419
3420         * utils.py (move): don't overwrite files unless forced to.
3421         (copy): likewise.
3422
3423 2001-05-24  James Troup  <james@nocrew.org>
3424
3425         * katie (check_files): determine the source version here instead
3426         of during install().
3427         (check_files): check for existent source with bin-only NMU
3428         support.
3429         (main): sort the list of changes so that the source-must-exist
3430         check Does The Right Thing(tm).
3431
3432         * utils.py (changes_compare): new function; sorts a list of
3433         changes files by 'have-source', source, version.
3434         (cc_fix_changes): helper function.
3435         (parse_changes): use compiled regexes.
3436         (fix_maintainer): likewise.
3437
3438         * rene (main): warn about packages in experimental that are
3439         superseded by newer versions in unstable.
3440
3441 2001-05-21  James Troup  <james@nocrew.org>
3442
3443         * rene (main): add support for checking for ANAIS (Architecture
3444         Not Allowed In Source) packages.
3445
3446 2001-05-17  James Troup  <james@nocrew.org>
3447
3448         * katie (check_changes): initalize `architecture' dictionary in
3449         changes global so that if we can't parse the changes file for
3450         whatever reason we don't undef later on.
3451
3452         * utils.py (parse_changes): fix handling of multi-line fields
3453         where the first line did have data.
3454
3455 2001-05-05  Anthony Towns  <ajt@debian.org>
3456
3457         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3458         (It should always have been there. Ooopsy.)
3459
3460 2001-05-03  Anthony Towns  <ajt@debian.org>
3461
3462         * jenna: Cleanup packages that move from arch:any to arch:all or
3463         vice-versa.
3464
3465 2001-04-24  Anthony Towns  <ajt@debian.org>
3466
3467         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3468         cope with debian-installer and boot-floppies' md5sum.txt.
3469
3470 2001-04-16  James Troup  <james@nocrew.org>
3471
3472         * katie (check_changes): add missing %s format string argument.
3473         (stable_install): temporary work around for morgue location to
3474         move installed changes files into.
3475         (stable_install): helps if you actually read in the template.
3476         (manual_reject): fix for editing of reject messages which was
3477         using the wrong variable name.
3478
3479         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3480
3481 2001-04-13  James Troup  <james@nocrew.org>
3482
3483         * katie (manual_reject): Cc the installer.
3484         (reject): don't.
3485         (check_changes): remove unused maintainer-determination code.
3486         (update_subst): add support for Changed-By when setting the
3487         *MAINTAINER* variables.
3488
3489         * rene (bar): new function to check for packages on architectures
3490         when they shouldn't be.
3491
3492         * natalie.py (main): use fubar() and warn() from utils.
3493
3494         * utils.py (whoami): new mini-function().
3495         * melanie (main): use it.
3496         * katie (manual_reject): likewise.
3497
3498 2001-04-03  James Troup  <james@nocrew.org>
3499
3500         * katie (action): ignore exceptions from os.path.getmtime() so we
3501         don't crash on non-existent changes files (e.g. when they are
3502         moved between the start of the install run in cron.daily and the
3503         time we get round to processing them).
3504
3505         * madison (main): also list source and accept -s/--suite.
3506
3507         * jenna (generate_src_list): missing \n in error message.
3508
3509         * katie (update_subst): add sane defaults for when changes is
3510         skeletal.
3511
3512 2001-03-29  James Troup  <james@nocrew.org>
3513
3514         * melanie (main): use fubar() and warn() from utils.  Remember who
3515         the maintainer for the removed packages are and display that info
3516         to the user.  Readd support for melanie-specific Bcc-ing that got
3517         lost in the TemplateSubst transition.
3518
3519         * utils.py (fubar): new function.
3520         (warn): like wise.
3521
3522         * db_access.py (get_maintainer): as below.
3523
3524         * charisma (get_maintainer): moved the bulk of this function to
3525         db_access so that melanie can use it too.
3526
3527         * claire.py (find_dislocated_stable): restrict the override join
3528         to those entries where the suite is stable; this avoids problems
3529         with packages which have moved to new sections (e.g. science)
3530         between stable and unstable.
3531
3532 2001-03-24  James Troup  <james@nocrew.org>
3533
3534         * catherine (poolize): new function; not really independent of
3535         main() fully, yet.
3536         (main): use it.
3537
3538         * katie (stable_install): __SUITE__ needs to be space prefixed
3539         because buildd's check for 'INSTALLED$'.
3540
3541 2001-03-22  James Troup  <james@nocrew.org>
3542
3543         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3544
3545         * jenna: rewritten; now does deletions on a per-suite level
3546         instead of a per-suite-component-architecture-type level.  This
3547         allows mutli-component packages to be auto-cleaned (and as a
3548         bonus, reduces the code size and duplication).
3549
3550 2001-03-22  Anthony Towns  <ajt@debian.org>
3551
3552         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3553         instead of just giving a gpg error.
3554
3555 2001-03-21  James Troup  <james@nocrew.org>
3556
3557         * madison (main): use apt_pkg.VersionCompare to sort versions so
3558         that output is correctly sorted for packages like debhlper.
3559         Noticed by ajt@.
3560
3561         * tea (check_source_in_one_dir): actually find problematic source
3562         packages.
3563
3564         * katie (check_dsc): remember the orig.tar.gz's location ID if
3565         it's not in a legacy suite.
3566         (check_diff): we don't use orig_tar_id.
3567         (install): add code to handle sourceful diff-only upload of
3568         packages which change components by copying the .orig.tar.gz into
3569         the new component, if it doesn't already exist there.
3570         (process_it): reset orig_tar_location (as above).
3571
3572         * melanie (main): use template substiution for the bug closing
3573         emails.
3574         (main): don't hardcode bugs.debian.org or packages.debian.org
3575         either; use configuration items.
3576
3577         * katie: likewise.
3578
3579         * natalie.py (init): use None rather than 'localhost' for the
3580         hostname given to pg.connect.
3581
3582         * utils.py (TemplateSubst): new function; lifted from
3583         userdir-ldap.
3584
3585 2001-03-21  Ryan Murray  <rmurray@debian.org>
3586
3587         * katie (announce): fix the case of non-existent
3588         Suite::$SUITE::Announce.
3589
3590 2001-03-20  Ryan Murray  <rmurray@debian.org>
3591
3592         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3593         /usr/.
3594
3595         * alyson (main): use config variable for database name.
3596         * andrea (main): likewise.
3597         * catherine (main): likewise.
3598         * charisma (main): likewise.
3599         * cindy (main): likewise.
3600         * claire.py (main): likewise.
3601         * denise (main): likewise.
3602         * heidi (main): likewise.
3603         * jenna (main): likewise.
3604         * katie (main): likewise.
3605         * madison (main): likewise.
3606         * melanie (main): likewise.
3607         * neve (main): likewise.
3608         * rhona (main): likewise.
3609         * tea (main): likewise.
3610
3611 2001-03-15  James Troup  <james@nocrew.org>
3612
3613         * rhona (check_sources): fixed evil off by one (letter) error
3614         which was causing only .dsc files to be deleted when cleaning
3615         source packages.
3616
3617         * charisma (get_maintainer_from_source): remove really stupid and
3618         gratuitous IN sub-query and replace with normal inner join.
3619         (main): connect as read-only user nobody.
3620
3621         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3622         with EXISTS.
3623         (check_files): likewise; still disabled by default though.
3624         (clean_binaries): add ' seconds' to the mysterious number in the
3625         output.
3626         (clean): likewise.
3627
3628         * tea (check_files): add missing global declaration on db_files.
3629
3630 2001-03-14  James Troup  <james@nocrew.org>
3631
3632         * rhona: rewritten large chunks. Removed a lot of the silly
3633         selecting into dictionaries and replaced it with 'where exists'
3634         based sub queries.  Added support for StayOfExecution.  Fix the
3635         problem with deleting dsc_files too early and disable cleaning of
3636         unattached files.
3637
3638 2001-03-14  Anthony Towns  <ajt@debian.org>
3639
3640         * katie (announce): also check Changed-By when trying to detect
3641         NMUs.
3642
3643 2001-03-06  Anthony Towns  <ajt@debian.org>
3644
3645         * ziyi (main): Generate Release.gpg files as well, using the key from
3646         Dinstall::SigningKey in katie.conf, if present. That key has to be
3647         passwordless, and hence kept fairly secretly.
3648
3649 2001-03-02  James Troup  <james@nocrew.org>
3650
3651         * utils.py (str_isnum): new function; checks to see if the string
3652         is a number.
3653
3654         * shania (main): fix _hideous_ bug which was causing all files > 2
3655         weeks old to be deleted from incoming, even if they were part of a
3656         valid upload.
3657
3658 2001-02-27  James Troup  <james@nocrew.org>
3659
3660         * melanie (main): accept new argument -C/--carbon-copy which
3661         allows arbitarty carbon-copying of the bug closure messages.
3662         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3663         separate variable.
3664
3665 2001-02-27  Anthony Towns  <ajt@debian.org>
3666
3667         * ziyi: new program; generates Release files.
3668
3669 2001-02-25  James Troup  <james@nocrew.org>
3670
3671         * katie (reject): add missing '\n' to error message.
3672         (manual_reject): likewise.
3673         (install): catch exceptions from moving the changes file into DONE
3674         and ignore them.
3675
3676         * tea (check_md5sums): new function.
3677
3678 2001-02-25  Michael Beattie  <mjb@debian.org>
3679
3680         * melanie: use $EDITOR if available.
3681
3682 2001-02-15  James Troup  <james@nocrew.org>
3683
3684         * utils.py (parse_changes): don't crash and burn on empty .changes
3685         files.  Symptoms noticed by mjb@.
3686
3687 2001-02-15  Adam Heath  <doogie@debian.org>
3688
3689         * denise (main): use an absolute path for the output filename.
3690
3691         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3692         compile errors with postgresql-dev >= 7.0.
3693
3694 2001-02-12  James Troup  <james@nocrew.org>
3695
3696         * rene: initial version.
3697
3698         * andrea: initial version.
3699
3700         * catherine (main): remove obsolete assignment of arguments.
3701
3702 2001-02-09  James Troup  <james@nocrew.org>
3703
3704         * catherine: first working version.
3705
3706 2001-02-06  James Troup  <james@nocrew.org>
3707
3708         * katie (check_files): validate the priority field; i.e. ensure it
3709         doesn't contain a '/' (to catch people prepending the priority
3710         with the component rather than the section).
3711         (check_override): don't warn about source packages; the only check
3712         is on section and we have no GUI tools that would use the Section
3713         field for a Sources file.
3714         (announce): use tags rather than severities for NMUs.  Requested
3715         by Josip Rodin <joy@>. [#78035]
3716
3717 2001-02-04  James Troup  <james@nocrew.org>
3718
3719         * tea (check_override): new function; ensures packages in suites
3720         are also in the override file.  Thanks to bod@ for noticing that
3721         such packages existed.
3722
3723         * katie: move file type compiled regular expressions to utils as
3724         catherine uses them too.
3725         (check_changes): always default maintainer822 to the installer
3726         address so that any bail out won't cause undefs later.
3727         (check_files): update file type re's to match above.
3728         (stable_install): likewise.
3729         (reject): handle any except from moving the changes files.  Fixes
3730         crashes on unreadable changes files.
3731
3732         * melanie (main): add an explanation of why things are not removed
3733         from testing.
3734
3735 2001-01-31  James Troup  <james@nocrew.org>
3736
3737         * melanie (main): ignore a) no message, b) removing from stable or
3738         testing when invoked with -n/--no-action.
3739
3740         * katie (check_override): lower section before checking to see if
3741         we're whining about 'non-US' versus 'non-US/main'.
3742
3743         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3744         function so that we can use inside of PostgreSQL.
3745
3746 2001-01-28  James Troup  <james@nocrew.org>
3747
3748         * katie: updated to pass new flag to parse_changes() and deal with
3749         the exception raised on invalid .dsc's if appropriate.
3750         * shania (main): likewise.
3751         * melanie (main): likewise.
3752
3753         * tea (check_dscs): new function to validate all .dsc files in
3754         unstable.
3755
3756         * utils.py (parse_changes): if passed an additional flag, validate
3757         the .dsc file to ensure it's extractable by dpkg-source.
3758         Requested by Ben Collins <bcollins@>.
3759
3760 2001-01-27  James Troup  <james@nocrew.org>
3761
3762         * madison (main): connect to the DB as nobody.
3763
3764         * katie (check_files): remove support for -r/--no-version-check
3765         since it makes no sense under katie (jenna will automatically
3766         remove the (new) older version) and was evil in any event.
3767         (check_changes): add missing new line to rejection message.
3768         (check_dsc): likewise.
3769         (process_it): reset reject_message here.
3770         (main): not here.  Also remove support for -r.
3771
3772 2001-01-26  James Troup  <james@nocrew.org>
3773
3774         * katie (check_override): don't whine about 'non-US/main' versus
3775         'non-US'.
3776
3777 2001-01-26  Michael Beattie  <mjb@debian.org>
3778
3779         * natalie.py (usage): new function.
3780         (main): use it.
3781
3782 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3783
3784         * update-mirrorlists: Update README.non-US too (request from Joy).
3785
3786 2001-01-25  James Troup  <james@nocrew.org>
3787
3788         * katie (reject): catch any exception from utils.move() and just
3789         pass, we previously only caught can't-overwrite errors and not
3790         can't-read ones.
3791
3792         * jenna (generate_src_list): use ORDER BY in selects to avoid
3793         unnecessary changes to Packages files.
3794         (generate_bin_list): likewise.
3795
3796         * utils.py (extract_component_from_section): separated out from
3797         build_file_list() as it's now used by claire too.
3798
3799         * claire.py (find_dislocated_stable): rewrite the query to extract
3800         section information and handle component-less locations properly.
3801         Thanks to ajt@ for the improved queries.
3802         (fix_component_section): new function to fix components and
3803         sections.
3804
3805 2001-01-23  James Troup  <james@nocrew.org>
3806
3807         * katie (check_files): set file type for (u?)debs first thing, so
3808         that if we continue, other functions which rely on file type
3809         existing don't bomb out.  If apt_pkg or apt_inst raise an
3810         exception when parsing the control file, don't try any other
3811         checks, just drop out.
3812         (check_changes): new test to ensure there is actually a target
3813         distribution.
3814
3815 2001-01-22  James Troup  <james@nocrew.org>
3816
3817         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3818         <grin@>.
3819         (check_changes): when mapping to unstable, remember to actually
3820         add unstable to the suite list and not just remove the invalid
3821         suite.
3822
3823 2001-01-21  James Troup  <james@nocrew.org>
3824
3825         * katie (check_files): catch exceptions from debExtractControl()
3826         and reject packages which raise any.
3827
3828 2001-01-19  James Troup  <james@nocrew.org>
3829
3830         * katie (check_signature): basename() file name in rejection
3831         message.
3832
3833 2001-01-18  James Troup  <james@nocrew.org>
3834
3835         * katie (in_override_p): remember the section and priority from
3836         the override file so we can check them against the package later.
3837         (check_override): new function; checks section and priority (for
3838         binaries) from the package against the override file and mails the
3839         maintainer about any disparities.
3840         (install): call check_override after announcing the upload.
3841
3842 2001-01-16  James Troup  <james@nocrew.org>
3843
3844         * utils.py (build_file_list): catch ValueError's from splitting up
3845         the files field and translate it into a parse error.
3846
3847         * tea: add support for finding unreferenced files.
3848
3849         * katie (in_override_p): add support for suite-aliasing so that
3850         proposed-updates uploads work again.
3851         (check_changes): catch parses errors from utils.build_file_list().
3852         (check_dsc): likewise.
3853         (check_diff): yet more dpkg breakage so we require even newer a
3854         version.
3855
3856         * jenna (generate_bin_list): don't do nasty path munging that's no
3857         longer needed.
3858
3859         * denise (main): support for non-US; and rename testing's override
3860         files so they're based on testing's codename.
3861
3862 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3863
3864         * melanie: add to the bug closing message explaining what happens
3865         (or rather doesn't) with bugs against packages that have been
3866         removed.
3867
3868 2001-01-14  James Troup  <james@nocrew.org>
3869
3870         * charisma (main): fix silly off-by-one error; suite priority
3871         checking was done using "less than" rather than "less than or
3872         equal to" which was causing weird hesienbugs with wrong Maintainer
3873         fields.
3874
3875 2001-01-10  James Troup  <james@nocrew.org>
3876
3877         * katie (in_override_p): adapted to use SQL-based overrides.
3878         read_override_file function disappears.
3879
3880         * db_access.py: add new functions get_section_id, get_priority_id
3881         and get_override_type_id.
3882         (get_architecture_id): return -1 if the architecture is not found.
3883
3884         * heidi: switch %d -> %d in all SQL queries.
3885         (get_list): Use string.join where appropriate.
3886
3887         * rhona (in_override_p): don't die if the override file doesn't
3888         exist.
3889         (main): warn if the override file doesn't exist.
3890
3891         * alyson: new script; will eventually sync the config file and the
3892         SQL database.
3893
3894         * natalie.py: new script; manipulates overrides.
3895
3896         * melanie: new script; removes packages from suites.
3897
3898 2001-01-08  James Troup  <james@nocrew.org>
3899
3900         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3901         anything it just changed the symptom.  Recognise the new breakage
3902         and reject them too.
3903
3904 2001-01-07  James Troup  <james@nocrew.org>
3905
3906         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3907         to the .changes file, be sure to set up files[filename]["type"]
3908         too.
3909
3910 2001-01-06  James Troup  <james@nocrew.org>
3911
3912         * katie (check_diff): new function; detects bad diff files
3913         produced by dpkg 1.8.1 and rejects thems.
3914         (process_it): call check_diff().
3915         (check_dsc): gar.  Add support for multiple versions of the
3916         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
3917         and size against all versions and use one which matches if
3918         possible and exclude any that don't from being poolized to avoid
3919         file overwrites.  Thanks to broonie@ for providing the example.
3920         (install): skip any files marked as excluded as above.
3921
3922 2001-01-05  James Troup  <james@nocrew.org>
3923
3924         * heidi (process_file): add missing argument to error message.
3925
3926 2001-01-04  James Troup  <james@nocrew.org>
3927
3928         * heidi (main): fix handling of multiple files by reading all
3929         files not just the first file n times (where n = the number of
3930         files passed as arguments).
3931
3932 2001-01-04  Anthony Towns  <ajt@debian.org>
3933
3934         * katie (check_dsc): proper fix for the code which locates the
3935         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
3936
3937 2000-12-20  James Troup  <james@nocrew.org>
3938
3939         * rhona: replace IN's with EXISTS's to make DELETE time for
3940         binaries and source sane on auric.  Add a -n/--no-action flag and
3941         make it stop actions if used.  Fixed a bug in binaries deletion
3942         with no StayOfExecution (s/</<=/).  Add working -h/--help and
3943         -V/--version.  Giving timing info on deletion till I'm sure it's
3944         sane.
3945
3946         * katie (check_changes): map testing to unstable.
3947
3948         * madison: new script; shows versions in different architectures.
3949
3950         * katie (check_dsc): ensure size matches as well as md5sum;
3951         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
3952         #69702.
3953
3954 2000-12-19  James Troup  <james@nocrew.org>
3955
3956         * katie (reject): ignore the "can't overwrite file" exception from
3957         utils.move() and leave the files where they are.
3958         (reject): doh! os.access() test was reversed so we only tried to
3959         move files which didn't exist... replaced with os.path.exists()
3960         test the right way round.
3961
3962         * utils.py (move): raise an exception if we can't overwrite the
3963         destination file.
3964         (copy): likewise.
3965
3966 2000-12-18  James Troup  <james@nocrew.org>
3967
3968         * rhona: first working version.
3969
3970         * db_access.py (get_files_id): force both sizes to be integers.
3971
3972         * katie (main): use size_type().
3973
3974         * utils.py (size_type): new function; pretty prints a file size.
3975
3976 2000-12-17  James Troup  <james@nocrew.org>
3977
3978         * charisma (main): do version compares so that older packages do
3979         not override newer ones and process source first as source wins
3980         over binaries in terms of who we think of as the Maintainer.
3981
3982 2000-12-15  James Troup  <james@nocrew.org>
3983
3984         * katie (install): use the files id for the .orig.tar.gz from
3985         check_dsc().
3986         (install): limit select for legacy source to a) source in legacy
3987         or legacy-mixed type locations and b) distinct on files.id.
3988         (install): rather than the bizarre insert new, delete old method
3989         for moving legacy source into the pool, use a simple update of
3990         files.
3991         (process_it): initalize some globals before each process.
3992
3993 2000-12-14  James Troup  <james@nocrew.org>
3994
3995         * katie (in_override_p): index on binary_type too since .udeb
3996         overrides are in a different file.
3997         (read_override_file): likewise.
3998         (check_files): correct filename passed to get_files_id().
3999         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4000         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4001         (check_dsc): remember the files id of the .orig.tar.gz, not the
4002         location id.
4003
4004 2000-12-13  James Troup  <james@nocrew.org>
4005
4006         * utils.py (poolify): force the component to lower case except for
4007         non-US.
4008
4009         * katie (in_override_p): handle .udeb-specific override files.
4010         (check_files): pass the binary type to in_override_p().
4011         (check_dsc): remember the location id of the old .orig.tar.gz in
4012         case it's not in the pool.
4013         (install): use location id from dsc_files; which is where
4014         check_dsc() puts it for old .orig.tar.gz files.
4015         (install): install files after all DB work is complete.
4016         (reject): basename() the changes filename.
4017         (manual_reject): likewise.
4018
4019         * shania: new progam; replaces incomingcleaner.
4020
4021 2000-12-05  James Troup  <james@nocrew.org>
4022
4023         * katie (check_changes): if inside stable and can't find files
4024         from the .changes; assume it's installed in the pool and chdir()
4025         to there.
4026         (check_files): we are not installing for stable installs, so don't
4027         check for overwriting existing files.
4028         (check_dsc): likewise.
4029         (check_dsc): reorder .orig.tar.gz handling so that we search in
4030         the pool first and only then fall back on any .orig.tar.gz in the
4031         cwd; this avoids false positives on the overwrite check when
4032         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4033         (install): if this is a stable install, bail out to
4034         stable_install() immediately.
4035         (install): dsc_files handling was horribly broken. a) we need to
4036         add files from the .dsc and not the .changes (duh), b) we need to
4037         add the .dsc file itself to dsc_files (to be consistent with neve
4038         if for no other reason).
4039         (stable_install): new function; handles installs from inside
4040         proposed-updates to stable.
4041         (acknowledge_new): basename changes_filename before doing
4042         anything.
4043         (process_it): absolutize the changes filename to avoid the
4044         requirement of being in the same directory as the .changes file.
4045         (process_it): save and restore the cwd as stable installs can
4046         potentially jump into the pool to find files.
4047
4048         * jenna: dislocated_files support using claire.
4049
4050         * heidi (process_file): select package field from binaries
4051         explicitly.
4052
4053         * db_access.py (get_files_id): fix cache key used.
4054
4055         * utils.py (build_file_list): fix 'non-US/non-free' case in
4056         section/component splitting.
4057         (move): use os.path.isdir() rather than stat.
4058         (copy): likewise.
4059
4060         * claire.py: new file; stable in non-stable munger.
4061
4062         * tea: new file; simply ensures all files in the DB exist.
4063
4064 2000-12-01  James Troup  <james@nocrew.org>
4065
4066         * katie (check_dsc): use regex_safe().
4067         (check_changes): typo in changes{} key:
4068         s/distributions/distribution/.
4069         (install): use changes["source"], not files[file]["source"] as the
4070         latter may not exist and the former is used elsewhere.  Commit the
4071         SQL transaction earlier.
4072
4073         * utils.py (regex_safe): new function; escapes characters which
4074         have meaning to SQL's regex comparison operator ('~').
4075
4076 2000-11-30  James Troup  <james@nocrew.org>
4077
4078         * katie (install): pool_location is based on source package name,
4079         not binary package.
4080
4081         * utils.py (move): if dest is a directory, append the filename
4082         before chmod-ing.
4083         (copy): ditto.
4084
4085         * katie (check_files): don't allow overwriting of existing .debs.
4086         (check_dsc): don't allow overwriting of existing source files.
4087
4088 2000-11-27  James Troup  <james@nocrew.org>
4089
4090         * katie (check_signature): don't try to load rsaref; it's
4091         obsolete.
4092         (in_override_p): don't try to lookup override entries for packages
4093         with an invalid suite name.
4094         (announce): don't assume the suite name is valid; use Find() to
4095         lookup the mailing list name for announcements.
4096
4097         * utils.py (where_am_i): typo; hostname is in the first element,
4098         not second.
4099
4100         * db_access.py (get_suite_id): return -1 on an unknown suite.
4101
4102 2000-11-26  James Troup  <james@nocrew.org>
4103
4104         * katie (install): fix CopyChanges handling; typo in in checking
4105         Cnf for CopyChanges flag and was calling non-existent function
4106         copy_file.
4107
4108         * utils.py (copy): new function; clone of move without the
4109         unlink().
4110
4111 2000-11-25  James Troup  <james@nocrew.org>
4112
4113         * utils.py (build_file_list): handle non-US prefixes properly
4114         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4115         + 'libs' not 'non-US/libs').
4116         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4117         delays.  This is possibly(/probably) exim speicifc and (like other
4118         sendmail options) needs to be in the config file.
4119
4120 2000-11-24  James Troup  <james@nocrew.org>
4121
4122         * rhona (check_sources): we need file id from dsc_files; not id.
4123         Handle non .dsc source files being re-referenced in dsc_files.
4124
4125         * katie (in_override_p): strip out any 'non-US' prefix.
4126         (check_files): use utils.where_am_i() rather than hardcoding.
4127         (check_files): validate the component.
4128         (install): use utils.where_am_i() rather than hardcoding.
4129         (install): fix mail to go to actual recepient.
4130         (reject): likewise.
4131         (manual_reject): likewise.
4132         (acknowledge_new): likewise.
4133         (announce): likewise.
4134
4135         * db_access.py (get_component_id): ignore case when searching for
4136         the component and don't crash if the component can't be found, but
4137         return -1.
4138         (get_location_id): handle -1 from get_component_id().
4139
4140         * jenna (generate_src_list): don't bring 'suite' into our big
4141         multi-table-joining select as we already know the 'suite_id'.
4142         (generate_bin_list): likewise.
4143
4144         * neve (main): don't quit if not on ftp-master.
4145         (process_packages): remove unused variable 'suite_codename'.
4146
4147         * utils.py (move): actually move the file.
4148         (build_file_list): handle non-US prefixes in the section.
4149
4150         * catherine (main): use which_conf_file().
4151         * charisma (main): likewise.
4152         * heidi (main): likewise.
4153         * jenna (main): likewise.
4154         * katie (main): likewise.
4155         * neve (main): likewise.
4156         * rhona (main): likewise.
4157
4158         * utils.py (where_am_i): new routine; determines the archive as
4159         understood by other 'dak' programs.
4160         (which_conf_file): new routine; determines the conf file to read.
4161
4162 2000-11-17  James Troup  <james@nocrew.org>
4163
4164         * katie (install): fix where .changes files for proposed-updates
4165         go.
4166
4167 2000-11-04  James Troup  <james@nocrew.org>
4168
4169         * jenna (main): handle architecture properly if no
4170         -a/--architecture argument is given, i.e. reset architecture with
4171         the values for the suite for each suite.
4172
4173         * Add apt_pkg.init() to the start of all scripts as it's now
4174         required by python-apt.
4175
4176 2000-10-29  James Troup  <james@nocrew.org>
4177
4178         * jenna (generate_bin_list): take an additional argument 'type'
4179         and use it in the SELECT.
4180         (main): if processing component 'main', process udebs and debs.
4181
4182         * neve (process_packages): set up 'type' in 'binaries' (by
4183         assuming .deb).
4184
4185         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4186         (check_files): set up files[file]["dbtype"].
4187         (install): use files[file]["dbtype"] to set up the 'type' field in
4188         the 'binaries' table.
4189
4190         * init_pool.sql: add a 'type' field to the 'binaries' table to
4191         distinguisgh between ".udeb" and ".deb" files.
4192
4193         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4194         dest ? dirname(dest)" type check instead.
4195
4196         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4197         in the pool without crashing.  Also handle the case of being asked
4198         to look for something other than an .orig.tar.gz in the pool.
4199
4200 2000-10-26  James Troup  <james@nocrew.org>
4201
4202         * katie (install): fix filenames put into files table during
4203         poolification of legacy source.
4204
4205         * utils.py (move): work around a bug in os.path.basename() which
4206         cunningly returns '' if there is a trailing slash on the path
4207         passed to it.
4208
4209         * katie (check_dsc): Remove more cruft.  If we find the
4210         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4211         location, make a note of that so we can fix things in install().
4212         (install): as above.  Move any old source out of legacy locations
4213         so that 'apt-get source' will work.
4214         (process_it): reset the flag that indicates to install that the
4215         source needs moved.
4216
4217         * cron.daily: more.  Nowhere near complete yet though.
4218
4219         * katie (install): don't run os.makedirs, a) utils.move() does
4220         this now, b) we weren't removing the user's umask and were
4221         creating dirs with SNAFU permissions.
4222         (check_dsc): rewrite the .orig.tar.gz handling to take into
4223         account, err, package pools.  i.e. look anywhere in the pool
4224         rather than faffing around with two simple paths.
4225
4226         * neve (process_sources): add the .dsc to dsc_files too.
4227
4228 2000-10-25  James Troup  <james@nocrew.org>
4229
4230         * neve (process_sources): don't duplicate .orig.tar.gz's.
4231
4232 2000-10-23  James Troup  <james@nocrew.org>
4233
4234         * utils.py (re_extract_src_version): moved here.
4235
4236         * neve: move re_extract_src_version to utils.
4237         (process_packages): reflect change.
4238
4239         * katie (install): reflect change.
4240
4241 2000-10-19  James Troup  <james@nocrew.org>
4242
4243         * jenna (generate_src_list): handle locations with null
4244         components.
4245         (generate_bin_list): likewise.
4246