]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Add -s/--suite and -n/--no-action support to clean-proposed-updates
[dak.git] / ChangeLog
1 2008-04-12  James Troup  <troup@debian.org>
2
3         * dak/clean_proposed_updates.py: add support for -s/--suite and
4         -n/--no-action.
5
6 2008-04-11  Anthony Towns  <ajt@debian.org>
7
8         * dak/utils.py: build_file_list() extra parameters so it can
9         build a file list for checksums-foo fields. Don't use float() to
10         compare formats, because Format: 1.10 should compare greater than
11         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
12
13         * dak/process_unchecked.py: check_md5sum becomes check_hashes
14         and check_hash. If changes format is 1.8 or later, also check
15         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
16         and reject on presence/absence of un/expected checksums-* fields.
17
18 2008-04-07  Joerg Jaspert  <joerg@debian.org>
19
20         * daklib/utils.py (build_file_list): Check for dpkg .changes
21         adjusted to reject newer (and right now broken) 1.8 version, until
22         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
23
24 2008-03-22  Anthony Towns  <ajt@debian.org>
25
26         * dak/edit_transitions.py: Add --import option.
27         Add --use-sudo option. Use fcntl locking for writing.
28         Move writing into a function (write_transitions).
29         Reinvoke self using sudo and --import if necessary.
30         Move temporary file creation into a function, use mkstemp.
31         Rename to "dak transitions".
32
33 2008-03-21  Joerg Jaspert  <joerg@debian.org>
34
35         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
36         edited file back in place
37         (check_transitions): Use proper locking and also use sudo to copy
38         the new file in place
39
40 2008-03-21  Anthony Towns <ajt@debian.org>
41
42         * config/debian/extensions.py: Add infrastructure for replacing
43         functions in dak modules; add upload blocking for dpkg.
44
45 2008-03-12  Joerg Jaspert  <joerg@debian.org>
46
47         * dak/edit_transitions.py: Done a number of cleanups to make code
48         working. Also changed the way prompting/answering goes, to not
49         have to import daklib/queue.
50         (edit_transitions): When done with a successful edit - also print
51         a final overview about defined transitions
52
53 2008-03-11  Joerg Jaspert  <joerg@debian.org>
54
55         * dak/process_unchecked.py: Import syck module directly, not "from
56         syck import *"
57         (check_transition): Do the check for sourceful upload in here
58         Also adjust the syck loading commands, rename new_vers to
59         expected, curvers to current, to make it more clear what they mean.
60
61         * daklib/database.py (get_suite_version): Renamed from
62         get_testing_version. Also changed the cache variables name
63
64         * The above changes are based on modifications from Anthony.
65
66         * dak/dak.py (init): Renamed check -> edit transitions
67
68         * dak/edit_transitions.py: Renamed from check_transitions.py
69         (main): Also rename new_vers/curvers to expected/current
70         Basically a nice rewrite, so it now does checks and edit,
71         depending on how you call it. Check also removes old transitions,
72         if user wants it.
73
74 2008-03-02  Joerg Jaspert  <joerg@debian.org>
75
76         * debian/control (Suggests): Add python-syck to Depends:
77
78         * dak/dak.py (init): Tell it about check_transitions
79
80         * dak/check_transitions.py (usage): Added, checks the transitions
81         file (if any)
82
83         * daklib/database.py (get_testing_version): Added. Returns the
84         version for the source in testing, if any
85
86         * dak/process_unchecked.py (check_transition): Added. Checks if a
87         release team member defined a transition, and rejects based on
88         that data.
89         (process_it): Use it.
90         (check_transition): Warn on broken transitions file and return,
91         not doing anything.
92         (check_transition): Moved out of here, into daklib/queue
93         (process_it): Call check_transitions only if
94         changes[architecture] has source included.
95         (check_transition): Now call the database.get_testing_version
96
97 2008-02-06  Joerg Jaspert  <joerg@debian.org>
98
99         * daklib/utils.py (check_signature): Make variable key available,
100         so we can access it.
101
102 2008-01-07  Joerg Jaspert  <joerg@debian.org>
103
104         * dak/examine_package.py (check_deb): Remove linda call. It
105         provides no added benefit to lintian anymore.
106
107 2008-01-06  Joerg Jaspert  <joerg@debian.org>
108
109         * dak/examine_package.py (do_lintian): lintian now supports html
110         coloring, so use it.
111         (do_command): Dont escape html chars if param escaped = 1
112
113 2007-12-31  Anthony Towns  <ajt@debian.org>
114
115         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
116         when processing result of check_dsc_against_db so we don't promote
117         warnings to rejections.
118
119 2007-12-30  Joerg Jaspert  <joerg@debian.org>
120
121         * dak/dak.py (init): add show-new. This is based on a patch
122         submitted by Thomas Viehmann in Bug #408318, but large parts of
123         handling it are rewritten and show-new is done by me.
124
125         * dak/queue_report.py (table_row): Add link to generated html page
126         for NEW package.
127
128         * dak/show_new.py: new file, generates html overview for NEW
129         packages, similar to what we see with examine-package.
130
131         * config/debian/cron.hourly: Add show-new call
132
133         * config/debian/dak.conf: Add HTMLPath for Show-New
134
135         * dak/examine_package.py (print_copyright): ignore stderr when
136         finding copyright file.
137         (main): add html option
138         (html_escape): new function
139         (escape_if_needed): ditto
140         (headline): ditto
141         (colour_output): ditto
142         (print_escaped_text): ditto
143         (print_formatted_text): ditto
144         - use those functions everywhere where we generate output, as they
145         easily know if we want html or not and just DTRT
146         (do_lintian): new function
147         (check_deb): use it
148         (output_deb_info): Use print_escaped_text, not print_formatted_text.
149         Also import daklib.queue, determine_new now lives there
150
151         Also add a variable to see if we want html output. Default is
152         disabled, show_new enables it for its use.
153         Most of html, besides header/footer are in examine_package instead
154         of show_new, as it makes it a whole lot easier to deal with it at
155         the point the info is generated.
156
157
158         * dak/process_new.py (determine_new): Moved out of here.
159         (check_valid): Moved out of here.
160         (get_type): Moved out of here.
161
162         * daklib/queue.py (determine_new): Moved here.
163         (check_valid): Moved here.
164         (get_type): Moved here.
165
166         * dak/init_db.py (do_section): Remove non-US code
167
168         * dak/make_overrides.py (main): ditto
169
170         * dak/process_new.py (determine_new): ditto
171
172         * daklib/queue.py (Upload.in_override_p),
173         (Upload.check_override): ditto
174
175         * daklib/utils.py (extract_component_from_section):,
176         (poolify): ditto
177
178         * dak/import_archive.py (update_section): ditto
179
180         * dak/symlink_dists.py (fix_component_section): ditto
181
182         * scripts/debian/mkmaintainers: ditto
183
184         * scripts/debian/update-mirrorlists (masterlist): ditto
185
186         * config/debian-non-US/*: Remove subdir
187
188         * scripts/debian/update-readmenonus: Removed.
189
190
191 2007-12-28  Anthony Towns  <ajt@debian.org>
192
193         * daklib/utils.py (check_signature): add NOTATION_DATA and
194         NOTATION_NAME to known keywords.
195
196         * daklib/queue.py (Upload.check_source_against_db): 
197
198         * dak/make_suite_file_list.py: add -f/--force option.
199
200         * dak/generate_releases.py: add -a/--apt-conf=FILE and
201         -f/--force-touch options.  Pull version info from the database.
202         Make suite description optional.
203
204         * config/debian/dak.conf: update
205         Reject-Proposed-Updates::MoreInfoURL.  Comment out
206         Suite::Stable::Version and ::Description.
207
208         * config/debian/apt.conf: Add hurd-i386 to unstable
209         debian-installer stanza.
210
211 2007-12-28  Joerg Jaspert  <joerg@debian.org>
212
213         * KEYEXPIRED is actually a known keyword. We do check it earlier
214         on and reject in case the sig is bad (or unknown)
215
216 2007-12-24  Joerg Jaspert  <joerg@debian.org>
217
218         * Also run lintian on the .dsc file to check the source itself.
219
220         * Fix the direct usage of ar | tar etc to get the copyright file
221         and use dpkg-deb, which is made for this and makes us able to
222         process data.tar.bz2 (or whatever format it will be in the
223         future).
224
225 2007-12-21  Joerg Jaspert  <joerg@debian.org>
226
227         * Remove the (now useless) check for a pre-depends on dpkg for
228           binaries that contain bzip2 compressed data tarballs.
229
230 2007-08-28  Anthony Towns  <ajt@debian.org>
231
232         * process_unchecked.py: Add support for automatic BYHAND
233         processing.
234         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
235         processing of tag-overrides.
236         * examine_package.py: Summarise duplicate copyright file entries
237         (same md5sum) with a reference to the previous instance, rather
238         than repeating them.
239         * process_new.py: When rejecting from the p-u-new or o-p-u-new
240         holding queues, don't worry if dak has its own reasons for
241         rejecting the package as well as the SRMs.
242
243 2007-06-19  Anthony Towns  <ajt@debian.org>
244
245         * Add nm.debian.org pseudopackage
246
247 2007-06-18  Anthony Towns  <ajt@debian.org>
248
249         * daklib/logging.py: Set umask to not exclude group-writability
250         so we don't get reminded at the start of each month. Thanks to
251         Random J.
252         * dak/override.py: More changes from Herr von Wifflepuck: warn
253         if section of source is different to binary section; restore
254         functionality on source-only overrides; croak if trying to set
255         priority of a source override; never set priority of source
256         overrides; correct typo in logging (s/priority/section/ at
257         one place)
258
259         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
260         * config/debian/cron.daily: auotmatically accept/reject
261         oldstable-proposed-updates based on COMMENTS directory
262
263 2007-06-18  Anthony Towns  <ajt@debian.org>
264
265         * config/debian/apt.conf, config/debian/apt.conf.stable,
266         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
267         (sarge), support for oldstable-proposed-updates, dropping m68k
268         from etch, creating etch-m68k suite, creating lenny.
269
270         * config/debian/vars: update for lenny
271
272         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
273         drop upload limitations, add release postgres user
274         
275         * dak/process_new.py: support for automatically accepting and rejecting
276         packages from proposed-updates holding queues via COMMENTS directory
277         * cron.daily: automatically process COMMENTS-based approvals
278         and rejections for proposed-updates holding queues
279
280         * dak/process_unchecked.py: add support for oldproposedupdates
281         holding queue
282
283         * dak/control_suite.py: allow control-suite to work with etch-m68k
284
285         * dak/generate_releases.py: unlink old Release files before updating
286         them if nlinks > 1 (ie, if two files used to be the same, maybe they
287         shouldn't be when generate-releases is run)
288
289         * dak/generate_releases.py: add a couple of commented lines to make
290         it easier to deal with point releases
291
292         * dak/make_overrides.py: generate overrides for !contrib udebs
293
294         * docs/README.stable-point-release: update docs for doing a
295         point release
296
297 2007-03-05  Anthony Towns  <ajt@debian.org>
298
299         * config/debian/dak.conf: update for 3.1r5.
300         * scripts/debian/ssh-move: add ssh-move script from debbugs
301         * config/debian/cron.unchecked: push version info to debbugs using
302         ssh-move.
303
304 2007-02-14  James Troup  <troup@ries.debian.org>
305
306         * docs/README.config: remove Dinstall::GroupOverrideFilename.
307         * config/debian/dak.conf: likewise.
308         * config/debian-non-US/dak.conf: likewise.
309         * config/debian-security/dak.conf: likewise.
310
311         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
312         experimental differently, just close the bugs and let version
313         tracking sort it out.
314          (nmu_p): remove entire class - now unused.
315          (Upload.__init__): don't use nmu_p.
316
317 2007-02-08  Anthony Towns  <ajt@debian.org>
318
319         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
320         signing key.  Drop maximum index diffs down to 14.
321
322         * config/debian/apt.conf: add udeb support for non-free (testing,
323         unstable) and experimental.
324         * config/debian/dak.conf: likewise.
325
326         * dak/generate_releases.py (main): handle udebs in any component.
327
328         * daklib/queue.py (Upload.build_summaries): handle files without a
329         'type' gracefully.
330
331         * dak/generate_releases.py (print_sha256_files): new function.
332         (main): use it.
333
334         * dak/process_accepted.py (stable_install): fix name of template
335         mail.
336
337         * dak/process_unchecked.py (is_stableupdate): fix invocation of
338         database.get_suite_id().
339
340         * templates/process-new.bxa_notification: Update on request
341         of/after discussion with BIS staff.
342
343         * scripts/debian/mkfilesindices: also handle proposed-updates.
344
345 2007-02-08  Ryan Murray  <rmurray@debian.org>
346
347         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
348         group name for chgrp of mail archives.
349
350         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
351         orig.tar.gz's by picking the first one by file id.
352
353         * dak/override.py (main): limit to binary overrides only for now.
354         (usage): update to match.
355
356         * config/debian/cron.daily: track when we have the accepted lock
357         and clean it up on exit if we have it.  Take/check the
358         cron.unchecked lock just before traping to cleanup on exit.
359         Remove potato override handling.  Remove any dangling symlinks in
360         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
361
362         * config/debian/apt.conf: change default compression scheme for
363         both Sources and Packages to gzip and bzip2 rather than
364         uncompressed and gzip (Packages) and gzip (Sources).  Use old
365         defaults for proposed-updates.
366
367         * dak/control_overrides.py (main): refuse to operate on
368         untouchable suites.
369
370         * config/debian/pseudo-packages.maintainers: drop install,
371         installation, boot-floppy, slink-cd, potato-cd and
372         nonus.debian.org.  Update base.
373         * config/debian/pseudo-packages.description: likewise.
374
375         * daklib/utils.py (re_srchasver): new regex.
376         (parse_changes): use regex to split 'Source (Version)' style
377         Source fields into 'source' and 'source-version'.
378
379         * config/debian/cron.daily: use $base instead of hardcoding path
380         name.
381
382         * scripts/debian/mkfilesindices: source 'vars' file and use it's
383         variables instead of hardcoding path names.
384
385         * config/debian/apt.conf: switch from /org to /srv.
386         * config/debian/apt.conf.buildd: likewise.
387         * config/debian/apt.conf.stable: likewise.
388         * config/debian/cron.daily: likewise.
389         * config/debian/cron.hourly: likewise.
390         * config/debian/cron.monthly: likewise.
391         * config/debian/cron.unchecked: likewise.
392         * config/debian/cron.weekly: likewise.
393         * config/debian/dak.conf: likewise.
394         * config/debian/vars: likewise.
395         * scripts/debian/mkfilesindices: likewise.
396         
397 2007-02-08  James Troup  <james@nocrew.org>
398
399         * dak/process_unchecked.py (check_signed_by_key): new function to
400         ensure .changes files are signed by an authorized uploader.
401         (process_it): use it.
402
403         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
404         to configure per suite/component/architecture binary upload
405         restrictions.
406
407 2006-10-09  James Troup  <james.troup@canonical.com>
408
409         * dak/process_unchecked.py (check_timestamps): change match to
410         search as recent versions of python-apt prefix the string with 'E: '.
411
412 2006-06-26  Ryan Murray  <rmurray@debian.org>
413
414         * dak/process_unchecked.py (check_files): strip optional source version
415         from Source: field in changes file, and ensure what is left is a valid
416         package name.
417
418 2006-06-23  Ryan Murray  <rmurray@debian.org>
419
420         * dak/process_unchecked.py (check_files): also check ProposedUpdates
421         queue for source.
422
423 2006-06-18  Ryan Murray  <rmurray@debian.org>
424
425         * dak/scripts/debian/update-ftpstats: look for dak named processes in
426         the log, too.
427
428         * dak/process_unchecked.py (check_files): only check embargoed and
429         unembargoed queues if the keys are set.
430
431         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
432         and bzip2 for etch.
433
434 2006-06-16  James Troup  <james@nocrew.org>
435
436         * dak/dak.py (init): add new-security-install.
437
438         * dak/new_security_install.py: cleanups and adapt for new naming
439         scheme and other changes.
440
441 2006-06-16  Anthony Towns  <ajt@debian.org>
442
443         * dak/new_security_install.py: initial version imported from
444         klecker.
445
446 2006-06-16  James Troup  <james@nocrew.org>
447
448         [Merged changes from klecker - original author unknown.]
449
450         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
451
452         * dak/security_install.py (do_upload): fix check for oldstable and
453         upload file list handling.
454
455         * dak/process_unchecked.py (check_files): update "check for
456         source" code to also look in Embargoed and Unembargoed queues.
457         (is_unembargo): fix handling of Dir::Queue::Disembargo.
458
459         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
460
461         * config/debian-security/vars (disembargo): add.
462
463         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
464         update.
465         (Process-Unchecked::AcceptedLockFile): add.
466         (Suite::Testing): clean up Version and Description.
467         (SuiteMappings): add silent map from etch-secure to testing.
468
469         * config/debian-security/cron.unchecked: add support for
470         disembargoed queues.
471
472         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
473         files too.
474
475         * config/debian-security/apt.conf: add amd64 to architectures for
476         testing-security.
477
478 2006-06-11  James Troup  <troup@spohr.debian.org>
479
480         * config/debian/cron.daily: invoke process-accepted not
481         process-unchecked.
482
483         * config/debian/vars (scriptsdir): new variable.
484         * config/debian/cron.daily: use it.
485
486         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
487         $base/misc/ instead of versioned $masterdir.  Correct 'dak
488         make-maintainers' invocation to look in $configdir for
489         pseudo-packages.maintainers.
490
491         * daklib/queue.py (Upload.do_reject): use correct name for
492         rejection template.
493
494 2006-06-11  James Troup  <james@nocrew.org>
495
496         * dak/override.py (main): temporarily add content of old X-Katie
497         header back as the PTS apparently filters on it.
498         * dak/process_accepted.py (main): likewise.
499         * dak/process_new.py (main): likewise.
500         * dak/process_unchecked.py (main): likewise.
501         * dak/reject_proposed_updates.py (main): likewise.
502         * dak/rm.py (main): likewise.
503         * daklib/queue.py (Upload.do_reject): likewise.
504
505         * config/debian/cron.unchecked: set -u to error out on undefined
506         variables.  Preset LOCKDAILY to "" accordingly.
507         * config/debian/cron.hourly: likewise.
508         * config/debian/cron.monthly: likewise.
509         * config/debian/cron.weekly: likewise.
510
511         * config/debian/vars (configdir): add new variable pointing to
512         this directory.
513
514         * config/debian/cron.daily: use $configdir inplace of $masterdir
515         when that's what we mean, and don't cd into $masterdir just to run
516         dak scripts as we don't need to do that anymore.
517         * config/debian/cron.hourly: likewise.
518         * config/debian/cron.unchecked: likewise.
519         * config/debian/cron.weekly: likewise.
520
521         * config/debian/dak.conf
522         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
523         user back to list of known users as it's non-trivial to entirely
524         change the owner of a database with postgresql 7.4.
525
526         * daklib/queue.py (Upload.source_exists): use string object
527         methods rather than string module.
528         (Upload.get_anyversion): likewise.
529
530         * daklib/utils.py (validate_changes_file_arg): update filename
531         slicing to cope with new .dak filenames.
532
533         * dak/ls.py (main): add back 'heidi' as a valid argument for
534         -f/--format as people are using it in scripts and breaking that
535         without warning seems rude.
536
537 2006-05-21  James Troup  <james@nocrew.org>
538
539         * dak/rm.py (main): use string .isdigit() rather than
540         utils.str_isnum().
541         * dak/process_new.py (edit_overrides): likewise.
542
543         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
544         string import.
545
546 2006-05-21  James Troup  <james@nocrew.org>
547
548         * dak/check_archive.py (check_indices_files_exist): use list
549         comprehension instead of map().  No longer need to import
550         deprecated string module as a side-effect.
551         * dak/check_overrides.py (process): likewise.
552         (main): likewise.
553         * dak/cruft_report.py (do_obsolete_source): likewise.
554         (main): likewise.
555         * dak/ls.py (main): likewise.
556         * dak/make_suite_file_list.py (write_filelists): likewise.
557         * dak/process_accepted.py (stable_install): likewise.
558         * dak/rm.py (main): likewise.
559         * dak/stats.py (number_of_packages): likewise.
560         * daklib/logging.py (Logger.log): likewise.
561         * daklib/queue.py (Upload.source_exists): likewise.
562         (Upload.cross_suite_version_check): likewise.
563         * daklib/utils.py (parse_args): likewise.
564
565 2006-05-21  James Troup  <james@nocrew.org>
566
567         * daklib/utils.py (process_gpgv_output): new function, split out
568         of check_signature().
569         (check_signature): adapt accordingly.
570         (retrieve_key): new function that will try to retrieve the key
571         that signed a given file from a keyserver.
572         (check_signature): add 'autofetch' argument that if not set
573         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
574         If 'autofetch' is true, invoke retrieve_key().  
575
576         * docs/README.config: document Dinstall::KeyAutoFetch and
577         Dinstall:KeyServer.
578
579 2006-05-20  James Troup  <james@nocrew.org>
580
581         * dak/find_null_maintainers.py (main):
582         s/createtimestamp/createTimestamp/ to make things work with modern
583         slapd.
584
585         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
586         Stable::Version and Stable::Description for 3.1r2.
587
588         * config/debian-non-US/dak.conf: sync with klecker - update
589         version number of 3.0 and MoreInfoURL.
590
591         * docs/README.stable-point-release: Add notes about updating
592         dak.conf and Reject-Proposed-Updates section in particular.
593         s/woody/stable/.  Also need to update README.html.
594
595         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
596
597         * config/debian/apt.conf: Add udeb tree for proposed-updates.
598
599 2006-05-20  Ryan Murray  <rmurray@debian.org>
600
601         * scripts/debian/update-ftpstats: new script to update daily
602         architecture size graph data.
603
604         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
605         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
606         there.
607
608         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
609         before we finish.  Don't push to merkel.
610
611         * dak/process_unchecked.py (check_changes): Also look in
612         ProposedUpdates queue dir.
613         (check_files): likewise.
614
615 2006-05-20  Anthony Towns  <ajt@debian.org>
616
617         * scripts/debian/mkfilesindices: new script to generate file
618         indices used for partial mirroring.
619
620         * config/debian/cron.daily: add progress timestamps.
621
622         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
623         amd64 to testing, unstable and experimental.  Drop sh from
624         experimental.  Move Experimental to dists/experimental.  Add
625         Dir::ProposedUpdates.  Add Architectures::amd64.
626
627         * config/debian/apt.conf: add amd64 to testing, unstable and
628         experimental.  Drop uncompressed Packages files from testing. Drop
629         sh from experimental.  Move experimental to dists/experimental/.
630
631         * config/debian/vars (archs): add amd64.
632
633         * dak/process_unchecked.py (action): Add support for
634         proposed-updates approval queue.
635         (is_stableupdate): new function - checks if the upload is targeted
636         at proposed-updates.
637         (do_stableupdate): likewise - moves upload to proposed-updates
638         holding area.
639
640         * dak/process_new.py (do_new): warn if original or new target
641         suite are invalid.
642
643         * dak/generate_releases.py (print_md5sha_files): less whitespace
644         between the hash and size.
645
646         * dak/generate_index_diffs.py (genchanges): don't say we're not
647         doing anything.  Better formatting of other messages.
648         (main): don't skip experimental and remove some 'doing stuff'
649         prints.
650
651 2006-05-18  James Troup  <james@nocrew.org>
652
653         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
654         query.
655
656         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
657         docstrings, untabify, don't shadow builtins, lowercase non-global
658         variable names, spaces after commas.  Also bail if given any
659         arguments since we don't accept any.
660         * dak/init_db.py: likewise.  Also split large main() into
661         subfunctions and rename get() to sql_get().
662
663         * dak/init_db.py (main): check returned value from
664         database.get_archive_id().
665
666         * dak/dak.py: renamed from shell.py.  Update to support new source
667         layout.  Created init() and usage() functions.  Various
668         pylint-inspired cleanups.  Use daklib utils.warn() and
669         utils.fubar().  Change 'functionality' variable to only have
670         (command, description) and always invoke main() when running the
671         module.  Also support -h.
672
673 2006-05-17  James Troup  <james@nocrew.org>
674
675         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
676         imports of and calls to daklib modules.  Change script name
677         everywhere, i.e. in output, mails, comments and configuration tree
678         + filenames.  Also update references to other renamed scripts,
679         classes and templates.  Use '.dak' instead of '.katie' for the
680         queue info storage files.
681         (Renamed from tea)
682         * dak/check_overrides.py: likewise.  (Renamed from cindy)
683         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
684         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
685         * dak/clean_queues.py: likewise.  (Renamed from shania)
686         * dak/clean_suites.py: likewise.  (Renamed from rhona)
687         * dak/compare_suites.py: likewise.  (Renamed from andrea)
688         * dak/control_overrides.py: likewise.  (Renamed from natalie)
689         * dak/control_suite.py: likewise.  (Renamed from heidi)
690         * dak/cruft_report.py: likewise.  (Renamed from rene)
691         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
692         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
693         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
694         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
695         * dak/import_archive.py: likewise.  (Renamed from neve)
696         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
697         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
698         * dak/init_db.py: likewise. (Renamed from alyson)
699         * dak/init_dirs.py: likewise. (Renamed from rose)
700         * dak/ls.py: likewise. (Renamed from madison)
701         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
702         * dak/make_overrides.py: likewise.  (Renamed from denise)
703         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
704         * dak/mirror_split.py: likewise.  (Renamed from billie)
705         * dak/override.py: likewise.  (Renamed from alicia)
706         * dak/poolize.py: likewise.  (Renamed from catherine)
707         * dak/process_accepted.py: likewise.  (Renamed from kelly)
708         * dak/process_new.py: likewise.  (Renamed from lisa)
709         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
710         * dak/queue_report.py: likewise.  (Renamed from helena)
711         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
712         * dak/rm.py: likewise.  (Renamed from melanie)
713         * dak/security_install.py: likewise.  (Renamed from amber)
714         * dak/split_done.py: likewise.  (Renamed from nina)
715         * dak/stats.py: likewise.  (Renamed from saffron)
716         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
717         * daklib/database.py: likewise.  (Renamed from db_access)
718         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
719         * daklib/utils.py: likewise.
720
721         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
722         doesn't need to notify anyone" string.
723         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
724
725         * dak/process_accepted.py (init): drop -V/--version argument.
726         * dak/process_new.py (init): likewise.
727         * dak/process_unchecked.py (init): likewise.
728         * dak/reject_proposed_updates.py (init): likewise
729
730         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
731
732         * dak/stats.py: in usage() output change STAT to MODE.
733
734 2006-05-15  James Troup  <james@nocrew.org>
735
736         * dak/queue_report.py: remove unused encodings imports.
737
738         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
739         imports.  Initalize 'Cnf' as a global.
740         (BillieDB._internal_recurse): fix 'util.' typo.
741
742         * dak/import_ldap_fingerprints.py (main): drop unused time import and
743         commented out time check for LDAP search.
744
745 2005-12-16  Ryan Murray  <rmurray@debian.org>
746
747         * halle: add support for udebs
748         * kelly: stable_install: add support for binNMU versions
749
750 2005-12-05  Anthony Towns  <aj@erisian.com.au>
751
752         * katie.py: Move accept() autobuilding support into separate function 
753         (queue_build), and generalise to build different queues
754
755         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
756
757         * jennifer: Initial support for enabling embargo handling with the
758         Dinstall::SecurityQueueHandling option.
759         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
760         functions.
761
762         * katie.conf-security: Include embargo options
763         * katie.conf-security: Add Lock dir
764         * init_pool.sql-security: Create disembargo table
765         * init_pool.sql-security: Add constraints for disembargo table
766
767 2005-11-26  Anthony Towns  <aj@erisian.com.au>
768
769         * Merge of changes from klecker, by various people
770
771         * amber: special casing for not passing on amd64 and oldstable updates
772         * amber: security mirror triggering
773         * templates/amber.advisory: updated advisory structure
774         * apt.conf.buildd-security: update for sarge's release
775         * apt.conf-security: update for sarge's release
776         * cron.buildd-security: generalise suite support, update for sarge's release
777         * cron.daily-security: update for sarge's release, add udeb support
778         * vars-security: update for sarge's release
779         * katie.conf-security: update for sarge's release, add amd64 support,
780         update signing key
781
782         * docs/README.names, docs/README.quotes: include the additions
783
784 2005-11-25  Anthony Towns  <aj@erisian.com.au>
785
786         * Changed accepted_autobuild to queue_build everywhere.
787         * Add a queue table.
788         * Add a "queue" field in the queue_build table (currently always 0)
789
790         * jennifer: Restructure to make it easier to support special
791         purpose queues between unchecked and accepted.
792
793 2005-11-25  Anthony Towns  <aj@erisian.com.au>
794
795         * Finishing merge of changes from spohr, by various people still
796
797         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
798         works
799         * jennifer: Re-enable .deb ar format checking
800         * katie.py: Convert to +bX binNMU special casing
801         * rhona: Add some debug output when deleting binaries
802         * cron.daily: Add emilie
803         * cron.unchecked: Add lock files
804
805 2005-11-15  Anthony Towns  <aj@erisian.com.au>
806
807         * Merge of changes from spohr, by various people.
808
809         * tiffani: new script to do patches to Packages, Sources and Contents
810         files for quicker downloads.
811         * ziyi: update to authenticate tiffani generated files
812
813         * dak: new script to provide a single binary with less arbitrary names
814         for access to dak functionality.
815
816         * cindy: script implemented
817
818         * saffron: cope with suites that don't have a Priority specified
819         * heidi: use get_suite_id()
820         * denise: don't hardcode stable and unstable, or limit udebs to unstable
821         * denise: remove override munging for testing (now done by cindy)
822         * helena: expanded help, added new, sort and age options, and fancy headers
823         * jennifer: require description, add a reject for missing dsc file
824         * jennifer: change lock file
825         * kelly: propogation support
826         * lisa: honour accepted lock, use mtime not ctime, add override type_id
827         * madison: don't say "dep-retry"
828         * melanie: bug fix in output (missing %)
829         * natalie: cope with maintainer_override == None; add type_id for overrides
830         * nina: use mtime, not ctime
831
832         * katie.py: propogation bug fixes
833         * logging.py: add debugging support, use | as the logfile separator
834
835         * katie.conf: updated signing key (4F368D5D)
836         * katie.conf: changed lockfile to dinstall.lock
837         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
838         * katie.conf: added tiffani, cindy support
839         * katie.conf: updated to match 3.0r6 release
840         * katie.conf: updated to match sarge's release
841
842         * apt.conf: update for sarge's release
843         * apt.conf.stable: update for sarge's release
844         * apt.conf: bump daily max Contents change to 25MB from 12MB
845
846         * cron.daily: add accepted lock and invoke cindy  
847         * cron.daily: add daily.lock
848         * cron.daily: invoke tiffani
849         * cron.daily: rebuild accepted buildd stuff
850         * cron.daily: save rene-daily output on the web site
851         * cron.daily: disable billie
852         * cron.daily: add stats pr0n
853
854         * cron.hourly: invoke helena
855
856         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
857         * vars: add lockdir, add etch to copyoverrides
858         * Makefile: add -Ipostgresql/server to CXXFLAGS
859
860         * docs/: added README.quotes
861         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
862         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
863
864         * TODO: correct spelling of "conflicts"
865
866 2005-05-28  James Troup  <james@nocrew.org>
867
868         * helena (process_changes_files): use MTIME rather than CTIME (the
869         C's not for 'creation', stupid).
870         * lisa (sort_changes): likewise.
871
872         * jennifer (check_distributions): use has_key rather than an 'in'
873         test which doesn't work with python2.1.  [Probably by AJ]
874
875 2005-03-19  James Troup  <james@nocrew.org>
876
877         * rene (main): use Suite::<suite>::UdebComponents to determine
878         what components have udebs rather than assuming only 'main' does.
879
880 2005-03-18  James Troup  <james@nocrew.org>
881
882         * utils.py (rfc2047_encode): use codecs.lookup() rather than
883         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
884         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
885         <andrew@ubuntu.com>.
886
887 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
888
889         * helena: add -n/--new HTML output option and improved sorting
890         options.
891
892 2005-03-06  Ryan Murray  <rmurray@debian.org>
893
894         * shania(main): use Cnf::Dir::Reject instead of REJECT
895
896 2005-02-08  James Troup  <james@nocrew.org>
897
898         * rene (main): add partial NBS support by checking that binary
899         packages are built by their real parent and not some random
900         stranger.
901         (do_partial_nbs): likewise.
902
903 2005-01-18  James Troup  <james@nocrew.org>
904
905         * katie.py (Katie.build_summaries): avoid leaking file handle when
906         extracting package description.
907         (Katie.force_reject): remember and close each file descriptor we
908         use.
909         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
910         s/reason_file/reason_fd/ because it's a file descriptor.
911         (Katie.check_dsc_against_db): avoid leaking file handle whenever
912         invoking apt_pkg.md5sum().
913
914         * jennifer (check_deb_ar): new function: sanity check the ar
915         contents of a .deb.
916         (check_files): use it.
917         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
918         found.
919         (check_files): accept 'raw-installer' as an alias for 'byhand'.
920
921 2005-01-14  Anthony Towns  <ajt@debian.org>
922
923         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
924
925         * propup stuff (thanks to Andreas Barth)
926         * katie.conf: add stable MustBeOlderThan testing, add -security
927           propup
928         * jennifer: set distribution-version in .katie if propup may be needed
929         * katie.py: add propogation to cross_suite_version_check
930
931 2004-11-27  James Troup  <james@nocrew.org>
932
933         * nina: new script to split monolithic queue/done into date-based
934         hierarchy.
935
936         * rene (usage): document -s/--suite.
937         (add_nbs): use .setdefault().
938         (do_anais): likewise.
939         (do_nbs): don't set a string to "" and then += it.
940         (do_obsolete_source): new function - looks for obsolete source
941         packages (i.e source packages whose binary packages are ALL a)
942         claimed by someone else and b) newer when built from the other
943         source package).
944         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
945         and 'full' check modes.  Check for obsolete source packages.
946         linux-wlan-ng has been fixed - remove hideous bodge.
947
948         * jennifer (check_distributions): support 'reject' suite map type.
949
950         * utils.py (validate_changes_file_arg): s/file/filename/.
951         s/fatal/require_changes/.  If require_changes is -1, ignore errors
952         and return the .changes filename regardless.
953         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
954         (re_no_revision): don't escape '-', it's not a special character.
955         s/\*/+/ as there must be at least one non-dash character after the
956         dash in a revision.  Thanks to Christian Reis for noticing both of
957         these.
958
959         * ashley (main): pass require_changes=-1 to
960         utils.validate_changes_file_arg().
961
962         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
963         Team <debian-kernel@lists.debian.org>'.
964
965         * katie.py (Katie.in_override_p): fix .startswith() usage.
966
967         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
968         (Lauren::MoreInfoURL): update to 3.0r3.
969         (Suite::Stable::Version): likewise.
970         (Suite::Stable::Description): likewise.
971
972         * cron.daily: disable automatic task override generation.
973
974         * cindy (process): restrict "find all packages" queries by
975         component.  Respect Options["No-Action"].
976         (main): add -n/--no-action support.  Only run on unstable.  Rename
977         type to otype (pychecker).
978
979 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
980
981         * katie.conf (Billie::BasicTrees): add all architectures.
982         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
983         'everything'.
984
985         * cron.daily: Update a 'current' symlink when creating the
986         post-daily-cron-job database backup to aid mirroring to merkel.
987         Run billie.
988
989         * billie (BillieTarget.poolish_match): handle .udeb too.
990
991 2004-10-13  Ryan Murray  <rmurray@debian.org>
992
993         * amber (do_upload): Sort changes files in "katie" order so that
994           source always arrives before binary-only rebuilds
995         
996 2004-10-05  James Troup  <james@nocrew.org>
997
998         * jennifer (check_dsc): correct reject message on invalid
999         Maintainer field.
1000
1001 2004-09-20  James Troup  <james@nocrew.org>
1002
1003         * alicia: remove unused 'pwd' import.
1004
1005         * tea (check_override): underline suite name in output properly.
1006
1007         * rene (main): read a compressed Packages file.
1008         * tea (validate_packages): likewise.
1009
1010         * katie.py (re_fdnic): add 'r' prefix.
1011         (re_bin_only_nmu_of_mu): likewise.
1012         (re_bin_only_nmu_of_nmu): likewise.
1013
1014         * madison (main): retrieve component information too and display
1015         it if it's not 'main'.
1016         * melanie (reverse_depends_check): likewise.
1017
1018         * utils.py (pp_dep): renamed...
1019         (pp_deps): ... to this.
1020         * jeri (check_dep): update calls to utils.pp_deps().
1021         * melanie (reverse_depends_check): likewise.
1022
1023         * jennifer (check_changes): move initalization of email variables
1024         from here...
1025         (process_it): ...to here as we no longer always run
1026         check_changes().  Don't bother to initialize
1027         changes["architecture"].
1028
1029         * denise (list): renamed to...
1030         (do_list): ...this to avoid name clash with builtin 'list'.
1031         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1032         for dictionaries.
1033         (main): Likewise for name clash avoidance and also
1034         s/override_type/suffix/.  Adjust call to do_list().
1035
1036 2004-09-01  Ryan Murray  <rmurray@debian.org>
1037
1038         * tea (check_files): check the pool/ directory instead of dists/
1039
1040 2004-08-04  James Troup  <james@nocrew.org>
1041
1042         * jenna (cleanup): use .setdefault() for dictionaries.
1043         (write_filelists): likewise.
1044
1045         (write_filelists): Use utils.split_args() not split() to split
1046         command line arguments.
1047         (stable_dislocation_p): likewise.
1048
1049         (write_filelists): Add support for mapping side of suite-based
1050         "Arch: all mapping".
1051         (do_da_do_da): ensure that if we're not doing all suites that we
1052         process enough to be able correct map arch: all packages.
1053
1054         * utils.py (cant_open_exc): correct exception string,
1055         s/read/open/, s/.$//.
1056
1057         * templates/amber.advisory: update to match reality a little
1058         better.
1059
1060         * melanie (reverse_depends_check): read Packages.gz rather than
1061         Packages.
1062
1063         * jennifer (check_files): check for unknown component before
1064         checking for NEWness.
1065
1066         * katie.py (Katie.in_override_p): use .startswith in favour of a
1067         slice.
1068
1069         * docs/melanie.1.sgml: document -R/--rdep-check.
1070
1071 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1072
1073         * billie (main): Make the verbatim lists include all the README
1074           elements.
1075         * docs/README.names: Add billie in (correcting oversight)
1076
1077 2004-07-01  James Troup  <james@nocrew.org>
1078
1079         * emilie (main): handle woody's case-sensitive python-ldap,
1080         s/keyfingerprint/keyFingerPrint/.
1081
1082 2004-06-25  James Troup  <james@nocrew.org>
1083
1084         * debian/control (Depends): add dpkg-dev since jennifer uses
1085         dpkg-source.
1086
1087 2004-06-24  James Troup  <james@nocrew.org>
1088
1089         * melanie (main): s/file/temp_file/ and close file handle before
1090         removing the temporary file.
1091         (main): don't warn about needing a --carbon-copy if in no-action
1092         mode.
1093
1094         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1095         (main): likewise.
1096
1097         * test/006/test.py (main): check bracketed email-only form.
1098
1099         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1100         email-only, strip the brackets so we don't end up with
1101         <<james@nocrew.org>>.
1102
1103 2004-06-20  James Troup  <james@nocrew.org>
1104
1105         * jennifer (process_it): only run check_changes() if
1106         check_signature() returns something.  (Likewise)
1107
1108         * utils.py (changes_compare): if there's no changes["version"] use
1109         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1110
1111 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1112
1113         * jeri (pp_dep): moved from here to ...
1114         * utils.py (pp_dep): here.
1115
1116         * melanie (main): add reverse dependency checking.
1117
1118 2004-06-17  James Troup  <james@nocrew.org>
1119
1120         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1121         * tea (check_dscs): likewise.
1122
1123         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1124         change from boolean to a variable with 3 possible values, 0 and 1
1125         as before, -1 means don't require a signature.  Makes
1126         parse_changes() useful for parsing arbitary RFC822-style files,
1127         e.g. 'Release' files.
1128         (check_signature): add support for detached signatures by passing
1129         the files the signature is for as an optional third argument.
1130         s/filename/sig_filename/g.  Add a fourth optional argument to
1131         choose the keyring(s) to use.  Don't os.path.basename() the
1132         sig_filename before checking it for taint.
1133         (re_taint_free): allow '/'.
1134
1135 2004-06-11  James Troup  <james@nocrew.org>
1136
1137         * tea (check_files): make override.unreadable optional.
1138         (validate_sources): close the Sources file handle.
1139
1140         * docs/README.first: clarify that 'alyson' and running
1141         add_constraints.sql by hand is something you only want to do if
1142         you're not running 'neve'.
1143
1144         * docs/README.config (Location::$LOCATION::Suites): document.
1145
1146         * db_access.py (do_query): also print out the result of the query.
1147
1148 2004-06-10  James Troup  <james@nocrew.org>
1149
1150         * katie.py (Katie.cross_suite_version_check): post-woody versions
1151         of python-apt's apt_pkg.VersionCompare() function apparently
1152         returns variable integers for less than or greater than results -
1153         update our result checking to match.
1154         * jenna (resolve_arch_all_vs_any): likewise.
1155         * charisma (main): likewise.
1156
1157 2004-06-09  James Troup  <james@nocrew.org>
1158
1159         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1160         valid_dsc_p and don't run check_source() if check_dsc() failed.
1161         (check_dsc): on fatal failures return 0 so check_source() isn't
1162         run (since it makes fatal assumptions about the presence of
1163         mandatory .dsc fields).  
1164         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1165
1166 2004-05-07  James Troup  <james@nocrew.org>
1167
1168         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1169         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1170
1171         * katie.conf (Dir::Override): remove duplicate definition.
1172
1173         * neve (get_or_set_files_id): add an always-NULL last_used column
1174         to output.
1175
1176 2004-04-27  James Troup  <james@nocrew.org>
1177
1178         * apt.conf-security (tree "dists/stable/updates"): add
1179         ExtraOverride - noticed by Joey Hess (#246050).
1180         (tree "dists/testing/updates"): likewise.
1181
1182 2004-04-20  James Troup  <james@nocrew.org>
1183
1184         * jennifer (check_files): check for existing .changes or .katie
1185         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1186         directories.
1187
1188 2004-04-19  James Troup  <james@nocrew.org>
1189
1190         * jennifer (check_source): handle failure to remove the temporary
1191          directory (used for source tree extraction) better, specifically:
1192          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1193          and try again and if that works, REJECT the package.
1194
1195 2004-04-17  James Troup  <james@nocrew.org>
1196
1197         * docs/madison.1.sgml: document -b/--binary-type,
1198         -g/--greaterorequal and -G/--greaterthan.
1199
1200         * madison (usage): -b/--binary-type only takes a single argument.
1201         Document -g/--greaterorequal and -G/--greaterthan.
1202         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1203
1204 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1205
1206         * billie: Cleaned up a load of comments, added /README.non-US to
1207           the verbatim matches list.
1208
1209 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1210
1211         * utils.py (size_type): Make it use real binary megabytes and
1212           kilobytes, instead of the marketing terms used before.
1213
1214 2004-04-07  James Troup  <james@nocrew.org>
1215
1216         * katie.py (Katie.check_dsc_against_db): in the case we're
1217         ignoring an identical-to-existing orig.tar.gz remember the path to
1218         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1219         location.path too to be able to do so.
1220
1221 2004-04-03  James Troup  <james@nocrew.org>
1222
1223         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1224         needed for new utils.rfc2047_encode() function.
1225
1226         * utils.py (re_parse_maintainer): allow whitespace inside the
1227         email address.
1228         (Error): new exception base class.
1229         (ParseMaintError): new exception class.
1230         (force_to_utf8): new function.
1231         (rfc2047_encode): likewise.
1232         (fix_maintainer): rework.  use force_to_utf8() to force name and
1233         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1234         return an rfc2047 value.  Validate the address to catch missing
1235         email addresses and (some) broken ones.
1236
1237         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1238         by adopting foo2047 return value.
1239         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1240         mandatory changes fields.  Promote changes and maintainer822 to
1241         mandatory fields.
1242         (Katie.update_subst): default maintainer2047 rather than
1243         maintainer822.  User foo2047 rather than foo822 when setting
1244         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1245
1246         * jennifer (check_changes): set default changes["maintainer2047"]
1247         and changes["changedby2047"] values rather than their 822
1248         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1249         to new utils.fix_maintainer() - reject on exception and adopt
1250         foo2047 return value.
1251         (check_dsc): if a mandatory field is missing don't do any further
1252         checks and as a result reduce paranoia about dsc[var] existence.
1253         Validate the maintainer field by calling new
1254         utils.fix_maintainer().
1255
1256         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1257         changes fields.  Promote maintainer822 to a mandatory changes
1258         field.  add "pool name" to files fields.
1259
1260         * test/006/test.py: new file - tests for new
1261         utils.fix_maintainer().
1262
1263 2004-04-01  James Troup  <james@nocrew.org>
1264
1265         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1266
1267         * jennifer (get_changelog_versions): create a symlink mirror of
1268         the source files in the temporary directory.
1269         (check_source): if check_dsc_against_db() couldn't find the
1270         orig.tar.gz bail out.
1271
1272         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1273         part of the upload store the path to it in pkg.orig_tar_gz and if
1274         it can't be found set pkg.orig_tar_gz to -1.
1275
1276         Explicitly return the second value as None in the (usual) case
1277         where we don't have to reprocess.  Remove obsolete diagnostic
1278         logs.
1279
1280         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1281
1282         * utils.py (temp_filename): new helper function that wraps around
1283         tempfile.mktemp().
1284
1285         * katie.py (Katie.do_reject): use it and don't import tempfile.
1286         * lisa (prod_maintainer): likewise.
1287         (edit_note): likewise.
1288         (edit_new): likewise.
1289         * lauren (reject): likewise.
1290         * melanie (main): likewise.
1291         * neve (do_sources): likewise.
1292         * rene (main): likewise.
1293         * tea (validate_sources): likewise.
1294
1295 2004-03-31  James Troup  <james@nocrew.org>
1296
1297         * tea (validate_sources): remove unused 's' temporary variable.
1298
1299 2004-03-15  James Troup  <james@nocrew.org>
1300
1301         * jennifer (check_dsc): check changes["architecture"] for
1302         source before we do anything else.
1303
1304 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1305
1306         * billie: Added
1307         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1308
1309 2004-03-12  James Troup  <james@nocrew.org>
1310
1311         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1312
1313         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1314
1315         * katie.py (Katie.accept): add support for DebBugs Version
1316         Tracking by writing out .versions (generated in jennifer's
1317         get_changelog_versions()) and .debinfo (mapping of binary ->
1318         source) files.
1319
1320         * ashley (main): add dsc["bts changelog"].
1321
1322         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1323
1324         * jennifer (check_diff): obsoleted by check_source(), removed.
1325         (check_source): new function: create a temporary directory and
1326         move into it and call get_changelog_versions().
1327         (get_changelog_versions): new function: extract the source package
1328         and optionally parse debian/changelog to obtain the version
1329         history for the BTS.
1330         (process_it): call check_source() rather than check_diff().
1331
1332 2004-03-08  James Troup  <james@nocrew.org>
1333
1334         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1335         listbar" rather than "if listbar.count(varfoo)"' change on
1336         2004-02-24.
1337
1338 2004-03-05  James Troup  <james@nocrew.org>
1339
1340         * alicia (main): don't warn about not closing bugs - we don't
1341         manage overrides through the BTS.
1342
1343 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1344
1345         * docs/README.config: lots of updates and corrections.
1346         * docs/README.first: likewise.
1347
1348         * docs/README.config: drop unused Dir::Queue::Root.
1349         * katie.conf-non-US: likewise.
1350         * katie.conf: likewise.
1351         * katie.conf-security: likewise.
1352
1353 2004-02-27  James Troup  <james@nocrew.org>
1354
1355         * rose (process_tree): use 'if var in [ list ]' rather than long
1356         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1357         Michlmayr.
1358
1359         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1360         suggested by Martin Michlmayr.
1361         * catherine (poolize): likewise.
1362         * charisma (main): likewise.
1363         * halle (check_changes): likewise.
1364         * heidi (main): likewise.
1365         (process_file): likewise.
1366         * kelly (install): likewise.
1367         (stable_install): likewise.
1368         * utils.py (fix_maintainer): likewise.
1369
1370         * apt.conf: add support for debian-installer in testing-proposed-updates.
1371         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1372         add - set to main.
1373
1374         * mkmaintainers: add "-T15" option to wget of non-US packages file
1375         so that we don't hang cron.daily if non-US is down.
1376
1377         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1378
1379         * templates/jennifer.bug-close: add Source and Source-Version
1380         pseudo-headers that may be used for BTS Version Tracking someday
1381         [ajt@].
1382
1383         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1384         (main): likewise.
1385
1386         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1387
1388 2004-02-25  James Troup  <james@nocrew.org>
1389
1390         * katie.conf (SuiteMappings): don't map testing-security to
1391         proposed-updates.
1392
1393 2004-02-24  James Troup  <james@nocrew.org>
1394
1395         * katie.py (Katie.__init__): remove unused 'values' field.
1396
1397         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1398         rather than 's.count(c) > 0'.
1399
1400         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1401         rather than "if listbar.count(varfoo)".
1402         * halle (check_joey): likewise.
1403         * jeri (check_joey): likewise.
1404         * lisa (edit_index): likewise.
1405         * jenna (stable_dislocation_p): likewise.
1406
1407         * jennifer (main): remove unused global 'nmu'.
1408
1409 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1410
1411         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1412           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1413           the dak tools close bugs.
1414
1415 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1416
1417         * katie.conf (Alicia): Added an Alicia section with email address
1418         * templates/alicia.bug-close: Added
1419         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1420         * alicia (main): Added a -d/--done argument
1421
1422 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1423
1424         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1425
1426 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1427
1428         * lisa (prod_maintainer): Added function to prod the maintainer without
1429           accepting or rejecting the package
1430         * templates/lisa.prod: Added this template for the prodding mail
1431
1432         * .cvsignore: Added neve-files which turns up in new installations
1433
1434 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1435
1436         * alicia (usage): Fixed usage message to offer section and priority
1437           as seperately optional arguments.
1438         * alicia (main): Added a % (arg) interpolation needed when only
1439           one of section or priority is provided and it cannot be found.
1440
1441 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1442
1443         * alicia: Added
1444         * docs/alicia.1.sgml: Added
1445         * docs/Makefile: Added alicia to the list of manpages to build
1446         * docs/README.names: Noted what alicia does
1447         * docs/README.first: Noted where alicia is useful
1448
1449 2004-01-21  James Troup  <james@nocrew.org>
1450
1451         * madison (main): add -b/--binary-type.
1452         (usage): likewise.
1453
1454         * denise (main): generate debian-installer overrides for testing
1455         too.
1456         * apt.conf: add support for debian-installer in testing.
1457         * katie.conf (Suite::Testing::UdebComponents): set to main.
1458
1459         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1460         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1461         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1462
1463         * utils.py (parse_changes): don't process data not inside the
1464         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1465         pointing this out.
1466         * test/005/test.py (main): new test to test for above.
1467
1468 2004-01-04  James Troup  <james@nocrew.org>
1469
1470         * jenna (write_filelists): correct typo, s/Components/Component/
1471         for Options.
1472
1473 2004-01-04  Ryan Murray  <rmurray@debian.org>
1474
1475         * cron.buildd: move update of overrides and Packages file...
1476         * cron.unchecked: to here.
1477         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1478         * katie.conf-security: likewise
1479
1480 2003-11-20  James Troup  <james@nocrew.org>
1481
1482         * jenna (main): don't use utils.try_with_debug(), it produces way
1483         too much output.
1484
1485         * halle (check_changes): don't error out if a .changes refers to a
1486         non-existent package, just warn and skip the file.
1487
1488         * docs/README.stable-point-release: mention halle and .changes
1489         obsoleted by removal through melanie.  Update for 3.0r2.
1490
1491         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1492         (Suite::Stable::Description): update for 3.0r2.
1493         (Lauren::MoreInfoURL): likewise.
1494         * katie.conf-non-US (Suite::Stable::Version): likewise.
1495         (Suite::Stable::Description): likewise.
1496         (Lauren::MoreInfoURL): likewise.
1497
1498         * apt.conf.stable (Default): don't define MaxContentsChange.
1499         * apt.conf.stable-non-US (Default): likewise.
1500
1501         * lauren (reject): hack to work around partial replacement of an
1502         upload, i.e. one or more binaries superseded by another source
1503         package.
1504
1505 2003-11-17  James Troup  <james@nocrew.org>
1506
1507         * pseudo-packages.maintainers: point installation-reports at
1508         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1509         request.
1510
1511         * utils.py (parse_changes): calculate the number of lines once
1512         with len() rather than max().
1513
1514         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1515         files, since check_dsc_against_db() deletes the .orig.tar.gz
1516         entry.
1517
1518 2003-11-13  Ryan Murray  <rmurray@debian.org>
1519
1520         * apt.conf: specify a src override file for debian-installer
1521
1522 2003-11-10  James Troup  <james@nocrew.org>
1523
1524         * fernanda.py (strip_pgp_signature): new function - strips PGP
1525         signature from a file and returns the modified contents of the
1526         file in a string.
1527         (display_changes): use it.
1528         (read_dsc): likewise.
1529
1530 2003-11-09  Ryan Murray  <rmurray@debian.org>
1531
1532         * cron.buildd: export accepted_autobuild table for unstable, and use
1533         it to generate the incoming Packages/Sources rather than having apt
1534         walk the directory.
1535         * apt.conf.buildd: use exported table from cron.buildd to generate
1536         Packages/Sources
1537
1538 2003-11-07  James Troup  <james@nocrew.org>
1539
1540         * kelly: import errno.
1541
1542         * katie.py (Katie.build_summaries): sort override disparities.
1543
1544         * kelly (install): set dsc_component based on the .dsc's component
1545         not a random binaries.
1546
1547 2003-10-29  James Troup  <james@nocrew.org>
1548
1549         * katie.py (Katie.build_summaries): don't assume changes["source"]
1550         exists since it might not.
1551
1552 2003-10-20  James Troup  <james@nocrew.org>
1553
1554         * pseudo-packages.maintainers: update security.d.o to use
1555         team@s.d.o at joy@'s request.
1556
1557 2003-10-17  James Troup  <james@nocrew.org>
1558
1559         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1560
1561 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1562
1563         * tea (chk_bd_process_dir): use .endswith rather than slice.
1564
1565 2003-10-14  James Troup  <james@nocrew.org>
1566
1567         * tea (check_build_depends): new function.
1568         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1569         in the archive.
1570         (main): update for new function.
1571         (usage): likewise.
1572
1573         * katie.py (Katie.do_reject): sanitize variable names,
1574         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1575         os.close() to outside if clause.
1576
1577         * jennifer (check_dsc): check build-depends and
1578         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1579         Fold the ARRAY check into the same code block and tidy up it's
1580         rejection message.
1581         (check_changes): ensure that the Files field is non-empty.
1582         Suggested by Santiago Vila <sanvila@unex.es>
1583         (check_changes): normalize reject messages.
1584         (check_dsc): instead of doing most of the checks inside a for loop
1585         and an if, find the dsc_filename in a short loop over files first
1586         and then do all the checks.  Add check for more than one .dsc in a
1587         .changes which we can't handle.  Normalize reject messages.
1588
1589 2003-10-13  James Troup  <james@nocrew.org>
1590
1591         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1592         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1593
1594         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1595         variables while iterating over 'files'.  Don't regenerate it when
1596         checking for source if source is mentioned.
1597
1598         Reject source only uploads if the config variable
1599         Dinstall::Reject::NoSourceOnly is set.
1600
1601 2003-10-03  James Troup  <james@nocrew.org>
1602
1603         * rene (main): add nasty hardcoded reference to debian-installer
1604         so we detect NBS .udebs.
1605
1606 2003-09-29  James Troup  <james@nocrew.org>
1607
1608         * apt.conf (old-proposed-updates): remove.
1609         * apt.conf-non-US (old-proposed-updates): likewise.
1610
1611 2003-09-24  James Troup  <james@nocrew.org>
1612
1613         * tea (check_files_not_symlinks): new function, ensure files
1614         mentioned in the database aren't symlinks.  Includes code to
1615         update any files that are like this to their real filenames +
1616         location; commented out by though.
1617         (usage): update for new function.
1618         (main): likewise.
1619
1620 2003-09-24  Anthony Towns  <ajt@debian.org>
1621
1622         * vars: external-overrides variable added
1623         * cron.daily: Update testing/unstable Task: overrides from joeyh
1624         managed external source.
1625
1626 2003-09-22  James Troup  <james@nocrew.org>
1627
1628         * kelly (install): if we can't move the .changes into queue/done,
1629         fail don't warn and carry on.  The old behaviour pre-dates NI and
1630         doesn't make much sense now since jennifer checks both
1631         queue/accepted and queue/done for any .changes files it's
1632         processing.
1633
1634         * utils.py (move): don't throw exceptions on existing files or
1635         can't overwrite, instead just fubar out.
1636
1637         * jennifer (check_dsc): also check Build-Depends-Indep for
1638         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1639
1640 2003-09-18  James Troup  <james@nocrew.org>
1641
1642         * katie.py (Katie.close_bugs): only log the bugs we've closed
1643         once.
1644
1645         * kelly (main): log as 'kelly', not 'katie'.
1646
1647 2003-09-16  James Troup  <james@nocrew.org>
1648
1649         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1650
1651         * jennifer (check_changes): normalize reject message for "changes
1652         file already exists" to be %s: <foo>.
1653         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1654         produced by broken dpkg-source in 1.10.11.  Tone down and
1655         normalize rejection message for incompatible 'Format' version
1656         numbers.
1657         (check_diff): likewise tone down and normalize.
1658
1659 2003-09-07  James Troup  <james@nocrew.org>
1660
1661         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1662         don't bomb out on bogus empty lines.
1663         (build_file_list): check for changes["files"] earlier.  use Dict
1664         to create files[name] dictionary.
1665         (send_mail): don't bother validating arguments.
1666         (check_signature): minor improvements to some of the rejection
1667         messages including listing the key id of the key that wasn't found
1668         in the keyring.
1669         (wrap): new function.
1670
1671         * tea: add new check 'validate-indices' that ensures all files
1672         mentioned in indices (Packages, Sources) files do in fact exist.
1673
1674         * catherine (poolize): use a local re_isadeb which handles legacy
1675         (i.e. no architecture) style .deb filenames.
1676
1677         * rosamund: new script.
1678
1679         * rhona (check_binaries): when checking for binary packages not in
1680         a suite, don't bother selecting files that already have a
1681         last_used date.
1682         (check_sources): likewise.
1683
1684         * rhona: change all SQL EXISTS sub-query clauses to use the
1685         postgres suggested convention of "SELECT 1 FROM".
1686         * andrea (main): likewise.
1687         * tea (check_override): likewise.
1688         * catherine (main): likewise.
1689
1690         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1691         entries and in other suites MustBeNewerThan's.
1692         (SuiteMappings): likewise
1693         * katie.conf-non-US: likewise.
1694         * katie.conf-security: likewise.
1695
1696         * apt.conf-security: remove oldstable.
1697         * apt.conf.stable: likewise.
1698         * apt.conf.stable-non-US: likewise.
1699         * cron.buildd-security: likewise.
1700         * cron.daily-security: likewise.
1701         * vars-security (suites): likewise.
1702         * wanna-build/trigger.daily: likewise.
1703
1704         * claire.py (clean_symlink): move...
1705         * utils.py (clean_symlink): here.
1706
1707         * claire.py (find_dislocated_stable): update accordingly.
1708
1709 2003-08-16  Anthony Towns  <ajt@debian.org>
1710
1711         * katie.py (source_exists): expand the list of distributions
1712         the source may exist in to include any suite that's mapped to
1713         the destination suite (even transitively (a->b->c)). This should
1714         unbreak binary uploads to *-proposed-updates.
1715
1716 2003-08-09  Randall Donald  <rdonald@debian.org>
1717
1718         * lisa (recheck): change changes["distribution"].keys() to
1719         Katie.pkg.changes...
1720
1721 2003-08-08  Randall Donald  <rdonald@debian.org>
1722
1723         * katie.py: only tag bugs as fixed-in-experimental for
1724         experimental uploads
1725
1726 2003-07-26  Anthony Towns  <ajt@debian.org>
1727
1728         * katie.py (source_exists): add an extra parameter to limit the
1729         distribution(s) the source must exist in.
1730         * kelly, lisa, jennifer: update to use the new source_exists
1731
1732 2003-07-15  Anthony Towns  <ajt@debian.org>
1733
1734         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1735         checksums for debian-installer stuff even when it's just a symlink to
1736         another suite
1737
1738         * apt.conf: add the FakeDI line
1739
1740 2003-06-09  James Troup  <james@nocrew.org>
1741
1742         * kelly (check): make sure the 'file' we're looking for in 'files'
1743         hasn't been deleted by katie.check_dsc_against_db().
1744
1745 2003-05-07  James Troup  <james@nocrew.org>
1746
1747         * helena (time_pp): fix s/years/year/ typo.
1748
1749 2003-04-29  James Troup  <james@nocrew.org>
1750
1751         * madison (usage): document -c/--component.
1752
1753         * madison (usage): Fix s/seperated/separated/.
1754         * melanie (usage): likewise.
1755         * jenna (usage): likewise.
1756
1757 2003-04-24  James Troup  <james@nocrew.org>
1758
1759         * cron.daily-non-US: if there's nothing for kelly to install, say
1760         so.
1761
1762         * jennifer (check_timestamps): print sys.exc_value as well as
1763         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1764         failed' with 'deb contents' to make it clearer what timestamp(s)
1765         are being checked.
1766
1767 2003-04-15  James Troup  <james@nocrew.org>
1768
1769         * cron.daily-non-US: only run kelly if there are some .changes
1770         files in accepted.
1771
1772         * rene: add -m/--mode argument which can be either daily (default)
1773         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1774         Various changes to make this possible including a poor attempt at
1775         splitting main() up a little.  De-hardcode suite numbers from SQL
1776         queries and return quietly from do_nviu() if experimental doesn't
1777         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1778         is.
1779
1780         * debian/control (Depends): remove python-zlib as it's obsolete.
1781
1782         * charisma (main): don't slice the \n off strings when we're
1783         strip()-ing it anyway.
1784         * heidi (set_suite): likewise.
1785         (process_file): likewise.
1786         * natalie (process_file): likewise.
1787
1788 2003-04-08  James Troup  <james@nocrew.org>
1789
1790         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1791         slow queries by using one LIKE '%foo%' and then matching against
1792         '%s' or '/%s$' in python.  Also only join location when we need it
1793         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1794         query, so 6s for each sourceful package.
1795
1796         * cron.daily: invoke rene and send the report to ftpmaster.
1797         * cron.daily-non-US: likewise.
1798
1799 2003-03-14  James Troup  <james@nocrew.org>
1800
1801         * utils.py (send_mail): default filename to blank.
1802         * amber (make_advisory): adapt.
1803         * jennifer (acknowledge_new): likewise.
1804         * katie.py (Katie.close_bugs): likewise.
1805         (Katie.announce): likewise.
1806         (Katie.accept): likewise.
1807         (Katie.check_override): likewise.
1808         (Katie.do_reject): likewise.
1809         * kelly (do_reject): likewise.
1810         (stable_install): likewise.
1811         * lisa (do_bxa_notification): likewise.
1812         * lauren (reject): likewise.
1813         * melanie (main): likewise.
1814
1815         * rene (add_nbs): check any NBS packages against unstable to see
1816         if they haven't been removed already.
1817
1818         * templates/katie.rejected: remove paragraph about rejected files
1819         since they're o-rwx due to c-i-m and the uploader can't do
1820         anything about them and shania will take care of them anyway.
1821
1822         * madison (usage): update usage example to use comma seperation.
1823         * melanie (usage): likewise.
1824
1825         * utils.py (split_args): new function; splits command line
1826         arguments either by space or comma (whichever is used).  Also has
1827         optional-but-default DWIM spurious space detection to avoid
1828         'command -a i386, m68k' problems.
1829         (parse_args): use it.
1830         * melanie (main): likewise.
1831
1832         * melanie (main): force the admin to tell someone if we're not
1833         doing a rene-led removal (or closing a bug, which counts as
1834         telling someone).
1835
1836 2003-03-05  James Troup  <james@nocrew.org>
1837
1838         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1839         and python sections.
1840         * katie.conf-security (Section): likewise.
1841
1842         * add_constraints.sql: add uid and uid_id_seq to grants.
1843
1844         * lisa (determine_new): also warn about adding overrides to
1845         oldstable.
1846
1847         * madison (main): make the -S/--source-and-binary query obey
1848         -s/--suite restrictions.
1849
1850 2003-03-03  James Troup  <james@nocrew.org>
1851
1852         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1853         exists, warn the user that our output might seem strange.  (People
1854         get confused by multiple versions in a suite which happens
1855         post-kelly but pre-jenna.)
1856
1857 2003-02-21  James Troup  <james@nocrew.org>
1858
1859         * kelly (main): we don't need to worry about StableRejector.
1860
1861         * melanie (main): sort versions with apt_pkg.VersionCompare()
1862         prior to output.
1863
1864         * lauren: new script to manually reject packages from
1865         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1866
1867 2003-02-20  James Troup  <james@nocrew.org>
1868
1869         * kelly (init): remove unused -m/--manual-reject argument.
1870
1871         * katie.py (Katie.force_reject): renamed from force_move to make
1872         it more explicit what this function does.
1873         (Katie.do_reject): update to match.
1874
1875         * utils.py (prefix_multi_line_string): add an optional argument
1876         include_blank_lines which defaults to 0.  If non-zero, blank lines
1877         will be includes in the output.
1878
1879         * katie.py (Katie.do_reject): don't add leading space to each line
1880         of the reject message.  Include blank lines when showing the
1881         message to the user.
1882
1883 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1884
1885         * utils.py (fix_maintainer): replace pointless re.sub() with
1886         simple string format.
1887
1888 2003-02-11  James Troup  <james@nocrew.org>
1889
1890         * lisa (edit_overrides): only strip-to-one-char and upper-case
1891         non-numeric answers.  Fixes editing of items with indices >= 10;
1892         noticed by Randall.
1893         (edit_overrides): correct order of arguments to "not a valid
1894         index" error message.
1895
1896         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1897         remove_duplicate_versions(); thanks to aj for the initial
1898         diagnosis.
1899         (remove_duplicate_versions): correct how we return
1900         dominant_versions.
1901         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1902         a tuple rather than just a tuple.
1903
1904 2003-02-10  James Troup  <james@nocrew.org>
1905
1906         * emilie: new script - sync fingerprint and uid tables with a
1907         debian.org LDAP DB.
1908
1909         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1910         in 'fingerprint'.
1911
1912         * db_access.py (get_or_set_uid_id): new function.
1913
1914         * jennifer (main): update locking to a) not used FCNTL (deprecated
1915         in python >= 2.2) and b) acknowledge upstream's broken
1916         implementation of lockf (see Debian bug #74777), c) try to acquire
1917         the lock non-blocking.
1918         * kelly (main): likewise.
1919
1920         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1921
1922         * madison (main): only append the package to new_packages if it's
1923         not already in there; fixes -S/--source-and-binary for cases where
1924         the source builds a binary package of the same name.
1925
1926 2003-02-10  Anthony Towns  <ajt@debian.org>
1927
1928         * madison (main): use explicit JOIN syntax for
1929         -S/--source-and-binary queries to reduce the query's runtime from
1930         >10 seconds to negligible.
1931
1932 2003-02-08  James Troup  <james@nocrew.org>
1933
1934         * rene (main): in the NVIU output, append items to lists, not
1935         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1936         should be removed.
1937
1938 2003-02-07  James Troup  <james@nocrew.org>
1939
1940         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1941         Sources [aj].
1942
1943         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1944         O. Benham/Adam Heath/.
1945
1946         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1947         (Suite::Stable::Description): update for 3.0r1a.
1948         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1949
1950         * utils.py (gpgv_get_status_output): rename from
1951         get_status_output().
1952
1953         * neve (check_signature): use gpgv_get_status_output and Dict from
1954         utils().  Add missing newline to error message about duplicate tokens.
1955
1956         * saffron (per_arch_space_use): also print space used by source.
1957         (output_format): correct string.join() invocation.
1958
1959         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1960
1961 2003-02-04  James Troup  <james@nocrew.org>
1962
1963         * cron.buildd: correct generation of Packages/Sources and grep out
1964         non-US/non-free as well as non-free.
1965
1966 2003-02-03  Ryan Murray  <rmurray@debian.org>
1967
1968         * cron.buildd: generate quinn-diff output with full Packages/Sources
1969           files to get out-of-date vs. uncompiled right.
1970         * apt.conf.buildd: no longer generate uncompressed files, as they
1971           are generated in cron.buildd instead
1972         * add -i option to quinn-diff to ignore binary-all packages
1973         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1974           aren't in the packages file, the arch that uploaded them will build
1975           them anyways...
1976
1977 2003-01-30  James Troup  <james@nocrew.org>
1978
1979         * rene (main): only print suggested melanie command when there's
1980         some NBS to remove.
1981
1982 2003-01-30  Ryan Murray  <rmurray@debian.org>
1983
1984         * cron.buildd: fix incorrectly inverted lockfile check
1985
1986 2003-01-29  Ryan Murray  <rmurray@debian.org>
1987
1988         * cron.buildd: generate override.sid.all3.src
1989         * apt.conf.buildd: use generated override.sid.all3.src
1990
1991 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1992
1993         * utils.py (get_status_output): moved from jennifer.
1994         (Dict): likewise.
1995         (check_signature): likewise.
1996
1997         * jennifer (get_status_output): moved to utils.py.
1998         (Dict): likewise.
1999         (check_signature): likewise.
2000
2001         * utils.py (check_signature): add an argument to specifiy which
2002         function to call when an error was found.
2003         (check_signature): document this function better.
2004
2005         * jennifer (check_files): pass the reject function as an argument
2006         to utils.check_signature.
2007         (process_it): likewise.
2008
2009 2003-01-20  James Troup  <james@nocrew.org>
2010
2011         * rene (main): lots of changes to improve the output and make it
2012         more useful.
2013
2014         * katie.py (Katie.check_override): make the override messages
2015         clearer (hopefully).
2016
2017 2002-12-26  James Troup  <james@nocrew.org>
2018
2019         * ziyi (usage): document the ability to pass suite(s) as
2020         argument(s).
2021         (main): read apt.conf after checking for -h/--help.
2022
2023         * tea (main): take the check to run as an argument.
2024
2025         * saffron.R: R script to graph daily install runs.
2026
2027         * saffron: new script; various stats functions.
2028
2029         * rhona (main): connect to the database after checking for -h/--help.
2030
2031         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2032
2033         * melanie (main): sort versions with utils.arch_compare_sw().
2034
2035         * madison (usage): alphabetize order of options.
2036         * melanie (usage): likewise.
2037
2038         * kelly (usage): fix usage short description (we aren't dinstall).
2039
2040         * julia (usage): fix usage description and alphabetize order of
2041         options.
2042
2043         * jeri (usage): fix usage short description.
2044
2045         * jennifer (main): move --help and --version checks from here...
2046         (init): to here so that they work with an empty katie.conf.
2047         * kelly: likewise.
2048
2049         * alyson (usage): new function.
2050         (main): use it.
2051         * andrea: likewise.
2052         * ashley: likewise.
2053         * cindy: likewise.
2054         * denise: likewise.
2055         * helena: likewise.
2056         * neve: likewise.
2057         * rene: likewise.
2058         * rose: likewise.
2059         * tea: likewise.
2060
2061         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2062         entry that caused tasks to be omitted from 3.0r1.
2063
2064 2002-12-10  James Troup  <james@nocrew.org>
2065
2066         * jennifer (check_files): sanity check the Depends field to ensure
2067         it's non-empty if present since apt chokes on an empty one.
2068         Thanks to Ryan Murray for the idea.
2069
2070 2002-12-08  James Troup  <james@nocrew.org>
2071
2072         * katie.conf-security (Helena::Directories): new; include accepted
2073         in addition to byhand and new.
2074
2075         * helena (process_changes_files): use utils.arch_compare_sw().
2076         Justify things based on the longest [package, version,
2077         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2078         the commas in architecture and version lists for the same reason.
2079         (main): make directories we process configurable through
2080         Helena::Directories in the config file; if that doesn't exist
2081         default to the old hardcoded values (byhand & new).
2082
2083         * utils.py (arch_compare_sw): moved here from madison.
2084         * madison (main): adjust to compensate.
2085
2086 2002-12-06  James Troup  <james@nocrew.org>
2087
2088         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2089         right filename.
2090
2091 2002-12-05  James Troup  <james@nocrew.org>
2092
2093         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2094
2095 2002-11-28  Randall Donald  <rdonald@debian.org>
2096
2097         * fernanda.py (read_control): fix typo of 'Architecture'.
2098
2099 2002-11-26  James Troup  <james@nocrew.org>
2100
2101         * lisa (check_pkg): call less with '-R' so we see the colour from
2102         Randall's fernanda changes.
2103
2104         * neve (process_sources): if Directory points to a legacy location
2105         but the .dsc isn't there; assume it's broken and look in the pool.
2106         (update_section): new, borroed from alyson.
2107         (do_da_do_da): use it.
2108         (process_packages): add suite_it to the cache key used for
2109         arch_all_cache since otherwise we only add a package to the first
2110         suite it's in and ignore any subsequent ones.
2111
2112         * katie.conf-non-US (Location): fixed to reflect reality (all
2113         suites, except old-proposed-updates (which is legacy-mixed)) are
2114         pool.
2115
2116         * utils.py (try_with_debug): wrapper for print_exc().
2117         * jenna (main): use it.
2118         * neve (main): likewise.
2119
2120 2002-11-25  Randall Donald  <rdonald@debian.org>
2121
2122         * fernanda.py (main): added -R to less command line for raw control
2123         character support to print colours
2124         (check_deb): Instead of running dpkg -I on deb file, call
2125         output_deb_info, the new colourized control reporter.
2126         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2127         of printing out each .dsc line.
2128         (output_deb_info): new function. Outputs each key/value pair from
2129         read_control except in special cases where we highlight section,
2130         maintainer, architecture, depends and recommends.
2131         (create_depends_string): new function. Takes Depends tree and looks
2132         up it's compontent via projectb db, colourizes and constructs a
2133         depends string in original order.
2134         (read_dsc): new function. reads and parses .dsc info via
2135         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2136         colourized.
2137         (read_control): new function. reads and parses control info via
2138         apt_pkg. Depends and Recommends are split in to list structures,
2139         Section and Architecture are colourized. Maintainer is colourized
2140         if it has a localhost.localdomain address.
2141         (split_depends): new function. Creates a list of lists of
2142         dictionaries of depends (package,version relation). Top list is
2143         colected from comma delimited items. Sub lists are | delimited.
2144         (get_comma_list): new function. splits string input among commas
2145         (get_or_list): new function. splits string input among | delimiters
2146         (get_depends_parts): new function. Creates dictionary of package name
2147         and version relation from dependancy string.
2148         Colours for section and depends are per component. Unfound depends
2149         are in bold. Lookups using version info is not supported yet.
2150
2151 2002-11-22  James Troup  <james@nocrew.org>
2152
2153         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2154         'udmsearch'.
2155
2156         * amber (make_advisory): string.atol() is deprecated and hasn't
2157         been ported to string methods.  Use long() instead.
2158
2159         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2160         creating the database since we'll fail badly if it's created with
2161         e.g. UNICODE encoding.
2162
2163         * rose (main): AptCnf is a global.
2164
2165         * neve (get_location_path): new function determines the location
2166         from the the first (left-most) directory of a Filename/Directory.
2167         (process_sources): don't need 'location' anymore.  Use
2168         utils.warn().  Use the Directory: field for each package to find
2169         the .dsc.  Use get_location_path() to determine the location for
2170         each .dsc.
2171         (process_packages): do't need 'location' anymore.  Use
2172         utils.warn().  Use get_location_path().
2173         (do_sources): don't need 'location', drop 'prefix' in favour of
2174         being told the full path to the Sources file, like
2175         process_packages().
2176         (do_da_do_da): main() renamed, so that main can call us in a
2177         try/except.  Adapt for the changes in do_sources() and
2178         process_packages() above.  Assume Sources and Packages file are in
2179         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2180
2181         * katie.conf-security (Location): fixed to reflect reality (all
2182         suites are pool, not legacy).
2183
2184         * utils.py (print_exc): more useful (i.e. much more verbose)
2185         traceback; a recipe from the Python cookbook.
2186         * jenna (main): use it.
2187         * neve (main): likewise.
2188
2189 2002-11-19  James Troup  <james@nocrew.org>
2190
2191         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2192         handling which was FUBAR for multi-suite uploads.  Now we just
2193         make a dictionary of destinations to copy to and iterate over
2194         those.
2195
2196         * fernanda.py (check_deb): run linda as well as lintian.
2197
2198 2002-10-21  James Troup  <james@nocrew.org>
2199
2200         * melanie (main): change X-Melanie to X-Katie and prefix it with
2201         'melanie '.
2202
2203         * lisa (main): prefix X-Katie with 'lisa '.
2204
2205         * jennifer (clean_holding): fix typo in string method changes;
2206         s/file.find(file/file.find(/.
2207
2208         * cron.daily: invoke helena and send the report to ftpmaster.
2209         * cron.daily-non-US: likewise.
2210
2211 2002-10-16  James Troup  <james@nocrew.org>
2212
2213         * kelly (check): call reject() with a blank prefix when parsing
2214         the return of check_dsc_against_db() since it does its own
2215         prefix-ing.
2216
2217         * rose: new script; only handles directory creation initally.
2218
2219         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2220         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2221
2222 2002-10-06  James Troup  <james@nocrew.org>
2223
2224         * rene (main): remove bogus argument handling.
2225
2226         * kelly: katie, renamed.
2227         * cron.daily: adapt for katie being renamed to kelly.
2228         * cron.daily-non-US: likewise.
2229         * amber (main): likewise.
2230
2231         * Changes for python 2.1.
2232
2233         * kelly: time.strftime no longer requires a second argument of
2234         "time.localtime(time.time())".
2235         * logging.py: likewise.
2236         * rhona: likewise.
2237         * shania (init): likewise.
2238
2239         * amber: use augmented assignment.
2240         * catherine (poolize): likewise.
2241         * claire.py (fix_component_section): likewise.
2242         * halle (check_changes): likewise.
2243         * helena: likewise.
2244         * jenna: likewise.
2245         * jennifer: likewise.
2246         * jeri: likewise.
2247         * katie.py: likewise.
2248         * kelly: likewise.
2249         * lisa: likewise.
2250         * madison (main): likewise.
2251         * melanie: likewise.
2252         * natalie: likewise.
2253         * neve: likewise.
2254         * rhona: likewise.
2255         * tea: likewise.
2256         * utils.py: likewise.
2257         * ziyi: likewise.
2258
2259         * amber: use .endswith.
2260         * fernanda.py: likewise.
2261         * halle (main): likewise.
2262         * jennifer: likewise.
2263         * jeri: likewise.
2264         * katie.py: likewise.
2265         * kelly: likewise.
2266         * lisa: likewise.
2267         * neve: likewise.
2268         * shania (main): likewise.
2269         * utils.py: likewise.
2270
2271         * alyson: use string methods.
2272         * amber: likewise.
2273         * andrea: likewise.
2274         * ashley: likewise.
2275         * catherine: likewise.
2276         * charisma: likewise.
2277         * claire.py: likewise.
2278         * db_access.py: likewise.
2279         * denise: likewise.
2280         * halle: likewise.
2281         * heidi: likewise.
2282         * helena: likewise.
2283         * jenna: likewise.
2284         * jennifer: likewise.
2285         * jeri: likewise.
2286         * julia: likewise.
2287         * katie.py: likewise.
2288         * kelly: likewise.
2289         * lisa: likewise.
2290         * logging.py: likewise.
2291         * madison: likewise.
2292         * melanie: likewise.
2293         * natalie: likewise.
2294         * neve: likewise.
2295         * rene: likewise.
2296         * tea: likewise.
2297         * utils.py: likewise.
2298         * ziyi: likewise.
2299
2300 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2301
2302         * utils.py (parse_changes): use <string>.startswith() rather than
2303         string.find().
2304
2305 2002-08-27  Anthony Towns  <ajt@debian.org>
2306
2307         * katie.py (in_override_p): when searching for a source override,
2308         and the dsc query misses, search for both udeb and deb overrides
2309         as well. Should fix the UNACCEPT issues with udebs.
2310
2311 2002-08-24  James Troup  <james@nocrew.org>
2312
2313         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2314         source+binary package finding code which was causing severe
2315         performance degradation with postgres 7.2.
2316
2317 2002-08-14  James Troup  <james@nocrew.org>
2318
2319         * julia (main): use the pwd.getpwall() to get system user info
2320         rather than trying to read a password file.  Add a -n/--no-action
2321         option.
2322
2323         * cron.hourly: julia no longer takes any arguments.
2324         * cron.hourly-non-US: likewise.
2325
2326 2002-08-07  James Troup  <james@nocrew.org>
2327
2328         * katie (install): handle multi-suite uploads when CopyChanges
2329         and/or CopyKatie are in use, ensuring we only copy stuff once.
2330
2331 2002-08-01  Ryan Murray  <rmurray@debian.org>
2332
2333         * wanna-build/trigger.daily: initial commit, with locking
2334         * cron.buildd: add locking against daily run
2335
2336 2002-07-30  James Troup  <james@nocrew.org>
2337
2338         * melanie (main): readd creation of suite_ids_list so melanie is
2339         remotely useful again.
2340
2341         * katie.conf: adopt for woody release; diable
2342         StableDislocationSupport, add oldstable, adjust other suites and
2343         mappings, fix up location.
2344         * katie.conf-non-US: likewise.
2345         * katie.conf-security: likewise.
2346
2347         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2348         stable.
2349         * apt.conf.stable-non-US: likewise.
2350
2351         * apt.conf-security: adapt for woody release; adding oldstable,
2352         oldstable, adjust stable and testing.
2353         * cron.daily-security: likewise.
2354         * cron.buildd-security: likewise.
2355
2356         * apt.conf: adapt for woody release; rename woody-proposed-updates
2357         to testing-proposed-updates and proposed-updates to
2358         old-proposed-updates.
2359         * apt.conf-non-US: likewise.
2360
2361         * vars-non-US (copyoverrides): add sarge.
2362         * vars (copyoverrides): likewise.
2363
2364         * vars-security (suites): add oldstable.
2365
2366 2002-07-22  Ryan Murray  <rmurray@debian.org>
2367
2368         * apt.conf.security-buildd: use suite codenames instead of
2369           distnames.
2370
2371 2002-07-16  James Troup  <james@nocrew.org>
2372
2373         * denise (main): fix filenames for testing override files.
2374
2375 2002-07-14  James Troup  <james@nocrew.org>
2376
2377         * jennifer (process_it): call check_md5sums later so we can check
2378         files in the .dsc too
2379         (check_md5sums): check files in the .dsc too.  Check both md5sum
2380         and size.
2381
2382         * melanie (main): use parse_args() and join_with_commas_and() from
2383         utils.  If there's nothing to do, say so and exit, don't ask for
2384         confirmation etc.
2385
2386         * amber (join_with_commas_and): moved from here to ...
2387         * utils.py (join_with_commas_and): here.
2388
2389 2002-07-13  James Troup  <james@nocrew.org>
2390
2391         * madison (main): use parse_args() from utils.  Support
2392         -c/--component.
2393
2394         * jenna (parse_args): moved from here to ...
2395         * utils.py (parse_args): here.
2396
2397         * katie.conf (Architectures): minor corrections to the description
2398         for arm, mips and mipsel.
2399         * katie.conf-non-US (Architectures): likewise.
2400         * katie.conf-security (Architectures): likewise.
2401
2402         * cron.daily-security: use natalie's new -a/--add functionality to
2403         flesh out the security overrides.
2404
2405 2002-07-12  James Troup  <james@nocrew.org>
2406
2407         * cron.buildd (ARCHS): add arm.
2408
2409         * katie.conf: 2.2r7 was released.
2410         * katie.conf-non-US: likewise.
2411
2412         * utils.py (parse_changes): handle a multi-line field with no
2413         starting line.
2414
2415 2002-06-25  James Troup  <james@nocrew.org>
2416
2417         * templates/amber.advisory (To): add missing email address since
2418         __WHOAMI__ is only a name.
2419
2420         * katie.conf-security (Melane::LogFile): correct to go somewhere
2421         katie has write access to.
2422         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2423         Testing.
2424
2425         * natalie: add support for -a/-add which adds packages only
2426         (ignoring changes and deletions).
2427
2428         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2429         use FindB, not get.
2430
2431 2002-06-22  James Troup  <james@nocrew.org>
2432
2433         * jennifer (check_files): validate the package name and version
2434         field.  If 'Package', 'Version' or 'Architecture' are missing,
2435         don't try any further checks.
2436         (check_dsc): likewise.
2437
2438         * utils.py (re_taint_free): add '~' as a valid character.
2439
2440 2002-06-20  Anthony Towns  <ajt@debian.org>
2441
2442         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2443
2444 2002-06-09  James Troup  <james@nocrew.org>
2445
2446         * jennifer (check_files): reduce useless code.
2447
2448         * cron.daily-security: run symlinks -dr on $ftpdir.
2449
2450         * vars-security (ftpdir): add.
2451
2452 2002-06-08  James Troup  <james@nocrew.org>
2453
2454         * neve (update_override_type): transaction is handled higher up in
2455         main().
2456         (update_priority): likewise.
2457         (process_sources): remove code that makes testing a duplicate of
2458         stable.
2459         (process_packages): likewise.
2460
2461         * templates/amber.advisory: add missing mail headers.
2462
2463         * cron.daily-security: also call apt-ftparchive clean for
2464         apt.conf.buildd-security.
2465         * cron.weekly: likewise.
2466
2467         * amber (do_upload): write out a list of source packages (and
2468         their version) uploaded for testing.
2469         (make_advisory): add more Subst mappings for the mail headers.
2470         (spawn): check for suspicious characters in the command and abort
2471         if their found.
2472
2473 2002-06-07  James Troup  <james@nocrew.org>
2474
2475         * ziyi (main): remove the 'nonus'/'security' hacks and use
2476         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2477         the lower level Release files, even if they don't exist.  fubar
2478         out if we can't open a lower level Release file for writing.
2479
2480         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2481         ziyi.
2482         * katie.conf-security (Dinstall): likewise.
2483
2484         * amber (do_upload): renamed from get_file_list().  Determine the
2485         upload host from the original component.
2486         (init): Add a -n/--no-action option.  Fix how we get changes_files
2487         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2488         sys.argv).  Add an Options global.
2489         (make_advisory): support -n/--no-action.
2490         (spawn): likewise.
2491         (main): likewise.
2492         (usage): document -n/--no-action.
2493
2494         * cron.buildd-security: fix path to Packages-arch-specific in
2495         quinn-diff invocation.
2496
2497         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2498         to proper suite names (i.e. stable, testing) rather than codenames
2499         (potato, woody).
2500         (Dinstall::DefaultSuite): likewise.
2501         (Suite): likewise.
2502         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2503         * vars-security (suites): likewise.
2504         * apt.conf-security: likewise.
2505
2506         * katie.conf-security (Component): add "updates/" prefix.
2507         (Suite::*::Components): likewise.
2508         (ComponentMappings): new; map all {ftp-master,non-US} components
2509         -> updates/<foo>.
2510
2511         * katie.conf-security (Natalie): removed; the options have
2512         defaults and ComponentPosition is used by alyson which doesn't
2513         work on security.d.o.
2514         (Amber): replace UploadHost and UploadDir with ComponentMappings
2515         which is a mapping of components -> URI.
2516         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2517         (SuiteMappings): use "silent-map" in preference to "map".
2518
2519         * cron.unchecked-security: fix call to cron.buildd-security.
2520
2521         * cron.daily-security: map local suite (stable) -> override suite
2522         (potato) when fixing overrides.  Correct component in natalie call
2523         to take into account "updates/" prefix.  Fix cut'n'waste in
2524         override.$dist.all3 generation, the old files weren't being
2525         removed, so they were endlessly growing.
2526
2527         * neve (main): don't use .Find for the CodeName since we require
2528         it.  Location::*::Suites is a ValueList.
2529         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2530         out on expired keys, just warn.
2531         (update_override_type): new function; lifted from alyson.
2532         (update_priority): likewise.
2533         (main): use update_{override_type,priority}().
2534
2535         * jennifer (check_distributions): remove redunant test for
2536         SuiteMappings; ValueList("does-not-exist") returns [] which is
2537         fine.  Add support for a "silent-map" type which doesn't warn
2538         about the mapping to the user.
2539         (check_files): add support for ComponentMappings, similar to
2540         SuiteMappings, but there's no type, just a source and a
2541         destination and the original component is stored in "original
2542         component".
2543         * katie.py (Katie.dump_vars): add "original component" as an
2544         optionsal files[file] dump variable.
2545
2546         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2547         query.  Add support for section-less legacy locations like current
2548         security.debian.org through YetAnotherConfigBoolean
2549         'LegacyStableHasNoSections'.
2550         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2551
2552         * utils.py (real_arch): moved here from ziyi.
2553         * ziyi (real_arch): moved to utils.py.
2554         * ziyi (main): likewise.
2555
2556         * claire.py (find_dislocated_stable): use real_arch() with
2557         filter() to strip out source and all.
2558         * neve (main): likewise.
2559         * rene (main): likewise.
2560         * jeri (parse_packages): likewise.
2561
2562 2002-06-06  James Troup  <james@nocrew.org>
2563
2564         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2565         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2566         doing.
2567
2568 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2569
2570         * jeri (check_joey): check if the line contains two elements
2571         before accessing the second.  Also, strip trailing spaces as well
2572         as the newline.
2573         * halle (check_joey): likewise.
2574
2575 2002-06-05  James Troup  <james@nocrew.org>
2576
2577         * cron.unchecked-security: new file; like cron.unchecked but if
2578         there's nothing to do exit so we don't call cron.buildd-security.
2579
2580         * apt.conf.buildd-security: new file.
2581
2582         * vars (archs): alphabetize.
2583         * vars-non-US (archs): likewise.
2584
2585         * vars-security: add unchecked.
2586
2587         * madison (main): reduce rather bizarrely verbose and purposeless
2588         code to print arches to a simple string.join.
2589
2590         * katie.conf (Suites::Unstable): add UdebComponents, a new
2591         valuelist of suites, used by jenna to flesh out the list of
2592         <suite>_main-debian-installer-binary-<arch>.list files generated.
2593         (Dinstall): add StableDislocationSupport, a new boolean used by
2594         jenna to enable or disable stable dislocation support
2595         (i.e. claire), as true.
2596
2597         * katie.conf (Dinstall): add StableDislocationSupport, a new
2598         boolean used by jenna to enable or disable stable dislocation
2599         support (i.e. claire), as true.
2600         * katie.conf-non-US: likewise.
2601         * katie.conf-security: likewise.
2602
2603         * cron.daily-security: generate .all3 overrides for the buildd
2604         support.  Freshen a local copy of Packages-arch-specific from
2605         buildd.debian.org.
2606
2607         * claire.py (find_dislocated_stable): disable the support for
2608         files in legacy-mixed locations since none of the Debian archives
2609         have any anymore.
2610
2611         * helena: new script; produces a report on NEW and BYHAND
2612         packages.
2613
2614         * jenna: rewritten from scratch to fix speed problems.  Run time
2615         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2616         minutes, 105 seconds are the monster query and 70 odd seconds is
2617         claire.
2618
2619         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2620         irrelevant.
2621
2622 2002-06-05  Ryan Murray  <rmurray@debian.org>
2623
2624         * cron.buildd-security: new file.
2625
2626 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2627
2628         * denise (list): take a file argument and use it.
2629         (main): don't abuse sys.stdout, just write to the file.
2630
2631         * claire.py (usage): Fix misspelling.
2632         (clean_symlink): Simplify.
2633         (find_dislocated_stable): Avoid unnecessary work.
2634
2635 2002-05-29  James Troup  <james@nocrew.org>
2636
2637         * cameron: removed; apt-ftparchive can simply walk the directory.
2638
2639 2002-05-26  Anthony Towns  <ajt@debian.org>
2640
2641         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2642         for the autobuilders.
2643
2644 2002-05-24  Ryan Murray  <rmurray@debian.org>
2645
2646         * cron.buildd: update override files before running apt-ftparchive
2647
2648 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2649
2650         * amber (main): remove extra space in prompt.
2651
2652         * utils.py (validate_changes_file_arg): use original filename in
2653         error messages.
2654
2655         * jeri (check_joey): close file after use.
2656         (parse_packages): likewise.
2657         (main): setup debug option properly.
2658
2659         * melanie (main): remove unused packages variable and simplify the
2660         code to build up con_packages by using repr().
2661
2662 2002-05-23  James Troup  <james@nocrew.org>
2663
2664         * lisa (recheck): when we reject, also return 0 so the package is
2665         skipped.
2666         (sg_compare): fix note sorting.
2667         (recheck): remove the .katie file after rejection.
2668
2669         * katie.py (Katie.accept): accepted auto-build support take 3;
2670         this time adding support for security.  Security needs a) non-pool
2671         files copied rather than symlinked since accepted is readable only
2672         by katie/security and www-data needs to be able to see the files,
2673         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2674         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2675         SecurityAcceptedAutoBuild is a new boolean which controls whether
2676         or not normal or security style is used.  The unstable_accepted
2677         table was renamed to accepted_autobuild and a suite column added.
2678         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2679         didn't have it's last_used/in_accepted flags correctly updated.
2680         * katie (install): likewise.
2681         * rhona (clean_accepted_autobuild): likewise.
2682
2683 2002-05-22  James Troup  <james@nocrew.org>
2684
2685         * lisa (sort_changes): new function; sorts changes properly.
2686         Finally.
2687         (sg_compare): new function; helper for sort_changes().  Sorts by
2688         have note and time of oldest upload.
2689         (indiv_sg_compare): new function; helper for sort_changes().
2690         Sorts by source version, have source and filename.
2691         (main): use sort_changes().
2692         (changes_compare): obsoleted; removed.
2693
2694 2002-05-20  James Troup  <james@nocrew.org>
2695
2696         * rhona (clean_accepted_autobuild): don't die if a file we're
2697         trying to remove doesn't exist.  Makes rhona more friendly to
2698         katie/katie.py crashes/bugs without any undue cost.
2699
2700 2002-05-19  James Troup  <james@nocrew.org>
2701
2702         * lisa (main): if sorting a large number of changes give some
2703         feedback.
2704         (recheck): new function, run the same checks (modulo NEW,
2705         obviously) as katie does, if they fail do the standard
2706         reject/skip/quit dance.
2707         (do_pkg): use it.
2708
2709         * katie (install): don't try to unlink the symlink in the
2710         AcceptedAutoBuild support if the destination is not a symlink (or
2711         doesn't exist).  Avoids unnecessary bombs on previous partial
2712         accepts and will still bomb hard if the file exists and isn't a
2713         symlink.
2714
2715         * utils.py: blah, commands _is_ used when the mail stuff isn't
2716         commented out like it is in my test environment.
2717
2718         * lisa (changes_compare): "has note" overrides everything else.
2719         Use .katie files rather than running parse_changes, faster and
2720         allows "has note" to work.  Correct version compare, it was
2721         reversed.  Ctime check should only kick in if the source packages
2722         are not the same.
2723         (print_new): print out and return any note.  Rename 'ret_code' to
2724         'broken'.
2725         (edit_new): renamed from spawn_editor.  Don't leak file
2726         descriptors.  Clean up error message if editor fails.
2727         (edit_note): new function, allows one to edit notes.
2728         (do_new): add note support, editing and removing.
2729         (init): kill -s/--sort; with notes we always want to use our
2730         sorting method.
2731         (usage): likewise.
2732
2733         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2734         changes field.
2735
2736         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2737         it default to 0.  Adapt tests to assume it's boolean.
2738         * fernanda.py (check_changes): adjust call appropriately.
2739         * halle (check_changes): likewise.
2740         * jennifer (check_changes): likewise.
2741         * jeri (check_changes): likewise.
2742         * shania (flush_orphans): likewise.
2743
2744         * jennifer (check_dsc): pass is_a_dsc by name when calling
2745         build_file_list() for clarity.
2746         * shania (flush_orphans): likewise.
2747         * tea (check_missing_tar_gz_in_dsc): likewise.
2748
2749         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2750         calling parse_changes() for clarity.
2751         * tea (check_dscs): likewise.
2752
2753         * utils.py (parse_changes): make dsc_whitespace_rules default to
2754         not true.
2755         * halle (check_changes): adjust call appropriately.
2756         * jennifer (check_changes): likewise.
2757         * jeri (check_changes): likewise.
2758         * lisa (changes_compare): likewise.
2759         * utils.py (changes_compare): likewise.
2760         * melanie (main): likewise.
2761         * shania (flush_orphans): likewise.
2762         * fernanda.py (check_changes): likewise.
2763
2764 2002-05-18  James Troup  <james@nocrew.org>
2765
2766         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2767         it's not useful and by and large a duplication of information
2768         available in readable format in other files.
2769
2770 2002-05-16  Ryan Murray  <rmurray@debian.org>
2771
2772         * melanie: Dir::TemplatesDir -> Dir::Templates
2773
2774 2002-05-15  Ryan Murray  <rmurray@debian.org>
2775
2776         * cameron: correct the use of os.path.join
2777
2778 2002-05-15  Anthony Towns  <ajt@debian.org>
2779
2780         * ziyi: Update to match the new format for Architectures/Components
2781         in katie.conf.
2782
2783 2002-05-14  James Troup  <james@nocrew.org>
2784
2785         * amber: new script; 'installer' wrapper script for the security
2786         team.
2787
2788         * katie.py (Katie.announce): remove unused 'dsc' local
2789         variable. (pychecker)
2790
2791         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2792
2793         * neve: don't import sys, we don't use it. (pychecker)
2794         (check_signature): fix return type mismatch. (pychecker)
2795
2796         * utils.py: don't import commands, we don't use it.  (pychecker)
2797
2798         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2799
2800         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2801         obsoleted by the change to "othercomponents" handling in jennifer
2802         detailed below.
2803         (Katie.cross_suite_version_check): new function; implements
2804         cross-suite version checking rules specified in the conf file
2805         while also enforcing the standard "must be newer than target
2806         suite" rule.
2807         (Katie.check_binary_against_db): renamed, since it's invoked once
2808         per-binary, "binaries" was inaccurate.  Use
2809         cross_suite_version_check() and don't bother with the "oldfiles"
2810         rubbish as jennifer works out "othercomponents" herself now.
2811         (Katie.check_source_against_db): use cross_suite_version_check().
2812
2813         * katie (check): the version and file overwrite checks
2814         (check_{binary,source,dsc}_against_db) are not per-suite.
2815
2816         * jennifer (check_files): less duplication of
2817         'control.Find("Architecture", "")' by putting it in a local
2818         variable.
2819         (check_files): call check_binary_against_db higher up since it's
2820         not a per-suite check.
2821         (check_files): get "othercomponents" directly rather than having
2822         check_binary_against_db do it for us.
2823
2824         * heidi (main): 'if x:', not 'if x != []:'.
2825         * katie.py (Katie.in_override_p): likewise.
2826         (Katie.check_dsc_against_db): likewise.
2827         * natalie (main): likewise.
2828         * rene (main): likewise.
2829         * ziyi (real_arch): likewise.
2830
2831         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2832         and OverrideType are now value lists, not lists.
2833         * andrea (main): likewise.
2834         * cindy (main): likewise.
2835         * claire.py (find_dislocated_stable): likewise.
2836         * denise (main): likewise.
2837         * jenna (main): likewise.
2838         * jennifer (check_distributions): likewise.
2839         (check_files): likewise.
2840         (check_urgency): likewise (Urgency::Valid).
2841         * jeri (parse_packages): likewise.
2842         * neve (main): likewise (and Location::%s::Suites).
2843         * rene (main): likewise.
2844
2845 2002-05-13  James Troup  <james@nocrew.org>
2846
2847         * katie.py (Katie.check_source_against_db): correct case of reject
2848         message to be consistent with binary checks.
2849
2850         * jennifer (get_status_output): don't leak 2 file descriptors per
2851         invocation.
2852         (check_signature): add missing '\n' to "duplicate status token"
2853         error message.
2854
2855 2002-05-09  James Troup  <james@nocrew.org>
2856
2857         * utils.py (validate_changes_file_arg): new function; validates an
2858         argument which should be a .changes file.
2859         * ashley (main): use it.
2860         * lisa (main): likewise.
2861
2862         * katie.py (Katie.check_dsc_against_db): since there can be more
2863         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2864         entry still exists in files.
2865
2866         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2867         files, since check_dsc_against_db() deletes the .orig.tar.gz
2868         entry.
2869
2870         * cameron: cleanups.
2871
2872         * utils.py (changes_compare): change sort order so that source
2873         name and source version trump 'have source'; this should fix
2874         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2875         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2876         by Ryan.
2877
2878         * lisa (main): allow the arguments to be .katie files too.
2879
2880 2002-05-07  Ryan Murray  <rmurray@debian.org>
2881
2882         * cron.buildd: add s390 to arch list again
2883
2884 2002-05-05  Ryan Murray  <rmurray@debian.org>
2885
2886         * cron.buildd: new script, update w-b database from unstable_accepted
2887         table
2888         * cameron: new script, take list in unstable_accepted and write out
2889         a file list for apt-ftparchive
2890         * apt.conf.buildd: new apt configuration for Packages/Sources for
2891         unstable_accepted
2892         * vars: add s390 to arch list.
2893
2894 2002-05-03  James Troup  <james@nocrew.org>
2895
2896         * neve (main): don't hard code the calling user as that doesn't
2897         work with modern postgres installs.  Fix psql invocation for
2898         init_pool.sql (database name required).  Dont' hard code the
2899         database name.
2900         (process_sources): add support for fingerprint and install_date.
2901         (process_packages): add support for fingerprint.
2902         (do_sources): pass in the directory, fingerprint support needs it.
2903         (get_status_output): borrowed from jennifer.
2904         (reject): likewise.
2905         (check_signature): likewise.
2906
2907         * katie (install): only try to log urgencies if Urgency_Logger is
2908         defined.
2909         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2910         defined; only close Urgency_Logger if it's defined.
2911
2912         * catherine (poolize): adapt for Dir rationalization.
2913         * claire.py (find_dislocated_stable): likewise.
2914         * denise (main): likewise.
2915         * halle (check_joey): likewise.
2916         * jenna: likewise.
2917         * jennifer: likewise.
2918         * jeri: likewise.
2919         * katie.py: likewise.
2920         * katie: likewise.
2921         * lisa (do_bxa_notification): likewise.
2922         * logging.py (Logger.__init__): likewise
2923         * rene (main): likewise.
2924         * rhona (clean): likewise.
2925         * shania (init): likewise.
2926         * tea: likewise.
2927         * ziyi: likewise.
2928
2929         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2930         FindB, not FindI.
2931
2932         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2933         boolean, use FindB, not get.
2934
2935         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2936         .orig.tar.gz's which are an exact (size/md5sum) match.
2937
2938         * ashley (main): really allow *.katie files as arguments too;
2939         noticed by aj.
2940
2941         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2942
2943 2002-05-03  Anthony Towns  <ajt@debian.org>
2944
2945         * ziyi: support for security.
2946
2947 2002-05-02  James Troup  <james@nocrew.org>
2948
2949         * jennifer (accept): call Katie.check_override() unconditional as
2950         no-mail check moved into that function.
2951         (do_byhand): likewise.
2952
2953         * katie.py (Katie.check_override): don't do anything if we're a)
2954         not sending mail or b) the override disparity checks have been
2955         disbled via Dinstall::OverrideDisparityCheck.
2956
2957         * jennifer (check_files): don't hard code Unstable as the suite
2958         used to check for architecture validity; use
2959         Dinstall::DefaultSuite instead, if it exists.
2960         (accept): conditionalize
2961
2962         * katie.py (Katie.update_subst): support global maintainer
2963         override with Dinstall::OverrideMaintainer.
2964
2965         * jennifer (check_distributions): new function, Distribution
2966         validation and mapping.  Uses new SuiteMappings variable from
2967         config file to abstract suite mappings.
2968         (check_changes): call it.
2969
2970         * natalie: renamed; nothing imports or likely will for some time.
2971
2972         * denise (main): remove unused natalie import and init().
2973
2974         * natalie.py (init): removed.
2975         (main): initalize here instead and don't hardcode the database
2976         name.
2977
2978 2002-04-30  James Troup  <james@nocrew.org>
2979
2980         * katie.py (Katie.close_bugs): new function, split out from
2981         announce().
2982         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2983         true.
2984         (Katie.close_bugs): new function, split out
2985         (Katie.close_bugs): return immediately if there are no bugs to
2986         close.
2987
2988         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2989         * katie (do_reject): likewise.
2990         (stable_install): likewise.
2991         * katie.py (Katie.announce): likewise.
2992         (Katie.accept): likewise.
2993         (Katie.check_override): likewise.
2994         (Katie.do_reject): likewise.
2995         * lisa (do_bxa_notification): likewise.
2996         * melanie (main): likewise.
2997
2998         * utils.py (TemplateSubst): change second argument to be a
2999         filename rather than a template since every caller opened a file
3000         on the fly which was ugly and leaked file descriptor.
3001
3002 2002-04-29  James Troup  <james@nocrew.org>
3003
3004         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3005         <hertzog@debian.org> to send 'accepted' announce mails to the
3006         PTS. [#128140]
3007
3008 2002-04-24  James Troup  <james@nocrew.org>
3009
3010         * init_pool.sql (unstable_accepted): add two new fields to
3011         unstable_accepted; in_accepted is a boolean indicating whether or
3012         not the file is in accepted and last_used is a timestamp used by
3013         rhona to determine when to remove symlinks for installed packages.
3014
3015         * katie.py (Katie.accept): auto-build support take 2.  Create
3016         symlinks for all files into a seperate directory.  Add files to
3017         unstable_accepted as paths to the new directory; mark them as
3018         being in accepted for cameron.  Properly conditionalize it on a
3019         configuration variable.
3020
3021         * katie (install): likewise.  Update symlinks to point into the
3022         pool; mark the files for later deletion by rhona and mark them as
3023         not being in accepted for cameron.
3024
3025         * rhona (clean_accepted_autobuild): new function.
3026
3027 2002-04-22  James Troup  <james@nocrew.org>
3028
3029         * jennifer (check_files): handle db_access.get_location_id()
3030         returning -1 properly/better.
3031
3032         * rhona (clean_fingerprints): new function.
3033
3034 2002-04-21  James Troup  <james@nocrew.org>
3035
3036         * utils.py (touch_file): unused; remove.
3037         (plural): likewise.
3038
3039         * jennifer (check_files): close file descriptor used to get the
3040         control file.
3041         (check_md5sums): likewise.
3042         (callback): likewise.
3043
3044         * katie.py (Katie.do_reject): handle manual rejects much better;
3045         call the editor first and get confirmation from the user before
3046         proceeding.
3047
3048         * jennifer (check_signature): prefix_multi_line_string() moved to
3049         utils.
3050
3051         * utils.py (prefix_multi_line_string): moved here from jennifer.
3052
3053 2002-04-20  James Troup  <james@nocrew.org>
3054
3055         * lisa (main): handle non-existent files.
3056
3057         * ashley (main): allow *.katie files as arguments too.
3058
3059 2002-04-19  James Troup  <james@nocrew.org>
3060
3061         * katie.py (Katie.accept): add stuff to help auto-building from
3062         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3063         in the pool), create a symlink to it in the accepted directory and
3064         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3065
3066         * katie (install): undo the "auto-building from accepted" stuff
3067         (i.e. remove the .orig.tar.gz symlink and remove the files from
3068         unstable_accepted table).
3069
3070 2002-04-16  James Troup  <james@nocrew.org>
3071
3072         * jennifer (upload_too_new): fix typo which was causing all
3073         timestamp comparisons to be against the .changes file.  Also move
3074         back to the original directory so we do the comparisons against
3075         accurate timestamps.
3076
3077         * tea (check_missing_tar_gz_in_dsc): new function.
3078
3079         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3080         file mentioned in the .dsc.
3081
3082         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3083         way mails reach debian-{devel-,}changes@l.d.o.
3084
3085 2002-04-02  Ryan Murray  <rmurray@debian.org>
3086
3087         * cron.daily: run shania after rhona
3088         * cron.daily-non-US: likewise.
3089
3090 2002-04-01  James Troup  <james@nocrew.org>
3091
3092         * katie: re-add proposed-updates/stable install support.
3093
3094         * katie.py (Katie.dump_vars): add changes["changes"] as an
3095         optional field; should be mandatory later.
3096
3097 2002-03-31  James Troup  <james@nocrew.org>
3098
3099         * katie (install): support a Suite::<foo>::CopyKatie similar to
3100         CopyChanges.  Done seperately because .katie files don't need to
3101         be mirrored and will probably be copied to another directory as a
3102         result.
3103
3104         * halle (main): add missing debug to options.
3105
3106 2002-03-29  James Troup  <james@nocrew.org>
3107
3108         * madison (main): add a -r/--regex option.
3109
3110 2002-03-26  James Troup  <james@nocrew.org>
3111
3112         * lisa: don't trample on changes["distribution"]; make a copy of
3113         it as changes["suite"] instead and use that.
3114
3115 2002-03-16  Anthony Towns  <ajt@debian.org>
3116
3117         * templates/lisa.bxa_notification: Fix some grammatical errors.
3118         Encourage contact via bxa@ftp-master email address.
3119
3120 2002-03-15  James Troup  <james@nocrew.org>
3121
3122         * jennifer (check_timestamps): remove bogus raise in except.
3123
3124 2002-03-15  Anthony Towns  <ajt@debian.org>
3125
3126         * cron.monthly: rotate mail/archive/bxamail as well as
3127         mail/archive/mail. This is for a complete archive of
3128         correspondence with the BXA.
3129
3130 2002-03-14  Anthony Towns  <ajt@debian.org>
3131
3132         * crypto-in-main changes.
3133
3134         * utils.py (move, copy): add an optional perms= parameter to let you
3135         set the resulting permissions of the moved/copied file
3136         * katie.py (force_move): rejected/morgued files should be unreadable
3137         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3138         should be unreadable.
3139
3140 2002-03-07  Ryan Murray  <rmurray@debian.org>
3141
3142         * katie (install): check for existance of "files id" key as well as
3143         it being set to a valid value.
3144         * katie (install): check for existense and valid value for location
3145         id as well
3146
3147 2002-03-05  Ryan Murray  <rmurray@debian.org>
3148
3149         * katie.py (do_reject): reread the reason file after editing it.
3150
3151 2002-02-25  James Troup  <james@nocrew.org>
3152
3153         * jennifer (check_changes): don't enforce sanity in .changes file
3154         names since it doesn't seem to be possible; pcmica-cs and similar
3155         freak show packages in particular cause real problems.
3156
3157         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3158         each dsc_file since the .orig.tar.gz checking code now uses it as
3159         a boolean.  Fixes bizarro rejections which bogusly claimed
3160         .diff.gz md5sum/size was incorrect.
3161
3162 2002-02-24  James Troup  <james@nocrew.org>
3163
3164         * katie (process_it): reset reject_message.
3165
3166 2002-02-22  James Troup  <james@nocrew.org>
3167
3168         * db_access.py(set_files_id): disable use of
3169         currval('files_id_seq') because it was taking 3 seconds on auric
3170         which is insane (most calls take < 0.01) and simply call
3171         get_files_id() for the return value instead.
3172
3173         * katie.py (Katie.do_query): convenience function; unused by
3174         default, useful for profiling.
3175         * db_access.py (do_query): likewise.
3176
3177         * katie (install): fix insert SQL call when binary has no source.
3178
3179         * lisa (determine_new): auto-correct non-US/main to non-US.
3180         (determine_new): add a warning when adding things to stable.
3181         (edit_index): use our_raw_input().
3182         (edit_overrides): likewise.
3183         (do_new): likewise.  Use re.search() not re.match() since the
3184         default answer may not be the first one.
3185         (do_byhand): likewise.
3186         (do_new): Default to 'S'kip and never 'A'dd.
3187
3188         * jennifer (action): pass prompt to our_raw_input().
3189         * melanie (game_over): likewise.
3190         * katie (action): likewise.
3191
3192         * utils.py (our_raw_input): add an optional prompt argument to
3193         make the function more usable as a drop in replacement for
3194         raw_input().
3195
3196         * jennifer (check_files): correct reject() to not double prefix
3197         when using katie.py based functions.
3198         (check_dsc): likewise.
3199
3200         * katie.py (Katie.reject): prepend a new line if appropriate
3201         rathen than appending one to avoid double new lines when caller
3202         adds one of his own.
3203
3204         * lisa (determine_new): warn if the package is also in other
3205         components.
3206
3207 2002-02-20  James Troup  <james@nocrew.org>
3208
3209         * jennifer (check_files): if .changes file lists "source" in
3210         Architecture field, there must be a .dsc.
3211
3212 2002-02-15  James Troup  <james@nocrew.org>
3213
3214         * ashley (main): add some missing fields.
3215
3216         * katie.py (Katie.check_dsc_against_db): fix to take into account
3217         the fact that the .orig.tar.gz might be in byhand, accepted or
3218         new.  Also fix calling of reject().
3219         (Katie.check_binaries_against_db): fix calling of reject().
3220         (Katie.check_source_against_db): likewise.
3221         (Katie.dump_vars): add missing variables used for bug closures.
3222
3223         * lisa (changes_compare_by_time): sort by reverse time.
3224
3225         * katie.py (Katie.accept): log.
3226         (Katie.dump_vars): missing has_key test for optional changes fields.
3227
3228         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3229         (process_it): traceback goes to stderr, not stdout.
3230         (acknowledge_new): log.
3231         (do_byhand): likewise.
3232
3233         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3234
3235         * add_constraints.sql: add grants for the new fingerprint table.
3236
3237 2002-02-13  James Troup  <james@nocrew.org>
3238
3239         * katie (do_reject): basename the .changes filename before trying
3240         to use it to construct the .reason filename.
3241         (process_it): call Katie.update_subst() so do_reject() DTRT with
3242         the mail template.
3243         (do_reject): setup the mail template correctly.
3244
3245 2002-02-12  James Troup  <james@nocrew.org>
3246
3247         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3248         (check_files): don't abuse global dictionaries.
3249         (Ent): use all variables.
3250         (check_timestamps): don't abuse global dictionaries.
3251
3252         * fernanda.py: renamed to .py so lisa can import it.
3253         (check_dsc): remove unused local variables (pychecker).
3254         (display_changes): split off from check_changes.
3255
3256         * katie: rewritten; most of the functionality moves to jennifer;
3257         what's left is the code to install packages once a day from the
3258         'accepted' directory.
3259
3260         * jennifer: new program, processes packages in 'unchecked'
3261         (i.e. most of the non-install functionality of old katie).
3262
3263         * katie.py: common functions shared between the clique of
3264         jennifer, lisa and katie.
3265
3266         * lisa: new program; handles NEW and BYHAND packages.
3267
3268         * jeri (usage): new function.
3269         (main): use it.
3270         (check_package): remove unused local variable (pychecker).
3271
3272         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3273         binaries and source.  Add install_date to source.
3274
3275         * halle (usage): new function.
3276         (main): use it.  Remove unused options.
3277         (check_changes): remove unused local variable (pychecker).
3278
3279         * add_constraints.sql: add fingerprint references.
3280
3281         * db_access.py (get_or_set_fingerprint_id): new function.
3282
3283         * ashley (main): new program; dumps the contents of a .katie file
3284         to stdout.
3285
3286         * alyson (main): remove option handling since we don't actually
3287         support any.
3288         * cindy (main): likewise.
3289
3290         * remove unnecessary imports and pre-define globals (pychecker).
3291
3292 2002-02-11  Anthony Towns  <ajt@debian.org>
3293
3294         * added installation-report and upgrade-report pseudo-packages
3295
3296 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3297
3298         * katie (update_subst): use Dinstall::TrackingServer.
3299         * melanie (main): likewise.
3300
3301 2002-01-27  James Troup  <james@nocrew.org>
3302
3303         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3304         noticing, jgg@ for fix.
3305
3306 2002-01-19  James Troup  <james@nocrew.org>
3307
3308         * utils.py (extract_component_from_section): handle non-US
3309         non-main properly.
3310
3311 2002-01-12  James Troup  <james@nocrew.org>
3312
3313         * madison: add support for -S/--source-and-binary which displays
3314         information for the source package and all it's binary children.
3315
3316 2002-01-13  Anthony Towns  <ajt@debian.org>
3317
3318         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3319         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3320           and 2002 key ids.
3321         * katie.conf-non-US: Likewise.
3322         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3323           multiple keys automatically. This is probably only useful for
3324           transitioning from an expired (or revoked?) key.
3325
3326 2002-01-08  Ryan Murray  <rmurray@debian.org>
3327
3328         * debian/python-dep: new file that prints out python:Depends for
3329           substvars
3330         * debian/control: use python:Depends, build-depend on python
3331           lower Depends: on postgresql to Suggests:
3332         * debian/rules: determine python version, install to the correct
3333           versioned dir
3334
3335 2001-12-18  Anthony Towns  <ajt@debian.org>
3336
3337         * ziyi: unlink Release files before overwriting them (in case they've
3338           been merged)
3339         * ziyi: always include checksums/sizes for the uncompressed versions
3340           of Sources and Packages, even if they're not present on disk
3341
3342 2001-11-26  Ryan Murray  <rmurray@debian.org>
3343
3344         * ziyi (main): add SigningPubKey config option
3345         * katie.conf: use SigningPubKey config option
3346         * katie.conf-non-US: likewise
3347
3348 2001-11-24  James Troup  <james@nocrew.org>
3349
3350         * katie (acknowledge_new): log newness.
3351
3352 2001-11-24  Anthony Towns  <ajt@debian.org>
3353
3354         * ziyi (real_arch): bail out if some moron forgot to reset
3355         untouchable on stable.
3356         (real_arch): source Release files.
3357
3358 2001-11-19  James Troup  <james@nocrew.org>
3359
3360         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3361         utils.get_conf().
3362         * shania (main): likewise.
3363
3364         * rhona (main): add default options.
3365
3366         * db_access.py (get_archive_id): case independent.
3367
3368         * katie (action): sort files so that ordering is consistent
3369         between mails; noticed/requested by Joey.
3370
3371 2001-11-17  Ryan Murray  <rmurray@debian.org>
3372
3373         * utils.py: add get_conf function, change startup code to read all
3374           config files to the Cnf that get_conf returns
3375           use the component list from the katie conf rather than the hardcoded
3376           list.
3377         * all scripts: use new get_conf function
3378         * shania: fix try/except around changes files
3379         * jenna: only do debian-installer if it is a section in Cnf
3380
3381 2001-11-16  Ryan Murray  <rmurray@debian.org>
3382
3383         * shania (main): Initialize days to a string of a number.
3384                  (main): Initialize Cnf vars before reading in Cnf
3385
3386 2001-11-14  Ryan Murray  <rmurray@debian.org>
3387
3388         * shania (main): Initialize days to a number.
3389
3390 2001-11-04  James Troup  <james@nocrew.org>
3391
3392         * docs/Makefile: use docbook-utils' docbook2man binary.
3393
3394         * Change all "if foo == []" constructs into "if not foo".
3395
3396         * katie (check_changes): when installing into stable from
3397         proposed-updates, remove all non-stable target distributions.
3398         (check_override): don't check for override disparities on stable
3399         installs.
3400         (stable_install): update install_bytes appropriately.
3401         (reject): stable rejection support; i.e. don't remove files when
3402         rejecting files in the pool, rather remove them from the
3403         proposed-update suite instead, rhona will do the rest.
3404         (manual_reject): support for a stable specific template.
3405         (main): setup up stable rejector in subst.
3406
3407 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3408
3409         * debian/control (Build-Depends): docbook2man has been superseded
3410         by docbook-utils.
3411
3412         * neve (main): exit with a more useful error message.
3413         (update_suites): Suite::<suite>::Version, Origin and Description
3414         are not required, so don't fail if they don't exist.
3415
3416         * db_access.py (get_archive_id): return -1 on error rather than
3417         raise an exception.
3418         (get_location_id): likewise.
3419
3420         * madison (main): don't exit on the first not-found package,
3421         rather exit with an appropriate return code after processing all
3422         packages.
3423
3424 2001-11-03  James Troup  <james@nocrew.org>
3425
3426         * claire.py (find_dislocated_stable): add per-architecture
3427         symlinks for dislocated architecture: all debs.
3428
3429 2001-10-19  Anthony Towns  <ajt@debian.org>
3430
3431         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3432
3433 2001-10-10  Anthony Towns  <ajt@debian.org>
3434
3435         * claire.py (fix_component_section): do _not_ assign to None under
3436         any circumstances
3437
3438 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3439
3440         * melanie (main): don't duplicate architectures when removing from
3441         more than one suite.
3442
3443         * heidi (main, process_file, get_list): report suite name not ID.
3444
3445         * naima (nmu_p): be case insensitive.
3446
3447         * naima (action): more list handling clean ups.
3448
3449         * melanie (main): clean up lists handling to use string.join and
3450         IN's.
3451
3452         * madison (main): clean up suite and architecture argument parsing
3453         to use slices less and string.join more.
3454
3455         * utils.py (parse_changes): Use string.find() instead of slices for
3456         string comparisons thereby avoid hardcoding the length of strings.
3457         * ziyi (main): likewise.
3458
3459 2001-10-07  James Troup  <james@nocrew.org>
3460
3461         * Remove mode argument from utils.open_files() calls if it's the
3462         default, i.e. 'r'.
3463
3464 2001-09-27  James Troup  <james@nocrew.org>
3465
3466         * katie (init): new function; options clean up.
3467         (usage): add missing options, remove obsolete ones.
3468         (main): adapt for the two changes above.  If the lock file or
3469         new-ack log file don't exist, create them.  Don't try to open the
3470         new-ack log file except running in new-ack mode.
3471
3472         * alyson (main): initialize all the tables that are based on the
3473         conf file.
3474
3475         * utils.py (touch_file): like touch(1).
3476         (where_am_i): typo.
3477
3478         * catherine (usage): new.
3479         (main): use it.  options cleanup.
3480         * claire.py: likewise.
3481         * fernanda: likewise.
3482         * heidi: likewise.
3483         * jenna: likewise.
3484         * shania: likewise.
3485         * ziyi: likewise.
3486
3487         * andrea: options cleanup.
3488         * charisma: likewise.
3489         * julia: likewise.
3490         * madison: likewise.
3491         * melanie: likewise.
3492         * natalie: likewise.
3493         * rhona: likewise.
3494         * tea: likewise.
3495
3496 2001-09-26  James Troup  <james@nocrew.org>
3497
3498         * utils.py: default to sane config file locations
3499         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3500         or they can point to the real ones through use of a new Config
3501         section.  Based on an old patch by Adam Heath.
3502         (where_am_i): use the new default config stuff.
3503         (which_conf_file): likewise.
3504         (which_apt_conf_file): likewise.
3505
3506         * charisma (main): output defaults to
3507         `Package~Version\tMaintainer'; input can be of either form.  When
3508         parsing the new format do version comparisons, when parsing the
3509         old format assume anything in the extra file wins.  This fixes the
3510         problem of newer non-US packages being overwhelmed by older
3511         versions still in stable on main.
3512
3513 2001-09-17  James Troup  <james@nocrew.org>
3514
3515         * natalie.py (list): use result_join().
3516
3517         * denise (main): result_join() moved to utils.
3518
3519         * utils.py (result_join): move to utils; add an optional seperator
3520         argument.
3521
3522 2001-09-14  James Troup  <james@nocrew.org>
3523
3524         * heidi (set_suite): new function; does --set like natalie does,
3525         i.e. turns it into a sequence of --add's and --remove's
3526         internally.  This is a major win (~20 minute run time > ~20
3527         seconds) in the common, everday (i.e. testing) case.
3528         (get_id): common code used by set_suite() and process_file().
3529         (process_file): call set_suite() and get_id().
3530         (main): add logging support.
3531
3532         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3533         files.
3534
3535         * utils.py (parse_changes): use slices or simple string comparison
3536         in favour of regexes where possible.
3537
3538         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3539         fact that the string VARDATA() points to are not null terminated.
3540
3541         * denise (result_join): new function; like string.join() but
3542         handles None's.
3543         (list): use it.
3544         (main): likewise.
3545
3546         * charisma (main): python-pygresql 7.1 returns None not "".
3547
3548 2001-09-14  Ryan Murray  <rmurray@debian.org>
3549
3550         * natalie.py (list): handle python-pygresql 7.1 returning None.
3551
3552 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3553
3554         * madison (main): return 1 if no package is found.
3555
3556 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3557
3558         * madison (main): better error handling for incorrect
3559         -a/--architecture or -s/--suite arguments.
3560         (usage): new.
3561         (main): use it.
3562
3563 2001-09-05  Ryan Murray  <rmurray@debian.org>
3564
3565         * charisma, madison, katie: remove use of ROUser
3566         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3567
3568 2001-08-26  James Troup  <james@nocrew.org>
3569
3570         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3571         maintained packages at cjwatson@'s request.
3572
3573 2001-08-21  James Troup  <james@nocrew.org>
3574
3575         * madison (main): add -a/--architecture support.
3576
3577         * jenna: use logging instead of being overly verbose on stdout.
3578
3579 2001-08-11  Ryan Murray  <rmurray@debian.org>
3580
3581         * melanie: add functional help option
3582
3583 2001-08-07  Anthony Towns  <ajt@debian.org>
3584
3585         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3586
3587 2001-07-28  James Troup  <james@nocrew.org>
3588
3589         * katie (check_dsc): ensure source version is >> than existing
3590         source in target suite.
3591
3592 2001-07-25  James Troup  <james@nocrew.org>
3593
3594         * natalie.py: add logging support.
3595
3596         * utils.py (open_file): make the second argument optional and
3597         default to read-only.
3598
3599         * rene (main): work around broken source packages that duplicate
3600         arch: all packages with arch: !all packages (no longer allowed
3601         into the archive by katie).
3602
3603 2001-07-13  James Troup  <james@nocrew.org>
3604
3605         * katie (action): don't assume distribution is a dictionary.
3606         (update_subst): don't assume architecture is a dictionary and that
3607         maintainer822 is defined.
3608         (check_changes): recognise nk_format exceptions.
3609         (check_changes): reject on 'testing' only uploads.
3610         (check_files): when checking to ensure all packages are newer
3611         versions check against arch-all packages too.
3612         (check_dsc): enforce the existent of a sane set of mandatory
3613         fields.  Ensure the version number in the .dsc (modulo epoch)
3614         matches the version number in the .changes file.
3615
3616         * utils.py (changes_compare): ignore all exceptions when parsing
3617         the changes files.
3618         (build_file_list): don't UNDEF on a changes file with no format
3619         field.
3620
3621 2001-07-07  James Troup  <james@nocrew.org>
3622
3623         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3624         rather than 'changedbyname' to avoid false negatives on uploads
3625         with an email-address-only Changed-By field.
3626         (check_dsc): don't overwrite reject_message; append to it.
3627         (check_signature): likewise.
3628         (check_changes): likewise.
3629         (announce): condition logging on 'action'.
3630
3631         * logging.py: new logging module.
3632
3633         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3634         sub-tree into a separate (global) variable.
3635         (check_dsc): ensure format is 1.0 to retain backwards
3636         compatability with dpkg-source in potato.
3637         (main): only try to obtain the lock when not running in no-action
3638         mode.
3639         Use the new logging module.
3640
3641         * christina: initial version; only partially usable.
3642
3643 2001-06-28  Anthony Towns  <ajt@debian.org>
3644
3645         * apt.conf: Add ExtraOverrides to auric.
3646
3647 2001-06-25  James Troup  <james@nocrew.org>
3648
3649         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3650         they preferred the name 'Uploaders'.
3651
3652 2001-06-23  James Troup  <james@nocrew.org>
3653
3654         * katie (check_files): fix typo in uncommon rejection message,
3655         s/sourceversion/source version/.
3656
3657         * denise (main): we can't use print because stdout has been
3658         redirected.
3659
3660         * katie (source_exists): new function; moved out of check_files()
3661         and added support for binary-only NMUs of earlier sourceful NMUs.
3662
3663         * rhona (clean): find_next_free has moved.
3664
3665         * utils.py (find_next_free): new function; moved here from rhona.
3666         Change too_many to be an argument with a default value, rather
3667         than a hardcoded variable.
3668
3669         * shania: rewritten to work better; REJECTion reminder mail
3670         handling got lost though.
3671
3672 2001-06-22  James Troup  <james@nocrew.org>
3673
3674         * rhona (main): remove unused override code.
3675
3676         * fernanda (main): remove extraneous \n's from utils.warn calls.
3677         * natalie.py (list): likewise.
3678
3679         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3680         use utils.{warn,fubar} where appropriate.
3681
3682 2001-06-21  James Troup  <james@nocrew.org>
3683
3684         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3685         functionality.
3686         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3687         by the "Maintainers" field in the .dsc file and maintainer groups.
3688         (nmu_p.__init__): read in the list of group maintainer names.
3689         (announce): use nmu_p.
3690
3691 2001-06-20  James Troup  <james@nocrew.org>
3692
3693         * rene (main): hardcode the suite experimental is compared to by
3694         name rather than number.
3695
3696         * katie (check_files): differentiate between doesn't-exist and
3697         permission-denied in "can not read" rejections; requested by edd@.
3698         (check_dsc): use os.path.exists rather than os.access to allow the
3699         above check to kick in.
3700
3701         * heidi (process_file): read all input before doing anything and
3702         use transactions.
3703
3704 2001-06-15  James Troup  <james@nocrew.org>
3705
3706         * fernanda: new script; replaces old 'check' shell script
3707         nastiness.
3708
3709 2001-06-14  James Troup  <james@nocrew.org>
3710
3711         * katie: actually import traceback module to avoid amusing
3712         infinite loop.
3713
3714 2001-06-10  James Troup  <james@nocrew.org>
3715
3716         * utils.py (extract_component_from_section): fix to handle just
3717         'non-free' and 'contrib'.  Also fix to handle non-US in a
3718         completely case insensitive manner as a component.
3719
3720 2001-06-08  James Troup  <james@nocrew.org>
3721
3722         * madison (arch_compare): sort function that sorts 'source' first
3723         then alphabetically.
3724         (main): use it.
3725
3726 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3727
3728         * catherine (poolize): explicitly make poolized_size a long so it
3729         doesn't overflow when poolizing e.g. entire archives.
3730
3731 2001-06-01  James Troup  <james@nocrew.org>
3732
3733         * utils.py (send_mail): throw exceptions rather than exiting.
3734
3735         * katie (process_it): catch exceptions and ignore them.
3736
3737 2001-06-01  Michael Beattie  <mjb@debian.org>
3738
3739         * added update-mailingliststxt and update-readmenonus to update
3740         those files, respectively. modified cron.daily{,-non-US} to
3741         use them.
3742
3743 2001-05-31  Anthony Towns  <ajt@debian.org>
3744
3745         * rhona: make StayOfExecution work.
3746
3747 2001-05-31  James Troup  <james@nocrew.org>
3748
3749         * rhona (find_next_free): fixes to not overwrite files but rename
3750         them by appending .<n> instead.
3751         (clean): use find_next_free and use dated sub-directories in the
3752         morgue.
3753
3754         * utils.py (move): don't overwrite files unless forced to.
3755         (copy): likewise.
3756
3757 2001-05-24  James Troup  <james@nocrew.org>
3758
3759         * katie (check_files): determine the source version here instead
3760         of during install().
3761         (check_files): check for existent source with bin-only NMU
3762         support.
3763         (main): sort the list of changes so that the source-must-exist
3764         check Does The Right Thing(tm).
3765
3766         * utils.py (changes_compare): new function; sorts a list of
3767         changes files by 'have-source', source, version.
3768         (cc_fix_changes): helper function.
3769         (parse_changes): use compiled regexes.
3770         (fix_maintainer): likewise.
3771
3772         * rene (main): warn about packages in experimental that are
3773         superseded by newer versions in unstable.
3774
3775 2001-05-21  James Troup  <james@nocrew.org>
3776
3777         * rene (main): add support for checking for ANAIS (Architecture
3778         Not Allowed In Source) packages.
3779
3780 2001-05-17  James Troup  <james@nocrew.org>
3781
3782         * katie (check_changes): initalize `architecture' dictionary in
3783         changes global so that if we can't parse the changes file for
3784         whatever reason we don't undef later on.
3785
3786         * utils.py (parse_changes): fix handling of multi-line fields
3787         where the first line did have data.
3788
3789 2001-05-05  Anthony Towns  <ajt@debian.org>
3790
3791         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3792         (It should always have been there. Ooopsy.)
3793
3794 2001-05-03  Anthony Towns  <ajt@debian.org>
3795
3796         * jenna: Cleanup packages that move from arch:any to arch:all or
3797         vice-versa.
3798
3799 2001-04-24  Anthony Towns  <ajt@debian.org>
3800
3801         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3802         cope with debian-installer and boot-floppies' md5sum.txt.
3803
3804 2001-04-16  James Troup  <james@nocrew.org>
3805
3806         * katie (check_changes): add missing %s format string argument.
3807         (stable_install): temporary work around for morgue location to
3808         move installed changes files into.
3809         (stable_install): helps if you actually read in the template.
3810         (manual_reject): fix for editing of reject messages which was
3811         using the wrong variable name.
3812
3813         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3814
3815 2001-04-13  James Troup  <james@nocrew.org>
3816
3817         * katie (manual_reject): Cc the installer.
3818         (reject): don't.
3819         (check_changes): remove unused maintainer-determination code.
3820         (update_subst): add support for Changed-By when setting the
3821         *MAINTAINER* variables.
3822
3823         * rene (bar): new function to check for packages on architectures
3824         when they shouldn't be.
3825
3826         * natalie.py (main): use fubar() and warn() from utils.
3827
3828         * utils.py (whoami): new mini-function().
3829         * melanie (main): use it.
3830         * katie (manual_reject): likewise.
3831
3832 2001-04-03  James Troup  <james@nocrew.org>
3833
3834         * katie (action): ignore exceptions from os.path.getmtime() so we
3835         don't crash on non-existent changes files (e.g. when they are
3836         moved between the start of the install run in cron.daily and the
3837         time we get round to processing them).
3838
3839         * madison (main): also list source and accept -s/--suite.
3840
3841         * jenna (generate_src_list): missing \n in error message.
3842
3843         * katie (update_subst): add sane defaults for when changes is
3844         skeletal.
3845
3846 2001-03-29  James Troup  <james@nocrew.org>
3847
3848         * melanie (main): use fubar() and warn() from utils.  Remember who
3849         the maintainer for the removed packages are and display that info
3850         to the user.  Readd support for melanie-specific Bcc-ing that got
3851         lost in the TemplateSubst transition.
3852
3853         * utils.py (fubar): new function.
3854         (warn): like wise.
3855
3856         * db_access.py (get_maintainer): as below.
3857
3858         * charisma (get_maintainer): moved the bulk of this function to
3859         db_access so that melanie can use it too.
3860
3861         * claire.py (find_dislocated_stable): restrict the override join
3862         to those entries where the suite is stable; this avoids problems
3863         with packages which have moved to new sections (e.g. science)
3864         between stable and unstable.
3865
3866 2001-03-24  James Troup  <james@nocrew.org>
3867
3868         * catherine (poolize): new function; not really independent of
3869         main() fully, yet.
3870         (main): use it.
3871
3872         * katie (stable_install): __SUITE__ needs to be space prefixed
3873         because buildd's check for 'INSTALLED$'.
3874
3875 2001-03-22  James Troup  <james@nocrew.org>
3876
3877         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3878
3879         * jenna: rewritten; now does deletions on a per-suite level
3880         instead of a per-suite-component-architecture-type level.  This
3881         allows mutli-component packages to be auto-cleaned (and as a
3882         bonus, reduces the code size and duplication).
3883
3884 2001-03-22  Anthony Towns  <ajt@debian.org>
3885
3886         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3887         instead of just giving a gpg error.
3888
3889 2001-03-21  James Troup  <james@nocrew.org>
3890
3891         * madison (main): use apt_pkg.VersionCompare to sort versions so
3892         that output is correctly sorted for packages like debhlper.
3893         Noticed by ajt@.
3894
3895         * tea (check_source_in_one_dir): actually find problematic source
3896         packages.
3897
3898         * katie (check_dsc): remember the orig.tar.gz's location ID if
3899         it's not in a legacy suite.
3900         (check_diff): we don't use orig_tar_id.
3901         (install): add code to handle sourceful diff-only upload of
3902         packages which change components by copying the .orig.tar.gz into
3903         the new component, if it doesn't already exist there.
3904         (process_it): reset orig_tar_location (as above).
3905
3906         * melanie (main): use template substiution for the bug closing
3907         emails.
3908         (main): don't hardcode bugs.debian.org or packages.debian.org
3909         either; use configuration items.
3910
3911         * katie: likewise.
3912
3913         * natalie.py (init): use None rather than 'localhost' for the
3914         hostname given to pg.connect.
3915
3916         * utils.py (TemplateSubst): new function; lifted from
3917         userdir-ldap.
3918
3919 2001-03-21  Ryan Murray  <rmurray@debian.org>
3920
3921         * katie (announce): fix the case of non-existent
3922         Suite::$SUITE::Announce.
3923
3924 2001-03-20  Ryan Murray  <rmurray@debian.org>
3925
3926         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3927         /usr/.
3928
3929         * alyson (main): use config variable for database name.
3930         * andrea (main): likewise.
3931         * catherine (main): likewise.
3932         * charisma (main): likewise.
3933         * cindy (main): likewise.
3934         * claire.py (main): likewise.
3935         * denise (main): likewise.
3936         * heidi (main): likewise.
3937         * jenna (main): likewise.
3938         * katie (main): likewise.
3939         * madison (main): likewise.
3940         * melanie (main): likewise.
3941         * neve (main): likewise.
3942         * rhona (main): likewise.
3943         * tea (main): likewise.
3944
3945 2001-03-15  James Troup  <james@nocrew.org>
3946
3947         * rhona (check_sources): fixed evil off by one (letter) error
3948         which was causing only .dsc files to be deleted when cleaning
3949         source packages.
3950
3951         * charisma (get_maintainer_from_source): remove really stupid and
3952         gratuitous IN sub-query and replace with normal inner join.
3953         (main): connect as read-only user nobody.
3954
3955         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3956         with EXISTS.
3957         (check_files): likewise; still disabled by default though.
3958         (clean_binaries): add ' seconds' to the mysterious number in the
3959         output.
3960         (clean): likewise.
3961
3962         * tea (check_files): add missing global declaration on db_files.
3963
3964 2001-03-14  James Troup  <james@nocrew.org>
3965
3966         * rhona: rewritten large chunks. Removed a lot of the silly
3967         selecting into dictionaries and replaced it with 'where exists'
3968         based sub queries.  Added support for StayOfExecution.  Fix the
3969         problem with deleting dsc_files too early and disable cleaning of
3970         unattached files.
3971
3972 2001-03-14  Anthony Towns  <ajt@debian.org>
3973
3974         * katie (announce): also check Changed-By when trying to detect
3975         NMUs.
3976
3977 2001-03-06  Anthony Towns  <ajt@debian.org>
3978
3979         * ziyi (main): Generate Release.gpg files as well, using the key from
3980         Dinstall::SigningKey in katie.conf, if present. That key has to be
3981         passwordless, and hence kept fairly secretly.
3982
3983 2001-03-02  James Troup  <james@nocrew.org>
3984
3985         * utils.py (str_isnum): new function; checks to see if the string
3986         is a number.
3987
3988         * shania (main): fix _hideous_ bug which was causing all files > 2
3989         weeks old to be deleted from incoming, even if they were part of a
3990         valid upload.
3991
3992 2001-02-27  James Troup  <james@nocrew.org>
3993
3994         * melanie (main): accept new argument -C/--carbon-copy which
3995         allows arbitarty carbon-copying of the bug closure messages.
3996         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3997         separate variable.
3998
3999 2001-02-27  Anthony Towns  <ajt@debian.org>
4000
4001         * ziyi: new program; generates Release files.
4002
4003 2001-02-25  James Troup  <james@nocrew.org>
4004
4005         * katie (reject): add missing '\n' to error message.
4006         (manual_reject): likewise.
4007         (install): catch exceptions from moving the changes file into DONE
4008         and ignore them.
4009
4010         * tea (check_md5sums): new function.
4011
4012 2001-02-25  Michael Beattie  <mjb@debian.org>
4013
4014         * melanie: use $EDITOR if available.
4015
4016 2001-02-15  James Troup  <james@nocrew.org>
4017
4018         * utils.py (parse_changes): don't crash and burn on empty .changes
4019         files.  Symptoms noticed by mjb@.
4020
4021 2001-02-15  Adam Heath  <doogie@debian.org>
4022
4023         * denise (main): use an absolute path for the output filename.
4024
4025         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4026         compile errors with postgresql-dev >= 7.0.
4027
4028 2001-02-12  James Troup  <james@nocrew.org>
4029
4030         * rene: initial version.
4031
4032         * andrea: initial version.
4033
4034         * catherine (main): remove obsolete assignment of arguments.
4035
4036 2001-02-09  James Troup  <james@nocrew.org>
4037
4038         * catherine: first working version.
4039
4040 2001-02-06  James Troup  <james@nocrew.org>
4041
4042         * katie (check_files): validate the priority field; i.e. ensure it
4043         doesn't contain a '/' (to catch people prepending the priority
4044         with the component rather than the section).
4045         (check_override): don't warn about source packages; the only check
4046         is on section and we have no GUI tools that would use the Section
4047         field for a Sources file.
4048         (announce): use tags rather than severities for NMUs.  Requested
4049         by Josip Rodin <joy@>. [#78035]
4050
4051 2001-02-04  James Troup  <james@nocrew.org>
4052
4053         * tea (check_override): new function; ensures packages in suites
4054         are also in the override file.  Thanks to bod@ for noticing that
4055         such packages existed.
4056
4057         * katie: move file type compiled regular expressions to utils as
4058         catherine uses them too.
4059         (check_changes): always default maintainer822 to the installer
4060         address so that any bail out won't cause undefs later.
4061         (check_files): update file type re's to match above.
4062         (stable_install): likewise.
4063         (reject): handle any except from moving the changes files.  Fixes
4064         crashes on unreadable changes files.
4065
4066         * melanie (main): add an explanation of why things are not removed
4067         from testing.
4068
4069 2001-01-31  James Troup  <james@nocrew.org>
4070
4071         * melanie (main): ignore a) no message, b) removing from stable or
4072         testing when invoked with -n/--no-action.
4073
4074         * katie (check_override): lower section before checking to see if
4075         we're whining about 'non-US' versus 'non-US/main'.
4076
4077         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4078         function so that we can use inside of PostgreSQL.
4079
4080 2001-01-28  James Troup  <james@nocrew.org>
4081
4082         * katie: updated to pass new flag to parse_changes() and deal with
4083         the exception raised on invalid .dsc's if appropriate.
4084         * shania (main): likewise.
4085         * melanie (main): likewise.
4086
4087         * tea (check_dscs): new function to validate all .dsc files in
4088         unstable.
4089
4090         * utils.py (parse_changes): if passed an additional flag, validate
4091         the .dsc file to ensure it's extractable by dpkg-source.
4092         Requested by Ben Collins <bcollins@>.
4093
4094 2001-01-27  James Troup  <james@nocrew.org>
4095
4096         * madison (main): connect to the DB as nobody.
4097
4098         * katie (check_files): remove support for -r/--no-version-check
4099         since it makes no sense under katie (jenna will automatically
4100         remove the (new) older version) and was evil in any event.
4101         (check_changes): add missing new line to rejection message.
4102         (check_dsc): likewise.
4103         (process_it): reset reject_message here.
4104         (main): not here.  Also remove support for -r.
4105
4106 2001-01-26  James Troup  <james@nocrew.org>
4107
4108         * katie (check_override): don't whine about 'non-US/main' versus
4109         'non-US'.
4110
4111 2001-01-26  Michael Beattie  <mjb@debian.org>
4112
4113         * natalie.py (usage): new function.
4114         (main): use it.
4115
4116 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4117
4118         * update-mirrorlists: Update README.non-US too (request from Joy).
4119
4120 2001-01-25  James Troup  <james@nocrew.org>
4121
4122         * katie (reject): catch any exception from utils.move() and just
4123         pass, we previously only caught can't-overwrite errors and not
4124         can't-read ones.
4125
4126         * jenna (generate_src_list): use ORDER BY in selects to avoid
4127         unnecessary changes to Packages files.
4128         (generate_bin_list): likewise.
4129
4130         * utils.py (extract_component_from_section): separated out from
4131         build_file_list() as it's now used by claire too.
4132
4133         * claire.py (find_dislocated_stable): rewrite the query to extract
4134         section information and handle component-less locations properly.
4135         Thanks to ajt@ for the improved queries.
4136         (fix_component_section): new function to fix components and
4137         sections.
4138
4139 2001-01-23  James Troup  <james@nocrew.org>
4140
4141         * katie (check_files): set file type for (u?)debs first thing, so
4142         that if we continue, other functions which rely on file type
4143         existing don't bomb out.  If apt_pkg or apt_inst raise an
4144         exception when parsing the control file, don't try any other
4145         checks, just drop out.
4146         (check_changes): new test to ensure there is actually a target
4147         distribution.
4148
4149 2001-01-22  James Troup  <james@nocrew.org>
4150
4151         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4152         <grin@>.
4153         (check_changes): when mapping to unstable, remember to actually
4154         add unstable to the suite list and not just remove the invalid
4155         suite.
4156
4157 2001-01-21  James Troup  <james@nocrew.org>
4158
4159         * katie (check_files): catch exceptions from debExtractControl()
4160         and reject packages which raise any.
4161
4162 2001-01-19  James Troup  <james@nocrew.org>
4163
4164         * katie (check_signature): basename() file name in rejection
4165         message.
4166
4167 2001-01-18  James Troup  <james@nocrew.org>
4168
4169         * katie (in_override_p): remember the section and priority from
4170         the override file so we can check them against the package later.
4171         (check_override): new function; checks section and priority (for
4172         binaries) from the package against the override file and mails the
4173         maintainer about any disparities.
4174         (install): call check_override after announcing the upload.
4175
4176 2001-01-16  James Troup  <james@nocrew.org>
4177
4178         * utils.py (build_file_list): catch ValueError's from splitting up
4179         the files field and translate it into a parse error.
4180
4181         * tea: add support for finding unreferenced files.
4182
4183         * katie (in_override_p): add support for suite-aliasing so that
4184         proposed-updates uploads work again.
4185         (check_changes): catch parses errors from utils.build_file_list().
4186         (check_dsc): likewise.
4187         (check_diff): yet more dpkg breakage so we require even newer a
4188         version.
4189
4190         * jenna (generate_bin_list): don't do nasty path munging that's no
4191         longer needed.
4192
4193         * denise (main): support for non-US; and rename testing's override
4194         files so they're based on testing's codename.
4195
4196 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4197
4198         * melanie: add to the bug closing message explaining what happens
4199         (or rather doesn't) with bugs against packages that have been
4200         removed.
4201
4202 2001-01-14  James Troup  <james@nocrew.org>
4203
4204         * charisma (main): fix silly off-by-one error; suite priority
4205         checking was done using "less than" rather than "less than or
4206         equal to" which was causing weird hesienbugs with wrong Maintainer
4207         fields.
4208
4209 2001-01-10  James Troup  <james@nocrew.org>
4210
4211         * katie (in_override_p): adapted to use SQL-based overrides.
4212         read_override_file function disappears.
4213
4214         * db_access.py: add new functions get_section_id, get_priority_id
4215         and get_override_type_id.
4216         (get_architecture_id): return -1 if the architecture is not found.
4217
4218         * heidi: switch %d -> %d in all SQL queries.
4219         (get_list): Use string.join where appropriate.
4220
4221         * rhona (in_override_p): don't die if the override file doesn't
4222         exist.
4223         (main): warn if the override file doesn't exist.
4224
4225         * alyson: new script; will eventually sync the config file and the
4226         SQL database.
4227
4228         * natalie.py: new script; manipulates overrides.
4229
4230         * melanie: new script; removes packages from suites.
4231
4232 2001-01-08  James Troup  <james@nocrew.org>
4233
4234         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4235         anything it just changed the symptom.  Recognise the new breakage
4236         and reject them too.
4237
4238 2001-01-07  James Troup  <james@nocrew.org>
4239
4240         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4241         to the .changes file, be sure to set up files[filename]["type"]
4242         too.
4243
4244 2001-01-06  James Troup  <james@nocrew.org>
4245
4246         * katie (check_diff): new function; detects bad diff files
4247         produced by dpkg 1.8.1 and rejects thems.
4248         (process_it): call check_diff().
4249         (check_dsc): gar.  Add support for multiple versions of the
4250         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4251         and size against all versions and use one which matches if
4252         possible and exclude any that don't from being poolized to avoid
4253         file overwrites.  Thanks to broonie@ for providing the example.
4254         (install): skip any files marked as excluded as above.
4255
4256 2001-01-05  James Troup  <james@nocrew.org>
4257
4258         * heidi (process_file): add missing argument to error message.
4259
4260 2001-01-04  James Troup  <james@nocrew.org>
4261
4262         * heidi (main): fix handling of multiple files by reading all
4263         files not just the first file n times (where n = the number of
4264         files passed as arguments).
4265
4266 2001-01-04  Anthony Towns  <ajt@debian.org>
4267
4268         * katie (check_dsc): proper fix for the code which locates the
4269         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4270
4271 2000-12-20  James Troup  <james@nocrew.org>
4272
4273         * rhona: replace IN's with EXISTS's to make DELETE time for
4274         binaries and source sane on auric.  Add a -n/--no-action flag and
4275         make it stop actions if used.  Fixed a bug in binaries deletion
4276         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4277         -V/--version.  Giving timing info on deletion till I'm sure it's
4278         sane.
4279
4280         * katie (check_changes): map testing to unstable.
4281
4282         * madison: new script; shows versions in different architectures.
4283
4284         * katie (check_dsc): ensure size matches as well as md5sum;
4285         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4286         #69702.
4287
4288 2000-12-19  James Troup  <james@nocrew.org>
4289
4290         * katie (reject): ignore the "can't overwrite file" exception from
4291         utils.move() and leave the files where they are.
4292         (reject): doh! os.access() test was reversed so we only tried to
4293         move files which didn't exist... replaced with os.path.exists()
4294         test the right way round.
4295
4296         * utils.py (move): raise an exception if we can't overwrite the
4297         destination file.
4298         (copy): likewise.
4299
4300 2000-12-18  James Troup  <james@nocrew.org>
4301
4302         * rhona: first working version.
4303
4304         * db_access.py (get_files_id): force both sizes to be integers.
4305
4306         * katie (main): use size_type().
4307
4308         * utils.py (size_type): new function; pretty prints a file size.
4309
4310 2000-12-17  James Troup  <james@nocrew.org>
4311
4312         * charisma (main): do version compares so that older packages do
4313         not override newer ones and process source first as source wins
4314         over binaries in terms of who we think of as the Maintainer.
4315
4316 2000-12-15  James Troup  <james@nocrew.org>
4317
4318         * katie (install): use the files id for the .orig.tar.gz from
4319         check_dsc().
4320         (install): limit select for legacy source to a) source in legacy
4321         or legacy-mixed type locations and b) distinct on files.id.
4322         (install): rather than the bizarre insert new, delete old method
4323         for moving legacy source into the pool, use a simple update of
4324         files.
4325         (process_it): initalize some globals before each process.
4326
4327 2000-12-14  James Troup  <james@nocrew.org>
4328
4329         * katie (in_override_p): index on binary_type too since .udeb
4330         overrides are in a different file.
4331         (read_override_file): likewise.
4332         (check_files): correct filename passed to get_files_id().
4333         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4334         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4335         (check_dsc): remember the files id of the .orig.tar.gz, not the
4336         location id.
4337
4338 2000-12-13  James Troup  <james@nocrew.org>
4339
4340         * utils.py (poolify): force the component to lower case except for
4341         non-US.
4342
4343         * katie (in_override_p): handle .udeb-specific override files.
4344         (check_files): pass the binary type to in_override_p().
4345         (check_dsc): remember the location id of the old .orig.tar.gz in
4346         case it's not in the pool.
4347         (install): use location id from dsc_files; which is where
4348         check_dsc() puts it for old .orig.tar.gz files.
4349         (install): install files after all DB work is complete.
4350         (reject): basename() the changes filename.
4351         (manual_reject): likewise.
4352
4353         * shania: new progam; replaces incomingcleaner.
4354
4355 2000-12-05  James Troup  <james@nocrew.org>
4356
4357         * katie (check_changes): if inside stable and can't find files
4358         from the .changes; assume it's installed in the pool and chdir()
4359         to there.
4360         (check_files): we are not installing for stable installs, so don't
4361         check for overwriting existing files.
4362         (check_dsc): likewise.
4363         (check_dsc): reorder .orig.tar.gz handling so that we search in
4364         the pool first and only then fall back on any .orig.tar.gz in the
4365         cwd; this avoids false positives on the overwrite check when
4366         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4367         (install): if this is a stable install, bail out to
4368         stable_install() immediately.
4369         (install): dsc_files handling was horribly broken. a) we need to
4370         add files from the .dsc and not the .changes (duh), b) we need to
4371         add the .dsc file itself to dsc_files (to be consistent with neve
4372         if for no other reason).
4373         (stable_install): new function; handles installs from inside
4374         proposed-updates to stable.
4375         (acknowledge_new): basename changes_filename before doing
4376         anything.
4377         (process_it): absolutize the changes filename to avoid the
4378         requirement of being in the same directory as the .changes file.
4379         (process_it): save and restore the cwd as stable installs can
4380         potentially jump into the pool to find files.
4381
4382         * jenna: dislocated_files support using claire.
4383
4384         * heidi (process_file): select package field from binaries
4385         explicitly.
4386
4387         * db_access.py (get_files_id): fix cache key used.
4388
4389         * utils.py (build_file_list): fix 'non-US/non-free' case in
4390         section/component splitting.
4391         (move): use os.path.isdir() rather than stat.
4392         (copy): likewise.
4393
4394         * claire.py: new file; stable in non-stable munger.
4395
4396         * tea: new file; simply ensures all files in the DB exist.
4397
4398 2000-12-01  James Troup  <james@nocrew.org>
4399
4400         * katie (check_dsc): use regex_safe().
4401         (check_changes): typo in changes{} key:
4402         s/distributions/distribution/.
4403         (install): use changes["source"], not files[file]["source"] as the
4404         latter may not exist and the former is used elsewhere.  Commit the
4405         SQL transaction earlier.
4406
4407         * utils.py (regex_safe): new function; escapes characters which
4408         have meaning to SQL's regex comparison operator ('~').
4409
4410 2000-11-30  James Troup  <james@nocrew.org>
4411
4412         * katie (install): pool_location is based on source package name,
4413         not binary package.
4414
4415         * utils.py (move): if dest is a directory, append the filename
4416         before chmod-ing.
4417         (copy): ditto.
4418
4419         * katie (check_files): don't allow overwriting of existing .debs.
4420         (check_dsc): don't allow overwriting of existing source files.
4421
4422 2000-11-27  James Troup  <james@nocrew.org>
4423
4424         * katie (check_signature): don't try to load rsaref; it's
4425         obsolete.
4426         (in_override_p): don't try to lookup override entries for packages
4427         with an invalid suite name.
4428         (announce): don't assume the suite name is valid; use Find() to
4429         lookup the mailing list name for announcements.
4430
4431         * utils.py (where_am_i): typo; hostname is in the first element,
4432         not second.
4433
4434         * db_access.py (get_suite_id): return -1 on an unknown suite.
4435
4436 2000-11-26  James Troup  <james@nocrew.org>
4437
4438         * katie (install): fix CopyChanges handling; typo in in checking
4439         Cnf for CopyChanges flag and was calling non-existent function
4440         copy_file.
4441
4442         * utils.py (copy): new function; clone of move without the
4443         unlink().
4444
4445 2000-11-25  James Troup  <james@nocrew.org>
4446
4447         * utils.py (build_file_list): handle non-US prefixes properly
4448         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4449         + 'libs' not 'non-US/libs').
4450         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4451         delays.  This is possibly(/probably) exim speicifc and (like other
4452         sendmail options) needs to be in the config file.
4453
4454 2000-11-24  James Troup  <james@nocrew.org>
4455
4456         * rhona (check_sources): we need file id from dsc_files; not id.
4457         Handle non .dsc source files being re-referenced in dsc_files.
4458
4459         * katie (in_override_p): strip out any 'non-US' prefix.
4460         (check_files): use utils.where_am_i() rather than hardcoding.
4461         (check_files): validate the component.
4462         (install): use utils.where_am_i() rather than hardcoding.
4463         (install): fix mail to go to actual recepient.
4464         (reject): likewise.
4465         (manual_reject): likewise.
4466         (acknowledge_new): likewise.
4467         (announce): likewise.
4468
4469         * db_access.py (get_component_id): ignore case when searching for
4470         the component and don't crash if the component can't be found, but
4471         return -1.
4472         (get_location_id): handle -1 from get_component_id().
4473
4474         * jenna (generate_src_list): don't bring 'suite' into our big
4475         multi-table-joining select as we already know the 'suite_id'.
4476         (generate_bin_list): likewise.
4477
4478         * neve (main): don't quit if not on ftp-master.
4479         (process_packages): remove unused variable 'suite_codename'.
4480
4481         * utils.py (move): actually move the file.
4482         (build_file_list): handle non-US prefixes in the section.
4483
4484         * catherine (main): use which_conf_file().
4485         * charisma (main): likewise.
4486         * heidi (main): likewise.
4487         * jenna (main): likewise.
4488         * katie (main): likewise.
4489         * neve (main): likewise.
4490         * rhona (main): likewise.
4491
4492         * utils.py (where_am_i): new routine; determines the archive as
4493         understood by other 'dak' programs.
4494         (which_conf_file): new routine; determines the conf file to read.
4495
4496 2000-11-17  James Troup  <james@nocrew.org>
4497
4498         * katie (install): fix where .changes files for proposed-updates
4499         go.
4500
4501 2000-11-04  James Troup  <james@nocrew.org>
4502
4503         * jenna (main): handle architecture properly if no
4504         -a/--architecture argument is given, i.e. reset architecture with
4505         the values for the suite for each suite.
4506
4507         * Add apt_pkg.init() to the start of all scripts as it's now
4508         required by python-apt.
4509
4510 2000-10-29  James Troup  <james@nocrew.org>
4511
4512         * jenna (generate_bin_list): take an additional argument 'type'
4513         and use it in the SELECT.
4514         (main): if processing component 'main', process udebs and debs.
4515
4516         * neve (process_packages): set up 'type' in 'binaries' (by
4517         assuming .deb).
4518
4519         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4520         (check_files): set up files[file]["dbtype"].
4521         (install): use files[file]["dbtype"] to set up the 'type' field in
4522         the 'binaries' table.
4523
4524         * init_pool.sql: add a 'type' field to the 'binaries' table to
4525         distinguisgh between ".udeb" and ".deb" files.
4526
4527         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4528         dest ? dirname(dest)" type check instead.
4529
4530         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4531         in the pool without crashing.  Also handle the case of being asked
4532         to look for something other than an .orig.tar.gz in the pool.
4533
4534 2000-10-26  James Troup  <james@nocrew.org>
4535
4536         * katie (install): fix filenames put into files table during
4537         poolification of legacy source.
4538
4539         * utils.py (move): work around a bug in os.path.basename() which
4540         cunningly returns '' if there is a trailing slash on the path
4541         passed to it.
4542
4543         * katie (check_dsc): Remove more cruft.  If we find the
4544         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4545         location, make a note of that so we can fix things in install().
4546         (install): as above.  Move any old source out of legacy locations
4547         so that 'apt-get source' will work.
4548         (process_it): reset the flag that indicates to install that the
4549         source needs moved.
4550
4551         * cron.daily: more.  Nowhere near complete yet though.
4552
4553         * katie (install): don't run os.makedirs, a) utils.move() does
4554         this now, b) we weren't removing the user's umask and were
4555         creating dirs with SNAFU permissions.
4556         (check_dsc): rewrite the .orig.tar.gz handling to take into
4557         account, err, package pools.  i.e. look anywhere in the pool
4558         rather than faffing around with two simple paths.
4559
4560         * neve (process_sources): add the .dsc to dsc_files too.
4561
4562 2000-10-25  James Troup  <james@nocrew.org>
4563
4564         * neve (process_sources): don't duplicate .orig.tar.gz's.
4565
4566 2000-10-23  James Troup  <james@nocrew.org>
4567
4568         * utils.py (re_extract_src_version): moved here.
4569
4570         * neve: move re_extract_src_version to utils.
4571         (process_packages): reflect change.
4572
4573         * katie (install): reflect change.
4574
4575 2000-10-19  James Troup  <james@nocrew.org>
4576
4577         * jenna (generate_src_list): handle locations with null
4578         components.
4579         (generate_bin_list): likewise.
4580