]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Merge from aj
[dak.git] / ChangeLog
1 2008-03-22  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/transitions.py (load_transitions): Check if all our keys are
4         defined, if there are only keys defined we want and also the types
5         of the various keys.
6
7 2008-03-22  Anthony Towns  <ajt@debian.org>
8
9         * dak/edit_transitions.py: Add --import option.
10         Add --use-sudo option. Use fcntl locking for writing.
11         Move writing into a function (write_transitions).
12         Reinvoke self using sudo and --import if necessary.
13         Move temporary file creation into a function, use mkstemp.
14         Rename to "dak transitions".
15
16 2008-03-21  Joerg Jaspert  <joerg@debian.org>
17
18         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
19         edited file back in place
20         (check_transitions): Use proper locking and also use sudo to copy
21         the new file in place
22
23 2008-03-21  Anthony Towns <ajt@debian.org>
24
25         * config/debian/extensions.py: Add infrastructure for replacing
26         functions in dak modules; add upload blocking for dpkg.
27
28 2008-03-12  Joerg Jaspert  <joerg@debian.org>
29
30         * dak/edit_transitions.py: Done a number of cleanups to make code
31         working. Also changed the way prompting/answering goes, to not
32         have to import daklib/queue.
33         (edit_transitions): When done with a successful edit - also print
34         a final overview about defined transitions
35
36 2008-03-11  Joerg Jaspert  <joerg@debian.org>
37
38         * dak/process_unchecked.py: Import syck module directly, not "from
39         syck import *"
40         (check_transition): Do the check for sourceful upload in here
41         Also adjust the syck loading commands, rename new_vers to
42         expected, curvers to current, to make it more clear what they mean.
43
44         * daklib/database.py (get_suite_version): Renamed from
45         get_testing_version. Also changed the cache variables name
46
47         * The above changes are based on modifications from Anthony.
48
49         * dak/dak.py (init): Renamed check -> edit transitions
50
51         * dak/edit_transitions.py: Renamed from check_transitions.py
52         (main): Also rename new_vers/curvers to expected/current
53         Basically a nice rewrite, so it now does checks and edit,
54         depending on how you call it. Check also removes old transitions,
55         if user wants it.
56
57 2008-03-02  Joerg Jaspert  <joerg@debian.org>
58
59         * debian/control (Suggests): Add python-syck to Depends:
60
61         * dak/dak.py (init): Tell it about check_transitions
62
63         * dak/check_transitions.py (usage): Added, checks the transitions
64         file (if any)
65
66         * daklib/database.py (get_testing_version): Added. Returns the
67         version for the source in testing, if any
68
69         * dak/process_unchecked.py (check_transition): Added. Checks if a
70         release team member defined a transition, and rejects based on
71         that data.
72         (process_it): Use it.
73         (check_transition): Warn on broken transitions file and return,
74         not doing anything.
75         (check_transition): Moved out of here, into daklib/queue
76         (process_it): Call check_transitions only if
77         changes[architecture] has source included.
78         (check_transition): Now call the database.get_testing_version
79
80 2008-02-06  Joerg Jaspert  <joerg@debian.org>
81
82         * daklib/utils.py (check_signature): Make variable key available,
83         so we can access it.
84
85 2008-01-07  Joerg Jaspert  <joerg@debian.org>
86
87         * dak/examine_package.py (check_deb): Remove linda call. It
88         provides no added benefit to lintian anymore.
89
90 2008-01-06  Joerg Jaspert  <joerg@debian.org>
91
92         * dak/examine_package.py (do_lintian): lintian now supports html
93         coloring, so use it.
94         (do_command): Dont escape html chars if param escaped = 1
95
96 2007-12-31  Anthony Towns  <ajt@debian.org>
97
98         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
99         when processing result of check_dsc_against_db so we don't promote
100         warnings to rejections.
101
102 2007-12-30  Joerg Jaspert  <joerg@debian.org>
103
104         * dak/dak.py (init): add show-new. This is based on a patch
105         submitted by Thomas Viehmann in Bug #408318, but large parts of
106         handling it are rewritten and show-new is done by me.
107
108         * dak/queue_report.py (table_row): Add link to generated html page
109         for NEW package.
110
111         * dak/show_new.py: new file, generates html overview for NEW
112         packages, similar to what we see with examine-package.
113
114         * config/debian/cron.hourly: Add show-new call
115
116         * config/debian/dak.conf: Add HTMLPath for Show-New
117
118         * dak/examine_package.py (print_copyright): ignore stderr when
119         finding copyright file.
120         (main): add html option
121         (html_escape): new function
122         (escape_if_needed): ditto
123         (headline): ditto
124         (colour_output): ditto
125         (print_escaped_text): ditto
126         (print_formatted_text): ditto
127         - use those functions everywhere where we generate output, as they
128         easily know if we want html or not and just DTRT
129         (do_lintian): new function
130         (check_deb): use it
131         (output_deb_info): Use print_escaped_text, not print_formatted_text.
132         Also import daklib.queue, determine_new now lives there
133
134         Also add a variable to see if we want html output. Default is
135         disabled, show_new enables it for its use.
136         Most of html, besides header/footer are in examine_package instead
137         of show_new, as it makes it a whole lot easier to deal with it at
138         the point the info is generated.
139
140
141         * dak/process_new.py (determine_new): Moved out of here.
142         (check_valid): Moved out of here.
143         (get_type): Moved out of here.
144
145         * daklib/queue.py (determine_new): Moved here.
146         (check_valid): Moved here.
147         (get_type): Moved here.
148
149         * dak/init_db.py (do_section): Remove non-US code
150
151         * dak/make_overrides.py (main): ditto
152
153         * dak/process_new.py (determine_new): ditto
154
155         * daklib/queue.py (Upload.in_override_p),
156         (Upload.check_override): ditto
157
158         * daklib/utils.py (extract_component_from_section):,
159         (poolify): ditto
160
161         * dak/import_archive.py (update_section): ditto
162
163         * dak/symlink_dists.py (fix_component_section): ditto
164
165         * scripts/debian/mkmaintainers: ditto
166
167         * scripts/debian/update-mirrorlists (masterlist): ditto
168
169         * config/debian-non-US/*: Remove subdir
170
171         * scripts/debian/update-readmenonus: Removed.
172
173
174 2007-12-28  Anthony Towns  <ajt@debian.org>
175
176         * daklib/utils.py (check_signature): add NOTATION_DATA and
177         NOTATION_NAME to known keywords.
178
179         * daklib/queue.py (Upload.check_source_against_db): 
180
181         * dak/make_suite_file_list.py: add -f/--force option.
182
183         * dak/generate_releases.py: add -a/--apt-conf=FILE and
184         -f/--force-touch options.  Pull version info from the database.
185         Make suite description optional.
186
187         * config/debian/dak.conf: update
188         Reject-Proposed-Updates::MoreInfoURL.  Comment out
189         Suite::Stable::Version and ::Description.
190
191         * config/debian/apt.conf: Add hurd-i386 to unstable
192         debian-installer stanza.
193
194 2007-12-28  Joerg Jaspert  <joerg@debian.org>
195
196         * KEYEXPIRED is actually a known keyword. We do check it earlier
197         on and reject in case the sig is bad (or unknown)
198
199 2007-12-24  Joerg Jaspert  <joerg@debian.org>
200
201         * Also run lintian on the .dsc file to check the source itself.
202
203         * Fix the direct usage of ar | tar etc to get the copyright file
204         and use dpkg-deb, which is made for this and makes us able to
205         process data.tar.bz2 (or whatever format it will be in the
206         future).
207
208 2007-12-21  Joerg Jaspert  <joerg@debian.org>
209
210         * Remove the (now useless) check for a pre-depends on dpkg for
211           binaries that contain bzip2 compressed data tarballs.
212
213 2007-08-28  Anthony Towns  <ajt@debian.org>
214
215         * process_unchecked.py: Add support for automatic BYHAND
216         processing.
217         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
218         processing of tag-overrides.
219         * examine_package.py: Summarise duplicate copyright file entries
220         (same md5sum) with a reference to the previous instance, rather
221         than repeating them.
222         * process_new.py: When rejecting from the p-u-new or o-p-u-new
223         holding queues, don't worry if dak has its own reasons for
224         rejecting the package as well as the SRMs.
225
226 2007-06-19  Anthony Towns  <ajt@debian.org>
227
228         * Add nm.debian.org pseudopackage
229
230 2007-06-18  Anthony Towns  <ajt@debian.org>
231
232         * daklib/logging.py: Set umask to not exclude group-writability
233         so we don't get reminded at the start of each month. Thanks to
234         Random J.
235         * dak/override.py: More changes from Herr von Wifflepuck: warn
236         if section of source is different to binary section; restore
237         functionality on source-only overrides; croak if trying to set
238         priority of a source override; never set priority of source
239         overrides; correct typo in logging (s/priority/section/ at
240         one place)
241
242         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
243         * config/debian/cron.daily: auotmatically accept/reject
244         oldstable-proposed-updates based on COMMENTS directory
245
246 2007-06-18  Anthony Towns  <ajt@debian.org>
247
248         * config/debian/apt.conf, config/debian/apt.conf.stable,
249         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
250         (sarge), support for oldstable-proposed-updates, dropping m68k
251         from etch, creating etch-m68k suite, creating lenny.
252
253         * config/debian/vars: update for lenny
254
255         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
256         drop upload limitations, add release postgres user
257         
258         * dak/process_new.py: support for automatically accepting and rejecting
259         packages from proposed-updates holding queues via COMMENTS directory
260         * cron.daily: automatically process COMMENTS-based approvals
261         and rejections for proposed-updates holding queues
262
263         * dak/process_unchecked.py: add support for oldproposedupdates
264         holding queue
265
266         * dak/control_suite.py: allow control-suite to work with etch-m68k
267
268         * dak/generate_releases.py: unlink old Release files before updating
269         them if nlinks > 1 (ie, if two files used to be the same, maybe they
270         shouldn't be when generate-releases is run)
271
272         * dak/generate_releases.py: add a couple of commented lines to make
273         it easier to deal with point releases
274
275         * dak/make_overrides.py: generate overrides for !contrib udebs
276
277         * docs/README.stable-point-release: update docs for doing a
278         point release
279
280 2007-03-05  Anthony Towns  <ajt@debian.org>
281
282         * config/debian/dak.conf: update for 3.1r5.
283         * scripts/debian/ssh-move: add ssh-move script from debbugs
284         * config/debian/cron.unchecked: push version info to debbugs using
285         ssh-move.
286
287 2007-02-14  James Troup  <troup@ries.debian.org>
288
289         * docs/README.config: remove Dinstall::GroupOverrideFilename.
290         * config/debian/dak.conf: likewise.
291         * config/debian-non-US/dak.conf: likewise.
292         * config/debian-security/dak.conf: likewise.
293
294         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
295         experimental differently, just close the bugs and let version
296         tracking sort it out.
297          (nmu_p): remove entire class - now unused.
298          (Upload.__init__): don't use nmu_p.
299
300 2007-02-08  Anthony Towns  <ajt@debian.org>
301
302         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
303         signing key.  Drop maximum index diffs down to 14.
304
305         * config/debian/apt.conf: add udeb support for non-free (testing,
306         unstable) and experimental.
307         * config/debian/dak.conf: likewise.
308
309         * dak/generate_releases.py (main): handle udebs in any component.
310
311         * daklib/queue.py (Upload.build_summaries): handle files without a
312         'type' gracefully.
313
314         * dak/generate_releases.py (print_sha256_files): new function.
315         (main): use it.
316
317         * dak/process_accepted.py (stable_install): fix name of template
318         mail.
319
320         * dak/process_unchecked.py (is_stableupdate): fix invocation of
321         database.get_suite_id().
322
323         * templates/process-new.bxa_notification: Update on request
324         of/after discussion with BIS staff.
325
326         * scripts/debian/mkfilesindices: also handle proposed-updates.
327
328 2007-02-08  Ryan Murray  <rmurray@debian.org>
329
330         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
331         group name for chgrp of mail archives.
332
333         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
334         orig.tar.gz's by picking the first one by file id.
335
336         * dak/override.py (main): limit to binary overrides only for now.
337         (usage): update to match.
338
339         * config/debian/cron.daily: track when we have the accepted lock
340         and clean it up on exit if we have it.  Take/check the
341         cron.unchecked lock just before traping to cleanup on exit.
342         Remove potato override handling.  Remove any dangling symlinks in
343         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
344
345         * config/debian/apt.conf: change default compression scheme for
346         both Sources and Packages to gzip and bzip2 rather than
347         uncompressed and gzip (Packages) and gzip (Sources).  Use old
348         defaults for proposed-updates.
349
350         * dak/control_overrides.py (main): refuse to operate on
351         untouchable suites.
352
353         * config/debian/pseudo-packages.maintainers: drop install,
354         installation, boot-floppy, slink-cd, potato-cd and
355         nonus.debian.org.  Update base.
356         * config/debian/pseudo-packages.description: likewise.
357
358         * daklib/utils.py (re_srchasver): new regex.
359         (parse_changes): use regex to split 'Source (Version)' style
360         Source fields into 'source' and 'source-version'.
361
362         * config/debian/cron.daily: use $base instead of hardcoding path
363         name.
364
365         * scripts/debian/mkfilesindices: source 'vars' file and use it's
366         variables instead of hardcoding path names.
367
368         * config/debian/apt.conf: switch from /org to /srv.
369         * config/debian/apt.conf.buildd: likewise.
370         * config/debian/apt.conf.stable: likewise.
371         * config/debian/cron.daily: likewise.
372         * config/debian/cron.hourly: likewise.
373         * config/debian/cron.monthly: likewise.
374         * config/debian/cron.unchecked: likewise.
375         * config/debian/cron.weekly: likewise.
376         * config/debian/dak.conf: likewise.
377         * config/debian/vars: likewise.
378         * scripts/debian/mkfilesindices: likewise.
379         
380 2007-02-08  James Troup  <james@nocrew.org>
381
382         * dak/process_unchecked.py (check_signed_by_key): new function to
383         ensure .changes files are signed by an authorized uploader.
384         (process_it): use it.
385
386         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
387         to configure per suite/component/architecture binary upload
388         restrictions.
389
390 2006-10-09  James Troup  <james.troup@canonical.com>
391
392         * dak/process_unchecked.py (check_timestamps): change match to
393         search as recent versions of python-apt prefix the string with 'E: '.
394
395 2006-06-26  Ryan Murray  <rmurray@debian.org>
396
397         * dak/process_unchecked.py (check_files): strip optional source version
398         from Source: field in changes file, and ensure what is left is a valid
399         package name.
400
401 2006-06-23  Ryan Murray  <rmurray@debian.org>
402
403         * dak/process_unchecked.py (check_files): also check ProposedUpdates
404         queue for source.
405
406 2006-06-18  Ryan Murray  <rmurray@debian.org>
407
408         * dak/scripts/debian/update-ftpstats: look for dak named processes in
409         the log, too.
410
411         * dak/process_unchecked.py (check_files): only check embargoed and
412         unembargoed queues if the keys are set.
413
414         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
415         and bzip2 for etch.
416
417 2006-06-16  James Troup  <james@nocrew.org>
418
419         * dak/dak.py (init): add new-security-install.
420
421         * dak/new_security_install.py: cleanups and adapt for new naming
422         scheme and other changes.
423
424 2006-06-16  Anthony Towns  <ajt@debian.org>
425
426         * dak/new_security_install.py: initial version imported from
427         klecker.
428
429 2006-06-16  James Troup  <james@nocrew.org>
430
431         [Merged changes from klecker - original author unknown.]
432
433         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
434
435         * dak/security_install.py (do_upload): fix check for oldstable and
436         upload file list handling.
437
438         * dak/process_unchecked.py (check_files): update "check for
439         source" code to also look in Embargoed and Unembargoed queues.
440         (is_unembargo): fix handling of Dir::Queue::Disembargo.
441
442         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
443
444         * config/debian-security/vars (disembargo): add.
445
446         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
447         update.
448         (Process-Unchecked::AcceptedLockFile): add.
449         (Suite::Testing): clean up Version and Description.
450         (SuiteMappings): add silent map from etch-secure to testing.
451
452         * config/debian-security/cron.unchecked: add support for
453         disembargoed queues.
454
455         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
456         files too.
457
458         * config/debian-security/apt.conf: add amd64 to architectures for
459         testing-security.
460
461 2006-06-11  James Troup  <troup@spohr.debian.org>
462
463         * config/debian/cron.daily: invoke process-accepted not
464         process-unchecked.
465
466         * config/debian/vars (scriptsdir): new variable.
467         * config/debian/cron.daily: use it.
468
469         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
470         $base/misc/ instead of versioned $masterdir.  Correct 'dak
471         make-maintainers' invocation to look in $configdir for
472         pseudo-packages.maintainers.
473
474         * daklib/queue.py (Upload.do_reject): use correct name for
475         rejection template.
476
477 2006-06-11  James Troup  <james@nocrew.org>
478
479         * dak/override.py (main): temporarily add content of old X-Katie
480         header back as the PTS apparently filters on it.
481         * dak/process_accepted.py (main): likewise.
482         * dak/process_new.py (main): likewise.
483         * dak/process_unchecked.py (main): likewise.
484         * dak/reject_proposed_updates.py (main): likewise.
485         * dak/rm.py (main): likewise.
486         * daklib/queue.py (Upload.do_reject): likewise.
487
488         * config/debian/cron.unchecked: set -u to error out on undefined
489         variables.  Preset LOCKDAILY to "" accordingly.
490         * config/debian/cron.hourly: likewise.
491         * config/debian/cron.monthly: likewise.
492         * config/debian/cron.weekly: likewise.
493
494         * config/debian/vars (configdir): add new variable pointing to
495         this directory.
496
497         * config/debian/cron.daily: use $configdir inplace of $masterdir
498         when that's what we mean, and don't cd into $masterdir just to run
499         dak scripts as we don't need to do that anymore.
500         * config/debian/cron.hourly: likewise.
501         * config/debian/cron.unchecked: likewise.
502         * config/debian/cron.weekly: likewise.
503
504         * config/debian/dak.conf
505         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
506         user back to list of known users as it's non-trivial to entirely
507         change the owner of a database with postgresql 7.4.
508
509         * daklib/queue.py (Upload.source_exists): use string object
510         methods rather than string module.
511         (Upload.get_anyversion): likewise.
512
513         * daklib/utils.py (validate_changes_file_arg): update filename
514         slicing to cope with new .dak filenames.
515
516         * dak/ls.py (main): add back 'heidi' as a valid argument for
517         -f/--format as people are using it in scripts and breaking that
518         without warning seems rude.
519
520 2006-05-21  James Troup  <james@nocrew.org>
521
522         * dak/rm.py (main): use string .isdigit() rather than
523         utils.str_isnum().
524         * dak/process_new.py (edit_overrides): likewise.
525
526         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
527         string import.
528
529 2006-05-21  James Troup  <james@nocrew.org>
530
531         * dak/check_archive.py (check_indices_files_exist): use list
532         comprehension instead of map().  No longer need to import
533         deprecated string module as a side-effect.
534         * dak/check_overrides.py (process): likewise.
535         (main): likewise.
536         * dak/cruft_report.py (do_obsolete_source): likewise.
537         (main): likewise.
538         * dak/ls.py (main): likewise.
539         * dak/make_suite_file_list.py (write_filelists): likewise.
540         * dak/process_accepted.py (stable_install): likewise.
541         * dak/rm.py (main): likewise.
542         * dak/stats.py (number_of_packages): likewise.
543         * daklib/logging.py (Logger.log): likewise.
544         * daklib/queue.py (Upload.source_exists): likewise.
545         (Upload.cross_suite_version_check): likewise.
546         * daklib/utils.py (parse_args): likewise.
547
548 2006-05-21  James Troup  <james@nocrew.org>
549
550         * daklib/utils.py (process_gpgv_output): new function, split out
551         of check_signature().
552         (check_signature): adapt accordingly.
553         (retrieve_key): new function that will try to retrieve the key
554         that signed a given file from a keyserver.
555         (check_signature): add 'autofetch' argument that if not set
556         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
557         If 'autofetch' is true, invoke retrieve_key().  
558
559         * docs/README.config: document Dinstall::KeyAutoFetch and
560         Dinstall:KeyServer.
561
562 2006-05-20  James Troup  <james@nocrew.org>
563
564         * dak/find_null_maintainers.py (main):
565         s/createtimestamp/createTimestamp/ to make things work with modern
566         slapd.
567
568         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
569         Stable::Version and Stable::Description for 3.1r2.
570
571         * config/debian-non-US/dak.conf: sync with klecker - update
572         version number of 3.0 and MoreInfoURL.
573
574         * docs/README.stable-point-release: Add notes about updating
575         dak.conf and Reject-Proposed-Updates section in particular.
576         s/woody/stable/.  Also need to update README.html.
577
578         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
579
580         * config/debian/apt.conf: Add udeb tree for proposed-updates.
581
582 2006-05-20  Ryan Murray  <rmurray@debian.org>
583
584         * scripts/debian/update-ftpstats: new script to update daily
585         architecture size graph data.
586
587         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
588         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
589         there.
590
591         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
592         before we finish.  Don't push to merkel.
593
594         * dak/process_unchecked.py (check_changes): Also look in
595         ProposedUpdates queue dir.
596         (check_files): likewise.
597
598 2006-05-20  Anthony Towns  <ajt@debian.org>
599
600         * scripts/debian/mkfilesindices: new script to generate file
601         indices used for partial mirroring.
602
603         * config/debian/cron.daily: add progress timestamps.
604
605         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
606         amd64 to testing, unstable and experimental.  Drop sh from
607         experimental.  Move Experimental to dists/experimental.  Add
608         Dir::ProposedUpdates.  Add Architectures::amd64.
609
610         * config/debian/apt.conf: add amd64 to testing, unstable and
611         experimental.  Drop uncompressed Packages files from testing. Drop
612         sh from experimental.  Move experimental to dists/experimental/.
613
614         * config/debian/vars (archs): add amd64.
615
616         * dak/process_unchecked.py (action): Add support for
617         proposed-updates approval queue.
618         (is_stableupdate): new function - checks if the upload is targeted
619         at proposed-updates.
620         (do_stableupdate): likewise - moves upload to proposed-updates
621         holding area.
622
623         * dak/process_new.py (do_new): warn if original or new target
624         suite are invalid.
625
626         * dak/generate_releases.py (print_md5sha_files): less whitespace
627         between the hash and size.
628
629         * dak/generate_index_diffs.py (genchanges): don't say we're not
630         doing anything.  Better formatting of other messages.
631         (main): don't skip experimental and remove some 'doing stuff'
632         prints.
633
634 2006-05-18  James Troup  <james@nocrew.org>
635
636         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
637         query.
638
639         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
640         docstrings, untabify, don't shadow builtins, lowercase non-global
641         variable names, spaces after commas.  Also bail if given any
642         arguments since we don't accept any.
643         * dak/init_db.py: likewise.  Also split large main() into
644         subfunctions and rename get() to sql_get().
645
646         * dak/init_db.py (main): check returned value from
647         database.get_archive_id().
648
649         * dak/dak.py: renamed from shell.py.  Update to support new source
650         layout.  Created init() and usage() functions.  Various
651         pylint-inspired cleanups.  Use daklib utils.warn() and
652         utils.fubar().  Change 'functionality' variable to only have
653         (command, description) and always invoke main() when running the
654         module.  Also support -h.
655
656 2006-05-17  James Troup  <james@nocrew.org>
657
658         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
659         imports of and calls to daklib modules.  Change script name
660         everywhere, i.e. in output, mails, comments and configuration tree
661         + filenames.  Also update references to other renamed scripts,
662         classes and templates.  Use '.dak' instead of '.katie' for the
663         queue info storage files.
664         (Renamed from tea)
665         * dak/check_overrides.py: likewise.  (Renamed from cindy)
666         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
667         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
668         * dak/clean_queues.py: likewise.  (Renamed from shania)
669         * dak/clean_suites.py: likewise.  (Renamed from rhona)
670         * dak/compare_suites.py: likewise.  (Renamed from andrea)
671         * dak/control_overrides.py: likewise.  (Renamed from natalie)
672         * dak/control_suite.py: likewise.  (Renamed from heidi)
673         * dak/cruft_report.py: likewise.  (Renamed from rene)
674         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
675         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
676         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
677         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
678         * dak/import_archive.py: likewise.  (Renamed from neve)
679         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
680         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
681         * dak/init_db.py: likewise. (Renamed from alyson)
682         * dak/init_dirs.py: likewise. (Renamed from rose)
683         * dak/ls.py: likewise. (Renamed from madison)
684         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
685         * dak/make_overrides.py: likewise.  (Renamed from denise)
686         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
687         * dak/mirror_split.py: likewise.  (Renamed from billie)
688         * dak/override.py: likewise.  (Renamed from alicia)
689         * dak/poolize.py: likewise.  (Renamed from catherine)
690         * dak/process_accepted.py: likewise.  (Renamed from kelly)
691         * dak/process_new.py: likewise.  (Renamed from lisa)
692         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
693         * dak/queue_report.py: likewise.  (Renamed from helena)
694         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
695         * dak/rm.py: likewise.  (Renamed from melanie)
696         * dak/security_install.py: likewise.  (Renamed from amber)
697         * dak/split_done.py: likewise.  (Renamed from nina)
698         * dak/stats.py: likewise.  (Renamed from saffron)
699         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
700         * daklib/database.py: likewise.  (Renamed from db_access)
701         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
702         * daklib/utils.py: likewise.
703
704         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
705         doesn't need to notify anyone" string.
706         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
707
708         * dak/process_accepted.py (init): drop -V/--version argument.
709         * dak/process_new.py (init): likewise.
710         * dak/process_unchecked.py (init): likewise.
711         * dak/reject_proposed_updates.py (init): likewise
712
713         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
714
715         * dak/stats.py: in usage() output change STAT to MODE.
716
717 2006-05-15  James Troup  <james@nocrew.org>
718
719         * dak/queue_report.py: remove unused encodings imports.
720
721         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
722         imports.  Initalize 'Cnf' as a global.
723         (BillieDB._internal_recurse): fix 'util.' typo.
724
725         * dak/import_ldap_fingerprints.py (main): drop unused time import and
726         commented out time check for LDAP search.
727
728 2005-12-16  Ryan Murray  <rmurray@debian.org>
729
730         * halle: add support for udebs
731         * kelly: stable_install: add support for binNMU versions
732
733 2005-12-05  Anthony Towns  <aj@erisian.com.au>
734
735         * katie.py: Move accept() autobuilding support into separate function 
736         (queue_build), and generalise to build different queues
737
738         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
739
740         * jennifer: Initial support for enabling embargo handling with the
741         Dinstall::SecurityQueueHandling option.
742         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
743         functions.
744
745         * katie.conf-security: Include embargo options
746         * katie.conf-security: Add Lock dir
747         * init_pool.sql-security: Create disembargo table
748         * init_pool.sql-security: Add constraints for disembargo table
749
750 2005-11-26  Anthony Towns  <aj@erisian.com.au>
751
752         * Merge of changes from klecker, by various people
753
754         * amber: special casing for not passing on amd64 and oldstable updates
755         * amber: security mirror triggering
756         * templates/amber.advisory: updated advisory structure
757         * apt.conf.buildd-security: update for sarge's release
758         * apt.conf-security: update for sarge's release
759         * cron.buildd-security: generalise suite support, update for sarge's release
760         * cron.daily-security: update for sarge's release, add udeb support
761         * vars-security: update for sarge's release
762         * katie.conf-security: update for sarge's release, add amd64 support,
763         update signing key
764
765         * docs/README.names, docs/README.quotes: include the additions
766
767 2005-11-25  Anthony Towns  <aj@erisian.com.au>
768
769         * Changed accepted_autobuild to queue_build everywhere.
770         * Add a queue table.
771         * Add a "queue" field in the queue_build table (currently always 0)
772
773         * jennifer: Restructure to make it easier to support special
774         purpose queues between unchecked and accepted.
775
776 2005-11-25  Anthony Towns  <aj@erisian.com.au>
777
778         * Finishing merge of changes from spohr, by various people still
779
780         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
781         works
782         * jennifer: Re-enable .deb ar format checking
783         * katie.py: Convert to +bX binNMU special casing
784         * rhona: Add some debug output when deleting binaries
785         * cron.daily: Add emilie
786         * cron.unchecked: Add lock files
787
788 2005-11-15  Anthony Towns  <aj@erisian.com.au>
789
790         * Merge of changes from spohr, by various people.
791
792         * tiffani: new script to do patches to Packages, Sources and Contents
793         files for quicker downloads.
794         * ziyi: update to authenticate tiffani generated files
795
796         * dak: new script to provide a single binary with less arbitrary names
797         for access to dak functionality.
798
799         * cindy: script implemented
800
801         * saffron: cope with suites that don't have a Priority specified
802         * heidi: use get_suite_id()
803         * denise: don't hardcode stable and unstable, or limit udebs to unstable
804         * denise: remove override munging for testing (now done by cindy)
805         * helena: expanded help, added new, sort and age options, and fancy headers
806         * jennifer: require description, add a reject for missing dsc file
807         * jennifer: change lock file
808         * kelly: propogation support
809         * lisa: honour accepted lock, use mtime not ctime, add override type_id
810         * madison: don't say "dep-retry"
811         * melanie: bug fix in output (missing %)
812         * natalie: cope with maintainer_override == None; add type_id for overrides
813         * nina: use mtime, not ctime
814
815         * katie.py: propogation bug fixes
816         * logging.py: add debugging support, use | as the logfile separator
817
818         * katie.conf: updated signing key (4F368D5D)
819         * katie.conf: changed lockfile to dinstall.lock
820         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
821         * katie.conf: added tiffani, cindy support
822         * katie.conf: updated to match 3.0r6 release
823         * katie.conf: updated to match sarge's release
824
825         * apt.conf: update for sarge's release
826         * apt.conf.stable: update for sarge's release
827         * apt.conf: bump daily max Contents change to 25MB from 12MB
828
829         * cron.daily: add accepted lock and invoke cindy  
830         * cron.daily: add daily.lock
831         * cron.daily: invoke tiffani
832         * cron.daily: rebuild accepted buildd stuff
833         * cron.daily: save rene-daily output on the web site
834         * cron.daily: disable billie
835         * cron.daily: add stats pr0n
836
837         * cron.hourly: invoke helena
838
839         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
840         * vars: add lockdir, add etch to copyoverrides
841         * Makefile: add -Ipostgresql/server to CXXFLAGS
842
843         * docs/: added README.quotes
844         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
845         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
846
847         * TODO: correct spelling of "conflicts"
848
849 2005-05-28  James Troup  <james@nocrew.org>
850
851         * helena (process_changes_files): use MTIME rather than CTIME (the
852         C's not for 'creation', stupid).
853         * lisa (sort_changes): likewise.
854
855         * jennifer (check_distributions): use has_key rather than an 'in'
856         test which doesn't work with python2.1.  [Probably by AJ]
857
858 2005-03-19  James Troup  <james@nocrew.org>
859
860         * rene (main): use Suite::<suite>::UdebComponents to determine
861         what components have udebs rather than assuming only 'main' does.
862
863 2005-03-18  James Troup  <james@nocrew.org>
864
865         * utils.py (rfc2047_encode): use codecs.lookup() rather than
866         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
867         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
868         <andrew@ubuntu.com>.
869
870 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
871
872         * helena: add -n/--new HTML output option and improved sorting
873         options.
874
875 2005-03-06  Ryan Murray  <rmurray@debian.org>
876
877         * shania(main): use Cnf::Dir::Reject instead of REJECT
878
879 2005-02-08  James Troup  <james@nocrew.org>
880
881         * rene (main): add partial NBS support by checking that binary
882         packages are built by their real parent and not some random
883         stranger.
884         (do_partial_nbs): likewise.
885
886 2005-01-18  James Troup  <james@nocrew.org>
887
888         * katie.py (Katie.build_summaries): avoid leaking file handle when
889         extracting package description.
890         (Katie.force_reject): remember and close each file descriptor we
891         use.
892         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
893         s/reason_file/reason_fd/ because it's a file descriptor.
894         (Katie.check_dsc_against_db): avoid leaking file handle whenever
895         invoking apt_pkg.md5sum().
896
897         * jennifer (check_deb_ar): new function: sanity check the ar
898         contents of a .deb.
899         (check_files): use it.
900         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
901         found.
902         (check_files): accept 'raw-installer' as an alias for 'byhand'.
903
904 2005-01-14  Anthony Towns  <ajt@debian.org>
905
906         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
907
908         * propup stuff (thanks to Andreas Barth)
909         * katie.conf: add stable MustBeOlderThan testing, add -security
910           propup
911         * jennifer: set distribution-version in .katie if propup may be needed
912         * katie.py: add propogation to cross_suite_version_check
913
914 2004-11-27  James Troup  <james@nocrew.org>
915
916         * nina: new script to split monolithic queue/done into date-based
917         hierarchy.
918
919         * rene (usage): document -s/--suite.
920         (add_nbs): use .setdefault().
921         (do_anais): likewise.
922         (do_nbs): don't set a string to "" and then += it.
923         (do_obsolete_source): new function - looks for obsolete source
924         packages (i.e source packages whose binary packages are ALL a)
925         claimed by someone else and b) newer when built from the other
926         source package).
927         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
928         and 'full' check modes.  Check for obsolete source packages.
929         linux-wlan-ng has been fixed - remove hideous bodge.
930
931         * jennifer (check_distributions): support 'reject' suite map type.
932
933         * utils.py (validate_changes_file_arg): s/file/filename/.
934         s/fatal/require_changes/.  If require_changes is -1, ignore errors
935         and return the .changes filename regardless.
936         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
937         (re_no_revision): don't escape '-', it's not a special character.
938         s/\*/+/ as there must be at least one non-dash character after the
939         dash in a revision.  Thanks to Christian Reis for noticing both of
940         these.
941
942         * ashley (main): pass require_changes=-1 to
943         utils.validate_changes_file_arg().
944
945         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
946         Team <debian-kernel@lists.debian.org>'.
947
948         * katie.py (Katie.in_override_p): fix .startswith() usage.
949
950         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
951         (Lauren::MoreInfoURL): update to 3.0r3.
952         (Suite::Stable::Version): likewise.
953         (Suite::Stable::Description): likewise.
954
955         * cron.daily: disable automatic task override generation.
956
957         * cindy (process): restrict "find all packages" queries by
958         component.  Respect Options["No-Action"].
959         (main): add -n/--no-action support.  Only run on unstable.  Rename
960         type to otype (pychecker).
961
962 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
963
964         * katie.conf (Billie::BasicTrees): add all architectures.
965         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
966         'everything'.
967
968         * cron.daily: Update a 'current' symlink when creating the
969         post-daily-cron-job database backup to aid mirroring to merkel.
970         Run billie.
971
972         * billie (BillieTarget.poolish_match): handle .udeb too.
973
974 2004-10-13  Ryan Murray  <rmurray@debian.org>
975
976         * amber (do_upload): Sort changes files in "katie" order so that
977           source always arrives before binary-only rebuilds
978         
979 2004-10-05  James Troup  <james@nocrew.org>
980
981         * jennifer (check_dsc): correct reject message on invalid
982         Maintainer field.
983
984 2004-09-20  James Troup  <james@nocrew.org>
985
986         * alicia: remove unused 'pwd' import.
987
988         * tea (check_override): underline suite name in output properly.
989
990         * rene (main): read a compressed Packages file.
991         * tea (validate_packages): likewise.
992
993         * katie.py (re_fdnic): add 'r' prefix.
994         (re_bin_only_nmu_of_mu): likewise.
995         (re_bin_only_nmu_of_nmu): likewise.
996
997         * madison (main): retrieve component information too and display
998         it if it's not 'main'.
999         * melanie (reverse_depends_check): likewise.
1000
1001         * utils.py (pp_dep): renamed...
1002         (pp_deps): ... to this.
1003         * jeri (check_dep): update calls to utils.pp_deps().
1004         * melanie (reverse_depends_check): likewise.
1005
1006         * jennifer (check_changes): move initalization of email variables
1007         from here...
1008         (process_it): ...to here as we no longer always run
1009         check_changes().  Don't bother to initialize
1010         changes["architecture"].
1011
1012         * denise (list): renamed to...
1013         (do_list): ...this to avoid name clash with builtin 'list'.
1014         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1015         for dictionaries.
1016         (main): Likewise for name clash avoidance and also
1017         s/override_type/suffix/.  Adjust call to do_list().
1018
1019 2004-09-01  Ryan Murray  <rmurray@debian.org>
1020
1021         * tea (check_files): check the pool/ directory instead of dists/
1022
1023 2004-08-04  James Troup  <james@nocrew.org>
1024
1025         * jenna (cleanup): use .setdefault() for dictionaries.
1026         (write_filelists): likewise.
1027
1028         (write_filelists): Use utils.split_args() not split() to split
1029         command line arguments.
1030         (stable_dislocation_p): likewise.
1031
1032         (write_filelists): Add support for mapping side of suite-based
1033         "Arch: all mapping".
1034         (do_da_do_da): ensure that if we're not doing all suites that we
1035         process enough to be able correct map arch: all packages.
1036
1037         * utils.py (cant_open_exc): correct exception string,
1038         s/read/open/, s/.$//.
1039
1040         * templates/amber.advisory: update to match reality a little
1041         better.
1042
1043         * melanie (reverse_depends_check): read Packages.gz rather than
1044         Packages.
1045
1046         * jennifer (check_files): check for unknown component before
1047         checking for NEWness.
1048
1049         * katie.py (Katie.in_override_p): use .startswith in favour of a
1050         slice.
1051
1052         * docs/melanie.1.sgml: document -R/--rdep-check.
1053
1054 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1055
1056         * billie (main): Make the verbatim lists include all the README
1057           elements.
1058         * docs/README.names: Add billie in (correcting oversight)
1059
1060 2004-07-01  James Troup  <james@nocrew.org>
1061
1062         * emilie (main): handle woody's case-sensitive python-ldap,
1063         s/keyfingerprint/keyFingerPrint/.
1064
1065 2004-06-25  James Troup  <james@nocrew.org>
1066
1067         * debian/control (Depends): add dpkg-dev since jennifer uses
1068         dpkg-source.
1069
1070 2004-06-24  James Troup  <james@nocrew.org>
1071
1072         * melanie (main): s/file/temp_file/ and close file handle before
1073         removing the temporary file.
1074         (main): don't warn about needing a --carbon-copy if in no-action
1075         mode.
1076
1077         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1078         (main): likewise.
1079
1080         * test/006/test.py (main): check bracketed email-only form.
1081
1082         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1083         email-only, strip the brackets so we don't end up with
1084         <<james@nocrew.org>>.
1085
1086 2004-06-20  James Troup  <james@nocrew.org>
1087
1088         * jennifer (process_it): only run check_changes() if
1089         check_signature() returns something.  (Likewise)
1090
1091         * utils.py (changes_compare): if there's no changes["version"] use
1092         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1093
1094 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1095
1096         * jeri (pp_dep): moved from here to ...
1097         * utils.py (pp_dep): here.
1098
1099         * melanie (main): add reverse dependency checking.
1100
1101 2004-06-17  James Troup  <james@nocrew.org>
1102
1103         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1104         * tea (check_dscs): likewise.
1105
1106         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1107         change from boolean to a variable with 3 possible values, 0 and 1
1108         as before, -1 means don't require a signature.  Makes
1109         parse_changes() useful for parsing arbitary RFC822-style files,
1110         e.g. 'Release' files.
1111         (check_signature): add support for detached signatures by passing
1112         the files the signature is for as an optional third argument.
1113         s/filename/sig_filename/g.  Add a fourth optional argument to
1114         choose the keyring(s) to use.  Don't os.path.basename() the
1115         sig_filename before checking it for taint.
1116         (re_taint_free): allow '/'.
1117
1118 2004-06-11  James Troup  <james@nocrew.org>
1119
1120         * tea (check_files): make override.unreadable optional.
1121         (validate_sources): close the Sources file handle.
1122
1123         * docs/README.first: clarify that 'alyson' and running
1124         add_constraints.sql by hand is something you only want to do if
1125         you're not running 'neve'.
1126
1127         * docs/README.config (Location::$LOCATION::Suites): document.
1128
1129         * db_access.py (do_query): also print out the result of the query.
1130
1131 2004-06-10  James Troup  <james@nocrew.org>
1132
1133         * katie.py (Katie.cross_suite_version_check): post-woody versions
1134         of python-apt's apt_pkg.VersionCompare() function apparently
1135         returns variable integers for less than or greater than results -
1136         update our result checking to match.
1137         * jenna (resolve_arch_all_vs_any): likewise.
1138         * charisma (main): likewise.
1139
1140 2004-06-09  James Troup  <james@nocrew.org>
1141
1142         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1143         valid_dsc_p and don't run check_source() if check_dsc() failed.
1144         (check_dsc): on fatal failures return 0 so check_source() isn't
1145         run (since it makes fatal assumptions about the presence of
1146         mandatory .dsc fields).  
1147         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1148
1149 2004-05-07  James Troup  <james@nocrew.org>
1150
1151         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1152         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1153
1154         * katie.conf (Dir::Override): remove duplicate definition.
1155
1156         * neve (get_or_set_files_id): add an always-NULL last_used column
1157         to output.
1158
1159 2004-04-27  James Troup  <james@nocrew.org>
1160
1161         * apt.conf-security (tree "dists/stable/updates"): add
1162         ExtraOverride - noticed by Joey Hess (#246050).
1163         (tree "dists/testing/updates"): likewise.
1164
1165 2004-04-20  James Troup  <james@nocrew.org>
1166
1167         * jennifer (check_files): check for existing .changes or .katie
1168         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1169         directories.
1170
1171 2004-04-19  James Troup  <james@nocrew.org>
1172
1173         * jennifer (check_source): handle failure to remove the temporary
1174          directory (used for source tree extraction) better, specifically:
1175          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1176          and try again and if that works, REJECT the package.
1177
1178 2004-04-17  James Troup  <james@nocrew.org>
1179
1180         * docs/madison.1.sgml: document -b/--binary-type,
1181         -g/--greaterorequal and -G/--greaterthan.
1182
1183         * madison (usage): -b/--binary-type only takes a single argument.
1184         Document -g/--greaterorequal and -G/--greaterthan.
1185         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1186
1187 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1188
1189         * billie: Cleaned up a load of comments, added /README.non-US to
1190           the verbatim matches list.
1191
1192 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1193
1194         * utils.py (size_type): Make it use real binary megabytes and
1195           kilobytes, instead of the marketing terms used before.
1196
1197 2004-04-07  James Troup  <james@nocrew.org>
1198
1199         * katie.py (Katie.check_dsc_against_db): in the case we're
1200         ignoring an identical-to-existing orig.tar.gz remember the path to
1201         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1202         location.path too to be able to do so.
1203
1204 2004-04-03  James Troup  <james@nocrew.org>
1205
1206         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1207         needed for new utils.rfc2047_encode() function.
1208
1209         * utils.py (re_parse_maintainer): allow whitespace inside the
1210         email address.
1211         (Error): new exception base class.
1212         (ParseMaintError): new exception class.
1213         (force_to_utf8): new function.
1214         (rfc2047_encode): likewise.
1215         (fix_maintainer): rework.  use force_to_utf8() to force name and
1216         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1217         return an rfc2047 value.  Validate the address to catch missing
1218         email addresses and (some) broken ones.
1219
1220         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1221         by adopting foo2047 return value.
1222         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1223         mandatory changes fields.  Promote changes and maintainer822 to
1224         mandatory fields.
1225         (Katie.update_subst): default maintainer2047 rather than
1226         maintainer822.  User foo2047 rather than foo822 when setting
1227         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1228
1229         * jennifer (check_changes): set default changes["maintainer2047"]
1230         and changes["changedby2047"] values rather than their 822
1231         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1232         to new utils.fix_maintainer() - reject on exception and adopt
1233         foo2047 return value.
1234         (check_dsc): if a mandatory field is missing don't do any further
1235         checks and as a result reduce paranoia about dsc[var] existence.
1236         Validate the maintainer field by calling new
1237         utils.fix_maintainer().
1238
1239         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1240         changes fields.  Promote maintainer822 to a mandatory changes
1241         field.  add "pool name" to files fields.
1242
1243         * test/006/test.py: new file - tests for new
1244         utils.fix_maintainer().
1245
1246 2004-04-01  James Troup  <james@nocrew.org>
1247
1248         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1249
1250         * jennifer (get_changelog_versions): create a symlink mirror of
1251         the source files in the temporary directory.
1252         (check_source): if check_dsc_against_db() couldn't find the
1253         orig.tar.gz bail out.
1254
1255         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1256         part of the upload store the path to it in pkg.orig_tar_gz and if
1257         it can't be found set pkg.orig_tar_gz to -1.
1258
1259         Explicitly return the second value as None in the (usual) case
1260         where we don't have to reprocess.  Remove obsolete diagnostic
1261         logs.
1262
1263         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1264
1265         * utils.py (temp_filename): new helper function that wraps around
1266         tempfile.mktemp().
1267
1268         * katie.py (Katie.do_reject): use it and don't import tempfile.
1269         * lisa (prod_maintainer): likewise.
1270         (edit_note): likewise.
1271         (edit_new): likewise.
1272         * lauren (reject): likewise.
1273         * melanie (main): likewise.
1274         * neve (do_sources): likewise.
1275         * rene (main): likewise.
1276         * tea (validate_sources): likewise.
1277
1278 2004-03-31  James Troup  <james@nocrew.org>
1279
1280         * tea (validate_sources): remove unused 's' temporary variable.
1281
1282 2004-03-15  James Troup  <james@nocrew.org>
1283
1284         * jennifer (check_dsc): check changes["architecture"] for
1285         source before we do anything else.
1286
1287 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1288
1289         * billie: Added
1290         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1291
1292 2004-03-12  James Troup  <james@nocrew.org>
1293
1294         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1295
1296         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1297
1298         * katie.py (Katie.accept): add support for DebBugs Version
1299         Tracking by writing out .versions (generated in jennifer's
1300         get_changelog_versions()) and .debinfo (mapping of binary ->
1301         source) files.
1302
1303         * ashley (main): add dsc["bts changelog"].
1304
1305         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1306
1307         * jennifer (check_diff): obsoleted by check_source(), removed.
1308         (check_source): new function: create a temporary directory and
1309         move into it and call get_changelog_versions().
1310         (get_changelog_versions): new function: extract the source package
1311         and optionally parse debian/changelog to obtain the version
1312         history for the BTS.
1313         (process_it): call check_source() rather than check_diff().
1314
1315 2004-03-08  James Troup  <james@nocrew.org>
1316
1317         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1318         listbar" rather than "if listbar.count(varfoo)"' change on
1319         2004-02-24.
1320
1321 2004-03-05  James Troup  <james@nocrew.org>
1322
1323         * alicia (main): don't warn about not closing bugs - we don't
1324         manage overrides through the BTS.
1325
1326 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1327
1328         * docs/README.config: lots of updates and corrections.
1329         * docs/README.first: likewise.
1330
1331         * docs/README.config: drop unused Dir::Queue::Root.
1332         * katie.conf-non-US: likewise.
1333         * katie.conf: likewise.
1334         * katie.conf-security: likewise.
1335
1336 2004-02-27  James Troup  <james@nocrew.org>
1337
1338         * rose (process_tree): use 'if var in [ list ]' rather than long
1339         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1340         Michlmayr.
1341
1342         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1343         suggested by Martin Michlmayr.
1344         * catherine (poolize): likewise.
1345         * charisma (main): likewise.
1346         * halle (check_changes): likewise.
1347         * heidi (main): likewise.
1348         (process_file): likewise.
1349         * kelly (install): likewise.
1350         (stable_install): likewise.
1351         * utils.py (fix_maintainer): likewise.
1352
1353         * apt.conf: add support for debian-installer in testing-proposed-updates.
1354         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1355         add - set to main.
1356
1357         * mkmaintainers: add "-T15" option to wget of non-US packages file
1358         so that we don't hang cron.daily if non-US is down.
1359
1360         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1361
1362         * templates/jennifer.bug-close: add Source and Source-Version
1363         pseudo-headers that may be used for BTS Version Tracking someday
1364         [ajt@].
1365
1366         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1367         (main): likewise.
1368
1369         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1370
1371 2004-02-25  James Troup  <james@nocrew.org>
1372
1373         * katie.conf (SuiteMappings): don't map testing-security to
1374         proposed-updates.
1375
1376 2004-02-24  James Troup  <james@nocrew.org>
1377
1378         * katie.py (Katie.__init__): remove unused 'values' field.
1379
1380         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1381         rather than 's.count(c) > 0'.
1382
1383         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1384         rather than "if listbar.count(varfoo)".
1385         * halle (check_joey): likewise.
1386         * jeri (check_joey): likewise.
1387         * lisa (edit_index): likewise.
1388         * jenna (stable_dislocation_p): likewise.
1389
1390         * jennifer (main): remove unused global 'nmu'.
1391
1392 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1393
1394         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1395           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1396           the dak tools close bugs.
1397
1398 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1399
1400         * katie.conf (Alicia): Added an Alicia section with email address
1401         * templates/alicia.bug-close: Added
1402         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1403         * alicia (main): Added a -d/--done argument
1404
1405 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1406
1407         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1408
1409 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1410
1411         * lisa (prod_maintainer): Added function to prod the maintainer without
1412           accepting or rejecting the package
1413         * templates/lisa.prod: Added this template for the prodding mail
1414
1415         * .cvsignore: Added neve-files which turns up in new installations
1416
1417 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1418
1419         * alicia (usage): Fixed usage message to offer section and priority
1420           as seperately optional arguments.
1421         * alicia (main): Added a % (arg) interpolation needed when only
1422           one of section or priority is provided and it cannot be found.
1423
1424 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1425
1426         * alicia: Added
1427         * docs/alicia.1.sgml: Added
1428         * docs/Makefile: Added alicia to the list of manpages to build
1429         * docs/README.names: Noted what alicia does
1430         * docs/README.first: Noted where alicia is useful
1431
1432 2004-01-21  James Troup  <james@nocrew.org>
1433
1434         * madison (main): add -b/--binary-type.
1435         (usage): likewise.
1436
1437         * denise (main): generate debian-installer overrides for testing
1438         too.
1439         * apt.conf: add support for debian-installer in testing.
1440         * katie.conf (Suite::Testing::UdebComponents): set to main.
1441
1442         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1443         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1444         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1445
1446         * utils.py (parse_changes): don't process data not inside the
1447         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1448         pointing this out.
1449         * test/005/test.py (main): new test to test for above.
1450
1451 2004-01-04  James Troup  <james@nocrew.org>
1452
1453         * jenna (write_filelists): correct typo, s/Components/Component/
1454         for Options.
1455
1456 2004-01-04  Ryan Murray  <rmurray@debian.org>
1457
1458         * cron.buildd: move update of overrides and Packages file...
1459         * cron.unchecked: to here.
1460         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1461         * katie.conf-security: likewise
1462
1463 2003-11-20  James Troup  <james@nocrew.org>
1464
1465         * jenna (main): don't use utils.try_with_debug(), it produces way
1466         too much output.
1467
1468         * halle (check_changes): don't error out if a .changes refers to a
1469         non-existent package, just warn and skip the file.
1470
1471         * docs/README.stable-point-release: mention halle and .changes
1472         obsoleted by removal through melanie.  Update for 3.0r2.
1473
1474         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1475         (Suite::Stable::Description): update for 3.0r2.
1476         (Lauren::MoreInfoURL): likewise.
1477         * katie.conf-non-US (Suite::Stable::Version): likewise.
1478         (Suite::Stable::Description): likewise.
1479         (Lauren::MoreInfoURL): likewise.
1480
1481         * apt.conf.stable (Default): don't define MaxContentsChange.
1482         * apt.conf.stable-non-US (Default): likewise.
1483
1484         * lauren (reject): hack to work around partial replacement of an
1485         upload, i.e. one or more binaries superseded by another source
1486         package.
1487
1488 2003-11-17  James Troup  <james@nocrew.org>
1489
1490         * pseudo-packages.maintainers: point installation-reports at
1491         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1492         request.
1493
1494         * utils.py (parse_changes): calculate the number of lines once
1495         with len() rather than max().
1496
1497         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1498         files, since check_dsc_against_db() deletes the .orig.tar.gz
1499         entry.
1500
1501 2003-11-13  Ryan Murray  <rmurray@debian.org>
1502
1503         * apt.conf: specify a src override file for debian-installer
1504
1505 2003-11-10  James Troup  <james@nocrew.org>
1506
1507         * fernanda.py (strip_pgp_signature): new function - strips PGP
1508         signature from a file and returns the modified contents of the
1509         file in a string.
1510         (display_changes): use it.
1511         (read_dsc): likewise.
1512
1513 2003-11-09  Ryan Murray  <rmurray@debian.org>
1514
1515         * cron.buildd: export accepted_autobuild table for unstable, and use
1516         it to generate the incoming Packages/Sources rather than having apt
1517         walk the directory.
1518         * apt.conf.buildd: use exported table from cron.buildd to generate
1519         Packages/Sources
1520
1521 2003-11-07  James Troup  <james@nocrew.org>
1522
1523         * kelly: import errno.
1524
1525         * katie.py (Katie.build_summaries): sort override disparities.
1526
1527         * kelly (install): set dsc_component based on the .dsc's component
1528         not a random binaries.
1529
1530 2003-10-29  James Troup  <james@nocrew.org>
1531
1532         * katie.py (Katie.build_summaries): don't assume changes["source"]
1533         exists since it might not.
1534
1535 2003-10-20  James Troup  <james@nocrew.org>
1536
1537         * pseudo-packages.maintainers: update security.d.o to use
1538         team@s.d.o at joy@'s request.
1539
1540 2003-10-17  James Troup  <james@nocrew.org>
1541
1542         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1543
1544 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1545
1546         * tea (chk_bd_process_dir): use .endswith rather than slice.
1547
1548 2003-10-14  James Troup  <james@nocrew.org>
1549
1550         * tea (check_build_depends): new function.
1551         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1552         in the archive.
1553         (main): update for new function.
1554         (usage): likewise.
1555
1556         * katie.py (Katie.do_reject): sanitize variable names,
1557         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1558         os.close() to outside if clause.
1559
1560         * jennifer (check_dsc): check build-depends and
1561         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1562         Fold the ARRAY check into the same code block and tidy up it's
1563         rejection message.
1564         (check_changes): ensure that the Files field is non-empty.
1565         Suggested by Santiago Vila <sanvila@unex.es>
1566         (check_changes): normalize reject messages.
1567         (check_dsc): instead of doing most of the checks inside a for loop
1568         and an if, find the dsc_filename in a short loop over files first
1569         and then do all the checks.  Add check for more than one .dsc in a
1570         .changes which we can't handle.  Normalize reject messages.
1571
1572 2003-10-13  James Troup  <james@nocrew.org>
1573
1574         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1575         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1576
1577         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1578         variables while iterating over 'files'.  Don't regenerate it when
1579         checking for source if source is mentioned.
1580
1581         Reject source only uploads if the config variable
1582         Dinstall::Reject::NoSourceOnly is set.
1583
1584 2003-10-03  James Troup  <james@nocrew.org>
1585
1586         * rene (main): add nasty hardcoded reference to debian-installer
1587         so we detect NBS .udebs.
1588
1589 2003-09-29  James Troup  <james@nocrew.org>
1590
1591         * apt.conf (old-proposed-updates): remove.
1592         * apt.conf-non-US (old-proposed-updates): likewise.
1593
1594 2003-09-24  James Troup  <james@nocrew.org>
1595
1596         * tea (check_files_not_symlinks): new function, ensure files
1597         mentioned in the database aren't symlinks.  Includes code to
1598         update any files that are like this to their real filenames +
1599         location; commented out by though.
1600         (usage): update for new function.
1601         (main): likewise.
1602
1603 2003-09-24  Anthony Towns  <ajt@debian.org>
1604
1605         * vars: external-overrides variable added
1606         * cron.daily: Update testing/unstable Task: overrides from joeyh
1607         managed external source.
1608
1609 2003-09-22  James Troup  <james@nocrew.org>
1610
1611         * kelly (install): if we can't move the .changes into queue/done,
1612         fail don't warn and carry on.  The old behaviour pre-dates NI and
1613         doesn't make much sense now since jennifer checks both
1614         queue/accepted and queue/done for any .changes files it's
1615         processing.
1616
1617         * utils.py (move): don't throw exceptions on existing files or
1618         can't overwrite, instead just fubar out.
1619
1620         * jennifer (check_dsc): also check Build-Depends-Indep for
1621         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1622
1623 2003-09-18  James Troup  <james@nocrew.org>
1624
1625         * katie.py (Katie.close_bugs): only log the bugs we've closed
1626         once.
1627
1628         * kelly (main): log as 'kelly', not 'katie'.
1629
1630 2003-09-16  James Troup  <james@nocrew.org>
1631
1632         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1633
1634         * jennifer (check_changes): normalize reject message for "changes
1635         file already exists" to be %s: <foo>.
1636         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1637         produced by broken dpkg-source in 1.10.11.  Tone down and
1638         normalize rejection message for incompatible 'Format' version
1639         numbers.
1640         (check_diff): likewise tone down and normalize.
1641
1642 2003-09-07  James Troup  <james@nocrew.org>
1643
1644         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1645         don't bomb out on bogus empty lines.
1646         (build_file_list): check for changes["files"] earlier.  use Dict
1647         to create files[name] dictionary.
1648         (send_mail): don't bother validating arguments.
1649         (check_signature): minor improvements to some of the rejection
1650         messages including listing the key id of the key that wasn't found
1651         in the keyring.
1652         (wrap): new function.
1653
1654         * tea: add new check 'validate-indices' that ensures all files
1655         mentioned in indices (Packages, Sources) files do in fact exist.
1656
1657         * catherine (poolize): use a local re_isadeb which handles legacy
1658         (i.e. no architecture) style .deb filenames.
1659
1660         * rosamund: new script.
1661
1662         * rhona (check_binaries): when checking for binary packages not in
1663         a suite, don't bother selecting files that already have a
1664         last_used date.
1665         (check_sources): likewise.
1666
1667         * rhona: change all SQL EXISTS sub-query clauses to use the
1668         postgres suggested convention of "SELECT 1 FROM".
1669         * andrea (main): likewise.
1670         * tea (check_override): likewise.
1671         * catherine (main): likewise.
1672
1673         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1674         entries and in other suites MustBeNewerThan's.
1675         (SuiteMappings): likewise
1676         * katie.conf-non-US: likewise.
1677         * katie.conf-security: likewise.
1678
1679         * apt.conf-security: remove oldstable.
1680         * apt.conf.stable: likewise.
1681         * apt.conf.stable-non-US: likewise.
1682         * cron.buildd-security: likewise.
1683         * cron.daily-security: likewise.
1684         * vars-security (suites): likewise.
1685         * wanna-build/trigger.daily: likewise.
1686
1687         * claire.py (clean_symlink): move...
1688         * utils.py (clean_symlink): here.
1689
1690         * claire.py (find_dislocated_stable): update accordingly.
1691
1692 2003-08-16  Anthony Towns  <ajt@debian.org>
1693
1694         * katie.py (source_exists): expand the list of distributions
1695         the source may exist in to include any suite that's mapped to
1696         the destination suite (even transitively (a->b->c)). This should
1697         unbreak binary uploads to *-proposed-updates.
1698
1699 2003-08-09  Randall Donald  <rdonald@debian.org>
1700
1701         * lisa (recheck): change changes["distribution"].keys() to
1702         Katie.pkg.changes...
1703
1704 2003-08-08  Randall Donald  <rdonald@debian.org>
1705
1706         * katie.py: only tag bugs as fixed-in-experimental for
1707         experimental uploads
1708
1709 2003-07-26  Anthony Towns  <ajt@debian.org>
1710
1711         * katie.py (source_exists): add an extra parameter to limit the
1712         distribution(s) the source must exist in.
1713         * kelly, lisa, jennifer: update to use the new source_exists
1714
1715 2003-07-15  Anthony Towns  <ajt@debian.org>
1716
1717         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1718         checksums for debian-installer stuff even when it's just a symlink to
1719         another suite
1720
1721         * apt.conf: add the FakeDI line
1722
1723 2003-06-09  James Troup  <james@nocrew.org>
1724
1725         * kelly (check): make sure the 'file' we're looking for in 'files'
1726         hasn't been deleted by katie.check_dsc_against_db().
1727
1728 2003-05-07  James Troup  <james@nocrew.org>
1729
1730         * helena (time_pp): fix s/years/year/ typo.
1731
1732 2003-04-29  James Troup  <james@nocrew.org>
1733
1734         * madison (usage): document -c/--component.
1735
1736         * madison (usage): Fix s/seperated/separated/.
1737         * melanie (usage): likewise.
1738         * jenna (usage): likewise.
1739
1740 2003-04-24  James Troup  <james@nocrew.org>
1741
1742         * cron.daily-non-US: if there's nothing for kelly to install, say
1743         so.
1744
1745         * jennifer (check_timestamps): print sys.exc_value as well as
1746         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1747         failed' with 'deb contents' to make it clearer what timestamp(s)
1748         are being checked.
1749
1750 2003-04-15  James Troup  <james@nocrew.org>
1751
1752         * cron.daily-non-US: only run kelly if there are some .changes
1753         files in accepted.
1754
1755         * rene: add -m/--mode argument which can be either daily (default)
1756         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1757         Various changes to make this possible including a poor attempt at
1758         splitting main() up a little.  De-hardcode suite numbers from SQL
1759         queries and return quietly from do_nviu() if experimental doesn't
1760         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1761         is.
1762
1763         * debian/control (Depends): remove python-zlib as it's obsolete.
1764
1765         * charisma (main): don't slice the \n off strings when we're
1766         strip()-ing it anyway.
1767         * heidi (set_suite): likewise.
1768         (process_file): likewise.
1769         * natalie (process_file): likewise.
1770
1771 2003-04-08  James Troup  <james@nocrew.org>
1772
1773         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1774         slow queries by using one LIKE '%foo%' and then matching against
1775         '%s' or '/%s$' in python.  Also only join location when we need it
1776         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1777         query, so 6s for each sourceful package.
1778
1779         * cron.daily: invoke rene and send the report to ftpmaster.
1780         * cron.daily-non-US: likewise.
1781
1782 2003-03-14  James Troup  <james@nocrew.org>
1783
1784         * utils.py (send_mail): default filename to blank.
1785         * amber (make_advisory): adapt.
1786         * jennifer (acknowledge_new): likewise.
1787         * katie.py (Katie.close_bugs): likewise.
1788         (Katie.announce): likewise.
1789         (Katie.accept): likewise.
1790         (Katie.check_override): likewise.
1791         (Katie.do_reject): likewise.
1792         * kelly (do_reject): likewise.
1793         (stable_install): likewise.
1794         * lisa (do_bxa_notification): likewise.
1795         * lauren (reject): likewise.
1796         * melanie (main): likewise.
1797
1798         * rene (add_nbs): check any NBS packages against unstable to see
1799         if they haven't been removed already.
1800
1801         * templates/katie.rejected: remove paragraph about rejected files
1802         since they're o-rwx due to c-i-m and the uploader can't do
1803         anything about them and shania will take care of them anyway.
1804
1805         * madison (usage): update usage example to use comma seperation.
1806         * melanie (usage): likewise.
1807
1808         * utils.py (split_args): new function; splits command line
1809         arguments either by space or comma (whichever is used).  Also has
1810         optional-but-default DWIM spurious space detection to avoid
1811         'command -a i386, m68k' problems.
1812         (parse_args): use it.
1813         * melanie (main): likewise.
1814
1815         * melanie (main): force the admin to tell someone if we're not
1816         doing a rene-led removal (or closing a bug, which counts as
1817         telling someone).
1818
1819 2003-03-05  James Troup  <james@nocrew.org>
1820
1821         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1822         and python sections.
1823         * katie.conf-security (Section): likewise.
1824
1825         * add_constraints.sql: add uid and uid_id_seq to grants.
1826
1827         * lisa (determine_new): also warn about adding overrides to
1828         oldstable.
1829
1830         * madison (main): make the -S/--source-and-binary query obey
1831         -s/--suite restrictions.
1832
1833 2003-03-03  James Troup  <james@nocrew.org>
1834
1835         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1836         exists, warn the user that our output might seem strange.  (People
1837         get confused by multiple versions in a suite which happens
1838         post-kelly but pre-jenna.)
1839
1840 2003-02-21  James Troup  <james@nocrew.org>
1841
1842         * kelly (main): we don't need to worry about StableRejector.
1843
1844         * melanie (main): sort versions with apt_pkg.VersionCompare()
1845         prior to output.
1846
1847         * lauren: new script to manually reject packages from
1848         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1849
1850 2003-02-20  James Troup  <james@nocrew.org>
1851
1852         * kelly (init): remove unused -m/--manual-reject argument.
1853
1854         * katie.py (Katie.force_reject): renamed from force_move to make
1855         it more explicit what this function does.
1856         (Katie.do_reject): update to match.
1857
1858         * utils.py (prefix_multi_line_string): add an optional argument
1859         include_blank_lines which defaults to 0.  If non-zero, blank lines
1860         will be includes in the output.
1861
1862         * katie.py (Katie.do_reject): don't add leading space to each line
1863         of the reject message.  Include blank lines when showing the
1864         message to the user.
1865
1866 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1867
1868         * utils.py (fix_maintainer): replace pointless re.sub() with
1869         simple string format.
1870
1871 2003-02-11  James Troup  <james@nocrew.org>
1872
1873         * lisa (edit_overrides): only strip-to-one-char and upper-case
1874         non-numeric answers.  Fixes editing of items with indices >= 10;
1875         noticed by Randall.
1876         (edit_overrides): correct order of arguments to "not a valid
1877         index" error message.
1878
1879         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1880         remove_duplicate_versions(); thanks to aj for the initial
1881         diagnosis.
1882         (remove_duplicate_versions): correct how we return
1883         dominant_versions.
1884         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1885         a tuple rather than just a tuple.
1886
1887 2003-02-10  James Troup  <james@nocrew.org>
1888
1889         * emilie: new script - sync fingerprint and uid tables with a
1890         debian.org LDAP DB.
1891
1892         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1893         in 'fingerprint'.
1894
1895         * db_access.py (get_or_set_uid_id): new function.
1896
1897         * jennifer (main): update locking to a) not used FCNTL (deprecated
1898         in python >= 2.2) and b) acknowledge upstream's broken
1899         implementation of lockf (see Debian bug #74777), c) try to acquire
1900         the lock non-blocking.
1901         * kelly (main): likewise.
1902
1903         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1904
1905         * madison (main): only append the package to new_packages if it's
1906         not already in there; fixes -S/--source-and-binary for cases where
1907         the source builds a binary package of the same name.
1908
1909 2003-02-10  Anthony Towns  <ajt@debian.org>
1910
1911         * madison (main): use explicit JOIN syntax for
1912         -S/--source-and-binary queries to reduce the query's runtime from
1913         >10 seconds to negligible.
1914
1915 2003-02-08  James Troup  <james@nocrew.org>
1916
1917         * rene (main): in the NVIU output, append items to lists, not
1918         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1919         should be removed.
1920
1921 2003-02-07  James Troup  <james@nocrew.org>
1922
1923         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1924         Sources [aj].
1925
1926         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1927         O. Benham/Adam Heath/.
1928
1929         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1930         (Suite::Stable::Description): update for 3.0r1a.
1931         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1932
1933         * utils.py (gpgv_get_status_output): rename from
1934         get_status_output().
1935
1936         * neve (check_signature): use gpgv_get_status_output and Dict from
1937         utils().  Add missing newline to error message about duplicate tokens.
1938
1939         * saffron (per_arch_space_use): also print space used by source.
1940         (output_format): correct string.join() invocation.
1941
1942         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1943
1944 2003-02-04  James Troup  <james@nocrew.org>
1945
1946         * cron.buildd: correct generation of Packages/Sources and grep out
1947         non-US/non-free as well as non-free.
1948
1949 2003-02-03  Ryan Murray  <rmurray@debian.org>
1950
1951         * cron.buildd: generate quinn-diff output with full Packages/Sources
1952           files to get out-of-date vs. uncompiled right.
1953         * apt.conf.buildd: no longer generate uncompressed files, as they
1954           are generated in cron.buildd instead
1955         * add -i option to quinn-diff to ignore binary-all packages
1956         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1957           aren't in the packages file, the arch that uploaded them will build
1958           them anyways...
1959
1960 2003-01-30  James Troup  <james@nocrew.org>
1961
1962         * rene (main): only print suggested melanie command when there's
1963         some NBS to remove.
1964
1965 2003-01-30  Ryan Murray  <rmurray@debian.org>
1966
1967         * cron.buildd: fix incorrectly inverted lockfile check
1968
1969 2003-01-29  Ryan Murray  <rmurray@debian.org>
1970
1971         * cron.buildd: generate override.sid.all3.src
1972         * apt.conf.buildd: use generated override.sid.all3.src
1973
1974 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1975
1976         * utils.py (get_status_output): moved from jennifer.
1977         (Dict): likewise.
1978         (check_signature): likewise.
1979
1980         * jennifer (get_status_output): moved to utils.py.
1981         (Dict): likewise.
1982         (check_signature): likewise.
1983
1984         * utils.py (check_signature): add an argument to specifiy which
1985         function to call when an error was found.
1986         (check_signature): document this function better.
1987
1988         * jennifer (check_files): pass the reject function as an argument
1989         to utils.check_signature.
1990         (process_it): likewise.
1991
1992 2003-01-20  James Troup  <james@nocrew.org>
1993
1994         * rene (main): lots of changes to improve the output and make it
1995         more useful.
1996
1997         * katie.py (Katie.check_override): make the override messages
1998         clearer (hopefully).
1999
2000 2002-12-26  James Troup  <james@nocrew.org>
2001
2002         * ziyi (usage): document the ability to pass suite(s) as
2003         argument(s).
2004         (main): read apt.conf after checking for -h/--help.
2005
2006         * tea (main): take the check to run as an argument.
2007
2008         * saffron.R: R script to graph daily install runs.
2009
2010         * saffron: new script; various stats functions.
2011
2012         * rhona (main): connect to the database after checking for -h/--help.
2013
2014         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2015
2016         * melanie (main): sort versions with utils.arch_compare_sw().
2017
2018         * madison (usage): alphabetize order of options.
2019         * melanie (usage): likewise.
2020
2021         * kelly (usage): fix usage short description (we aren't dinstall).
2022
2023         * julia (usage): fix usage description and alphabetize order of
2024         options.
2025
2026         * jeri (usage): fix usage short description.
2027
2028         * jennifer (main): move --help and --version checks from here...
2029         (init): to here so that they work with an empty katie.conf.
2030         * kelly: likewise.
2031
2032         * alyson (usage): new function.
2033         (main): use it.
2034         * andrea: likewise.
2035         * ashley: likewise.
2036         * cindy: likewise.
2037         * denise: likewise.
2038         * helena: likewise.
2039         * neve: likewise.
2040         * rene: likewise.
2041         * rose: likewise.
2042         * tea: likewise.
2043
2044         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2045         entry that caused tasks to be omitted from 3.0r1.
2046
2047 2002-12-10  James Troup  <james@nocrew.org>
2048
2049         * jennifer (check_files): sanity check the Depends field to ensure
2050         it's non-empty if present since apt chokes on an empty one.
2051         Thanks to Ryan Murray for the idea.
2052
2053 2002-12-08  James Troup  <james@nocrew.org>
2054
2055         * katie.conf-security (Helena::Directories): new; include accepted
2056         in addition to byhand and new.
2057
2058         * helena (process_changes_files): use utils.arch_compare_sw().
2059         Justify things based on the longest [package, version,
2060         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2061         the commas in architecture and version lists for the same reason.
2062         (main): make directories we process configurable through
2063         Helena::Directories in the config file; if that doesn't exist
2064         default to the old hardcoded values (byhand & new).
2065
2066         * utils.py (arch_compare_sw): moved here from madison.
2067         * madison (main): adjust to compensate.
2068
2069 2002-12-06  James Troup  <james@nocrew.org>
2070
2071         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2072         right filename.
2073
2074 2002-12-05  James Troup  <james@nocrew.org>
2075
2076         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2077
2078 2002-11-28  Randall Donald  <rdonald@debian.org>
2079
2080         * fernanda.py (read_control): fix typo of 'Architecture'.
2081
2082 2002-11-26  James Troup  <james@nocrew.org>
2083
2084         * lisa (check_pkg): call less with '-R' so we see the colour from
2085         Randall's fernanda changes.
2086
2087         * neve (process_sources): if Directory points to a legacy location
2088         but the .dsc isn't there; assume it's broken and look in the pool.
2089         (update_section): new, borroed from alyson.
2090         (do_da_do_da): use it.
2091         (process_packages): add suite_it to the cache key used for
2092         arch_all_cache since otherwise we only add a package to the first
2093         suite it's in and ignore any subsequent ones.
2094
2095         * katie.conf-non-US (Location): fixed to reflect reality (all
2096         suites, except old-proposed-updates (which is legacy-mixed)) are
2097         pool.
2098
2099         * utils.py (try_with_debug): wrapper for print_exc().
2100         * jenna (main): use it.
2101         * neve (main): likewise.
2102
2103 2002-11-25  Randall Donald  <rdonald@debian.org>
2104
2105         * fernanda.py (main): added -R to less command line for raw control
2106         character support to print colours
2107         (check_deb): Instead of running dpkg -I on deb file, call
2108         output_deb_info, the new colourized control reporter.
2109         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2110         of printing out each .dsc line.
2111         (output_deb_info): new function. Outputs each key/value pair from
2112         read_control except in special cases where we highlight section,
2113         maintainer, architecture, depends and recommends.
2114         (create_depends_string): new function. Takes Depends tree and looks
2115         up it's compontent via projectb db, colourizes and constructs a
2116         depends string in original order.
2117         (read_dsc): new function. reads and parses .dsc info via
2118         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2119         colourized.
2120         (read_control): new function. reads and parses control info via
2121         apt_pkg. Depends and Recommends are split in to list structures,
2122         Section and Architecture are colourized. Maintainer is colourized
2123         if it has a localhost.localdomain address.
2124         (split_depends): new function. Creates a list of lists of
2125         dictionaries of depends (package,version relation). Top list is
2126         colected from comma delimited items. Sub lists are | delimited.
2127         (get_comma_list): new function. splits string input among commas
2128         (get_or_list): new function. splits string input among | delimiters
2129         (get_depends_parts): new function. Creates dictionary of package name
2130         and version relation from dependancy string.
2131         Colours for section and depends are per component. Unfound depends
2132         are in bold. Lookups using version info is not supported yet.
2133
2134 2002-11-22  James Troup  <james@nocrew.org>
2135
2136         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2137         'udmsearch'.
2138
2139         * amber (make_advisory): string.atol() is deprecated and hasn't
2140         been ported to string methods.  Use long() instead.
2141
2142         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2143         creating the database since we'll fail badly if it's created with
2144         e.g. UNICODE encoding.
2145
2146         * rose (main): AptCnf is a global.
2147
2148         * neve (get_location_path): new function determines the location
2149         from the the first (left-most) directory of a Filename/Directory.
2150         (process_sources): don't need 'location' anymore.  Use
2151         utils.warn().  Use the Directory: field for each package to find
2152         the .dsc.  Use get_location_path() to determine the location for
2153         each .dsc.
2154         (process_packages): do't need 'location' anymore.  Use
2155         utils.warn().  Use get_location_path().
2156         (do_sources): don't need 'location', drop 'prefix' in favour of
2157         being told the full path to the Sources file, like
2158         process_packages().
2159         (do_da_do_da): main() renamed, so that main can call us in a
2160         try/except.  Adapt for the changes in do_sources() and
2161         process_packages() above.  Assume Sources and Packages file are in
2162         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2163
2164         * katie.conf-security (Location): fixed to reflect reality (all
2165         suites are pool, not legacy).
2166
2167         * utils.py (print_exc): more useful (i.e. much more verbose)
2168         traceback; a recipe from the Python cookbook.
2169         * jenna (main): use it.
2170         * neve (main): likewise.
2171
2172 2002-11-19  James Troup  <james@nocrew.org>
2173
2174         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2175         handling which was FUBAR for multi-suite uploads.  Now we just
2176         make a dictionary of destinations to copy to and iterate over
2177         those.
2178
2179         * fernanda.py (check_deb): run linda as well as lintian.
2180
2181 2002-10-21  James Troup  <james@nocrew.org>
2182
2183         * melanie (main): change X-Melanie to X-Katie and prefix it with
2184         'melanie '.
2185
2186         * lisa (main): prefix X-Katie with 'lisa '.
2187
2188         * jennifer (clean_holding): fix typo in string method changes;
2189         s/file.find(file/file.find(/.
2190
2191         * cron.daily: invoke helena and send the report to ftpmaster.
2192         * cron.daily-non-US: likewise.
2193
2194 2002-10-16  James Troup  <james@nocrew.org>
2195
2196         * kelly (check): call reject() with a blank prefix when parsing
2197         the return of check_dsc_against_db() since it does its own
2198         prefix-ing.
2199
2200         * rose: new script; only handles directory creation initally.
2201
2202         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2203         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2204
2205 2002-10-06  James Troup  <james@nocrew.org>
2206
2207         * rene (main): remove bogus argument handling.
2208
2209         * kelly: katie, renamed.
2210         * cron.daily: adapt for katie being renamed to kelly.
2211         * cron.daily-non-US: likewise.
2212         * amber (main): likewise.
2213
2214         * Changes for python 2.1.
2215
2216         * kelly: time.strftime no longer requires a second argument of
2217         "time.localtime(time.time())".
2218         * logging.py: likewise.
2219         * rhona: likewise.
2220         * shania (init): likewise.
2221
2222         * amber: use augmented assignment.
2223         * catherine (poolize): likewise.
2224         * claire.py (fix_component_section): likewise.
2225         * halle (check_changes): likewise.
2226         * helena: likewise.
2227         * jenna: likewise.
2228         * jennifer: likewise.
2229         * jeri: likewise.
2230         * katie.py: likewise.
2231         * kelly: likewise.
2232         * lisa: likewise.
2233         * madison (main): likewise.
2234         * melanie: likewise.
2235         * natalie: likewise.
2236         * neve: likewise.
2237         * rhona: likewise.
2238         * tea: likewise.
2239         * utils.py: likewise.
2240         * ziyi: likewise.
2241
2242         * amber: use .endswith.
2243         * fernanda.py: likewise.
2244         * halle (main): likewise.
2245         * jennifer: likewise.
2246         * jeri: likewise.
2247         * katie.py: likewise.
2248         * kelly: likewise.
2249         * lisa: likewise.
2250         * neve: likewise.
2251         * shania (main): likewise.
2252         * utils.py: likewise.
2253
2254         * alyson: use string methods.
2255         * amber: likewise.
2256         * andrea: likewise.
2257         * ashley: likewise.
2258         * catherine: likewise.
2259         * charisma: likewise.
2260         * claire.py: likewise.
2261         * db_access.py: likewise.
2262         * denise: likewise.
2263         * halle: likewise.
2264         * heidi: likewise.
2265         * helena: likewise.
2266         * jenna: likewise.
2267         * jennifer: likewise.
2268         * jeri: likewise.
2269         * julia: likewise.
2270         * katie.py: likewise.
2271         * kelly: likewise.
2272         * lisa: likewise.
2273         * logging.py: likewise.
2274         * madison: likewise.
2275         * melanie: likewise.
2276         * natalie: likewise.
2277         * neve: likewise.
2278         * rene: likewise.
2279         * tea: likewise.
2280         * utils.py: likewise.
2281         * ziyi: likewise.
2282
2283 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2284
2285         * utils.py (parse_changes): use <string>.startswith() rather than
2286         string.find().
2287
2288 2002-08-27  Anthony Towns  <ajt@debian.org>
2289
2290         * katie.py (in_override_p): when searching for a source override,
2291         and the dsc query misses, search for both udeb and deb overrides
2292         as well. Should fix the UNACCEPT issues with udebs.
2293
2294 2002-08-24  James Troup  <james@nocrew.org>
2295
2296         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2297         source+binary package finding code which was causing severe
2298         performance degradation with postgres 7.2.
2299
2300 2002-08-14  James Troup  <james@nocrew.org>
2301
2302         * julia (main): use the pwd.getpwall() to get system user info
2303         rather than trying to read a password file.  Add a -n/--no-action
2304         option.
2305
2306         * cron.hourly: julia no longer takes any arguments.
2307         * cron.hourly-non-US: likewise.
2308
2309 2002-08-07  James Troup  <james@nocrew.org>
2310
2311         * katie (install): handle multi-suite uploads when CopyChanges
2312         and/or CopyKatie are in use, ensuring we only copy stuff once.
2313
2314 2002-08-01  Ryan Murray  <rmurray@debian.org>
2315
2316         * wanna-build/trigger.daily: initial commit, with locking
2317         * cron.buildd: add locking against daily run
2318
2319 2002-07-30  James Troup  <james@nocrew.org>
2320
2321         * melanie (main): readd creation of suite_ids_list so melanie is
2322         remotely useful again.
2323
2324         * katie.conf: adopt for woody release; diable
2325         StableDislocationSupport, add oldstable, adjust other suites and
2326         mappings, fix up location.
2327         * katie.conf-non-US: likewise.
2328         * katie.conf-security: likewise.
2329
2330         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2331         stable.
2332         * apt.conf.stable-non-US: likewise.
2333
2334         * apt.conf-security: adapt for woody release; adding oldstable,
2335         oldstable, adjust stable and testing.
2336         * cron.daily-security: likewise.
2337         * cron.buildd-security: likewise.
2338
2339         * apt.conf: adapt for woody release; rename woody-proposed-updates
2340         to testing-proposed-updates and proposed-updates to
2341         old-proposed-updates.
2342         * apt.conf-non-US: likewise.
2343
2344         * vars-non-US (copyoverrides): add sarge.
2345         * vars (copyoverrides): likewise.
2346
2347         * vars-security (suites): add oldstable.
2348
2349 2002-07-22  Ryan Murray  <rmurray@debian.org>
2350
2351         * apt.conf.security-buildd: use suite codenames instead of
2352           distnames.
2353
2354 2002-07-16  James Troup  <james@nocrew.org>
2355
2356         * denise (main): fix filenames for testing override files.
2357
2358 2002-07-14  James Troup  <james@nocrew.org>
2359
2360         * jennifer (process_it): call check_md5sums later so we can check
2361         files in the .dsc too
2362         (check_md5sums): check files in the .dsc too.  Check both md5sum
2363         and size.
2364
2365         * melanie (main): use parse_args() and join_with_commas_and() from
2366         utils.  If there's nothing to do, say so and exit, don't ask for
2367         confirmation etc.
2368
2369         * amber (join_with_commas_and): moved from here to ...
2370         * utils.py (join_with_commas_and): here.
2371
2372 2002-07-13  James Troup  <james@nocrew.org>
2373
2374         * madison (main): use parse_args() from utils.  Support
2375         -c/--component.
2376
2377         * jenna (parse_args): moved from here to ...
2378         * utils.py (parse_args): here.
2379
2380         * katie.conf (Architectures): minor corrections to the description
2381         for arm, mips and mipsel.
2382         * katie.conf-non-US (Architectures): likewise.
2383         * katie.conf-security (Architectures): likewise.
2384
2385         * cron.daily-security: use natalie's new -a/--add functionality to
2386         flesh out the security overrides.
2387
2388 2002-07-12  James Troup  <james@nocrew.org>
2389
2390         * cron.buildd (ARCHS): add arm.
2391
2392         * katie.conf: 2.2r7 was released.
2393         * katie.conf-non-US: likewise.
2394
2395         * utils.py (parse_changes): handle a multi-line field with no
2396         starting line.
2397
2398 2002-06-25  James Troup  <james@nocrew.org>
2399
2400         * templates/amber.advisory (To): add missing email address since
2401         __WHOAMI__ is only a name.
2402
2403         * katie.conf-security (Melane::LogFile): correct to go somewhere
2404         katie has write access to.
2405         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2406         Testing.
2407
2408         * natalie: add support for -a/-add which adds packages only
2409         (ignoring changes and deletions).
2410
2411         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2412         use FindB, not get.
2413
2414 2002-06-22  James Troup  <james@nocrew.org>
2415
2416         * jennifer (check_files): validate the package name and version
2417         field.  If 'Package', 'Version' or 'Architecture' are missing,
2418         don't try any further checks.
2419         (check_dsc): likewise.
2420
2421         * utils.py (re_taint_free): add '~' as a valid character.
2422
2423 2002-06-20  Anthony Towns  <ajt@debian.org>
2424
2425         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2426
2427 2002-06-09  James Troup  <james@nocrew.org>
2428
2429         * jennifer (check_files): reduce useless code.
2430
2431         * cron.daily-security: run symlinks -dr on $ftpdir.
2432
2433         * vars-security (ftpdir): add.
2434
2435 2002-06-08  James Troup  <james@nocrew.org>
2436
2437         * neve (update_override_type): transaction is handled higher up in
2438         main().
2439         (update_priority): likewise.
2440         (process_sources): remove code that makes testing a duplicate of
2441         stable.
2442         (process_packages): likewise.
2443
2444         * templates/amber.advisory: add missing mail headers.
2445
2446         * cron.daily-security: also call apt-ftparchive clean for
2447         apt.conf.buildd-security.
2448         * cron.weekly: likewise.
2449
2450         * amber (do_upload): write out a list of source packages (and
2451         their version) uploaded for testing.
2452         (make_advisory): add more Subst mappings for the mail headers.
2453         (spawn): check for suspicious characters in the command and abort
2454         if their found.
2455
2456 2002-06-07  James Troup  <james@nocrew.org>
2457
2458         * ziyi (main): remove the 'nonus'/'security' hacks and use
2459         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2460         the lower level Release files, even if they don't exist.  fubar
2461         out if we can't open a lower level Release file for writing.
2462
2463         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2464         ziyi.
2465         * katie.conf-security (Dinstall): likewise.
2466
2467         * amber (do_upload): renamed from get_file_list().  Determine the
2468         upload host from the original component.
2469         (init): Add a -n/--no-action option.  Fix how we get changes_files
2470         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2471         sys.argv).  Add an Options global.
2472         (make_advisory): support -n/--no-action.
2473         (spawn): likewise.
2474         (main): likewise.
2475         (usage): document -n/--no-action.
2476
2477         * cron.buildd-security: fix path to Packages-arch-specific in
2478         quinn-diff invocation.
2479
2480         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2481         to proper suite names (i.e. stable, testing) rather than codenames
2482         (potato, woody).
2483         (Dinstall::DefaultSuite): likewise.
2484         (Suite): likewise.
2485         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2486         * vars-security (suites): likewise.
2487         * apt.conf-security: likewise.
2488
2489         * katie.conf-security (Component): add "updates/" prefix.
2490         (Suite::*::Components): likewise.
2491         (ComponentMappings): new; map all {ftp-master,non-US} components
2492         -> updates/<foo>.
2493
2494         * katie.conf-security (Natalie): removed; the options have
2495         defaults and ComponentPosition is used by alyson which doesn't
2496         work on security.d.o.
2497         (Amber): replace UploadHost and UploadDir with ComponentMappings
2498         which is a mapping of components -> URI.
2499         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2500         (SuiteMappings): use "silent-map" in preference to "map".
2501
2502         * cron.unchecked-security: fix call to cron.buildd-security.
2503
2504         * cron.daily-security: map local suite (stable) -> override suite
2505         (potato) when fixing overrides.  Correct component in natalie call
2506         to take into account "updates/" prefix.  Fix cut'n'waste in
2507         override.$dist.all3 generation, the old files weren't being
2508         removed, so they were endlessly growing.
2509
2510         * neve (main): don't use .Find for the CodeName since we require
2511         it.  Location::*::Suites is a ValueList.
2512         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2513         out on expired keys, just warn.
2514         (update_override_type): new function; lifted from alyson.
2515         (update_priority): likewise.
2516         (main): use update_{override_type,priority}().
2517
2518         * jennifer (check_distributions): remove redunant test for
2519         SuiteMappings; ValueList("does-not-exist") returns [] which is
2520         fine.  Add support for a "silent-map" type which doesn't warn
2521         about the mapping to the user.
2522         (check_files): add support for ComponentMappings, similar to
2523         SuiteMappings, but there's no type, just a source and a
2524         destination and the original component is stored in "original
2525         component".
2526         * katie.py (Katie.dump_vars): add "original component" as an
2527         optionsal files[file] dump variable.
2528
2529         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2530         query.  Add support for section-less legacy locations like current
2531         security.debian.org through YetAnotherConfigBoolean
2532         'LegacyStableHasNoSections'.
2533         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2534
2535         * utils.py (real_arch): moved here from ziyi.
2536         * ziyi (real_arch): moved to utils.py.
2537         * ziyi (main): likewise.
2538
2539         * claire.py (find_dislocated_stable): use real_arch() with
2540         filter() to strip out source and all.
2541         * neve (main): likewise.
2542         * rene (main): likewise.
2543         * jeri (parse_packages): likewise.
2544
2545 2002-06-06  James Troup  <james@nocrew.org>
2546
2547         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2548         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2549         doing.
2550
2551 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2552
2553         * jeri (check_joey): check if the line contains two elements
2554         before accessing the second.  Also, strip trailing spaces as well
2555         as the newline.
2556         * halle (check_joey): likewise.
2557
2558 2002-06-05  James Troup  <james@nocrew.org>
2559
2560         * cron.unchecked-security: new file; like cron.unchecked but if
2561         there's nothing to do exit so we don't call cron.buildd-security.
2562
2563         * apt.conf.buildd-security: new file.
2564
2565         * vars (archs): alphabetize.
2566         * vars-non-US (archs): likewise.
2567
2568         * vars-security: add unchecked.
2569
2570         * madison (main): reduce rather bizarrely verbose and purposeless
2571         code to print arches to a simple string.join.
2572
2573         * katie.conf (Suites::Unstable): add UdebComponents, a new
2574         valuelist of suites, used by jenna to flesh out the list of
2575         <suite>_main-debian-installer-binary-<arch>.list files generated.
2576         (Dinstall): add StableDislocationSupport, a new boolean used by
2577         jenna to enable or disable stable dislocation support
2578         (i.e. claire), as true.
2579
2580         * katie.conf (Dinstall): add StableDislocationSupport, a new
2581         boolean used by jenna to enable or disable stable dislocation
2582         support (i.e. claire), as true.
2583         * katie.conf-non-US: likewise.
2584         * katie.conf-security: likewise.
2585
2586         * cron.daily-security: generate .all3 overrides for the buildd
2587         support.  Freshen a local copy of Packages-arch-specific from
2588         buildd.debian.org.
2589
2590         * claire.py (find_dislocated_stable): disable the support for
2591         files in legacy-mixed locations since none of the Debian archives
2592         have any anymore.
2593
2594         * helena: new script; produces a report on NEW and BYHAND
2595         packages.
2596
2597         * jenna: rewritten from scratch to fix speed problems.  Run time
2598         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2599         minutes, 105 seconds are the monster query and 70 odd seconds is
2600         claire.
2601
2602         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2603         irrelevant.
2604
2605 2002-06-05  Ryan Murray  <rmurray@debian.org>
2606
2607         * cron.buildd-security: new file.
2608
2609 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2610
2611         * denise (list): take a file argument and use it.
2612         (main): don't abuse sys.stdout, just write to the file.
2613
2614         * claire.py (usage): Fix misspelling.
2615         (clean_symlink): Simplify.
2616         (find_dislocated_stable): Avoid unnecessary work.
2617
2618 2002-05-29  James Troup  <james@nocrew.org>
2619
2620         * cameron: removed; apt-ftparchive can simply walk the directory.
2621
2622 2002-05-26  Anthony Towns  <ajt@debian.org>
2623
2624         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2625         for the autobuilders.
2626
2627 2002-05-24  Ryan Murray  <rmurray@debian.org>
2628
2629         * cron.buildd: update override files before running apt-ftparchive
2630
2631 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2632
2633         * amber (main): remove extra space in prompt.
2634
2635         * utils.py (validate_changes_file_arg): use original filename in
2636         error messages.
2637
2638         * jeri (check_joey): close file after use.
2639         (parse_packages): likewise.
2640         (main): setup debug option properly.
2641
2642         * melanie (main): remove unused packages variable and simplify the
2643         code to build up con_packages by using repr().
2644
2645 2002-05-23  James Troup  <james@nocrew.org>
2646
2647         * lisa (recheck): when we reject, also return 0 so the package is
2648         skipped.
2649         (sg_compare): fix note sorting.
2650         (recheck): remove the .katie file after rejection.
2651
2652         * katie.py (Katie.accept): accepted auto-build support take 3;
2653         this time adding support for security.  Security needs a) non-pool
2654         files copied rather than symlinked since accepted is readable only
2655         by katie/security and www-data needs to be able to see the files,
2656         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2657         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2658         SecurityAcceptedAutoBuild is a new boolean which controls whether
2659         or not normal or security style is used.  The unstable_accepted
2660         table was renamed to accepted_autobuild and a suite column added.
2661         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2662         didn't have it's last_used/in_accepted flags correctly updated.
2663         * katie (install): likewise.
2664         * rhona (clean_accepted_autobuild): likewise.
2665
2666 2002-05-22  James Troup  <james@nocrew.org>
2667
2668         * lisa (sort_changes): new function; sorts changes properly.
2669         Finally.
2670         (sg_compare): new function; helper for sort_changes().  Sorts by
2671         have note and time of oldest upload.
2672         (indiv_sg_compare): new function; helper for sort_changes().
2673         Sorts by source version, have source and filename.
2674         (main): use sort_changes().
2675         (changes_compare): obsoleted; removed.
2676
2677 2002-05-20  James Troup  <james@nocrew.org>
2678
2679         * rhona (clean_accepted_autobuild): don't die if a file we're
2680         trying to remove doesn't exist.  Makes rhona more friendly to
2681         katie/katie.py crashes/bugs without any undue cost.
2682
2683 2002-05-19  James Troup  <james@nocrew.org>
2684
2685         * lisa (main): if sorting a large number of changes give some
2686         feedback.
2687         (recheck): new function, run the same checks (modulo NEW,
2688         obviously) as katie does, if they fail do the standard
2689         reject/skip/quit dance.
2690         (do_pkg): use it.
2691
2692         * katie (install): don't try to unlink the symlink in the
2693         AcceptedAutoBuild support if the destination is not a symlink (or
2694         doesn't exist).  Avoids unnecessary bombs on previous partial
2695         accepts and will still bomb hard if the file exists and isn't a
2696         symlink.
2697
2698         * utils.py: blah, commands _is_ used when the mail stuff isn't
2699         commented out like it is in my test environment.
2700
2701         * lisa (changes_compare): "has note" overrides everything else.
2702         Use .katie files rather than running parse_changes, faster and
2703         allows "has note" to work.  Correct version compare, it was
2704         reversed.  Ctime check should only kick in if the source packages
2705         are not the same.
2706         (print_new): print out and return any note.  Rename 'ret_code' to
2707         'broken'.
2708         (edit_new): renamed from spawn_editor.  Don't leak file
2709         descriptors.  Clean up error message if editor fails.
2710         (edit_note): new function, allows one to edit notes.
2711         (do_new): add note support, editing and removing.
2712         (init): kill -s/--sort; with notes we always want to use our
2713         sorting method.
2714         (usage): likewise.
2715
2716         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2717         changes field.
2718
2719         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2720         it default to 0.  Adapt tests to assume it's boolean.
2721         * fernanda.py (check_changes): adjust call appropriately.
2722         * halle (check_changes): likewise.
2723         * jennifer (check_changes): likewise.
2724         * jeri (check_changes): likewise.
2725         * shania (flush_orphans): likewise.
2726
2727         * jennifer (check_dsc): pass is_a_dsc by name when calling
2728         build_file_list() for clarity.
2729         * shania (flush_orphans): likewise.
2730         * tea (check_missing_tar_gz_in_dsc): likewise.
2731
2732         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2733         calling parse_changes() for clarity.
2734         * tea (check_dscs): likewise.
2735
2736         * utils.py (parse_changes): make dsc_whitespace_rules default to
2737         not true.
2738         * halle (check_changes): adjust call appropriately.
2739         * jennifer (check_changes): likewise.
2740         * jeri (check_changes): likewise.
2741         * lisa (changes_compare): likewise.
2742         * utils.py (changes_compare): likewise.
2743         * melanie (main): likewise.
2744         * shania (flush_orphans): likewise.
2745         * fernanda.py (check_changes): likewise.
2746
2747 2002-05-18  James Troup  <james@nocrew.org>
2748
2749         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2750         it's not useful and by and large a duplication of information
2751         available in readable format in other files.
2752
2753 2002-05-16  Ryan Murray  <rmurray@debian.org>
2754
2755         * melanie: Dir::TemplatesDir -> Dir::Templates
2756
2757 2002-05-15  Ryan Murray  <rmurray@debian.org>
2758
2759         * cameron: correct the use of os.path.join
2760
2761 2002-05-15  Anthony Towns  <ajt@debian.org>
2762
2763         * ziyi: Update to match the new format for Architectures/Components
2764         in katie.conf.
2765
2766 2002-05-14  James Troup  <james@nocrew.org>
2767
2768         * amber: new script; 'installer' wrapper script for the security
2769         team.
2770
2771         * katie.py (Katie.announce): remove unused 'dsc' local
2772         variable. (pychecker)
2773
2774         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2775
2776         * neve: don't import sys, we don't use it. (pychecker)
2777         (check_signature): fix return type mismatch. (pychecker)
2778
2779         * utils.py: don't import commands, we don't use it.  (pychecker)
2780
2781         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2782
2783         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2784         obsoleted by the change to "othercomponents" handling in jennifer
2785         detailed below.
2786         (Katie.cross_suite_version_check): new function; implements
2787         cross-suite version checking rules specified in the conf file
2788         while also enforcing the standard "must be newer than target
2789         suite" rule.
2790         (Katie.check_binary_against_db): renamed, since it's invoked once
2791         per-binary, "binaries" was inaccurate.  Use
2792         cross_suite_version_check() and don't bother with the "oldfiles"
2793         rubbish as jennifer works out "othercomponents" herself now.
2794         (Katie.check_source_against_db): use cross_suite_version_check().
2795
2796         * katie (check): the version and file overwrite checks
2797         (check_{binary,source,dsc}_against_db) are not per-suite.
2798
2799         * jennifer (check_files): less duplication of
2800         'control.Find("Architecture", "")' by putting it in a local
2801         variable.
2802         (check_files): call check_binary_against_db higher up since it's
2803         not a per-suite check.
2804         (check_files): get "othercomponents" directly rather than having
2805         check_binary_against_db do it for us.
2806
2807         * heidi (main): 'if x:', not 'if x != []:'.
2808         * katie.py (Katie.in_override_p): likewise.
2809         (Katie.check_dsc_against_db): likewise.
2810         * natalie (main): likewise.
2811         * rene (main): likewise.
2812         * ziyi (real_arch): likewise.
2813
2814         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2815         and OverrideType are now value lists, not lists.
2816         * andrea (main): likewise.
2817         * cindy (main): likewise.
2818         * claire.py (find_dislocated_stable): likewise.
2819         * denise (main): likewise.
2820         * jenna (main): likewise.
2821         * jennifer (check_distributions): likewise.
2822         (check_files): likewise.
2823         (check_urgency): likewise (Urgency::Valid).
2824         * jeri (parse_packages): likewise.
2825         * neve (main): likewise (and Location::%s::Suites).
2826         * rene (main): likewise.
2827
2828 2002-05-13  James Troup  <james@nocrew.org>
2829
2830         * katie.py (Katie.check_source_against_db): correct case of reject
2831         message to be consistent with binary checks.
2832
2833         * jennifer (get_status_output): don't leak 2 file descriptors per
2834         invocation.
2835         (check_signature): add missing '\n' to "duplicate status token"
2836         error message.
2837
2838 2002-05-09  James Troup  <james@nocrew.org>
2839
2840         * utils.py (validate_changes_file_arg): new function; validates an
2841         argument which should be a .changes file.
2842         * ashley (main): use it.
2843         * lisa (main): likewise.
2844
2845         * katie.py (Katie.check_dsc_against_db): since there can be more
2846         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2847         entry still exists in files.
2848
2849         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2850         files, since check_dsc_against_db() deletes the .orig.tar.gz
2851         entry.
2852
2853         * cameron: cleanups.
2854
2855         * utils.py (changes_compare): change sort order so that source
2856         name and source version trump 'have source'; this should fix
2857         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2858         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2859         by Ryan.
2860
2861         * lisa (main): allow the arguments to be .katie files too.
2862
2863 2002-05-07  Ryan Murray  <rmurray@debian.org>
2864
2865         * cron.buildd: add s390 to arch list again
2866
2867 2002-05-05  Ryan Murray  <rmurray@debian.org>
2868
2869         * cron.buildd: new script, update w-b database from unstable_accepted
2870         table
2871         * cameron: new script, take list in unstable_accepted and write out
2872         a file list for apt-ftparchive
2873         * apt.conf.buildd: new apt configuration for Packages/Sources for
2874         unstable_accepted
2875         * vars: add s390 to arch list.
2876
2877 2002-05-03  James Troup  <james@nocrew.org>
2878
2879         * neve (main): don't hard code the calling user as that doesn't
2880         work with modern postgres installs.  Fix psql invocation for
2881         init_pool.sql (database name required).  Dont' hard code the
2882         database name.
2883         (process_sources): add support for fingerprint and install_date.
2884         (process_packages): add support for fingerprint.
2885         (do_sources): pass in the directory, fingerprint support needs it.
2886         (get_status_output): borrowed from jennifer.
2887         (reject): likewise.
2888         (check_signature): likewise.
2889
2890         * katie (install): only try to log urgencies if Urgency_Logger is
2891         defined.
2892         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2893         defined; only close Urgency_Logger if it's defined.
2894
2895         * catherine (poolize): adapt for Dir rationalization.
2896         * claire.py (find_dislocated_stable): likewise.
2897         * denise (main): likewise.
2898         * halle (check_joey): likewise.
2899         * jenna: likewise.
2900         * jennifer: likewise.
2901         * jeri: likewise.
2902         * katie.py: likewise.
2903         * katie: likewise.
2904         * lisa (do_bxa_notification): likewise.
2905         * logging.py (Logger.__init__): likewise
2906         * rene (main): likewise.
2907         * rhona (clean): likewise.
2908         * shania (init): likewise.
2909         * tea: likewise.
2910         * ziyi: likewise.
2911
2912         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2913         FindB, not FindI.
2914
2915         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2916         boolean, use FindB, not get.
2917
2918         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2919         .orig.tar.gz's which are an exact (size/md5sum) match.
2920
2921         * ashley (main): really allow *.katie files as arguments too;
2922         noticed by aj.
2923
2924         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2925
2926 2002-05-03  Anthony Towns  <ajt@debian.org>
2927
2928         * ziyi: support for security.
2929
2930 2002-05-02  James Troup  <james@nocrew.org>
2931
2932         * jennifer (accept): call Katie.check_override() unconditional as
2933         no-mail check moved into that function.
2934         (do_byhand): likewise.
2935
2936         * katie.py (Katie.check_override): don't do anything if we're a)
2937         not sending mail or b) the override disparity checks have been
2938         disbled via Dinstall::OverrideDisparityCheck.
2939
2940         * jennifer (check_files): don't hard code Unstable as the suite
2941         used to check for architecture validity; use
2942         Dinstall::DefaultSuite instead, if it exists.
2943         (accept): conditionalize
2944
2945         * katie.py (Katie.update_subst): support global maintainer
2946         override with Dinstall::OverrideMaintainer.
2947
2948         * jennifer (check_distributions): new function, Distribution
2949         validation and mapping.  Uses new SuiteMappings variable from
2950         config file to abstract suite mappings.
2951         (check_changes): call it.
2952
2953         * natalie: renamed; nothing imports or likely will for some time.
2954
2955         * denise (main): remove unused natalie import and init().
2956
2957         * natalie.py (init): removed.
2958         (main): initalize here instead and don't hardcode the database
2959         name.
2960
2961 2002-04-30  James Troup  <james@nocrew.org>
2962
2963         * katie.py (Katie.close_bugs): new function, split out from
2964         announce().
2965         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2966         true.
2967         (Katie.close_bugs): new function, split out
2968         (Katie.close_bugs): return immediately if there are no bugs to
2969         close.
2970
2971         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2972         * katie (do_reject): likewise.
2973         (stable_install): likewise.
2974         * katie.py (Katie.announce): likewise.
2975         (Katie.accept): likewise.
2976         (Katie.check_override): likewise.
2977         (Katie.do_reject): likewise.
2978         * lisa (do_bxa_notification): likewise.
2979         * melanie (main): likewise.
2980
2981         * utils.py (TemplateSubst): change second argument to be a
2982         filename rather than a template since every caller opened a file
2983         on the fly which was ugly and leaked file descriptor.
2984
2985 2002-04-29  James Troup  <james@nocrew.org>
2986
2987         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2988         <hertzog@debian.org> to send 'accepted' announce mails to the
2989         PTS. [#128140]
2990
2991 2002-04-24  James Troup  <james@nocrew.org>
2992
2993         * init_pool.sql (unstable_accepted): add two new fields to
2994         unstable_accepted; in_accepted is a boolean indicating whether or
2995         not the file is in accepted and last_used is a timestamp used by
2996         rhona to determine when to remove symlinks for installed packages.
2997
2998         * katie.py (Katie.accept): auto-build support take 2.  Create
2999         symlinks for all files into a seperate directory.  Add files to
3000         unstable_accepted as paths to the new directory; mark them as
3001         being in accepted for cameron.  Properly conditionalize it on a
3002         configuration variable.
3003
3004         * katie (install): likewise.  Update symlinks to point into the
3005         pool; mark the files for later deletion by rhona and mark them as
3006         not being in accepted for cameron.
3007
3008         * rhona (clean_accepted_autobuild): new function.
3009
3010 2002-04-22  James Troup  <james@nocrew.org>
3011
3012         * jennifer (check_files): handle db_access.get_location_id()
3013         returning -1 properly/better.
3014
3015         * rhona (clean_fingerprints): new function.
3016
3017 2002-04-21  James Troup  <james@nocrew.org>
3018
3019         * utils.py (touch_file): unused; remove.
3020         (plural): likewise.
3021
3022         * jennifer (check_files): close file descriptor used to get the
3023         control file.
3024         (check_md5sums): likewise.
3025         (callback): likewise.
3026
3027         * katie.py (Katie.do_reject): handle manual rejects much better;
3028         call the editor first and get confirmation from the user before
3029         proceeding.
3030
3031         * jennifer (check_signature): prefix_multi_line_string() moved to
3032         utils.
3033
3034         * utils.py (prefix_multi_line_string): moved here from jennifer.
3035
3036 2002-04-20  James Troup  <james@nocrew.org>
3037
3038         * lisa (main): handle non-existent files.
3039
3040         * ashley (main): allow *.katie files as arguments too.
3041
3042 2002-04-19  James Troup  <james@nocrew.org>
3043
3044         * katie.py (Katie.accept): add stuff to help auto-building from
3045         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3046         in the pool), create a symlink to it in the accepted directory and
3047         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3048
3049         * katie (install): undo the "auto-building from accepted" stuff
3050         (i.e. remove the .orig.tar.gz symlink and remove the files from
3051         unstable_accepted table).
3052
3053 2002-04-16  James Troup  <james@nocrew.org>
3054
3055         * jennifer (upload_too_new): fix typo which was causing all
3056         timestamp comparisons to be against the .changes file.  Also move
3057         back to the original directory so we do the comparisons against
3058         accurate timestamps.
3059
3060         * tea (check_missing_tar_gz_in_dsc): new function.
3061
3062         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3063         file mentioned in the .dsc.
3064
3065         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3066         way mails reach debian-{devel-,}changes@l.d.o.
3067
3068 2002-04-02  Ryan Murray  <rmurray@debian.org>
3069
3070         * cron.daily: run shania after rhona
3071         * cron.daily-non-US: likewise.
3072
3073 2002-04-01  James Troup  <james@nocrew.org>
3074
3075         * katie: re-add proposed-updates/stable install support.
3076
3077         * katie.py (Katie.dump_vars): add changes["changes"] as an
3078         optional field; should be mandatory later.
3079
3080 2002-03-31  James Troup  <james@nocrew.org>
3081
3082         * katie (install): support a Suite::<foo>::CopyKatie similar to
3083         CopyChanges.  Done seperately because .katie files don't need to
3084         be mirrored and will probably be copied to another directory as a
3085         result.
3086
3087         * halle (main): add missing debug to options.
3088
3089 2002-03-29  James Troup  <james@nocrew.org>
3090
3091         * madison (main): add a -r/--regex option.
3092
3093 2002-03-26  James Troup  <james@nocrew.org>
3094
3095         * lisa: don't trample on changes["distribution"]; make a copy of
3096         it as changes["suite"] instead and use that.
3097
3098 2002-03-16  Anthony Towns  <ajt@debian.org>
3099
3100         * templates/lisa.bxa_notification: Fix some grammatical errors.
3101         Encourage contact via bxa@ftp-master email address.
3102
3103 2002-03-15  James Troup  <james@nocrew.org>
3104
3105         * jennifer (check_timestamps): remove bogus raise in except.
3106
3107 2002-03-15  Anthony Towns  <ajt@debian.org>
3108
3109         * cron.monthly: rotate mail/archive/bxamail as well as
3110         mail/archive/mail. This is for a complete archive of
3111         correspondence with the BXA.
3112
3113 2002-03-14  Anthony Towns  <ajt@debian.org>
3114
3115         * crypto-in-main changes.
3116
3117         * utils.py (move, copy): add an optional perms= parameter to let you
3118         set the resulting permissions of the moved/copied file
3119         * katie.py (force_move): rejected/morgued files should be unreadable
3120         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3121         should be unreadable.
3122
3123 2002-03-07  Ryan Murray  <rmurray@debian.org>
3124
3125         * katie (install): check for existance of "files id" key as well as
3126         it being set to a valid value.
3127         * katie (install): check for existense and valid value for location
3128         id as well
3129
3130 2002-03-05  Ryan Murray  <rmurray@debian.org>
3131
3132         * katie.py (do_reject): reread the reason file after editing it.
3133
3134 2002-02-25  James Troup  <james@nocrew.org>
3135
3136         * jennifer (check_changes): don't enforce sanity in .changes file
3137         names since it doesn't seem to be possible; pcmica-cs and similar
3138         freak show packages in particular cause real problems.
3139
3140         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3141         each dsc_file since the .orig.tar.gz checking code now uses it as
3142         a boolean.  Fixes bizarro rejections which bogusly claimed
3143         .diff.gz md5sum/size was incorrect.
3144
3145 2002-02-24  James Troup  <james@nocrew.org>
3146
3147         * katie (process_it): reset reject_message.
3148
3149 2002-02-22  James Troup  <james@nocrew.org>
3150
3151         * db_access.py(set_files_id): disable use of
3152         currval('files_id_seq') because it was taking 3 seconds on auric
3153         which is insane (most calls take < 0.01) and simply call
3154         get_files_id() for the return value instead.
3155
3156         * katie.py (Katie.do_query): convenience function; unused by
3157         default, useful for profiling.
3158         * db_access.py (do_query): likewise.
3159
3160         * katie (install): fix insert SQL call when binary has no source.
3161
3162         * lisa (determine_new): auto-correct non-US/main to non-US.
3163         (determine_new): add a warning when adding things to stable.
3164         (edit_index): use our_raw_input().
3165         (edit_overrides): likewise.
3166         (do_new): likewise.  Use re.search() not re.match() since the
3167         default answer may not be the first one.
3168         (do_byhand): likewise.
3169         (do_new): Default to 'S'kip and never 'A'dd.
3170
3171         * jennifer (action): pass prompt to our_raw_input().
3172         * melanie (game_over): likewise.
3173         * katie (action): likewise.
3174
3175         * utils.py (our_raw_input): add an optional prompt argument to
3176         make the function more usable as a drop in replacement for
3177         raw_input().
3178
3179         * jennifer (check_files): correct reject() to not double prefix
3180         when using katie.py based functions.
3181         (check_dsc): likewise.
3182
3183         * katie.py (Katie.reject): prepend a new line if appropriate
3184         rathen than appending one to avoid double new lines when caller
3185         adds one of his own.
3186
3187         * lisa (determine_new): warn if the package is also in other
3188         components.
3189
3190 2002-02-20  James Troup  <james@nocrew.org>
3191
3192         * jennifer (check_files): if .changes file lists "source" in
3193         Architecture field, there must be a .dsc.
3194
3195 2002-02-15  James Troup  <james@nocrew.org>
3196
3197         * ashley (main): add some missing fields.
3198
3199         * katie.py (Katie.check_dsc_against_db): fix to take into account
3200         the fact that the .orig.tar.gz might be in byhand, accepted or
3201         new.  Also fix calling of reject().
3202         (Katie.check_binaries_against_db): fix calling of reject().
3203         (Katie.check_source_against_db): likewise.
3204         (Katie.dump_vars): add missing variables used for bug closures.
3205
3206         * lisa (changes_compare_by_time): sort by reverse time.
3207
3208         * katie.py (Katie.accept): log.
3209         (Katie.dump_vars): missing has_key test for optional changes fields.
3210
3211         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3212         (process_it): traceback goes to stderr, not stdout.
3213         (acknowledge_new): log.
3214         (do_byhand): likewise.
3215
3216         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3217
3218         * add_constraints.sql: add grants for the new fingerprint table.
3219
3220 2002-02-13  James Troup  <james@nocrew.org>
3221
3222         * katie (do_reject): basename the .changes filename before trying
3223         to use it to construct the .reason filename.
3224         (process_it): call Katie.update_subst() so do_reject() DTRT with
3225         the mail template.
3226         (do_reject): setup the mail template correctly.
3227
3228 2002-02-12  James Troup  <james@nocrew.org>
3229
3230         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3231         (check_files): don't abuse global dictionaries.
3232         (Ent): use all variables.
3233         (check_timestamps): don't abuse global dictionaries.
3234
3235         * fernanda.py: renamed to .py so lisa can import it.
3236         (check_dsc): remove unused local variables (pychecker).
3237         (display_changes): split off from check_changes.
3238
3239         * katie: rewritten; most of the functionality moves to jennifer;
3240         what's left is the code to install packages once a day from the
3241         'accepted' directory.
3242
3243         * jennifer: new program, processes packages in 'unchecked'
3244         (i.e. most of the non-install functionality of old katie).
3245
3246         * katie.py: common functions shared between the clique of
3247         jennifer, lisa and katie.
3248
3249         * lisa: new program; handles NEW and BYHAND packages.
3250
3251         * jeri (usage): new function.
3252         (main): use it.
3253         (check_package): remove unused local variable (pychecker).
3254
3255         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3256         binaries and source.  Add install_date to source.
3257
3258         * halle (usage): new function.
3259         (main): use it.  Remove unused options.
3260         (check_changes): remove unused local variable (pychecker).
3261
3262         * add_constraints.sql: add fingerprint references.
3263
3264         * db_access.py (get_or_set_fingerprint_id): new function.
3265
3266         * ashley (main): new program; dumps the contents of a .katie file
3267         to stdout.
3268
3269         * alyson (main): remove option handling since we don't actually
3270         support any.
3271         * cindy (main): likewise.
3272
3273         * remove unnecessary imports and pre-define globals (pychecker).
3274
3275 2002-02-11  Anthony Towns  <ajt@debian.org>
3276
3277         * added installation-report and upgrade-report pseudo-packages
3278
3279 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3280
3281         * katie (update_subst): use Dinstall::TrackingServer.
3282         * melanie (main): likewise.
3283
3284 2002-01-27  James Troup  <james@nocrew.org>
3285
3286         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3287         noticing, jgg@ for fix.
3288
3289 2002-01-19  James Troup  <james@nocrew.org>
3290
3291         * utils.py (extract_component_from_section): handle non-US
3292         non-main properly.
3293
3294 2002-01-12  James Troup  <james@nocrew.org>
3295
3296         * madison: add support for -S/--source-and-binary which displays
3297         information for the source package and all it's binary children.
3298
3299 2002-01-13  Anthony Towns  <ajt@debian.org>
3300
3301         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3302         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3303           and 2002 key ids.
3304         * katie.conf-non-US: Likewise.
3305         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3306           multiple keys automatically. This is probably only useful for
3307           transitioning from an expired (or revoked?) key.
3308
3309 2002-01-08  Ryan Murray  <rmurray@debian.org>
3310
3311         * debian/python-dep: new file that prints out python:Depends for
3312           substvars
3313         * debian/control: use python:Depends, build-depend on python
3314           lower Depends: on postgresql to Suggests:
3315         * debian/rules: determine python version, install to the correct
3316           versioned dir
3317
3318 2001-12-18  Anthony Towns  <ajt@debian.org>
3319
3320         * ziyi: unlink Release files before overwriting them (in case they've
3321           been merged)
3322         * ziyi: always include checksums/sizes for the uncompressed versions
3323           of Sources and Packages, even if they're not present on disk
3324
3325 2001-11-26  Ryan Murray  <rmurray@debian.org>
3326
3327         * ziyi (main): add SigningPubKey config option
3328         * katie.conf: use SigningPubKey config option
3329         * katie.conf-non-US: likewise
3330
3331 2001-11-24  James Troup  <james@nocrew.org>
3332
3333         * katie (acknowledge_new): log newness.
3334
3335 2001-11-24  Anthony Towns  <ajt@debian.org>
3336
3337         * ziyi (real_arch): bail out if some moron forgot to reset
3338         untouchable on stable.
3339         (real_arch): source Release files.
3340
3341 2001-11-19  James Troup  <james@nocrew.org>
3342
3343         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3344         utils.get_conf().
3345         * shania (main): likewise.
3346
3347         * rhona (main): add default options.
3348
3349         * db_access.py (get_archive_id): case independent.
3350
3351         * katie (action): sort files so that ordering is consistent
3352         between mails; noticed/requested by Joey.
3353
3354 2001-11-17  Ryan Murray  <rmurray@debian.org>
3355
3356         * utils.py: add get_conf function, change startup code to read all
3357           config files to the Cnf that get_conf returns
3358           use the component list from the katie conf rather than the hardcoded
3359           list.
3360         * all scripts: use new get_conf function
3361         * shania: fix try/except around changes files
3362         * jenna: only do debian-installer if it is a section in Cnf
3363
3364 2001-11-16  Ryan Murray  <rmurray@debian.org>
3365
3366         * shania (main): Initialize days to a string of a number.
3367                  (main): Initialize Cnf vars before reading in Cnf
3368
3369 2001-11-14  Ryan Murray  <rmurray@debian.org>
3370
3371         * shania (main): Initialize days to a number.
3372
3373 2001-11-04  James Troup  <james@nocrew.org>
3374
3375         * docs/Makefile: use docbook-utils' docbook2man binary.
3376
3377         * Change all "if foo == []" constructs into "if not foo".
3378
3379         * katie (check_changes): when installing into stable from
3380         proposed-updates, remove all non-stable target distributions.
3381         (check_override): don't check for override disparities on stable
3382         installs.
3383         (stable_install): update install_bytes appropriately.
3384         (reject): stable rejection support; i.e. don't remove files when
3385         rejecting files in the pool, rather remove them from the
3386         proposed-update suite instead, rhona will do the rest.
3387         (manual_reject): support for a stable specific template.
3388         (main): setup up stable rejector in subst.
3389
3390 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3391
3392         * debian/control (Build-Depends): docbook2man has been superseded
3393         by docbook-utils.
3394
3395         * neve (main): exit with a more useful error message.
3396         (update_suites): Suite::<suite>::Version, Origin and Description
3397         are not required, so don't fail if they don't exist.
3398
3399         * db_access.py (get_archive_id): return -1 on error rather than
3400         raise an exception.
3401         (get_location_id): likewise.
3402
3403         * madison (main): don't exit on the first not-found package,
3404         rather exit with an appropriate return code after processing all
3405         packages.
3406
3407 2001-11-03  James Troup  <james@nocrew.org>
3408
3409         * claire.py (find_dislocated_stable): add per-architecture
3410         symlinks for dislocated architecture: all debs.
3411
3412 2001-10-19  Anthony Towns  <ajt@debian.org>
3413
3414         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3415
3416 2001-10-10  Anthony Towns  <ajt@debian.org>
3417
3418         * claire.py (fix_component_section): do _not_ assign to None under
3419         any circumstances
3420
3421 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3422
3423         * melanie (main): don't duplicate architectures when removing from
3424         more than one suite.
3425
3426         * heidi (main, process_file, get_list): report suite name not ID.
3427
3428         * naima (nmu_p): be case insensitive.
3429
3430         * naima (action): more list handling clean ups.
3431
3432         * melanie (main): clean up lists handling to use string.join and
3433         IN's.
3434
3435         * madison (main): clean up suite and architecture argument parsing
3436         to use slices less and string.join more.
3437
3438         * utils.py (parse_changes): Use string.find() instead of slices for
3439         string comparisons thereby avoid hardcoding the length of strings.
3440         * ziyi (main): likewise.
3441
3442 2001-10-07  James Troup  <james@nocrew.org>
3443
3444         * Remove mode argument from utils.open_files() calls if it's the
3445         default, i.e. 'r'.
3446
3447 2001-09-27  James Troup  <james@nocrew.org>
3448
3449         * katie (init): new function; options clean up.
3450         (usage): add missing options, remove obsolete ones.
3451         (main): adapt for the two changes above.  If the lock file or
3452         new-ack log file don't exist, create them.  Don't try to open the
3453         new-ack log file except running in new-ack mode.
3454
3455         * alyson (main): initialize all the tables that are based on the
3456         conf file.
3457
3458         * utils.py (touch_file): like touch(1).
3459         (where_am_i): typo.
3460
3461         * catherine (usage): new.
3462         (main): use it.  options cleanup.
3463         * claire.py: likewise.
3464         * fernanda: likewise.
3465         * heidi: likewise.
3466         * jenna: likewise.
3467         * shania: likewise.
3468         * ziyi: likewise.
3469
3470         * andrea: options cleanup.
3471         * charisma: likewise.
3472         * julia: likewise.
3473         * madison: likewise.
3474         * melanie: likewise.
3475         * natalie: likewise.
3476         * rhona: likewise.
3477         * tea: likewise.
3478
3479 2001-09-26  James Troup  <james@nocrew.org>
3480
3481         * utils.py: default to sane config file locations
3482         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3483         or they can point to the real ones through use of a new Config
3484         section.  Based on an old patch by Adam Heath.
3485         (where_am_i): use the new default config stuff.
3486         (which_conf_file): likewise.
3487         (which_apt_conf_file): likewise.
3488
3489         * charisma (main): output defaults to
3490         `Package~Version\tMaintainer'; input can be of either form.  When
3491         parsing the new format do version comparisons, when parsing the
3492         old format assume anything in the extra file wins.  This fixes the
3493         problem of newer non-US packages being overwhelmed by older
3494         versions still in stable on main.
3495
3496 2001-09-17  James Troup  <james@nocrew.org>
3497
3498         * natalie.py (list): use result_join().
3499
3500         * denise (main): result_join() moved to utils.
3501
3502         * utils.py (result_join): move to utils; add an optional seperator
3503         argument.
3504
3505 2001-09-14  James Troup  <james@nocrew.org>
3506
3507         * heidi (set_suite): new function; does --set like natalie does,
3508         i.e. turns it into a sequence of --add's and --remove's
3509         internally.  This is a major win (~20 minute run time > ~20
3510         seconds) in the common, everday (i.e. testing) case.
3511         (get_id): common code used by set_suite() and process_file().
3512         (process_file): call set_suite() and get_id().
3513         (main): add logging support.
3514
3515         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3516         files.
3517
3518         * utils.py (parse_changes): use slices or simple string comparison
3519         in favour of regexes where possible.
3520
3521         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3522         fact that the string VARDATA() points to are not null terminated.
3523
3524         * denise (result_join): new function; like string.join() but
3525         handles None's.
3526         (list): use it.
3527         (main): likewise.
3528
3529         * charisma (main): python-pygresql 7.1 returns None not "".
3530
3531 2001-09-14  Ryan Murray  <rmurray@debian.org>
3532
3533         * natalie.py (list): handle python-pygresql 7.1 returning None.
3534
3535 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3536
3537         * madison (main): return 1 if no package is found.
3538
3539 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3540
3541         * madison (main): better error handling for incorrect
3542         -a/--architecture or -s/--suite arguments.
3543         (usage): new.
3544         (main): use it.
3545
3546 2001-09-05  Ryan Murray  <rmurray@debian.org>
3547
3548         * charisma, madison, katie: remove use of ROUser
3549         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3550
3551 2001-08-26  James Troup  <james@nocrew.org>
3552
3553         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3554         maintained packages at cjwatson@'s request.
3555
3556 2001-08-21  James Troup  <james@nocrew.org>
3557
3558         * madison (main): add -a/--architecture support.
3559
3560         * jenna: use logging instead of being overly verbose on stdout.
3561
3562 2001-08-11  Ryan Murray  <rmurray@debian.org>
3563
3564         * melanie: add functional help option
3565
3566 2001-08-07  Anthony Towns  <ajt@debian.org>
3567
3568         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3569
3570 2001-07-28  James Troup  <james@nocrew.org>
3571
3572         * katie (check_dsc): ensure source version is >> than existing
3573         source in target suite.
3574
3575 2001-07-25  James Troup  <james@nocrew.org>
3576
3577         * natalie.py: add logging support.
3578
3579         * utils.py (open_file): make the second argument optional and
3580         default to read-only.
3581
3582         * rene (main): work around broken source packages that duplicate
3583         arch: all packages with arch: !all packages (no longer allowed
3584         into the archive by katie).
3585
3586 2001-07-13  James Troup  <james@nocrew.org>
3587
3588         * katie (action): don't assume distribution is a dictionary.
3589         (update_subst): don't assume architecture is a dictionary and that
3590         maintainer822 is defined.
3591         (check_changes): recognise nk_format exceptions.
3592         (check_changes): reject on 'testing' only uploads.
3593         (check_files): when checking to ensure all packages are newer
3594         versions check against arch-all packages too.
3595         (check_dsc): enforce the existent of a sane set of mandatory
3596         fields.  Ensure the version number in the .dsc (modulo epoch)
3597         matches the version number in the .changes file.
3598
3599         * utils.py (changes_compare): ignore all exceptions when parsing
3600         the changes files.
3601         (build_file_list): don't UNDEF on a changes file with no format
3602         field.
3603
3604 2001-07-07  James Troup  <james@nocrew.org>
3605
3606         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3607         rather than 'changedbyname' to avoid false negatives on uploads
3608         with an email-address-only Changed-By field.
3609         (check_dsc): don't overwrite reject_message; append to it.
3610         (check_signature): likewise.
3611         (check_changes): likewise.
3612         (announce): condition logging on 'action'.
3613
3614         * logging.py: new logging module.
3615
3616         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3617         sub-tree into a separate (global) variable.
3618         (check_dsc): ensure format is 1.0 to retain backwards
3619         compatability with dpkg-source in potato.
3620         (main): only try to obtain the lock when not running in no-action
3621         mode.
3622         Use the new logging module.
3623
3624         * christina: initial version; only partially usable.
3625
3626 2001-06-28  Anthony Towns  <ajt@debian.org>
3627
3628         * apt.conf: Add ExtraOverrides to auric.
3629
3630 2001-06-25  James Troup  <james@nocrew.org>
3631
3632         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3633         they preferred the name 'Uploaders'.
3634
3635 2001-06-23  James Troup  <james@nocrew.org>
3636
3637         * katie (check_files): fix typo in uncommon rejection message,
3638         s/sourceversion/source version/.
3639
3640         * denise (main): we can't use print because stdout has been
3641         redirected.
3642
3643         * katie (source_exists): new function; moved out of check_files()
3644         and added support for binary-only NMUs of earlier sourceful NMUs.
3645
3646         * rhona (clean): find_next_free has moved.
3647
3648         * utils.py (find_next_free): new function; moved here from rhona.
3649         Change too_many to be an argument with a default value, rather
3650         than a hardcoded variable.
3651
3652         * shania: rewritten to work better; REJECTion reminder mail
3653         handling got lost though.
3654
3655 2001-06-22  James Troup  <james@nocrew.org>
3656
3657         * rhona (main): remove unused override code.
3658
3659         * fernanda (main): remove extraneous \n's from utils.warn calls.
3660         * natalie.py (list): likewise.
3661
3662         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3663         use utils.{warn,fubar} where appropriate.
3664
3665 2001-06-21  James Troup  <james@nocrew.org>
3666
3667         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3668         functionality.
3669         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3670         by the "Maintainers" field in the .dsc file and maintainer groups.
3671         (nmu_p.__init__): read in the list of group maintainer names.
3672         (announce): use nmu_p.
3673
3674 2001-06-20  James Troup  <james@nocrew.org>
3675
3676         * rene (main): hardcode the suite experimental is compared to by
3677         name rather than number.
3678
3679         * katie (check_files): differentiate between doesn't-exist and
3680         permission-denied in "can not read" rejections; requested by edd@.
3681         (check_dsc): use os.path.exists rather than os.access to allow the
3682         above check to kick in.
3683
3684         * heidi (process_file): read all input before doing anything and
3685         use transactions.
3686
3687 2001-06-15  James Troup  <james@nocrew.org>
3688
3689         * fernanda: new script; replaces old 'check' shell script
3690         nastiness.
3691
3692 2001-06-14  James Troup  <james@nocrew.org>
3693
3694         * katie: actually import traceback module to avoid amusing
3695         infinite loop.
3696
3697 2001-06-10  James Troup  <james@nocrew.org>
3698
3699         * utils.py (extract_component_from_section): fix to handle just
3700         'non-free' and 'contrib'.  Also fix to handle non-US in a
3701         completely case insensitive manner as a component.
3702
3703 2001-06-08  James Troup  <james@nocrew.org>
3704
3705         * madison (arch_compare): sort function that sorts 'source' first
3706         then alphabetically.
3707         (main): use it.
3708
3709 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3710
3711         * catherine (poolize): explicitly make poolized_size a long so it
3712         doesn't overflow when poolizing e.g. entire archives.
3713
3714 2001-06-01  James Troup  <james@nocrew.org>
3715
3716         * utils.py (send_mail): throw exceptions rather than exiting.
3717
3718         * katie (process_it): catch exceptions and ignore them.
3719
3720 2001-06-01  Michael Beattie  <mjb@debian.org>
3721
3722         * added update-mailingliststxt and update-readmenonus to update
3723         those files, respectively. modified cron.daily{,-non-US} to
3724         use them.
3725
3726 2001-05-31  Anthony Towns  <ajt@debian.org>
3727
3728         * rhona: make StayOfExecution work.
3729
3730 2001-05-31  James Troup  <james@nocrew.org>
3731
3732         * rhona (find_next_free): fixes to not overwrite files but rename
3733         them by appending .<n> instead.
3734         (clean): use find_next_free and use dated sub-directories in the
3735         morgue.
3736
3737         * utils.py (move): don't overwrite files unless forced to.
3738         (copy): likewise.
3739
3740 2001-05-24  James Troup  <james@nocrew.org>
3741
3742         * katie (check_files): determine the source version here instead
3743         of during install().
3744         (check_files): check for existent source with bin-only NMU
3745         support.
3746         (main): sort the list of changes so that the source-must-exist
3747         check Does The Right Thing(tm).
3748
3749         * utils.py (changes_compare): new function; sorts a list of
3750         changes files by 'have-source', source, version.
3751         (cc_fix_changes): helper function.
3752         (parse_changes): use compiled regexes.
3753         (fix_maintainer): likewise.
3754
3755         * rene (main): warn about packages in experimental that are
3756         superseded by newer versions in unstable.
3757
3758 2001-05-21  James Troup  <james@nocrew.org>
3759
3760         * rene (main): add support for checking for ANAIS (Architecture
3761         Not Allowed In Source) packages.
3762
3763 2001-05-17  James Troup  <james@nocrew.org>
3764
3765         * katie (check_changes): initalize `architecture' dictionary in
3766         changes global so that if we can't parse the changes file for
3767         whatever reason we don't undef later on.
3768
3769         * utils.py (parse_changes): fix handling of multi-line fields
3770         where the first line did have data.
3771
3772 2001-05-05  Anthony Towns  <ajt@debian.org>
3773
3774         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3775         (It should always have been there. Ooopsy.)
3776
3777 2001-05-03  Anthony Towns  <ajt@debian.org>
3778
3779         * jenna: Cleanup packages that move from arch:any to arch:all or
3780         vice-versa.
3781
3782 2001-04-24  Anthony Towns  <ajt@debian.org>
3783
3784         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3785         cope with debian-installer and boot-floppies' md5sum.txt.
3786
3787 2001-04-16  James Troup  <james@nocrew.org>
3788
3789         * katie (check_changes): add missing %s format string argument.
3790         (stable_install): temporary work around for morgue location to
3791         move installed changes files into.
3792         (stable_install): helps if you actually read in the template.
3793         (manual_reject): fix for editing of reject messages which was
3794         using the wrong variable name.
3795
3796         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3797
3798 2001-04-13  James Troup  <james@nocrew.org>
3799
3800         * katie (manual_reject): Cc the installer.
3801         (reject): don't.
3802         (check_changes): remove unused maintainer-determination code.
3803         (update_subst): add support for Changed-By when setting the
3804         *MAINTAINER* variables.
3805
3806         * rene (bar): new function to check for packages on architectures
3807         when they shouldn't be.
3808
3809         * natalie.py (main): use fubar() and warn() from utils.
3810
3811         * utils.py (whoami): new mini-function().
3812         * melanie (main): use it.
3813         * katie (manual_reject): likewise.
3814
3815 2001-04-03  James Troup  <james@nocrew.org>
3816
3817         * katie (action): ignore exceptions from os.path.getmtime() so we
3818         don't crash on non-existent changes files (e.g. when they are
3819         moved between the start of the install run in cron.daily and the
3820         time we get round to processing them).
3821
3822         * madison (main): also list source and accept -s/--suite.
3823
3824         * jenna (generate_src_list): missing \n in error message.
3825
3826         * katie (update_subst): add sane defaults for when changes is
3827         skeletal.
3828
3829 2001-03-29  James Troup  <james@nocrew.org>
3830
3831         * melanie (main): use fubar() and warn() from utils.  Remember who
3832         the maintainer for the removed packages are and display that info
3833         to the user.  Readd support for melanie-specific Bcc-ing that got
3834         lost in the TemplateSubst transition.
3835
3836         * utils.py (fubar): new function.
3837         (warn): like wise.
3838
3839         * db_access.py (get_maintainer): as below.
3840
3841         * charisma (get_maintainer): moved the bulk of this function to
3842         db_access so that melanie can use it too.
3843
3844         * claire.py (find_dislocated_stable): restrict the override join
3845         to those entries where the suite is stable; this avoids problems
3846         with packages which have moved to new sections (e.g. science)
3847         between stable and unstable.
3848
3849 2001-03-24  James Troup  <james@nocrew.org>
3850
3851         * catherine (poolize): new function; not really independent of
3852         main() fully, yet.
3853         (main): use it.
3854
3855         * katie (stable_install): __SUITE__ needs to be space prefixed
3856         because buildd's check for 'INSTALLED$'.
3857
3858 2001-03-22  James Troup  <james@nocrew.org>
3859
3860         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3861
3862         * jenna: rewritten; now does deletions on a per-suite level
3863         instead of a per-suite-component-architecture-type level.  This
3864         allows mutli-component packages to be auto-cleaned (and as a
3865         bonus, reduces the code size and duplication).
3866
3867 2001-03-22  Anthony Towns  <ajt@debian.org>
3868
3869         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3870         instead of just giving a gpg error.
3871
3872 2001-03-21  James Troup  <james@nocrew.org>
3873
3874         * madison (main): use apt_pkg.VersionCompare to sort versions so
3875         that output is correctly sorted for packages like debhlper.
3876         Noticed by ajt@.
3877
3878         * tea (check_source_in_one_dir): actually find problematic source
3879         packages.
3880
3881         * katie (check_dsc): remember the orig.tar.gz's location ID if
3882         it's not in a legacy suite.
3883         (check_diff): we don't use orig_tar_id.
3884         (install): add code to handle sourceful diff-only upload of
3885         packages which change components by copying the .orig.tar.gz into
3886         the new component, if it doesn't already exist there.
3887         (process_it): reset orig_tar_location (as above).
3888
3889         * melanie (main): use template substiution for the bug closing
3890         emails.
3891         (main): don't hardcode bugs.debian.org or packages.debian.org
3892         either; use configuration items.
3893
3894         * katie: likewise.
3895
3896         * natalie.py (init): use None rather than 'localhost' for the
3897         hostname given to pg.connect.
3898
3899         * utils.py (TemplateSubst): new function; lifted from
3900         userdir-ldap.
3901
3902 2001-03-21  Ryan Murray  <rmurray@debian.org>
3903
3904         * katie (announce): fix the case of non-existent
3905         Suite::$SUITE::Announce.
3906
3907 2001-03-20  Ryan Murray  <rmurray@debian.org>
3908
3909         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3910         /usr/.
3911
3912         * alyson (main): use config variable for database name.
3913         * andrea (main): likewise.
3914         * catherine (main): likewise.
3915         * charisma (main): likewise.
3916         * cindy (main): likewise.
3917         * claire.py (main): likewise.
3918         * denise (main): likewise.
3919         * heidi (main): likewise.
3920         * jenna (main): likewise.
3921         * katie (main): likewise.
3922         * madison (main): likewise.
3923         * melanie (main): likewise.
3924         * neve (main): likewise.
3925         * rhona (main): likewise.
3926         * tea (main): likewise.
3927
3928 2001-03-15  James Troup  <james@nocrew.org>
3929
3930         * rhona (check_sources): fixed evil off by one (letter) error
3931         which was causing only .dsc files to be deleted when cleaning
3932         source packages.
3933
3934         * charisma (get_maintainer_from_source): remove really stupid and
3935         gratuitous IN sub-query and replace with normal inner join.
3936         (main): connect as read-only user nobody.
3937
3938         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3939         with EXISTS.
3940         (check_files): likewise; still disabled by default though.
3941         (clean_binaries): add ' seconds' to the mysterious number in the
3942         output.
3943         (clean): likewise.
3944
3945         * tea (check_files): add missing global declaration on db_files.
3946
3947 2001-03-14  James Troup  <james@nocrew.org>
3948
3949         * rhona: rewritten large chunks. Removed a lot of the silly
3950         selecting into dictionaries and replaced it with 'where exists'
3951         based sub queries.  Added support for StayOfExecution.  Fix the
3952         problem with deleting dsc_files too early and disable cleaning of
3953         unattached files.
3954
3955 2001-03-14  Anthony Towns  <ajt@debian.org>
3956
3957         * katie (announce): also check Changed-By when trying to detect
3958         NMUs.
3959
3960 2001-03-06  Anthony Towns  <ajt@debian.org>
3961
3962         * ziyi (main): Generate Release.gpg files as well, using the key from
3963         Dinstall::SigningKey in katie.conf, if present. That key has to be
3964         passwordless, and hence kept fairly secretly.
3965
3966 2001-03-02  James Troup  <james@nocrew.org>
3967
3968         * utils.py (str_isnum): new function; checks to see if the string
3969         is a number.
3970
3971         * shania (main): fix _hideous_ bug which was causing all files > 2
3972         weeks old to be deleted from incoming, even if they were part of a
3973         valid upload.
3974
3975 2001-02-27  James Troup  <james@nocrew.org>
3976
3977         * melanie (main): accept new argument -C/--carbon-copy which
3978         allows arbitarty carbon-copying of the bug closure messages.
3979         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3980         separate variable.
3981
3982 2001-02-27  Anthony Towns  <ajt@debian.org>
3983
3984         * ziyi: new program; generates Release files.
3985
3986 2001-02-25  James Troup  <james@nocrew.org>
3987
3988         * katie (reject): add missing '\n' to error message.
3989         (manual_reject): likewise.
3990         (install): catch exceptions from moving the changes file into DONE
3991         and ignore them.
3992
3993         * tea (check_md5sums): new function.
3994
3995 2001-02-25  Michael Beattie  <mjb@debian.org>
3996
3997         * melanie: use $EDITOR if available.
3998
3999 2001-02-15  James Troup  <james@nocrew.org>
4000
4001         * utils.py (parse_changes): don't crash and burn on empty .changes
4002         files.  Symptoms noticed by mjb@.
4003
4004 2001-02-15  Adam Heath  <doogie@debian.org>
4005
4006         * denise (main): use an absolute path for the output filename.
4007
4008         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4009         compile errors with postgresql-dev >= 7.0.
4010
4011 2001-02-12  James Troup  <james@nocrew.org>
4012
4013         * rene: initial version.
4014
4015         * andrea: initial version.
4016
4017         * catherine (main): remove obsolete assignment of arguments.
4018
4019 2001-02-09  James Troup  <james@nocrew.org>
4020
4021         * catherine: first working version.
4022
4023 2001-02-06  James Troup  <james@nocrew.org>
4024
4025         * katie (check_files): validate the priority field; i.e. ensure it
4026         doesn't contain a '/' (to catch people prepending the priority
4027         with the component rather than the section).
4028         (check_override): don't warn about source packages; the only check
4029         is on section and we have no GUI tools that would use the Section
4030         field for a Sources file.
4031         (announce): use tags rather than severities for NMUs.  Requested
4032         by Josip Rodin <joy@>. [#78035]
4033
4034 2001-02-04  James Troup  <james@nocrew.org>
4035
4036         * tea (check_override): new function; ensures packages in suites
4037         are also in the override file.  Thanks to bod@ for noticing that
4038         such packages existed.
4039
4040         * katie: move file type compiled regular expressions to utils as
4041         catherine uses them too.
4042         (check_changes): always default maintainer822 to the installer
4043         address so that any bail out won't cause undefs later.
4044         (check_files): update file type re's to match above.
4045         (stable_install): likewise.
4046         (reject): handle any except from moving the changes files.  Fixes
4047         crashes on unreadable changes files.
4048
4049         * melanie (main): add an explanation of why things are not removed
4050         from testing.
4051
4052 2001-01-31  James Troup  <james@nocrew.org>
4053
4054         * melanie (main): ignore a) no message, b) removing from stable or
4055         testing when invoked with -n/--no-action.
4056
4057         * katie (check_override): lower section before checking to see if
4058         we're whining about 'non-US' versus 'non-US/main'.
4059
4060         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4061         function so that we can use inside of PostgreSQL.
4062
4063 2001-01-28  James Troup  <james@nocrew.org>
4064
4065         * katie: updated to pass new flag to parse_changes() and deal with
4066         the exception raised on invalid .dsc's if appropriate.
4067         * shania (main): likewise.
4068         * melanie (main): likewise.
4069
4070         * tea (check_dscs): new function to validate all .dsc files in
4071         unstable.
4072
4073         * utils.py (parse_changes): if passed an additional flag, validate
4074         the .dsc file to ensure it's extractable by dpkg-source.
4075         Requested by Ben Collins <bcollins@>.
4076
4077 2001-01-27  James Troup  <james@nocrew.org>
4078
4079         * madison (main): connect to the DB as nobody.
4080
4081         * katie (check_files): remove support for -r/--no-version-check
4082         since it makes no sense under katie (jenna will automatically
4083         remove the (new) older version) and was evil in any event.
4084         (check_changes): add missing new line to rejection message.
4085         (check_dsc): likewise.
4086         (process_it): reset reject_message here.
4087         (main): not here.  Also remove support for -r.
4088
4089 2001-01-26  James Troup  <james@nocrew.org>
4090
4091         * katie (check_override): don't whine about 'non-US/main' versus
4092         'non-US'.
4093
4094 2001-01-26  Michael Beattie  <mjb@debian.org>
4095
4096         * natalie.py (usage): new function.
4097         (main): use it.
4098
4099 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4100
4101         * update-mirrorlists: Update README.non-US too (request from Joy).
4102
4103 2001-01-25  James Troup  <james@nocrew.org>
4104
4105         * katie (reject): catch any exception from utils.move() and just
4106         pass, we previously only caught can't-overwrite errors and not
4107         can't-read ones.
4108
4109         * jenna (generate_src_list): use ORDER BY in selects to avoid
4110         unnecessary changes to Packages files.
4111         (generate_bin_list): likewise.
4112
4113         * utils.py (extract_component_from_section): separated out from
4114         build_file_list() as it's now used by claire too.
4115
4116         * claire.py (find_dislocated_stable): rewrite the query to extract
4117         section information and handle component-less locations properly.
4118         Thanks to ajt@ for the improved queries.
4119         (fix_component_section): new function to fix components and
4120         sections.
4121
4122 2001-01-23  James Troup  <james@nocrew.org>
4123
4124         * katie (check_files): set file type for (u?)debs first thing, so
4125         that if we continue, other functions which rely on file type
4126         existing don't bomb out.  If apt_pkg or apt_inst raise an
4127         exception when parsing the control file, don't try any other
4128         checks, just drop out.
4129         (check_changes): new test to ensure there is actually a target
4130         distribution.
4131
4132 2001-01-22  James Troup  <james@nocrew.org>
4133
4134         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4135         <grin@>.
4136         (check_changes): when mapping to unstable, remember to actually
4137         add unstable to the suite list and not just remove the invalid
4138         suite.
4139
4140 2001-01-21  James Troup  <james@nocrew.org>
4141
4142         * katie (check_files): catch exceptions from debExtractControl()
4143         and reject packages which raise any.
4144
4145 2001-01-19  James Troup  <james@nocrew.org>
4146
4147         * katie (check_signature): basename() file name in rejection
4148         message.
4149
4150 2001-01-18  James Troup  <james@nocrew.org>
4151
4152         * katie (in_override_p): remember the section and priority from
4153         the override file so we can check them against the package later.
4154         (check_override): new function; checks section and priority (for
4155         binaries) from the package against the override file and mails the
4156         maintainer about any disparities.
4157         (install): call check_override after announcing the upload.
4158
4159 2001-01-16  James Troup  <james@nocrew.org>
4160
4161         * utils.py (build_file_list): catch ValueError's from splitting up
4162         the files field and translate it into a parse error.
4163
4164         * tea: add support for finding unreferenced files.
4165
4166         * katie (in_override_p): add support for suite-aliasing so that
4167         proposed-updates uploads work again.
4168         (check_changes): catch parses errors from utils.build_file_list().
4169         (check_dsc): likewise.
4170         (check_diff): yet more dpkg breakage so we require even newer a
4171         version.
4172
4173         * jenna (generate_bin_list): don't do nasty path munging that's no
4174         longer needed.
4175
4176         * denise (main): support for non-US; and rename testing's override
4177         files so they're based on testing's codename.
4178
4179 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4180
4181         * melanie: add to the bug closing message explaining what happens
4182         (or rather doesn't) with bugs against packages that have been
4183         removed.
4184
4185 2001-01-14  James Troup  <james@nocrew.org>
4186
4187         * charisma (main): fix silly off-by-one error; suite priority
4188         checking was done using "less than" rather than "less than or
4189         equal to" which was causing weird hesienbugs with wrong Maintainer
4190         fields.
4191
4192 2001-01-10  James Troup  <james@nocrew.org>
4193
4194         * katie (in_override_p): adapted to use SQL-based overrides.
4195         read_override_file function disappears.
4196
4197         * db_access.py: add new functions get_section_id, get_priority_id
4198         and get_override_type_id.
4199         (get_architecture_id): return -1 if the architecture is not found.
4200
4201         * heidi: switch %d -> %d in all SQL queries.
4202         (get_list): Use string.join where appropriate.
4203
4204         * rhona (in_override_p): don't die if the override file doesn't
4205         exist.
4206         (main): warn if the override file doesn't exist.
4207
4208         * alyson: new script; will eventually sync the config file and the
4209         SQL database.
4210
4211         * natalie.py: new script; manipulates overrides.
4212
4213         * melanie: new script; removes packages from suites.
4214
4215 2001-01-08  James Troup  <james@nocrew.org>
4216
4217         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4218         anything it just changed the symptom.  Recognise the new breakage
4219         and reject them too.
4220
4221 2001-01-07  James Troup  <james@nocrew.org>
4222
4223         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4224         to the .changes file, be sure to set up files[filename]["type"]
4225         too.
4226
4227 2001-01-06  James Troup  <james@nocrew.org>
4228
4229         * katie (check_diff): new function; detects bad diff files
4230         produced by dpkg 1.8.1 and rejects thems.
4231         (process_it): call check_diff().
4232         (check_dsc): gar.  Add support for multiple versions of the
4233         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4234         and size against all versions and use one which matches if
4235         possible and exclude any that don't from being poolized to avoid
4236         file overwrites.  Thanks to broonie@ for providing the example.
4237         (install): skip any files marked as excluded as above.
4238
4239 2001-01-05  James Troup  <james@nocrew.org>
4240
4241         * heidi (process_file): add missing argument to error message.
4242
4243 2001-01-04  James Troup  <james@nocrew.org>
4244
4245         * heidi (main): fix handling of multiple files by reading all
4246         files not just the first file n times (where n = the number of
4247         files passed as arguments).
4248
4249 2001-01-04  Anthony Towns  <ajt@debian.org>
4250
4251         * katie (check_dsc): proper fix for the code which locates the
4252         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4253
4254 2000-12-20  James Troup  <james@nocrew.org>
4255
4256         * rhona: replace IN's with EXISTS's to make DELETE time for
4257         binaries and source sane on auric.  Add a -n/--no-action flag and
4258         make it stop actions if used.  Fixed a bug in binaries deletion
4259         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4260         -V/--version.  Giving timing info on deletion till I'm sure it's
4261         sane.
4262
4263         * katie (check_changes): map testing to unstable.
4264
4265         * madison: new script; shows versions in different architectures.
4266
4267         * katie (check_dsc): ensure size matches as well as md5sum;
4268         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4269         #69702.
4270
4271 2000-12-19  James Troup  <james@nocrew.org>
4272
4273         * katie (reject): ignore the "can't overwrite file" exception from
4274         utils.move() and leave the files where they are.
4275         (reject): doh! os.access() test was reversed so we only tried to
4276         move files which didn't exist... replaced with os.path.exists()
4277         test the right way round.
4278
4279         * utils.py (move): raise an exception if we can't overwrite the
4280         destination file.
4281         (copy): likewise.
4282
4283 2000-12-18  James Troup  <james@nocrew.org>
4284
4285         * rhona: first working version.
4286
4287         * db_access.py (get_files_id): force both sizes to be integers.
4288
4289         * katie (main): use size_type().
4290
4291         * utils.py (size_type): new function; pretty prints a file size.
4292
4293 2000-12-17  James Troup  <james@nocrew.org>
4294
4295         * charisma (main): do version compares so that older packages do
4296         not override newer ones and process source first as source wins
4297         over binaries in terms of who we think of as the Maintainer.
4298
4299 2000-12-15  James Troup  <james@nocrew.org>
4300
4301         * katie (install): use the files id for the .orig.tar.gz from
4302         check_dsc().
4303         (install): limit select for legacy source to a) source in legacy
4304         or legacy-mixed type locations and b) distinct on files.id.
4305         (install): rather than the bizarre insert new, delete old method
4306         for moving legacy source into the pool, use a simple update of
4307         files.
4308         (process_it): initalize some globals before each process.
4309
4310 2000-12-14  James Troup  <james@nocrew.org>
4311
4312         * katie (in_override_p): index on binary_type too since .udeb
4313         overrides are in a different file.
4314         (read_override_file): likewise.
4315         (check_files): correct filename passed to get_files_id().
4316         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4317         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4318         (check_dsc): remember the files id of the .orig.tar.gz, not the
4319         location id.
4320
4321 2000-12-13  James Troup  <james@nocrew.org>
4322
4323         * utils.py (poolify): force the component to lower case except for
4324         non-US.
4325
4326         * katie (in_override_p): handle .udeb-specific override files.
4327         (check_files): pass the binary type to in_override_p().
4328         (check_dsc): remember the location id of the old .orig.tar.gz in
4329         case it's not in the pool.
4330         (install): use location id from dsc_files; which is where
4331         check_dsc() puts it for old .orig.tar.gz files.
4332         (install): install files after all DB work is complete.
4333         (reject): basename() the changes filename.
4334         (manual_reject): likewise.
4335
4336         * shania: new progam; replaces incomingcleaner.
4337
4338 2000-12-05  James Troup  <james@nocrew.org>
4339
4340         * katie (check_changes): if inside stable and can't find files
4341         from the .changes; assume it's installed in the pool and chdir()
4342         to there.
4343         (check_files): we are not installing for stable installs, so don't
4344         check for overwriting existing files.
4345         (check_dsc): likewise.
4346         (check_dsc): reorder .orig.tar.gz handling so that we search in
4347         the pool first and only then fall back on any .orig.tar.gz in the
4348         cwd; this avoids false positives on the overwrite check when
4349         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4350         (install): if this is a stable install, bail out to
4351         stable_install() immediately.
4352         (install): dsc_files handling was horribly broken. a) we need to
4353         add files from the .dsc and not the .changes (duh), b) we need to
4354         add the .dsc file itself to dsc_files (to be consistent with neve
4355         if for no other reason).
4356         (stable_install): new function; handles installs from inside
4357         proposed-updates to stable.
4358         (acknowledge_new): basename changes_filename before doing
4359         anything.
4360         (process_it): absolutize the changes filename to avoid the
4361         requirement of being in the same directory as the .changes file.
4362         (process_it): save and restore the cwd as stable installs can
4363         potentially jump into the pool to find files.
4364
4365         * jenna: dislocated_files support using claire.
4366
4367         * heidi (process_file): select package field from binaries
4368         explicitly.
4369
4370         * db_access.py (get_files_id): fix cache key used.
4371
4372         * utils.py (build_file_list): fix 'non-US/non-free' case in
4373         section/component splitting.
4374         (move): use os.path.isdir() rather than stat.
4375         (copy): likewise.
4376
4377         * claire.py: new file; stable in non-stable munger.
4378
4379         * tea: new file; simply ensures all files in the DB exist.
4380
4381 2000-12-01  James Troup  <james@nocrew.org>
4382
4383         * katie (check_dsc): use regex_safe().
4384         (check_changes): typo in changes{} key:
4385         s/distributions/distribution/.
4386         (install): use changes["source"], not files[file]["source"] as the
4387         latter may not exist and the former is used elsewhere.  Commit the
4388         SQL transaction earlier.
4389
4390         * utils.py (regex_safe): new function; escapes characters which
4391         have meaning to SQL's regex comparison operator ('~').
4392
4393 2000-11-30  James Troup  <james@nocrew.org>
4394
4395         * katie (install): pool_location is based on source package name,
4396         not binary package.
4397
4398         * utils.py (move): if dest is a directory, append the filename
4399         before chmod-ing.
4400         (copy): ditto.
4401
4402         * katie (check_files): don't allow overwriting of existing .debs.
4403         (check_dsc): don't allow overwriting of existing source files.
4404
4405 2000-11-27  James Troup  <james@nocrew.org>
4406
4407         * katie (check_signature): don't try to load rsaref; it's
4408         obsolete.
4409         (in_override_p): don't try to lookup override entries for packages
4410         with an invalid suite name.
4411         (announce): don't assume the suite name is valid; use Find() to
4412         lookup the mailing list name for announcements.
4413
4414         * utils.py (where_am_i): typo; hostname is in the first element,
4415         not second.
4416
4417         * db_access.py (get_suite_id): return -1 on an unknown suite.
4418
4419 2000-11-26  James Troup  <james@nocrew.org>
4420
4421         * katie (install): fix CopyChanges handling; typo in in checking
4422         Cnf for CopyChanges flag and was calling non-existent function
4423         copy_file.
4424
4425         * utils.py (copy): new function; clone of move without the
4426         unlink().
4427
4428 2000-11-25  James Troup  <james@nocrew.org>
4429
4430         * utils.py (build_file_list): handle non-US prefixes properly
4431         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4432         + 'libs' not 'non-US/libs').
4433         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4434         delays.  This is possibly(/probably) exim speicifc and (like other
4435         sendmail options) needs to be in the config file.
4436
4437 2000-11-24  James Troup  <james@nocrew.org>
4438
4439         * rhona (check_sources): we need file id from dsc_files; not id.
4440         Handle non .dsc source files being re-referenced in dsc_files.
4441
4442         * katie (in_override_p): strip out any 'non-US' prefix.
4443         (check_files): use utils.where_am_i() rather than hardcoding.
4444         (check_files): validate the component.
4445         (install): use utils.where_am_i() rather than hardcoding.
4446         (install): fix mail to go to actual recepient.
4447         (reject): likewise.
4448         (manual_reject): likewise.
4449         (acknowledge_new): likewise.
4450         (announce): likewise.
4451
4452         * db_access.py (get_component_id): ignore case when searching for
4453         the component and don't crash if the component can't be found, but
4454         return -1.
4455         (get_location_id): handle -1 from get_component_id().
4456
4457         * jenna (generate_src_list): don't bring 'suite' into our big
4458         multi-table-joining select as we already know the 'suite_id'.
4459         (generate_bin_list): likewise.
4460
4461         * neve (main): don't quit if not on ftp-master.
4462         (process_packages): remove unused variable 'suite_codename'.
4463
4464         * utils.py (move): actually move the file.
4465         (build_file_list): handle non-US prefixes in the section.
4466
4467         * catherine (main): use which_conf_file().
4468         * charisma (main): likewise.
4469         * heidi (main): likewise.
4470         * jenna (main): likewise.
4471         * katie (main): likewise.
4472         * neve (main): likewise.
4473         * rhona (main): likewise.
4474
4475         * utils.py (where_am_i): new routine; determines the archive as
4476         understood by other 'dak' programs.
4477         (which_conf_file): new routine; determines the conf file to read.
4478
4479 2000-11-17  James Troup  <james@nocrew.org>
4480
4481         * katie (install): fix where .changes files for proposed-updates
4482         go.
4483
4484 2000-11-04  James Troup  <james@nocrew.org>
4485
4486         * jenna (main): handle architecture properly if no
4487         -a/--architecture argument is given, i.e. reset architecture with
4488         the values for the suite for each suite.
4489
4490         * Add apt_pkg.init() to the start of all scripts as it's now
4491         required by python-apt.
4492
4493 2000-10-29  James Troup  <james@nocrew.org>
4494
4495         * jenna (generate_bin_list): take an additional argument 'type'
4496         and use it in the SELECT.
4497         (main): if processing component 'main', process udebs and debs.
4498
4499         * neve (process_packages): set up 'type' in 'binaries' (by
4500         assuming .deb).
4501
4502         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4503         (check_files): set up files[file]["dbtype"].
4504         (install): use files[file]["dbtype"] to set up the 'type' field in
4505         the 'binaries' table.
4506
4507         * init_pool.sql: add a 'type' field to the 'binaries' table to
4508         distinguisgh between ".udeb" and ".deb" files.
4509
4510         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4511         dest ? dirname(dest)" type check instead.
4512
4513         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4514         in the pool without crashing.  Also handle the case of being asked
4515         to look for something other than an .orig.tar.gz in the pool.
4516
4517 2000-10-26  James Troup  <james@nocrew.org>
4518
4519         * katie (install): fix filenames put into files table during
4520         poolification of legacy source.
4521
4522         * utils.py (move): work around a bug in os.path.basename() which
4523         cunningly returns '' if there is a trailing slash on the path
4524         passed to it.
4525
4526         * katie (check_dsc): Remove more cruft.  If we find the
4527         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4528         location, make a note of that so we can fix things in install().
4529         (install): as above.  Move any old source out of legacy locations
4530         so that 'apt-get source' will work.
4531         (process_it): reset the flag that indicates to install that the
4532         source needs moved.
4533
4534         * cron.daily: more.  Nowhere near complete yet though.
4535
4536         * katie (install): don't run os.makedirs, a) utils.move() does
4537         this now, b) we weren't removing the user's umask and were
4538         creating dirs with SNAFU permissions.
4539         (check_dsc): rewrite the .orig.tar.gz handling to take into
4540         account, err, package pools.  i.e. look anywhere in the pool
4541         rather than faffing around with two simple paths.
4542
4543         * neve (process_sources): add the .dsc to dsc_files too.
4544
4545 2000-10-25  James Troup  <james@nocrew.org>
4546
4547         * neve (process_sources): don't duplicate .orig.tar.gz's.
4548
4549 2000-10-23  James Troup  <james@nocrew.org>
4550
4551         * utils.py (re_extract_src_version): moved here.
4552
4553         * neve: move re_extract_src_version to utils.
4554         (process_packages): reflect change.
4555
4556         * katie (install): reflect change.
4557
4558 2000-10-19  James Troup  <james@nocrew.org>
4559
4560         * jenna (generate_src_list): handle locations with null
4561         components.
4562         (generate_bin_list): likewise.
4563