]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Merge from upstream
[dak.git] / ChangeLog
1 2008-04-12  James Troup  <troup@debian.org>
2
3         * dak/clean_proposed_updates.py: add support for -s/--suite and
4         -n/--no-action.
5
6 2008-04-11  Anthony Towns  <ajt@debian.org>
7
8         * dak/utils.py: build_file_list() extra parameters so it can
9         build a file list for checksums-foo fields. Don't use float() to
10         compare formats, because Format: 1.10 should compare greater than
11         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
12
13         * dak/process_unchecked.py: check_md5sum becomes check_hashes
14         and check_hash. If changes format is 1.8 or later, also check
15         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
16         and reject on presence/absence of un/expected checksums-* fields.
17
18 2008-04-07  Joerg Jaspert  <joerg@debian.org>
19
20         * daklib/utils.py (build_file_list): Check for dpkg .changes
21         adjusted to reject newer (and right now broken) 1.8 version, until
22         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
23
24 2008-03-22  Joerg Jaspert  <joerg@debian.org>
25
26         * dak/transitions.py (load_transitions): Check if all our keys are
27         defined, if there are only keys defined we want and also the types
28         of the various keys.
29
30 2008-03-22  Anthony Towns  <ajt@debian.org>
31
32         * dak/edit_transitions.py: Add --import option.
33         Add --use-sudo option. Use fcntl locking for writing.
34         Move writing into a function (write_transitions).
35         Reinvoke self using sudo and --import if necessary.
36         Move temporary file creation into a function, use mkstemp.
37         Rename to "dak transitions".
38
39 2008-03-21  Joerg Jaspert  <joerg@debian.org>
40
41         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
42         edited file back in place
43         (check_transitions): Use proper locking and also use sudo to copy
44         the new file in place
45
46 2008-03-21  Anthony Towns <ajt@debian.org>
47
48         * config/debian/extensions.py: Add infrastructure for replacing
49         functions in dak modules; add upload blocking for dpkg.
50
51 2008-03-12  Joerg Jaspert  <joerg@debian.org>
52
53         * dak/edit_transitions.py: Done a number of cleanups to make code
54         working. Also changed the way prompting/answering goes, to not
55         have to import daklib/queue.
56         (edit_transitions): When done with a successful edit - also print
57         a final overview about defined transitions
58
59 2008-03-11  Joerg Jaspert  <joerg@debian.org>
60
61         * dak/process_unchecked.py: Import syck module directly, not "from
62         syck import *"
63         (check_transition): Do the check for sourceful upload in here
64         Also adjust the syck loading commands, rename new_vers to
65         expected, curvers to current, to make it more clear what they mean.
66
67         * daklib/database.py (get_suite_version): Renamed from
68         get_testing_version. Also changed the cache variables name
69
70         * The above changes are based on modifications from Anthony.
71
72         * dak/dak.py (init): Renamed check -> edit transitions
73
74         * dak/edit_transitions.py: Renamed from check_transitions.py
75         (main): Also rename new_vers/curvers to expected/current
76         Basically a nice rewrite, so it now does checks and edit,
77         depending on how you call it. Check also removes old transitions,
78         if user wants it.
79
80 2008-03-02  Joerg Jaspert  <joerg@debian.org>
81
82         * debian/control (Suggests): Add python-syck to Depends:
83
84         * dak/dak.py (init): Tell it about check_transitions
85
86         * dak/check_transitions.py (usage): Added, checks the transitions
87         file (if any)
88
89         * daklib/database.py (get_testing_version): Added. Returns the
90         version for the source in testing, if any
91
92         * dak/process_unchecked.py (check_transition): Added. Checks if a
93         release team member defined a transition, and rejects based on
94         that data.
95         (process_it): Use it.
96         (check_transition): Warn on broken transitions file and return,
97         not doing anything.
98         (check_transition): Moved out of here, into daklib/queue
99         (process_it): Call check_transitions only if
100         changes[architecture] has source included.
101         (check_transition): Now call the database.get_testing_version
102
103 2008-02-06  Joerg Jaspert  <joerg@debian.org>
104
105         * daklib/utils.py (check_signature): Make variable key available,
106         so we can access it.
107
108 2008-01-07  Joerg Jaspert  <joerg@debian.org>
109
110         * dak/examine_package.py (check_deb): Remove linda call. It
111         provides no added benefit to lintian anymore.
112
113 2008-01-06  Joerg Jaspert  <joerg@debian.org>
114
115         * dak/examine_package.py (do_lintian): lintian now supports html
116         coloring, so use it.
117         (do_command): Dont escape html chars if param escaped = 1
118
119 2007-12-31  Anthony Towns  <ajt@debian.org>
120
121         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
122         when processing result of check_dsc_against_db so we don't promote
123         warnings to rejections.
124
125 2007-12-30  Joerg Jaspert  <joerg@debian.org>
126
127         * dak/dak.py (init): add show-new. This is based on a patch
128         submitted by Thomas Viehmann in Bug #408318, but large parts of
129         handling it are rewritten and show-new is done by me.
130
131         * dak/queue_report.py (table_row): Add link to generated html page
132         for NEW package.
133
134         * dak/show_new.py: new file, generates html overview for NEW
135         packages, similar to what we see with examine-package.
136
137         * config/debian/cron.hourly: Add show-new call
138
139         * config/debian/dak.conf: Add HTMLPath for Show-New
140
141         * dak/examine_package.py (print_copyright): ignore stderr when
142         finding copyright file.
143         (main): add html option
144         (html_escape): new function
145         (escape_if_needed): ditto
146         (headline): ditto
147         (colour_output): ditto
148         (print_escaped_text): ditto
149         (print_formatted_text): ditto
150         - use those functions everywhere where we generate output, as they
151         easily know if we want html or not and just DTRT
152         (do_lintian): new function
153         (check_deb): use it
154         (output_deb_info): Use print_escaped_text, not print_formatted_text.
155         Also import daklib.queue, determine_new now lives there
156
157         Also add a variable to see if we want html output. Default is
158         disabled, show_new enables it for its use.
159         Most of html, besides header/footer are in examine_package instead
160         of show_new, as it makes it a whole lot easier to deal with it at
161         the point the info is generated.
162
163
164         * dak/process_new.py (determine_new): Moved out of here.
165         (check_valid): Moved out of here.
166         (get_type): Moved out of here.
167
168         * daklib/queue.py (determine_new): Moved here.
169         (check_valid): Moved here.
170         (get_type): Moved here.
171
172         * dak/init_db.py (do_section): Remove non-US code
173
174         * dak/make_overrides.py (main): ditto
175
176         * dak/process_new.py (determine_new): ditto
177
178         * daklib/queue.py (Upload.in_override_p),
179         (Upload.check_override): ditto
180
181         * daklib/utils.py (extract_component_from_section):,
182         (poolify): ditto
183
184         * dak/import_archive.py (update_section): ditto
185
186         * dak/symlink_dists.py (fix_component_section): ditto
187
188         * scripts/debian/mkmaintainers: ditto
189
190         * scripts/debian/update-mirrorlists (masterlist): ditto
191
192         * config/debian-non-US/*: Remove subdir
193
194         * scripts/debian/update-readmenonus: Removed.
195
196
197 2007-12-28  Anthony Towns  <ajt@debian.org>
198
199         * daklib/utils.py (check_signature): add NOTATION_DATA and
200         NOTATION_NAME to known keywords.
201
202         * daklib/queue.py (Upload.check_source_against_db): 
203
204         * dak/make_suite_file_list.py: add -f/--force option.
205
206         * dak/generate_releases.py: add -a/--apt-conf=FILE and
207         -f/--force-touch options.  Pull version info from the database.
208         Make suite description optional.
209
210         * config/debian/dak.conf: update
211         Reject-Proposed-Updates::MoreInfoURL.  Comment out
212         Suite::Stable::Version and ::Description.
213
214         * config/debian/apt.conf: Add hurd-i386 to unstable
215         debian-installer stanza.
216
217 2007-12-28  Joerg Jaspert  <joerg@debian.org>
218
219         * KEYEXPIRED is actually a known keyword. We do check it earlier
220         on and reject in case the sig is bad (or unknown)
221
222 2007-12-24  Joerg Jaspert  <joerg@debian.org>
223
224         * Also run lintian on the .dsc file to check the source itself.
225
226         * Fix the direct usage of ar | tar etc to get the copyright file
227         and use dpkg-deb, which is made for this and makes us able to
228         process data.tar.bz2 (or whatever format it will be in the
229         future).
230
231 2007-12-21  Joerg Jaspert  <joerg@debian.org>
232
233         * Remove the (now useless) check for a pre-depends on dpkg for
234           binaries that contain bzip2 compressed data tarballs.
235
236 2007-08-28  Anthony Towns  <ajt@debian.org>
237
238         * process_unchecked.py: Add support for automatic BYHAND
239         processing.
240         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
241         processing of tag-overrides.
242         * examine_package.py: Summarise duplicate copyright file entries
243         (same md5sum) with a reference to the previous instance, rather
244         than repeating them.
245         * process_new.py: When rejecting from the p-u-new or o-p-u-new
246         holding queues, don't worry if dak has its own reasons for
247         rejecting the package as well as the SRMs.
248
249 2007-06-19  Anthony Towns  <ajt@debian.org>
250
251         * Add nm.debian.org pseudopackage
252
253 2007-06-18  Anthony Towns  <ajt@debian.org>
254
255         * daklib/logging.py: Set umask to not exclude group-writability
256         so we don't get reminded at the start of each month. Thanks to
257         Random J.
258         * dak/override.py: More changes from Herr von Wifflepuck: warn
259         if section of source is different to binary section; restore
260         functionality on source-only overrides; croak if trying to set
261         priority of a source override; never set priority of source
262         overrides; correct typo in logging (s/priority/section/ at
263         one place)
264
265         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
266         * config/debian/cron.daily: auotmatically accept/reject
267         oldstable-proposed-updates based on COMMENTS directory
268
269 2007-06-18  Anthony Towns  <ajt@debian.org>
270
271         * config/debian/apt.conf, config/debian/apt.conf.stable,
272         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
273         (sarge), support for oldstable-proposed-updates, dropping m68k
274         from etch, creating etch-m68k suite, creating lenny.
275
276         * config/debian/vars: update for lenny
277
278         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
279         drop upload limitations, add release postgres user
280         
281         * dak/process_new.py: support for automatically accepting and rejecting
282         packages from proposed-updates holding queues via COMMENTS directory
283         * cron.daily: automatically process COMMENTS-based approvals
284         and rejections for proposed-updates holding queues
285
286         * dak/process_unchecked.py: add support for oldproposedupdates
287         holding queue
288
289         * dak/control_suite.py: allow control-suite to work with etch-m68k
290
291         * dak/generate_releases.py: unlink old Release files before updating
292         them if nlinks > 1 (ie, if two files used to be the same, maybe they
293         shouldn't be when generate-releases is run)
294
295         * dak/generate_releases.py: add a couple of commented lines to make
296         it easier to deal with point releases
297
298         * dak/make_overrides.py: generate overrides for !contrib udebs
299
300         * docs/README.stable-point-release: update docs for doing a
301         point release
302
303 2007-03-05  Anthony Towns  <ajt@debian.org>
304
305         * config/debian/dak.conf: update for 3.1r5.
306         * scripts/debian/ssh-move: add ssh-move script from debbugs
307         * config/debian/cron.unchecked: push version info to debbugs using
308         ssh-move.
309
310 2007-02-14  James Troup  <troup@ries.debian.org>
311
312         * docs/README.config: remove Dinstall::GroupOverrideFilename.
313         * config/debian/dak.conf: likewise.
314         * config/debian-non-US/dak.conf: likewise.
315         * config/debian-security/dak.conf: likewise.
316
317         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
318         experimental differently, just close the bugs and let version
319         tracking sort it out.
320          (nmu_p): remove entire class - now unused.
321          (Upload.__init__): don't use nmu_p.
322
323 2007-02-08  Anthony Towns  <ajt@debian.org>
324
325         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
326         signing key.  Drop maximum index diffs down to 14.
327
328         * config/debian/apt.conf: add udeb support for non-free (testing,
329         unstable) and experimental.
330         * config/debian/dak.conf: likewise.
331
332         * dak/generate_releases.py (main): handle udebs in any component.
333
334         * daklib/queue.py (Upload.build_summaries): handle files without a
335         'type' gracefully.
336
337         * dak/generate_releases.py (print_sha256_files): new function.
338         (main): use it.
339
340         * dak/process_accepted.py (stable_install): fix name of template
341         mail.
342
343         * dak/process_unchecked.py (is_stableupdate): fix invocation of
344         database.get_suite_id().
345
346         * templates/process-new.bxa_notification: Update on request
347         of/after discussion with BIS staff.
348
349         * scripts/debian/mkfilesindices: also handle proposed-updates.
350
351 2007-02-08  Ryan Murray  <rmurray@debian.org>
352
353         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
354         group name for chgrp of mail archives.
355
356         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
357         orig.tar.gz's by picking the first one by file id.
358
359         * dak/override.py (main): limit to binary overrides only for now.
360         (usage): update to match.
361
362         * config/debian/cron.daily: track when we have the accepted lock
363         and clean it up on exit if we have it.  Take/check the
364         cron.unchecked lock just before traping to cleanup on exit.
365         Remove potato override handling.  Remove any dangling symlinks in
366         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
367
368         * config/debian/apt.conf: change default compression scheme for
369         both Sources and Packages to gzip and bzip2 rather than
370         uncompressed and gzip (Packages) and gzip (Sources).  Use old
371         defaults for proposed-updates.
372
373         * dak/control_overrides.py (main): refuse to operate on
374         untouchable suites.
375
376         * config/debian/pseudo-packages.maintainers: drop install,
377         installation, boot-floppy, slink-cd, potato-cd and
378         nonus.debian.org.  Update base.
379         * config/debian/pseudo-packages.description: likewise.
380
381         * daklib/utils.py (re_srchasver): new regex.
382         (parse_changes): use regex to split 'Source (Version)' style
383         Source fields into 'source' and 'source-version'.
384
385         * config/debian/cron.daily: use $base instead of hardcoding path
386         name.
387
388         * scripts/debian/mkfilesindices: source 'vars' file and use it's
389         variables instead of hardcoding path names.
390
391         * config/debian/apt.conf: switch from /org to /srv.
392         * config/debian/apt.conf.buildd: likewise.
393         * config/debian/apt.conf.stable: likewise.
394         * config/debian/cron.daily: likewise.
395         * config/debian/cron.hourly: likewise.
396         * config/debian/cron.monthly: likewise.
397         * config/debian/cron.unchecked: likewise.
398         * config/debian/cron.weekly: likewise.
399         * config/debian/dak.conf: likewise.
400         * config/debian/vars: likewise.
401         * scripts/debian/mkfilesindices: likewise.
402         
403 2007-02-08  James Troup  <james@nocrew.org>
404
405         * dak/process_unchecked.py (check_signed_by_key): new function to
406         ensure .changes files are signed by an authorized uploader.
407         (process_it): use it.
408
409         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
410         to configure per suite/component/architecture binary upload
411         restrictions.
412
413 2006-10-09  James Troup  <james.troup@canonical.com>
414
415         * dak/process_unchecked.py (check_timestamps): change match to
416         search as recent versions of python-apt prefix the string with 'E: '.
417
418 2006-06-26  Ryan Murray  <rmurray@debian.org>
419
420         * dak/process_unchecked.py (check_files): strip optional source version
421         from Source: field in changes file, and ensure what is left is a valid
422         package name.
423
424 2006-06-23  Ryan Murray  <rmurray@debian.org>
425
426         * dak/process_unchecked.py (check_files): also check ProposedUpdates
427         queue for source.
428
429 2006-06-18  Ryan Murray  <rmurray@debian.org>
430
431         * dak/scripts/debian/update-ftpstats: look for dak named processes in
432         the log, too.
433
434         * dak/process_unchecked.py (check_files): only check embargoed and
435         unembargoed queues if the keys are set.
436
437         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
438         and bzip2 for etch.
439
440 2006-06-16  James Troup  <james@nocrew.org>
441
442         * dak/dak.py (init): add new-security-install.
443
444         * dak/new_security_install.py: cleanups and adapt for new naming
445         scheme and other changes.
446
447 2006-06-16  Anthony Towns  <ajt@debian.org>
448
449         * dak/new_security_install.py: initial version imported from
450         klecker.
451
452 2006-06-16  James Troup  <james@nocrew.org>
453
454         [Merged changes from klecker - original author unknown.]
455
456         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
457
458         * dak/security_install.py (do_upload): fix check for oldstable and
459         upload file list handling.
460
461         * dak/process_unchecked.py (check_files): update "check for
462         source" code to also look in Embargoed and Unembargoed queues.
463         (is_unembargo): fix handling of Dir::Queue::Disembargo.
464
465         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
466
467         * config/debian-security/vars (disembargo): add.
468
469         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
470         update.
471         (Process-Unchecked::AcceptedLockFile): add.
472         (Suite::Testing): clean up Version and Description.
473         (SuiteMappings): add silent map from etch-secure to testing.
474
475         * config/debian-security/cron.unchecked: add support for
476         disembargoed queues.
477
478         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
479         files too.
480
481         * config/debian-security/apt.conf: add amd64 to architectures for
482         testing-security.
483
484 2006-06-11  James Troup  <troup@spohr.debian.org>
485
486         * config/debian/cron.daily: invoke process-accepted not
487         process-unchecked.
488
489         * config/debian/vars (scriptsdir): new variable.
490         * config/debian/cron.daily: use it.
491
492         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
493         $base/misc/ instead of versioned $masterdir.  Correct 'dak
494         make-maintainers' invocation to look in $configdir for
495         pseudo-packages.maintainers.
496
497         * daklib/queue.py (Upload.do_reject): use correct name for
498         rejection template.
499
500 2006-06-11  James Troup  <james@nocrew.org>
501
502         * dak/override.py (main): temporarily add content of old X-Katie
503         header back as the PTS apparently filters on it.
504         * dak/process_accepted.py (main): likewise.
505         * dak/process_new.py (main): likewise.
506         * dak/process_unchecked.py (main): likewise.
507         * dak/reject_proposed_updates.py (main): likewise.
508         * dak/rm.py (main): likewise.
509         * daklib/queue.py (Upload.do_reject): likewise.
510
511         * config/debian/cron.unchecked: set -u to error out on undefined
512         variables.  Preset LOCKDAILY to "" accordingly.
513         * config/debian/cron.hourly: likewise.
514         * config/debian/cron.monthly: likewise.
515         * config/debian/cron.weekly: likewise.
516
517         * config/debian/vars (configdir): add new variable pointing to
518         this directory.
519
520         * config/debian/cron.daily: use $configdir inplace of $masterdir
521         when that's what we mean, and don't cd into $masterdir just to run
522         dak scripts as we don't need to do that anymore.
523         * config/debian/cron.hourly: likewise.
524         * config/debian/cron.unchecked: likewise.
525         * config/debian/cron.weekly: likewise.
526
527         * config/debian/dak.conf
528         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
529         user back to list of known users as it's non-trivial to entirely
530         change the owner of a database with postgresql 7.4.
531
532         * daklib/queue.py (Upload.source_exists): use string object
533         methods rather than string module.
534         (Upload.get_anyversion): likewise.
535
536         * daklib/utils.py (validate_changes_file_arg): update filename
537         slicing to cope with new .dak filenames.
538
539         * dak/ls.py (main): add back 'heidi' as a valid argument for
540         -f/--format as people are using it in scripts and breaking that
541         without warning seems rude.
542
543 2006-05-21  James Troup  <james@nocrew.org>
544
545         * dak/rm.py (main): use string .isdigit() rather than
546         utils.str_isnum().
547         * dak/process_new.py (edit_overrides): likewise.
548
549         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
550         string import.
551
552 2006-05-21  James Troup  <james@nocrew.org>
553
554         * dak/check_archive.py (check_indices_files_exist): use list
555         comprehension instead of map().  No longer need to import
556         deprecated string module as a side-effect.
557         * dak/check_overrides.py (process): likewise.
558         (main): likewise.
559         * dak/cruft_report.py (do_obsolete_source): likewise.
560         (main): likewise.
561         * dak/ls.py (main): likewise.
562         * dak/make_suite_file_list.py (write_filelists): likewise.
563         * dak/process_accepted.py (stable_install): likewise.
564         * dak/rm.py (main): likewise.
565         * dak/stats.py (number_of_packages): likewise.
566         * daklib/logging.py (Logger.log): likewise.
567         * daklib/queue.py (Upload.source_exists): likewise.
568         (Upload.cross_suite_version_check): likewise.
569         * daklib/utils.py (parse_args): likewise.
570
571 2006-05-21  James Troup  <james@nocrew.org>
572
573         * daklib/utils.py (process_gpgv_output): new function, split out
574         of check_signature().
575         (check_signature): adapt accordingly.
576         (retrieve_key): new function that will try to retrieve the key
577         that signed a given file from a keyserver.
578         (check_signature): add 'autofetch' argument that if not set
579         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
580         If 'autofetch' is true, invoke retrieve_key().  
581
582         * docs/README.config: document Dinstall::KeyAutoFetch and
583         Dinstall:KeyServer.
584
585 2006-05-20  James Troup  <james@nocrew.org>
586
587         * dak/find_null_maintainers.py (main):
588         s/createtimestamp/createTimestamp/ to make things work with modern
589         slapd.
590
591         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
592         Stable::Version and Stable::Description for 3.1r2.
593
594         * config/debian-non-US/dak.conf: sync with klecker - update
595         version number of 3.0 and MoreInfoURL.
596
597         * docs/README.stable-point-release: Add notes about updating
598         dak.conf and Reject-Proposed-Updates section in particular.
599         s/woody/stable/.  Also need to update README.html.
600
601         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
602
603         * config/debian/apt.conf: Add udeb tree for proposed-updates.
604
605 2006-05-20  Ryan Murray  <rmurray@debian.org>
606
607         * scripts/debian/update-ftpstats: new script to update daily
608         architecture size graph data.
609
610         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
611         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
612         there.
613
614         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
615         before we finish.  Don't push to merkel.
616
617         * dak/process_unchecked.py (check_changes): Also look in
618         ProposedUpdates queue dir.
619         (check_files): likewise.
620
621 2006-05-20  Anthony Towns  <ajt@debian.org>
622
623         * scripts/debian/mkfilesindices: new script to generate file
624         indices used for partial mirroring.
625
626         * config/debian/cron.daily: add progress timestamps.
627
628         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
629         amd64 to testing, unstable and experimental.  Drop sh from
630         experimental.  Move Experimental to dists/experimental.  Add
631         Dir::ProposedUpdates.  Add Architectures::amd64.
632
633         * config/debian/apt.conf: add amd64 to testing, unstable and
634         experimental.  Drop uncompressed Packages files from testing. Drop
635         sh from experimental.  Move experimental to dists/experimental/.
636
637         * config/debian/vars (archs): add amd64.
638
639         * dak/process_unchecked.py (action): Add support for
640         proposed-updates approval queue.
641         (is_stableupdate): new function - checks if the upload is targeted
642         at proposed-updates.
643         (do_stableupdate): likewise - moves upload to proposed-updates
644         holding area.
645
646         * dak/process_new.py (do_new): warn if original or new target
647         suite are invalid.
648
649         * dak/generate_releases.py (print_md5sha_files): less whitespace
650         between the hash and size.
651
652         * dak/generate_index_diffs.py (genchanges): don't say we're not
653         doing anything.  Better formatting of other messages.
654         (main): don't skip experimental and remove some 'doing stuff'
655         prints.
656
657 2006-05-18  James Troup  <james@nocrew.org>
658
659         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
660         query.
661
662         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
663         docstrings, untabify, don't shadow builtins, lowercase non-global
664         variable names, spaces after commas.  Also bail if given any
665         arguments since we don't accept any.
666         * dak/init_db.py: likewise.  Also split large main() into
667         subfunctions and rename get() to sql_get().
668
669         * dak/init_db.py (main): check returned value from
670         database.get_archive_id().
671
672         * dak/dak.py: renamed from shell.py.  Update to support new source
673         layout.  Created init() and usage() functions.  Various
674         pylint-inspired cleanups.  Use daklib utils.warn() and
675         utils.fubar().  Change 'functionality' variable to only have
676         (command, description) and always invoke main() when running the
677         module.  Also support -h.
678
679 2006-05-17  James Troup  <james@nocrew.org>
680
681         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
682         imports of and calls to daklib modules.  Change script name
683         everywhere, i.e. in output, mails, comments and configuration tree
684         + filenames.  Also update references to other renamed scripts,
685         classes and templates.  Use '.dak' instead of '.katie' for the
686         queue info storage files.
687         (Renamed from tea)
688         * dak/check_overrides.py: likewise.  (Renamed from cindy)
689         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
690         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
691         * dak/clean_queues.py: likewise.  (Renamed from shania)
692         * dak/clean_suites.py: likewise.  (Renamed from rhona)
693         * dak/compare_suites.py: likewise.  (Renamed from andrea)
694         * dak/control_overrides.py: likewise.  (Renamed from natalie)
695         * dak/control_suite.py: likewise.  (Renamed from heidi)
696         * dak/cruft_report.py: likewise.  (Renamed from rene)
697         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
698         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
699         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
700         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
701         * dak/import_archive.py: likewise.  (Renamed from neve)
702         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
703         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
704         * dak/init_db.py: likewise. (Renamed from alyson)
705         * dak/init_dirs.py: likewise. (Renamed from rose)
706         * dak/ls.py: likewise. (Renamed from madison)
707         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
708         * dak/make_overrides.py: likewise.  (Renamed from denise)
709         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
710         * dak/mirror_split.py: likewise.  (Renamed from billie)
711         * dak/override.py: likewise.  (Renamed from alicia)
712         * dak/poolize.py: likewise.  (Renamed from catherine)
713         * dak/process_accepted.py: likewise.  (Renamed from kelly)
714         * dak/process_new.py: likewise.  (Renamed from lisa)
715         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
716         * dak/queue_report.py: likewise.  (Renamed from helena)
717         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
718         * dak/rm.py: likewise.  (Renamed from melanie)
719         * dak/security_install.py: likewise.  (Renamed from amber)
720         * dak/split_done.py: likewise.  (Renamed from nina)
721         * dak/stats.py: likewise.  (Renamed from saffron)
722         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
723         * daklib/database.py: likewise.  (Renamed from db_access)
724         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
725         * daklib/utils.py: likewise.
726
727         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
728         doesn't need to notify anyone" string.
729         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
730
731         * dak/process_accepted.py (init): drop -V/--version argument.
732         * dak/process_new.py (init): likewise.
733         * dak/process_unchecked.py (init): likewise.
734         * dak/reject_proposed_updates.py (init): likewise
735
736         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
737
738         * dak/stats.py: in usage() output change STAT to MODE.
739
740 2006-05-15  James Troup  <james@nocrew.org>
741
742         * dak/queue_report.py: remove unused encodings imports.
743
744         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
745         imports.  Initalize 'Cnf' as a global.
746         (BillieDB._internal_recurse): fix 'util.' typo.
747
748         * dak/import_ldap_fingerprints.py (main): drop unused time import and
749         commented out time check for LDAP search.
750
751 2005-12-16  Ryan Murray  <rmurray@debian.org>
752
753         * halle: add support for udebs
754         * kelly: stable_install: add support for binNMU versions
755
756 2005-12-05  Anthony Towns  <aj@erisian.com.au>
757
758         * katie.py: Move accept() autobuilding support into separate function 
759         (queue_build), and generalise to build different queues
760
761         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
762
763         * jennifer: Initial support for enabling embargo handling with the
764         Dinstall::SecurityQueueHandling option.
765         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
766         functions.
767
768         * katie.conf-security: Include embargo options
769         * katie.conf-security: Add Lock dir
770         * init_pool.sql-security: Create disembargo table
771         * init_pool.sql-security: Add constraints for disembargo table
772
773 2005-11-26  Anthony Towns  <aj@erisian.com.au>
774
775         * Merge of changes from klecker, by various people
776
777         * amber: special casing for not passing on amd64 and oldstable updates
778         * amber: security mirror triggering
779         * templates/amber.advisory: updated advisory structure
780         * apt.conf.buildd-security: update for sarge's release
781         * apt.conf-security: update for sarge's release
782         * cron.buildd-security: generalise suite support, update for sarge's release
783         * cron.daily-security: update for sarge's release, add udeb support
784         * vars-security: update for sarge's release
785         * katie.conf-security: update for sarge's release, add amd64 support,
786         update signing key
787
788         * docs/README.names, docs/README.quotes: include the additions
789
790 2005-11-25  Anthony Towns  <aj@erisian.com.au>
791
792         * Changed accepted_autobuild to queue_build everywhere.
793         * Add a queue table.
794         * Add a "queue" field in the queue_build table (currently always 0)
795
796         * jennifer: Restructure to make it easier to support special
797         purpose queues between unchecked and accepted.
798
799 2005-11-25  Anthony Towns  <aj@erisian.com.au>
800
801         * Finishing merge of changes from spohr, by various people still
802
803         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
804         works
805         * jennifer: Re-enable .deb ar format checking
806         * katie.py: Convert to +bX binNMU special casing
807         * rhona: Add some debug output when deleting binaries
808         * cron.daily: Add emilie
809         * cron.unchecked: Add lock files
810
811 2005-11-15  Anthony Towns  <aj@erisian.com.au>
812
813         * Merge of changes from spohr, by various people.
814
815         * tiffani: new script to do patches to Packages, Sources and Contents
816         files for quicker downloads.
817         * ziyi: update to authenticate tiffani generated files
818
819         * dak: new script to provide a single binary with less arbitrary names
820         for access to dak functionality.
821
822         * cindy: script implemented
823
824         * saffron: cope with suites that don't have a Priority specified
825         * heidi: use get_suite_id()
826         * denise: don't hardcode stable and unstable, or limit udebs to unstable
827         * denise: remove override munging for testing (now done by cindy)
828         * helena: expanded help, added new, sort and age options, and fancy headers
829         * jennifer: require description, add a reject for missing dsc file
830         * jennifer: change lock file
831         * kelly: propogation support
832         * lisa: honour accepted lock, use mtime not ctime, add override type_id
833         * madison: don't say "dep-retry"
834         * melanie: bug fix in output (missing %)
835         * natalie: cope with maintainer_override == None; add type_id for overrides
836         * nina: use mtime, not ctime
837
838         * katie.py: propogation bug fixes
839         * logging.py: add debugging support, use | as the logfile separator
840
841         * katie.conf: updated signing key (4F368D5D)
842         * katie.conf: changed lockfile to dinstall.lock
843         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
844         * katie.conf: added tiffani, cindy support
845         * katie.conf: updated to match 3.0r6 release
846         * katie.conf: updated to match sarge's release
847
848         * apt.conf: update for sarge's release
849         * apt.conf.stable: update for sarge's release
850         * apt.conf: bump daily max Contents change to 25MB from 12MB
851
852         * cron.daily: add accepted lock and invoke cindy  
853         * cron.daily: add daily.lock
854         * cron.daily: invoke tiffani
855         * cron.daily: rebuild accepted buildd stuff
856         * cron.daily: save rene-daily output on the web site
857         * cron.daily: disable billie
858         * cron.daily: add stats pr0n
859
860         * cron.hourly: invoke helena
861
862         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
863         * vars: add lockdir, add etch to copyoverrides
864         * Makefile: add -Ipostgresql/server to CXXFLAGS
865
866         * docs/: added README.quotes
867         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
868         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
869
870         * TODO: correct spelling of "conflicts"
871
872 2005-05-28  James Troup  <james@nocrew.org>
873
874         * helena (process_changes_files): use MTIME rather than CTIME (the
875         C's not for 'creation', stupid).
876         * lisa (sort_changes): likewise.
877
878         * jennifer (check_distributions): use has_key rather than an 'in'
879         test which doesn't work with python2.1.  [Probably by AJ]
880
881 2005-03-19  James Troup  <james@nocrew.org>
882
883         * rene (main): use Suite::<suite>::UdebComponents to determine
884         what components have udebs rather than assuming only 'main' does.
885
886 2005-03-18  James Troup  <james@nocrew.org>
887
888         * utils.py (rfc2047_encode): use codecs.lookup() rather than
889         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
890         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
891         <andrew@ubuntu.com>.
892
893 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
894
895         * helena: add -n/--new HTML output option and improved sorting
896         options.
897
898 2005-03-06  Ryan Murray  <rmurray@debian.org>
899
900         * shania(main): use Cnf::Dir::Reject instead of REJECT
901
902 2005-02-08  James Troup  <james@nocrew.org>
903
904         * rene (main): add partial NBS support by checking that binary
905         packages are built by their real parent and not some random
906         stranger.
907         (do_partial_nbs): likewise.
908
909 2005-01-18  James Troup  <james@nocrew.org>
910
911         * katie.py (Katie.build_summaries): avoid leaking file handle when
912         extracting package description.
913         (Katie.force_reject): remember and close each file descriptor we
914         use.
915         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
916         s/reason_file/reason_fd/ because it's a file descriptor.
917         (Katie.check_dsc_against_db): avoid leaking file handle whenever
918         invoking apt_pkg.md5sum().
919
920         * jennifer (check_deb_ar): new function: sanity check the ar
921         contents of a .deb.
922         (check_files): use it.
923         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
924         found.
925         (check_files): accept 'raw-installer' as an alias for 'byhand'.
926
927 2005-01-14  Anthony Towns  <ajt@debian.org>
928
929         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
930
931         * propup stuff (thanks to Andreas Barth)
932         * katie.conf: add stable MustBeOlderThan testing, add -security
933           propup
934         * jennifer: set distribution-version in .katie if propup may be needed
935         * katie.py: add propogation to cross_suite_version_check
936
937 2004-11-27  James Troup  <james@nocrew.org>
938
939         * nina: new script to split monolithic queue/done into date-based
940         hierarchy.
941
942         * rene (usage): document -s/--suite.
943         (add_nbs): use .setdefault().
944         (do_anais): likewise.
945         (do_nbs): don't set a string to "" and then += it.
946         (do_obsolete_source): new function - looks for obsolete source
947         packages (i.e source packages whose binary packages are ALL a)
948         claimed by someone else and b) newer when built from the other
949         source package).
950         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
951         and 'full' check modes.  Check for obsolete source packages.
952         linux-wlan-ng has been fixed - remove hideous bodge.
953
954         * jennifer (check_distributions): support 'reject' suite map type.
955
956         * utils.py (validate_changes_file_arg): s/file/filename/.
957         s/fatal/require_changes/.  If require_changes is -1, ignore errors
958         and return the .changes filename regardless.
959         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
960         (re_no_revision): don't escape '-', it's not a special character.
961         s/\*/+/ as there must be at least one non-dash character after the
962         dash in a revision.  Thanks to Christian Reis for noticing both of
963         these.
964
965         * ashley (main): pass require_changes=-1 to
966         utils.validate_changes_file_arg().
967
968         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
969         Team <debian-kernel@lists.debian.org>'.
970
971         * katie.py (Katie.in_override_p): fix .startswith() usage.
972
973         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
974         (Lauren::MoreInfoURL): update to 3.0r3.
975         (Suite::Stable::Version): likewise.
976         (Suite::Stable::Description): likewise.
977
978         * cron.daily: disable automatic task override generation.
979
980         * cindy (process): restrict "find all packages" queries by
981         component.  Respect Options["No-Action"].
982         (main): add -n/--no-action support.  Only run on unstable.  Rename
983         type to otype (pychecker).
984
985 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
986
987         * katie.conf (Billie::BasicTrees): add all architectures.
988         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
989         'everything'.
990
991         * cron.daily: Update a 'current' symlink when creating the
992         post-daily-cron-job database backup to aid mirroring to merkel.
993         Run billie.
994
995         * billie (BillieTarget.poolish_match): handle .udeb too.
996
997 2004-10-13  Ryan Murray  <rmurray@debian.org>
998
999         * amber (do_upload): Sort changes files in "katie" order so that
1000           source always arrives before binary-only rebuilds
1001         
1002 2004-10-05  James Troup  <james@nocrew.org>
1003
1004         * jennifer (check_dsc): correct reject message on invalid
1005         Maintainer field.
1006
1007 2004-09-20  James Troup  <james@nocrew.org>
1008
1009         * alicia: remove unused 'pwd' import.
1010
1011         * tea (check_override): underline suite name in output properly.
1012
1013         * rene (main): read a compressed Packages file.
1014         * tea (validate_packages): likewise.
1015
1016         * katie.py (re_fdnic): add 'r' prefix.
1017         (re_bin_only_nmu_of_mu): likewise.
1018         (re_bin_only_nmu_of_nmu): likewise.
1019
1020         * madison (main): retrieve component information too and display
1021         it if it's not 'main'.
1022         * melanie (reverse_depends_check): likewise.
1023
1024         * utils.py (pp_dep): renamed...
1025         (pp_deps): ... to this.
1026         * jeri (check_dep): update calls to utils.pp_deps().
1027         * melanie (reverse_depends_check): likewise.
1028
1029         * jennifer (check_changes): move initalization of email variables
1030         from here...
1031         (process_it): ...to here as we no longer always run
1032         check_changes().  Don't bother to initialize
1033         changes["architecture"].
1034
1035         * denise (list): renamed to...
1036         (do_list): ...this to avoid name clash with builtin 'list'.
1037         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1038         for dictionaries.
1039         (main): Likewise for name clash avoidance and also
1040         s/override_type/suffix/.  Adjust call to do_list().
1041
1042 2004-09-01  Ryan Murray  <rmurray@debian.org>
1043
1044         * tea (check_files): check the pool/ directory instead of dists/
1045
1046 2004-08-04  James Troup  <james@nocrew.org>
1047
1048         * jenna (cleanup): use .setdefault() for dictionaries.
1049         (write_filelists): likewise.
1050
1051         (write_filelists): Use utils.split_args() not split() to split
1052         command line arguments.
1053         (stable_dislocation_p): likewise.
1054
1055         (write_filelists): Add support for mapping side of suite-based
1056         "Arch: all mapping".
1057         (do_da_do_da): ensure that if we're not doing all suites that we
1058         process enough to be able correct map arch: all packages.
1059
1060         * utils.py (cant_open_exc): correct exception string,
1061         s/read/open/, s/.$//.
1062
1063         * templates/amber.advisory: update to match reality a little
1064         better.
1065
1066         * melanie (reverse_depends_check): read Packages.gz rather than
1067         Packages.
1068
1069         * jennifer (check_files): check for unknown component before
1070         checking for NEWness.
1071
1072         * katie.py (Katie.in_override_p): use .startswith in favour of a
1073         slice.
1074
1075         * docs/melanie.1.sgml: document -R/--rdep-check.
1076
1077 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1078
1079         * billie (main): Make the verbatim lists include all the README
1080           elements.
1081         * docs/README.names: Add billie in (correcting oversight)
1082
1083 2004-07-01  James Troup  <james@nocrew.org>
1084
1085         * emilie (main): handle woody's case-sensitive python-ldap,
1086         s/keyfingerprint/keyFingerPrint/.
1087
1088 2004-06-25  James Troup  <james@nocrew.org>
1089
1090         * debian/control (Depends): add dpkg-dev since jennifer uses
1091         dpkg-source.
1092
1093 2004-06-24  James Troup  <james@nocrew.org>
1094
1095         * melanie (main): s/file/temp_file/ and close file handle before
1096         removing the temporary file.
1097         (main): don't warn about needing a --carbon-copy if in no-action
1098         mode.
1099
1100         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1101         (main): likewise.
1102
1103         * test/006/test.py (main): check bracketed email-only form.
1104
1105         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1106         email-only, strip the brackets so we don't end up with
1107         <<james@nocrew.org>>.
1108
1109 2004-06-20  James Troup  <james@nocrew.org>
1110
1111         * jennifer (process_it): only run check_changes() if
1112         check_signature() returns something.  (Likewise)
1113
1114         * utils.py (changes_compare): if there's no changes["version"] use
1115         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1116
1117 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1118
1119         * jeri (pp_dep): moved from here to ...
1120         * utils.py (pp_dep): here.
1121
1122         * melanie (main): add reverse dependency checking.
1123
1124 2004-06-17  James Troup  <james@nocrew.org>
1125
1126         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1127         * tea (check_dscs): likewise.
1128
1129         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1130         change from boolean to a variable with 3 possible values, 0 and 1
1131         as before, -1 means don't require a signature.  Makes
1132         parse_changes() useful for parsing arbitary RFC822-style files,
1133         e.g. 'Release' files.
1134         (check_signature): add support for detached signatures by passing
1135         the files the signature is for as an optional third argument.
1136         s/filename/sig_filename/g.  Add a fourth optional argument to
1137         choose the keyring(s) to use.  Don't os.path.basename() the
1138         sig_filename before checking it for taint.
1139         (re_taint_free): allow '/'.
1140
1141 2004-06-11  James Troup  <james@nocrew.org>
1142
1143         * tea (check_files): make override.unreadable optional.
1144         (validate_sources): close the Sources file handle.
1145
1146         * docs/README.first: clarify that 'alyson' and running
1147         add_constraints.sql by hand is something you only want to do if
1148         you're not running 'neve'.
1149
1150         * docs/README.config (Location::$LOCATION::Suites): document.
1151
1152         * db_access.py (do_query): also print out the result of the query.
1153
1154 2004-06-10  James Troup  <james@nocrew.org>
1155
1156         * katie.py (Katie.cross_suite_version_check): post-woody versions
1157         of python-apt's apt_pkg.VersionCompare() function apparently
1158         returns variable integers for less than or greater than results -
1159         update our result checking to match.
1160         * jenna (resolve_arch_all_vs_any): likewise.
1161         * charisma (main): likewise.
1162
1163 2004-06-09  James Troup  <james@nocrew.org>
1164
1165         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1166         valid_dsc_p and don't run check_source() if check_dsc() failed.
1167         (check_dsc): on fatal failures return 0 so check_source() isn't
1168         run (since it makes fatal assumptions about the presence of
1169         mandatory .dsc fields).  
1170         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1171
1172 2004-05-07  James Troup  <james@nocrew.org>
1173
1174         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1175         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1176
1177         * katie.conf (Dir::Override): remove duplicate definition.
1178
1179         * neve (get_or_set_files_id): add an always-NULL last_used column
1180         to output.
1181
1182 2004-04-27  James Troup  <james@nocrew.org>
1183
1184         * apt.conf-security (tree "dists/stable/updates"): add
1185         ExtraOverride - noticed by Joey Hess (#246050).
1186         (tree "dists/testing/updates"): likewise.
1187
1188 2004-04-20  James Troup  <james@nocrew.org>
1189
1190         * jennifer (check_files): check for existing .changes or .katie
1191         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1192         directories.
1193
1194 2004-04-19  James Troup  <james@nocrew.org>
1195
1196         * jennifer (check_source): handle failure to remove the temporary
1197          directory (used for source tree extraction) better, specifically:
1198          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1199          and try again and if that works, REJECT the package.
1200
1201 2004-04-17  James Troup  <james@nocrew.org>
1202
1203         * docs/madison.1.sgml: document -b/--binary-type,
1204         -g/--greaterorequal and -G/--greaterthan.
1205
1206         * madison (usage): -b/--binary-type only takes a single argument.
1207         Document -g/--greaterorequal and -G/--greaterthan.
1208         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1209
1210 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1211
1212         * billie: Cleaned up a load of comments, added /README.non-US to
1213           the verbatim matches list.
1214
1215 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1216
1217         * utils.py (size_type): Make it use real binary megabytes and
1218           kilobytes, instead of the marketing terms used before.
1219
1220 2004-04-07  James Troup  <james@nocrew.org>
1221
1222         * katie.py (Katie.check_dsc_against_db): in the case we're
1223         ignoring an identical-to-existing orig.tar.gz remember the path to
1224         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1225         location.path too to be able to do so.
1226
1227 2004-04-03  James Troup  <james@nocrew.org>
1228
1229         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1230         needed for new utils.rfc2047_encode() function.
1231
1232         * utils.py (re_parse_maintainer): allow whitespace inside the
1233         email address.
1234         (Error): new exception base class.
1235         (ParseMaintError): new exception class.
1236         (force_to_utf8): new function.
1237         (rfc2047_encode): likewise.
1238         (fix_maintainer): rework.  use force_to_utf8() to force name and
1239         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1240         return an rfc2047 value.  Validate the address to catch missing
1241         email addresses and (some) broken ones.
1242
1243         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1244         by adopting foo2047 return value.
1245         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1246         mandatory changes fields.  Promote changes and maintainer822 to
1247         mandatory fields.
1248         (Katie.update_subst): default maintainer2047 rather than
1249         maintainer822.  User foo2047 rather than foo822 when setting
1250         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1251
1252         * jennifer (check_changes): set default changes["maintainer2047"]
1253         and changes["changedby2047"] values rather than their 822
1254         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1255         to new utils.fix_maintainer() - reject on exception and adopt
1256         foo2047 return value.
1257         (check_dsc): if a mandatory field is missing don't do any further
1258         checks and as a result reduce paranoia about dsc[var] existence.
1259         Validate the maintainer field by calling new
1260         utils.fix_maintainer().
1261
1262         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1263         changes fields.  Promote maintainer822 to a mandatory changes
1264         field.  add "pool name" to files fields.
1265
1266         * test/006/test.py: new file - tests for new
1267         utils.fix_maintainer().
1268
1269 2004-04-01  James Troup  <james@nocrew.org>
1270
1271         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1272
1273         * jennifer (get_changelog_versions): create a symlink mirror of
1274         the source files in the temporary directory.
1275         (check_source): if check_dsc_against_db() couldn't find the
1276         orig.tar.gz bail out.
1277
1278         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1279         part of the upload store the path to it in pkg.orig_tar_gz and if
1280         it can't be found set pkg.orig_tar_gz to -1.
1281
1282         Explicitly return the second value as None in the (usual) case
1283         where we don't have to reprocess.  Remove obsolete diagnostic
1284         logs.
1285
1286         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1287
1288         * utils.py (temp_filename): new helper function that wraps around
1289         tempfile.mktemp().
1290
1291         * katie.py (Katie.do_reject): use it and don't import tempfile.
1292         * lisa (prod_maintainer): likewise.
1293         (edit_note): likewise.
1294         (edit_new): likewise.
1295         * lauren (reject): likewise.
1296         * melanie (main): likewise.
1297         * neve (do_sources): likewise.
1298         * rene (main): likewise.
1299         * tea (validate_sources): likewise.
1300
1301 2004-03-31  James Troup  <james@nocrew.org>
1302
1303         * tea (validate_sources): remove unused 's' temporary variable.
1304
1305 2004-03-15  James Troup  <james@nocrew.org>
1306
1307         * jennifer (check_dsc): check changes["architecture"] for
1308         source before we do anything else.
1309
1310 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1311
1312         * billie: Added
1313         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1314
1315 2004-03-12  James Troup  <james@nocrew.org>
1316
1317         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1318
1319         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1320
1321         * katie.py (Katie.accept): add support for DebBugs Version
1322         Tracking by writing out .versions (generated in jennifer's
1323         get_changelog_versions()) and .debinfo (mapping of binary ->
1324         source) files.
1325
1326         * ashley (main): add dsc["bts changelog"].
1327
1328         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1329
1330         * jennifer (check_diff): obsoleted by check_source(), removed.
1331         (check_source): new function: create a temporary directory and
1332         move into it and call get_changelog_versions().
1333         (get_changelog_versions): new function: extract the source package
1334         and optionally parse debian/changelog to obtain the version
1335         history for the BTS.
1336         (process_it): call check_source() rather than check_diff().
1337
1338 2004-03-08  James Troup  <james@nocrew.org>
1339
1340         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1341         listbar" rather than "if listbar.count(varfoo)"' change on
1342         2004-02-24.
1343
1344 2004-03-05  James Troup  <james@nocrew.org>
1345
1346         * alicia (main): don't warn about not closing bugs - we don't
1347         manage overrides through the BTS.
1348
1349 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1350
1351         * docs/README.config: lots of updates and corrections.
1352         * docs/README.first: likewise.
1353
1354         * docs/README.config: drop unused Dir::Queue::Root.
1355         * katie.conf-non-US: likewise.
1356         * katie.conf: likewise.
1357         * katie.conf-security: likewise.
1358
1359 2004-02-27  James Troup  <james@nocrew.org>
1360
1361         * rose (process_tree): use 'if var in [ list ]' rather than long
1362         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1363         Michlmayr.
1364
1365         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1366         suggested by Martin Michlmayr.
1367         * catherine (poolize): likewise.
1368         * charisma (main): likewise.
1369         * halle (check_changes): likewise.
1370         * heidi (main): likewise.
1371         (process_file): likewise.
1372         * kelly (install): likewise.
1373         (stable_install): likewise.
1374         * utils.py (fix_maintainer): likewise.
1375
1376         * apt.conf: add support for debian-installer in testing-proposed-updates.
1377         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1378         add - set to main.
1379
1380         * mkmaintainers: add "-T15" option to wget of non-US packages file
1381         so that we don't hang cron.daily if non-US is down.
1382
1383         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1384
1385         * templates/jennifer.bug-close: add Source and Source-Version
1386         pseudo-headers that may be used for BTS Version Tracking someday
1387         [ajt@].
1388
1389         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1390         (main): likewise.
1391
1392         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1393
1394 2004-02-25  James Troup  <james@nocrew.org>
1395
1396         * katie.conf (SuiteMappings): don't map testing-security to
1397         proposed-updates.
1398
1399 2004-02-24  James Troup  <james@nocrew.org>
1400
1401         * katie.py (Katie.__init__): remove unused 'values' field.
1402
1403         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1404         rather than 's.count(c) > 0'.
1405
1406         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1407         rather than "if listbar.count(varfoo)".
1408         * halle (check_joey): likewise.
1409         * jeri (check_joey): likewise.
1410         * lisa (edit_index): likewise.
1411         * jenna (stable_dislocation_p): likewise.
1412
1413         * jennifer (main): remove unused global 'nmu'.
1414
1415 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1416
1417         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1418           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1419           the dak tools close bugs.
1420
1421 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1422
1423         * katie.conf (Alicia): Added an Alicia section with email address
1424         * templates/alicia.bug-close: Added
1425         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1426         * alicia (main): Added a -d/--done argument
1427
1428 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1429
1430         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1431
1432 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1433
1434         * lisa (prod_maintainer): Added function to prod the maintainer without
1435           accepting or rejecting the package
1436         * templates/lisa.prod: Added this template for the prodding mail
1437
1438         * .cvsignore: Added neve-files which turns up in new installations
1439
1440 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1441
1442         * alicia (usage): Fixed usage message to offer section and priority
1443           as seperately optional arguments.
1444         * alicia (main): Added a % (arg) interpolation needed when only
1445           one of section or priority is provided and it cannot be found.
1446
1447 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1448
1449         * alicia: Added
1450         * docs/alicia.1.sgml: Added
1451         * docs/Makefile: Added alicia to the list of manpages to build
1452         * docs/README.names: Noted what alicia does
1453         * docs/README.first: Noted where alicia is useful
1454
1455 2004-01-21  James Troup  <james@nocrew.org>
1456
1457         * madison (main): add -b/--binary-type.
1458         (usage): likewise.
1459
1460         * denise (main): generate debian-installer overrides for testing
1461         too.
1462         * apt.conf: add support for debian-installer in testing.
1463         * katie.conf (Suite::Testing::UdebComponents): set to main.
1464
1465         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1466         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1467         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1468
1469         * utils.py (parse_changes): don't process data not inside the
1470         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1471         pointing this out.
1472         * test/005/test.py (main): new test to test for above.
1473
1474 2004-01-04  James Troup  <james@nocrew.org>
1475
1476         * jenna (write_filelists): correct typo, s/Components/Component/
1477         for Options.
1478
1479 2004-01-04  Ryan Murray  <rmurray@debian.org>
1480
1481         * cron.buildd: move update of overrides and Packages file...
1482         * cron.unchecked: to here.
1483         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1484         * katie.conf-security: likewise
1485
1486 2003-11-20  James Troup  <james@nocrew.org>
1487
1488         * jenna (main): don't use utils.try_with_debug(), it produces way
1489         too much output.
1490
1491         * halle (check_changes): don't error out if a .changes refers to a
1492         non-existent package, just warn and skip the file.
1493
1494         * docs/README.stable-point-release: mention halle and .changes
1495         obsoleted by removal through melanie.  Update for 3.0r2.
1496
1497         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1498         (Suite::Stable::Description): update for 3.0r2.
1499         (Lauren::MoreInfoURL): likewise.
1500         * katie.conf-non-US (Suite::Stable::Version): likewise.
1501         (Suite::Stable::Description): likewise.
1502         (Lauren::MoreInfoURL): likewise.
1503
1504         * apt.conf.stable (Default): don't define MaxContentsChange.
1505         * apt.conf.stable-non-US (Default): likewise.
1506
1507         * lauren (reject): hack to work around partial replacement of an
1508         upload, i.e. one or more binaries superseded by another source
1509         package.
1510
1511 2003-11-17  James Troup  <james@nocrew.org>
1512
1513         * pseudo-packages.maintainers: point installation-reports at
1514         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1515         request.
1516
1517         * utils.py (parse_changes): calculate the number of lines once
1518         with len() rather than max().
1519
1520         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1521         files, since check_dsc_against_db() deletes the .orig.tar.gz
1522         entry.
1523
1524 2003-11-13  Ryan Murray  <rmurray@debian.org>
1525
1526         * apt.conf: specify a src override file for debian-installer
1527
1528 2003-11-10  James Troup  <james@nocrew.org>
1529
1530         * fernanda.py (strip_pgp_signature): new function - strips PGP
1531         signature from a file and returns the modified contents of the
1532         file in a string.
1533         (display_changes): use it.
1534         (read_dsc): likewise.
1535
1536 2003-11-09  Ryan Murray  <rmurray@debian.org>
1537
1538         * cron.buildd: export accepted_autobuild table for unstable, and use
1539         it to generate the incoming Packages/Sources rather than having apt
1540         walk the directory.
1541         * apt.conf.buildd: use exported table from cron.buildd to generate
1542         Packages/Sources
1543
1544 2003-11-07  James Troup  <james@nocrew.org>
1545
1546         * kelly: import errno.
1547
1548         * katie.py (Katie.build_summaries): sort override disparities.
1549
1550         * kelly (install): set dsc_component based on the .dsc's component
1551         not a random binaries.
1552
1553 2003-10-29  James Troup  <james@nocrew.org>
1554
1555         * katie.py (Katie.build_summaries): don't assume changes["source"]
1556         exists since it might not.
1557
1558 2003-10-20  James Troup  <james@nocrew.org>
1559
1560         * pseudo-packages.maintainers: update security.d.o to use
1561         team@s.d.o at joy@'s request.
1562
1563 2003-10-17  James Troup  <james@nocrew.org>
1564
1565         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1566
1567 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1568
1569         * tea (chk_bd_process_dir): use .endswith rather than slice.
1570
1571 2003-10-14  James Troup  <james@nocrew.org>
1572
1573         * tea (check_build_depends): new function.
1574         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1575         in the archive.
1576         (main): update for new function.
1577         (usage): likewise.
1578
1579         * katie.py (Katie.do_reject): sanitize variable names,
1580         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1581         os.close() to outside if clause.
1582
1583         * jennifer (check_dsc): check build-depends and
1584         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1585         Fold the ARRAY check into the same code block and tidy up it's
1586         rejection message.
1587         (check_changes): ensure that the Files field is non-empty.
1588         Suggested by Santiago Vila <sanvila@unex.es>
1589         (check_changes): normalize reject messages.
1590         (check_dsc): instead of doing most of the checks inside a for loop
1591         and an if, find the dsc_filename in a short loop over files first
1592         and then do all the checks.  Add check for more than one .dsc in a
1593         .changes which we can't handle.  Normalize reject messages.
1594
1595 2003-10-13  James Troup  <james@nocrew.org>
1596
1597         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1598         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1599
1600         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1601         variables while iterating over 'files'.  Don't regenerate it when
1602         checking for source if source is mentioned.
1603
1604         Reject source only uploads if the config variable
1605         Dinstall::Reject::NoSourceOnly is set.
1606
1607 2003-10-03  James Troup  <james@nocrew.org>
1608
1609         * rene (main): add nasty hardcoded reference to debian-installer
1610         so we detect NBS .udebs.
1611
1612 2003-09-29  James Troup  <james@nocrew.org>
1613
1614         * apt.conf (old-proposed-updates): remove.
1615         * apt.conf-non-US (old-proposed-updates): likewise.
1616
1617 2003-09-24  James Troup  <james@nocrew.org>
1618
1619         * tea (check_files_not_symlinks): new function, ensure files
1620         mentioned in the database aren't symlinks.  Includes code to
1621         update any files that are like this to their real filenames +
1622         location; commented out by though.
1623         (usage): update for new function.
1624         (main): likewise.
1625
1626 2003-09-24  Anthony Towns  <ajt@debian.org>
1627
1628         * vars: external-overrides variable added
1629         * cron.daily: Update testing/unstable Task: overrides from joeyh
1630         managed external source.
1631
1632 2003-09-22  James Troup  <james@nocrew.org>
1633
1634         * kelly (install): if we can't move the .changes into queue/done,
1635         fail don't warn and carry on.  The old behaviour pre-dates NI and
1636         doesn't make much sense now since jennifer checks both
1637         queue/accepted and queue/done for any .changes files it's
1638         processing.
1639
1640         * utils.py (move): don't throw exceptions on existing files or
1641         can't overwrite, instead just fubar out.
1642
1643         * jennifer (check_dsc): also check Build-Depends-Indep for
1644         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1645
1646 2003-09-18  James Troup  <james@nocrew.org>
1647
1648         * katie.py (Katie.close_bugs): only log the bugs we've closed
1649         once.
1650
1651         * kelly (main): log as 'kelly', not 'katie'.
1652
1653 2003-09-16  James Troup  <james@nocrew.org>
1654
1655         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1656
1657         * jennifer (check_changes): normalize reject message for "changes
1658         file already exists" to be %s: <foo>.
1659         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1660         produced by broken dpkg-source in 1.10.11.  Tone down and
1661         normalize rejection message for incompatible 'Format' version
1662         numbers.
1663         (check_diff): likewise tone down and normalize.
1664
1665 2003-09-07  James Troup  <james@nocrew.org>
1666
1667         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1668         don't bomb out on bogus empty lines.
1669         (build_file_list): check for changes["files"] earlier.  use Dict
1670         to create files[name] dictionary.
1671         (send_mail): don't bother validating arguments.
1672         (check_signature): minor improvements to some of the rejection
1673         messages including listing the key id of the key that wasn't found
1674         in the keyring.
1675         (wrap): new function.
1676
1677         * tea: add new check 'validate-indices' that ensures all files
1678         mentioned in indices (Packages, Sources) files do in fact exist.
1679
1680         * catherine (poolize): use a local re_isadeb which handles legacy
1681         (i.e. no architecture) style .deb filenames.
1682
1683         * rosamund: new script.
1684
1685         * rhona (check_binaries): when checking for binary packages not in
1686         a suite, don't bother selecting files that already have a
1687         last_used date.
1688         (check_sources): likewise.
1689
1690         * rhona: change all SQL EXISTS sub-query clauses to use the
1691         postgres suggested convention of "SELECT 1 FROM".
1692         * andrea (main): likewise.
1693         * tea (check_override): likewise.
1694         * catherine (main): likewise.
1695
1696         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1697         entries and in other suites MustBeNewerThan's.
1698         (SuiteMappings): likewise
1699         * katie.conf-non-US: likewise.
1700         * katie.conf-security: likewise.
1701
1702         * apt.conf-security: remove oldstable.
1703         * apt.conf.stable: likewise.
1704         * apt.conf.stable-non-US: likewise.
1705         * cron.buildd-security: likewise.
1706         * cron.daily-security: likewise.
1707         * vars-security (suites): likewise.
1708         * wanna-build/trigger.daily: likewise.
1709
1710         * claire.py (clean_symlink): move...
1711         * utils.py (clean_symlink): here.
1712
1713         * claire.py (find_dislocated_stable): update accordingly.
1714
1715 2003-08-16  Anthony Towns  <ajt@debian.org>
1716
1717         * katie.py (source_exists): expand the list of distributions
1718         the source may exist in to include any suite that's mapped to
1719         the destination suite (even transitively (a->b->c)). This should
1720         unbreak binary uploads to *-proposed-updates.
1721
1722 2003-08-09  Randall Donald  <rdonald@debian.org>
1723
1724         * lisa (recheck): change changes["distribution"].keys() to
1725         Katie.pkg.changes...
1726
1727 2003-08-08  Randall Donald  <rdonald@debian.org>
1728
1729         * katie.py: only tag bugs as fixed-in-experimental for
1730         experimental uploads
1731
1732 2003-07-26  Anthony Towns  <ajt@debian.org>
1733
1734         * katie.py (source_exists): add an extra parameter to limit the
1735         distribution(s) the source must exist in.
1736         * kelly, lisa, jennifer: update to use the new source_exists
1737
1738 2003-07-15  Anthony Towns  <ajt@debian.org>
1739
1740         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1741         checksums for debian-installer stuff even when it's just a symlink to
1742         another suite
1743
1744         * apt.conf: add the FakeDI line
1745
1746 2003-06-09  James Troup  <james@nocrew.org>
1747
1748         * kelly (check): make sure the 'file' we're looking for in 'files'
1749         hasn't been deleted by katie.check_dsc_against_db().
1750
1751 2003-05-07  James Troup  <james@nocrew.org>
1752
1753         * helena (time_pp): fix s/years/year/ typo.
1754
1755 2003-04-29  James Troup  <james@nocrew.org>
1756
1757         * madison (usage): document -c/--component.
1758
1759         * madison (usage): Fix s/seperated/separated/.
1760         * melanie (usage): likewise.
1761         * jenna (usage): likewise.
1762
1763 2003-04-24  James Troup  <james@nocrew.org>
1764
1765         * cron.daily-non-US: if there's nothing for kelly to install, say
1766         so.
1767
1768         * jennifer (check_timestamps): print sys.exc_value as well as
1769         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1770         failed' with 'deb contents' to make it clearer what timestamp(s)
1771         are being checked.
1772
1773 2003-04-15  James Troup  <james@nocrew.org>
1774
1775         * cron.daily-non-US: only run kelly if there are some .changes
1776         files in accepted.
1777
1778         * rene: add -m/--mode argument which can be either daily (default)
1779         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1780         Various changes to make this possible including a poor attempt at
1781         splitting main() up a little.  De-hardcode suite numbers from SQL
1782         queries and return quietly from do_nviu() if experimental doesn't
1783         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1784         is.
1785
1786         * debian/control (Depends): remove python-zlib as it's obsolete.
1787
1788         * charisma (main): don't slice the \n off strings when we're
1789         strip()-ing it anyway.
1790         * heidi (set_suite): likewise.
1791         (process_file): likewise.
1792         * natalie (process_file): likewise.
1793
1794 2003-04-08  James Troup  <james@nocrew.org>
1795
1796         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1797         slow queries by using one LIKE '%foo%' and then matching against
1798         '%s' or '/%s$' in python.  Also only join location when we need it
1799         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1800         query, so 6s for each sourceful package.
1801
1802         * cron.daily: invoke rene and send the report to ftpmaster.
1803         * cron.daily-non-US: likewise.
1804
1805 2003-03-14  James Troup  <james@nocrew.org>
1806
1807         * utils.py (send_mail): default filename to blank.
1808         * amber (make_advisory): adapt.
1809         * jennifer (acknowledge_new): likewise.
1810         * katie.py (Katie.close_bugs): likewise.
1811         (Katie.announce): likewise.
1812         (Katie.accept): likewise.
1813         (Katie.check_override): likewise.
1814         (Katie.do_reject): likewise.
1815         * kelly (do_reject): likewise.
1816         (stable_install): likewise.
1817         * lisa (do_bxa_notification): likewise.
1818         * lauren (reject): likewise.
1819         * melanie (main): likewise.
1820
1821         * rene (add_nbs): check any NBS packages against unstable to see
1822         if they haven't been removed already.
1823
1824         * templates/katie.rejected: remove paragraph about rejected files
1825         since they're o-rwx due to c-i-m and the uploader can't do
1826         anything about them and shania will take care of them anyway.
1827
1828         * madison (usage): update usage example to use comma seperation.
1829         * melanie (usage): likewise.
1830
1831         * utils.py (split_args): new function; splits command line
1832         arguments either by space or comma (whichever is used).  Also has
1833         optional-but-default DWIM spurious space detection to avoid
1834         'command -a i386, m68k' problems.
1835         (parse_args): use it.
1836         * melanie (main): likewise.
1837
1838         * melanie (main): force the admin to tell someone if we're not
1839         doing a rene-led removal (or closing a bug, which counts as
1840         telling someone).
1841
1842 2003-03-05  James Troup  <james@nocrew.org>
1843
1844         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1845         and python sections.
1846         * katie.conf-security (Section): likewise.
1847
1848         * add_constraints.sql: add uid and uid_id_seq to grants.
1849
1850         * lisa (determine_new): also warn about adding overrides to
1851         oldstable.
1852
1853         * madison (main): make the -S/--source-and-binary query obey
1854         -s/--suite restrictions.
1855
1856 2003-03-03  James Troup  <james@nocrew.org>
1857
1858         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1859         exists, warn the user that our output might seem strange.  (People
1860         get confused by multiple versions in a suite which happens
1861         post-kelly but pre-jenna.)
1862
1863 2003-02-21  James Troup  <james@nocrew.org>
1864
1865         * kelly (main): we don't need to worry about StableRejector.
1866
1867         * melanie (main): sort versions with apt_pkg.VersionCompare()
1868         prior to output.
1869
1870         * lauren: new script to manually reject packages from
1871         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1872
1873 2003-02-20  James Troup  <james@nocrew.org>
1874
1875         * kelly (init): remove unused -m/--manual-reject argument.
1876
1877         * katie.py (Katie.force_reject): renamed from force_move to make
1878         it more explicit what this function does.
1879         (Katie.do_reject): update to match.
1880
1881         * utils.py (prefix_multi_line_string): add an optional argument
1882         include_blank_lines which defaults to 0.  If non-zero, blank lines
1883         will be includes in the output.
1884
1885         * katie.py (Katie.do_reject): don't add leading space to each line
1886         of the reject message.  Include blank lines when showing the
1887         message to the user.
1888
1889 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1890
1891         * utils.py (fix_maintainer): replace pointless re.sub() with
1892         simple string format.
1893
1894 2003-02-11  James Troup  <james@nocrew.org>
1895
1896         * lisa (edit_overrides): only strip-to-one-char and upper-case
1897         non-numeric answers.  Fixes editing of items with indices >= 10;
1898         noticed by Randall.
1899         (edit_overrides): correct order of arguments to "not a valid
1900         index" error message.
1901
1902         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1903         remove_duplicate_versions(); thanks to aj for the initial
1904         diagnosis.
1905         (remove_duplicate_versions): correct how we return
1906         dominant_versions.
1907         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1908         a tuple rather than just a tuple.
1909
1910 2003-02-10  James Troup  <james@nocrew.org>
1911
1912         * emilie: new script - sync fingerprint and uid tables with a
1913         debian.org LDAP DB.
1914
1915         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1916         in 'fingerprint'.
1917
1918         * db_access.py (get_or_set_uid_id): new function.
1919
1920         * jennifer (main): update locking to a) not used FCNTL (deprecated
1921         in python >= 2.2) and b) acknowledge upstream's broken
1922         implementation of lockf (see Debian bug #74777), c) try to acquire
1923         the lock non-blocking.
1924         * kelly (main): likewise.
1925
1926         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1927
1928         * madison (main): only append the package to new_packages if it's
1929         not already in there; fixes -S/--source-and-binary for cases where
1930         the source builds a binary package of the same name.
1931
1932 2003-02-10  Anthony Towns  <ajt@debian.org>
1933
1934         * madison (main): use explicit JOIN syntax for
1935         -S/--source-and-binary queries to reduce the query's runtime from
1936         >10 seconds to negligible.
1937
1938 2003-02-08  James Troup  <james@nocrew.org>
1939
1940         * rene (main): in the NVIU output, append items to lists, not
1941         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1942         should be removed.
1943
1944 2003-02-07  James Troup  <james@nocrew.org>
1945
1946         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1947         Sources [aj].
1948
1949         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1950         O. Benham/Adam Heath/.
1951
1952         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1953         (Suite::Stable::Description): update for 3.0r1a.
1954         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1955
1956         * utils.py (gpgv_get_status_output): rename from
1957         get_status_output().
1958
1959         * neve (check_signature): use gpgv_get_status_output and Dict from
1960         utils().  Add missing newline to error message about duplicate tokens.
1961
1962         * saffron (per_arch_space_use): also print space used by source.
1963         (output_format): correct string.join() invocation.
1964
1965         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1966
1967 2003-02-04  James Troup  <james@nocrew.org>
1968
1969         * cron.buildd: correct generation of Packages/Sources and grep out
1970         non-US/non-free as well as non-free.
1971
1972 2003-02-03  Ryan Murray  <rmurray@debian.org>
1973
1974         * cron.buildd: generate quinn-diff output with full Packages/Sources
1975           files to get out-of-date vs. uncompiled right.
1976         * apt.conf.buildd: no longer generate uncompressed files, as they
1977           are generated in cron.buildd instead
1978         * add -i option to quinn-diff to ignore binary-all packages
1979         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1980           aren't in the packages file, the arch that uploaded them will build
1981           them anyways...
1982
1983 2003-01-30  James Troup  <james@nocrew.org>
1984
1985         * rene (main): only print suggested melanie command when there's
1986         some NBS to remove.
1987
1988 2003-01-30  Ryan Murray  <rmurray@debian.org>
1989
1990         * cron.buildd: fix incorrectly inverted lockfile check
1991
1992 2003-01-29  Ryan Murray  <rmurray@debian.org>
1993
1994         * cron.buildd: generate override.sid.all3.src
1995         * apt.conf.buildd: use generated override.sid.all3.src
1996
1997 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1998
1999         * utils.py (get_status_output): moved from jennifer.
2000         (Dict): likewise.
2001         (check_signature): likewise.
2002
2003         * jennifer (get_status_output): moved to utils.py.
2004         (Dict): likewise.
2005         (check_signature): likewise.
2006
2007         * utils.py (check_signature): add an argument to specifiy which
2008         function to call when an error was found.
2009         (check_signature): document this function better.
2010
2011         * jennifer (check_files): pass the reject function as an argument
2012         to utils.check_signature.
2013         (process_it): likewise.
2014
2015 2003-01-20  James Troup  <james@nocrew.org>
2016
2017         * rene (main): lots of changes to improve the output and make it
2018         more useful.
2019
2020         * katie.py (Katie.check_override): make the override messages
2021         clearer (hopefully).
2022
2023 2002-12-26  James Troup  <james@nocrew.org>
2024
2025         * ziyi (usage): document the ability to pass suite(s) as
2026         argument(s).
2027         (main): read apt.conf after checking for -h/--help.
2028
2029         * tea (main): take the check to run as an argument.
2030
2031         * saffron.R: R script to graph daily install runs.
2032
2033         * saffron: new script; various stats functions.
2034
2035         * rhona (main): connect to the database after checking for -h/--help.
2036
2037         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2038
2039         * melanie (main): sort versions with utils.arch_compare_sw().
2040
2041         * madison (usage): alphabetize order of options.
2042         * melanie (usage): likewise.
2043
2044         * kelly (usage): fix usage short description (we aren't dinstall).
2045
2046         * julia (usage): fix usage description and alphabetize order of
2047         options.
2048
2049         * jeri (usage): fix usage short description.
2050
2051         * jennifer (main): move --help and --version checks from here...
2052         (init): to here so that they work with an empty katie.conf.
2053         * kelly: likewise.
2054
2055         * alyson (usage): new function.
2056         (main): use it.
2057         * andrea: likewise.
2058         * ashley: likewise.
2059         * cindy: likewise.
2060         * denise: likewise.
2061         * helena: likewise.
2062         * neve: likewise.
2063         * rene: likewise.
2064         * rose: likewise.
2065         * tea: likewise.
2066
2067         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2068         entry that caused tasks to be omitted from 3.0r1.
2069
2070 2002-12-10  James Troup  <james@nocrew.org>
2071
2072         * jennifer (check_files): sanity check the Depends field to ensure
2073         it's non-empty if present since apt chokes on an empty one.
2074         Thanks to Ryan Murray for the idea.
2075
2076 2002-12-08  James Troup  <james@nocrew.org>
2077
2078         * katie.conf-security (Helena::Directories): new; include accepted
2079         in addition to byhand and new.
2080
2081         * helena (process_changes_files): use utils.arch_compare_sw().
2082         Justify things based on the longest [package, version,
2083         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2084         the commas in architecture and version lists for the same reason.
2085         (main): make directories we process configurable through
2086         Helena::Directories in the config file; if that doesn't exist
2087         default to the old hardcoded values (byhand & new).
2088
2089         * utils.py (arch_compare_sw): moved here from madison.
2090         * madison (main): adjust to compensate.
2091
2092 2002-12-06  James Troup  <james@nocrew.org>
2093
2094         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2095         right filename.
2096
2097 2002-12-05  James Troup  <james@nocrew.org>
2098
2099         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2100
2101 2002-11-28  Randall Donald  <rdonald@debian.org>
2102
2103         * fernanda.py (read_control): fix typo of 'Architecture'.
2104
2105 2002-11-26  James Troup  <james@nocrew.org>
2106
2107         * lisa (check_pkg): call less with '-R' so we see the colour from
2108         Randall's fernanda changes.
2109
2110         * neve (process_sources): if Directory points to a legacy location
2111         but the .dsc isn't there; assume it's broken and look in the pool.
2112         (update_section): new, borroed from alyson.
2113         (do_da_do_da): use it.
2114         (process_packages): add suite_it to the cache key used for
2115         arch_all_cache since otherwise we only add a package to the first
2116         suite it's in and ignore any subsequent ones.
2117
2118         * katie.conf-non-US (Location): fixed to reflect reality (all
2119         suites, except old-proposed-updates (which is legacy-mixed)) are
2120         pool.
2121
2122         * utils.py (try_with_debug): wrapper for print_exc().
2123         * jenna (main): use it.
2124         * neve (main): likewise.
2125
2126 2002-11-25  Randall Donald  <rdonald@debian.org>
2127
2128         * fernanda.py (main): added -R to less command line for raw control
2129         character support to print colours
2130         (check_deb): Instead of running dpkg -I on deb file, call
2131         output_deb_info, the new colourized control reporter.
2132         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2133         of printing out each .dsc line.
2134         (output_deb_info): new function. Outputs each key/value pair from
2135         read_control except in special cases where we highlight section,
2136         maintainer, architecture, depends and recommends.
2137         (create_depends_string): new function. Takes Depends tree and looks
2138         up it's compontent via projectb db, colourizes and constructs a
2139         depends string in original order.
2140         (read_dsc): new function. reads and parses .dsc info via
2141         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2142         colourized.
2143         (read_control): new function. reads and parses control info via
2144         apt_pkg. Depends and Recommends are split in to list structures,
2145         Section and Architecture are colourized. Maintainer is colourized
2146         if it has a localhost.localdomain address.
2147         (split_depends): new function. Creates a list of lists of
2148         dictionaries of depends (package,version relation). Top list is
2149         colected from comma delimited items. Sub lists are | delimited.
2150         (get_comma_list): new function. splits string input among commas
2151         (get_or_list): new function. splits string input among | delimiters
2152         (get_depends_parts): new function. Creates dictionary of package name
2153         and version relation from dependancy string.
2154         Colours for section and depends are per component. Unfound depends
2155         are in bold. Lookups using version info is not supported yet.
2156
2157 2002-11-22  James Troup  <james@nocrew.org>
2158
2159         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2160         'udmsearch'.
2161
2162         * amber (make_advisory): string.atol() is deprecated and hasn't
2163         been ported to string methods.  Use long() instead.
2164
2165         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2166         creating the database since we'll fail badly if it's created with
2167         e.g. UNICODE encoding.
2168
2169         * rose (main): AptCnf is a global.
2170
2171         * neve (get_location_path): new function determines the location
2172         from the the first (left-most) directory of a Filename/Directory.
2173         (process_sources): don't need 'location' anymore.  Use
2174         utils.warn().  Use the Directory: field for each package to find
2175         the .dsc.  Use get_location_path() to determine the location for
2176         each .dsc.
2177         (process_packages): do't need 'location' anymore.  Use
2178         utils.warn().  Use get_location_path().
2179         (do_sources): don't need 'location', drop 'prefix' in favour of
2180         being told the full path to the Sources file, like
2181         process_packages().
2182         (do_da_do_da): main() renamed, so that main can call us in a
2183         try/except.  Adapt for the changes in do_sources() and
2184         process_packages() above.  Assume Sources and Packages file are in
2185         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2186
2187         * katie.conf-security (Location): fixed to reflect reality (all
2188         suites are pool, not legacy).
2189
2190         * utils.py (print_exc): more useful (i.e. much more verbose)
2191         traceback; a recipe from the Python cookbook.
2192         * jenna (main): use it.
2193         * neve (main): likewise.
2194
2195 2002-11-19  James Troup  <james@nocrew.org>
2196
2197         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2198         handling which was FUBAR for multi-suite uploads.  Now we just
2199         make a dictionary of destinations to copy to and iterate over
2200         those.
2201
2202         * fernanda.py (check_deb): run linda as well as lintian.
2203
2204 2002-10-21  James Troup  <james@nocrew.org>
2205
2206         * melanie (main): change X-Melanie to X-Katie and prefix it with
2207         'melanie '.
2208
2209         * lisa (main): prefix X-Katie with 'lisa '.
2210
2211         * jennifer (clean_holding): fix typo in string method changes;
2212         s/file.find(file/file.find(/.
2213
2214         * cron.daily: invoke helena and send the report to ftpmaster.
2215         * cron.daily-non-US: likewise.
2216
2217 2002-10-16  James Troup  <james@nocrew.org>
2218
2219         * kelly (check): call reject() with a blank prefix when parsing
2220         the return of check_dsc_against_db() since it does its own
2221         prefix-ing.
2222
2223         * rose: new script; only handles directory creation initally.
2224
2225         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2226         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2227
2228 2002-10-06  James Troup  <james@nocrew.org>
2229
2230         * rene (main): remove bogus argument handling.
2231
2232         * kelly: katie, renamed.
2233         * cron.daily: adapt for katie being renamed to kelly.
2234         * cron.daily-non-US: likewise.
2235         * amber (main): likewise.
2236
2237         * Changes for python 2.1.
2238
2239         * kelly: time.strftime no longer requires a second argument of
2240         "time.localtime(time.time())".
2241         * logging.py: likewise.
2242         * rhona: likewise.
2243         * shania (init): likewise.
2244
2245         * amber: use augmented assignment.
2246         * catherine (poolize): likewise.
2247         * claire.py (fix_component_section): likewise.
2248         * halle (check_changes): likewise.
2249         * helena: likewise.
2250         * jenna: likewise.
2251         * jennifer: likewise.
2252         * jeri: likewise.
2253         * katie.py: likewise.
2254         * kelly: likewise.
2255         * lisa: likewise.
2256         * madison (main): likewise.
2257         * melanie: likewise.
2258         * natalie: likewise.
2259         * neve: likewise.
2260         * rhona: likewise.
2261         * tea: likewise.
2262         * utils.py: likewise.
2263         * ziyi: likewise.
2264
2265         * amber: use .endswith.
2266         * fernanda.py: likewise.
2267         * halle (main): likewise.
2268         * jennifer: likewise.
2269         * jeri: likewise.
2270         * katie.py: likewise.
2271         * kelly: likewise.
2272         * lisa: likewise.
2273         * neve: likewise.
2274         * shania (main): likewise.
2275         * utils.py: likewise.
2276
2277         * alyson: use string methods.
2278         * amber: likewise.
2279         * andrea: likewise.
2280         * ashley: likewise.
2281         * catherine: likewise.
2282         * charisma: likewise.
2283         * claire.py: likewise.
2284         * db_access.py: likewise.
2285         * denise: likewise.
2286         * halle: likewise.
2287         * heidi: likewise.
2288         * helena: likewise.
2289         * jenna: likewise.
2290         * jennifer: likewise.
2291         * jeri: likewise.
2292         * julia: likewise.
2293         * katie.py: likewise.
2294         * kelly: likewise.
2295         * lisa: likewise.
2296         * logging.py: likewise.
2297         * madison: likewise.
2298         * melanie: likewise.
2299         * natalie: likewise.
2300         * neve: likewise.
2301         * rene: likewise.
2302         * tea: likewise.
2303         * utils.py: likewise.
2304         * ziyi: likewise.
2305
2306 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2307
2308         * utils.py (parse_changes): use <string>.startswith() rather than
2309         string.find().
2310
2311 2002-08-27  Anthony Towns  <ajt@debian.org>
2312
2313         * katie.py (in_override_p): when searching for a source override,
2314         and the dsc query misses, search for both udeb and deb overrides
2315         as well. Should fix the UNACCEPT issues with udebs.
2316
2317 2002-08-24  James Troup  <james@nocrew.org>
2318
2319         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2320         source+binary package finding code which was causing severe
2321         performance degradation with postgres 7.2.
2322
2323 2002-08-14  James Troup  <james@nocrew.org>
2324
2325         * julia (main): use the pwd.getpwall() to get system user info
2326         rather than trying to read a password file.  Add a -n/--no-action
2327         option.
2328
2329         * cron.hourly: julia no longer takes any arguments.
2330         * cron.hourly-non-US: likewise.
2331
2332 2002-08-07  James Troup  <james@nocrew.org>
2333
2334         * katie (install): handle multi-suite uploads when CopyChanges
2335         and/or CopyKatie are in use, ensuring we only copy stuff once.
2336
2337 2002-08-01  Ryan Murray  <rmurray@debian.org>
2338
2339         * wanna-build/trigger.daily: initial commit, with locking
2340         * cron.buildd: add locking against daily run
2341
2342 2002-07-30  James Troup  <james@nocrew.org>
2343
2344         * melanie (main): readd creation of suite_ids_list so melanie is
2345         remotely useful again.
2346
2347         * katie.conf: adopt for woody release; diable
2348         StableDislocationSupport, add oldstable, adjust other suites and
2349         mappings, fix up location.
2350         * katie.conf-non-US: likewise.
2351         * katie.conf-security: likewise.
2352
2353         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2354         stable.
2355         * apt.conf.stable-non-US: likewise.
2356
2357         * apt.conf-security: adapt for woody release; adding oldstable,
2358         oldstable, adjust stable and testing.
2359         * cron.daily-security: likewise.
2360         * cron.buildd-security: likewise.
2361
2362         * apt.conf: adapt for woody release; rename woody-proposed-updates
2363         to testing-proposed-updates and proposed-updates to
2364         old-proposed-updates.
2365         * apt.conf-non-US: likewise.
2366
2367         * vars-non-US (copyoverrides): add sarge.
2368         * vars (copyoverrides): likewise.
2369
2370         * vars-security (suites): add oldstable.
2371
2372 2002-07-22  Ryan Murray  <rmurray@debian.org>
2373
2374         * apt.conf.security-buildd: use suite codenames instead of
2375           distnames.
2376
2377 2002-07-16  James Troup  <james@nocrew.org>
2378
2379         * denise (main): fix filenames for testing override files.
2380
2381 2002-07-14  James Troup  <james@nocrew.org>
2382
2383         * jennifer (process_it): call check_md5sums later so we can check
2384         files in the .dsc too
2385         (check_md5sums): check files in the .dsc too.  Check both md5sum
2386         and size.
2387
2388         * melanie (main): use parse_args() and join_with_commas_and() from
2389         utils.  If there's nothing to do, say so and exit, don't ask for
2390         confirmation etc.
2391
2392         * amber (join_with_commas_and): moved from here to ...
2393         * utils.py (join_with_commas_and): here.
2394
2395 2002-07-13  James Troup  <james@nocrew.org>
2396
2397         * madison (main): use parse_args() from utils.  Support
2398         -c/--component.
2399
2400         * jenna (parse_args): moved from here to ...
2401         * utils.py (parse_args): here.
2402
2403         * katie.conf (Architectures): minor corrections to the description
2404         for arm, mips and mipsel.
2405         * katie.conf-non-US (Architectures): likewise.
2406         * katie.conf-security (Architectures): likewise.
2407
2408         * cron.daily-security: use natalie's new -a/--add functionality to
2409         flesh out the security overrides.
2410
2411 2002-07-12  James Troup  <james@nocrew.org>
2412
2413         * cron.buildd (ARCHS): add arm.
2414
2415         * katie.conf: 2.2r7 was released.
2416         * katie.conf-non-US: likewise.
2417
2418         * utils.py (parse_changes): handle a multi-line field with no
2419         starting line.
2420
2421 2002-06-25  James Troup  <james@nocrew.org>
2422
2423         * templates/amber.advisory (To): add missing email address since
2424         __WHOAMI__ is only a name.
2425
2426         * katie.conf-security (Melane::LogFile): correct to go somewhere
2427         katie has write access to.
2428         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2429         Testing.
2430
2431         * natalie: add support for -a/-add which adds packages only
2432         (ignoring changes and deletions).
2433
2434         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2435         use FindB, not get.
2436
2437 2002-06-22  James Troup  <james@nocrew.org>
2438
2439         * jennifer (check_files): validate the package name and version
2440         field.  If 'Package', 'Version' or 'Architecture' are missing,
2441         don't try any further checks.
2442         (check_dsc): likewise.
2443
2444         * utils.py (re_taint_free): add '~' as a valid character.
2445
2446 2002-06-20  Anthony Towns  <ajt@debian.org>
2447
2448         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2449
2450 2002-06-09  James Troup  <james@nocrew.org>
2451
2452         * jennifer (check_files): reduce useless code.
2453
2454         * cron.daily-security: run symlinks -dr on $ftpdir.
2455
2456         * vars-security (ftpdir): add.
2457
2458 2002-06-08  James Troup  <james@nocrew.org>
2459
2460         * neve (update_override_type): transaction is handled higher up in
2461         main().
2462         (update_priority): likewise.
2463         (process_sources): remove code that makes testing a duplicate of
2464         stable.
2465         (process_packages): likewise.
2466
2467         * templates/amber.advisory: add missing mail headers.
2468
2469         * cron.daily-security: also call apt-ftparchive clean for
2470         apt.conf.buildd-security.
2471         * cron.weekly: likewise.
2472
2473         * amber (do_upload): write out a list of source packages (and
2474         their version) uploaded for testing.
2475         (make_advisory): add more Subst mappings for the mail headers.
2476         (spawn): check for suspicious characters in the command and abort
2477         if their found.
2478
2479 2002-06-07  James Troup  <james@nocrew.org>
2480
2481         * ziyi (main): remove the 'nonus'/'security' hacks and use
2482         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2483         the lower level Release files, even if they don't exist.  fubar
2484         out if we can't open a lower level Release file for writing.
2485
2486         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2487         ziyi.
2488         * katie.conf-security (Dinstall): likewise.
2489
2490         * amber (do_upload): renamed from get_file_list().  Determine the
2491         upload host from the original component.
2492         (init): Add a -n/--no-action option.  Fix how we get changes_files
2493         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2494         sys.argv).  Add an Options global.
2495         (make_advisory): support -n/--no-action.
2496         (spawn): likewise.
2497         (main): likewise.
2498         (usage): document -n/--no-action.
2499
2500         * cron.buildd-security: fix path to Packages-arch-specific in
2501         quinn-diff invocation.
2502
2503         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2504         to proper suite names (i.e. stable, testing) rather than codenames
2505         (potato, woody).
2506         (Dinstall::DefaultSuite): likewise.
2507         (Suite): likewise.
2508         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2509         * vars-security (suites): likewise.
2510         * apt.conf-security: likewise.
2511
2512         * katie.conf-security (Component): add "updates/" prefix.
2513         (Suite::*::Components): likewise.
2514         (ComponentMappings): new; map all {ftp-master,non-US} components
2515         -> updates/<foo>.
2516
2517         * katie.conf-security (Natalie): removed; the options have
2518         defaults and ComponentPosition is used by alyson which doesn't
2519         work on security.d.o.
2520         (Amber): replace UploadHost and UploadDir with ComponentMappings
2521         which is a mapping of components -> URI.
2522         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2523         (SuiteMappings): use "silent-map" in preference to "map".
2524
2525         * cron.unchecked-security: fix call to cron.buildd-security.
2526
2527         * cron.daily-security: map local suite (stable) -> override suite
2528         (potato) when fixing overrides.  Correct component in natalie call
2529         to take into account "updates/" prefix.  Fix cut'n'waste in
2530         override.$dist.all3 generation, the old files weren't being
2531         removed, so they were endlessly growing.
2532
2533         * neve (main): don't use .Find for the CodeName since we require
2534         it.  Location::*::Suites is a ValueList.
2535         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2536         out on expired keys, just warn.
2537         (update_override_type): new function; lifted from alyson.
2538         (update_priority): likewise.
2539         (main): use update_{override_type,priority}().
2540
2541         * jennifer (check_distributions): remove redunant test for
2542         SuiteMappings; ValueList("does-not-exist") returns [] which is
2543         fine.  Add support for a "silent-map" type which doesn't warn
2544         about the mapping to the user.
2545         (check_files): add support for ComponentMappings, similar to
2546         SuiteMappings, but there's no type, just a source and a
2547         destination and the original component is stored in "original
2548         component".
2549         * katie.py (Katie.dump_vars): add "original component" as an
2550         optionsal files[file] dump variable.
2551
2552         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2553         query.  Add support for section-less legacy locations like current
2554         security.debian.org through YetAnotherConfigBoolean
2555         'LegacyStableHasNoSections'.
2556         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2557
2558         * utils.py (real_arch): moved here from ziyi.
2559         * ziyi (real_arch): moved to utils.py.
2560         * ziyi (main): likewise.
2561
2562         * claire.py (find_dislocated_stable): use real_arch() with
2563         filter() to strip out source and all.
2564         * neve (main): likewise.
2565         * rene (main): likewise.
2566         * jeri (parse_packages): likewise.
2567
2568 2002-06-06  James Troup  <james@nocrew.org>
2569
2570         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2571         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2572         doing.
2573
2574 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2575
2576         * jeri (check_joey): check if the line contains two elements
2577         before accessing the second.  Also, strip trailing spaces as well
2578         as the newline.
2579         * halle (check_joey): likewise.
2580
2581 2002-06-05  James Troup  <james@nocrew.org>
2582
2583         * cron.unchecked-security: new file; like cron.unchecked but if
2584         there's nothing to do exit so we don't call cron.buildd-security.
2585
2586         * apt.conf.buildd-security: new file.
2587
2588         * vars (archs): alphabetize.
2589         * vars-non-US (archs): likewise.
2590
2591         * vars-security: add unchecked.
2592
2593         * madison (main): reduce rather bizarrely verbose and purposeless
2594         code to print arches to a simple string.join.
2595
2596         * katie.conf (Suites::Unstable): add UdebComponents, a new
2597         valuelist of suites, used by jenna to flesh out the list of
2598         <suite>_main-debian-installer-binary-<arch>.list files generated.
2599         (Dinstall): add StableDislocationSupport, a new boolean used by
2600         jenna to enable or disable stable dislocation support
2601         (i.e. claire), as true.
2602
2603         * katie.conf (Dinstall): add StableDislocationSupport, a new
2604         boolean used by jenna to enable or disable stable dislocation
2605         support (i.e. claire), as true.
2606         * katie.conf-non-US: likewise.
2607         * katie.conf-security: likewise.
2608
2609         * cron.daily-security: generate .all3 overrides for the buildd
2610         support.  Freshen a local copy of Packages-arch-specific from
2611         buildd.debian.org.
2612
2613         * claire.py (find_dislocated_stable): disable the support for
2614         files in legacy-mixed locations since none of the Debian archives
2615         have any anymore.
2616
2617         * helena: new script; produces a report on NEW and BYHAND
2618         packages.
2619
2620         * jenna: rewritten from scratch to fix speed problems.  Run time
2621         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2622         minutes, 105 seconds are the monster query and 70 odd seconds is
2623         claire.
2624
2625         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2626         irrelevant.
2627
2628 2002-06-05  Ryan Murray  <rmurray@debian.org>
2629
2630         * cron.buildd-security: new file.
2631
2632 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2633
2634         * denise (list): take a file argument and use it.
2635         (main): don't abuse sys.stdout, just write to the file.
2636
2637         * claire.py (usage): Fix misspelling.
2638         (clean_symlink): Simplify.
2639         (find_dislocated_stable): Avoid unnecessary work.
2640
2641 2002-05-29  James Troup  <james@nocrew.org>
2642
2643         * cameron: removed; apt-ftparchive can simply walk the directory.
2644
2645 2002-05-26  Anthony Towns  <ajt@debian.org>
2646
2647         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2648         for the autobuilders.
2649
2650 2002-05-24  Ryan Murray  <rmurray@debian.org>
2651
2652         * cron.buildd: update override files before running apt-ftparchive
2653
2654 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2655
2656         * amber (main): remove extra space in prompt.
2657
2658         * utils.py (validate_changes_file_arg): use original filename in
2659         error messages.
2660
2661         * jeri (check_joey): close file after use.
2662         (parse_packages): likewise.
2663         (main): setup debug option properly.
2664
2665         * melanie (main): remove unused packages variable and simplify the
2666         code to build up con_packages by using repr().
2667
2668 2002-05-23  James Troup  <james@nocrew.org>
2669
2670         * lisa (recheck): when we reject, also return 0 so the package is
2671         skipped.
2672         (sg_compare): fix note sorting.
2673         (recheck): remove the .katie file after rejection.
2674
2675         * katie.py (Katie.accept): accepted auto-build support take 3;
2676         this time adding support for security.  Security needs a) non-pool
2677         files copied rather than symlinked since accepted is readable only
2678         by katie/security and www-data needs to be able to see the files,
2679         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2680         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2681         SecurityAcceptedAutoBuild is a new boolean which controls whether
2682         or not normal or security style is used.  The unstable_accepted
2683         table was renamed to accepted_autobuild and a suite column added.
2684         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2685         didn't have it's last_used/in_accepted flags correctly updated.
2686         * katie (install): likewise.
2687         * rhona (clean_accepted_autobuild): likewise.
2688
2689 2002-05-22  James Troup  <james@nocrew.org>
2690
2691         * lisa (sort_changes): new function; sorts changes properly.
2692         Finally.
2693         (sg_compare): new function; helper for sort_changes().  Sorts by
2694         have note and time of oldest upload.
2695         (indiv_sg_compare): new function; helper for sort_changes().
2696         Sorts by source version, have source and filename.
2697         (main): use sort_changes().
2698         (changes_compare): obsoleted; removed.
2699
2700 2002-05-20  James Troup  <james@nocrew.org>
2701
2702         * rhona (clean_accepted_autobuild): don't die if a file we're
2703         trying to remove doesn't exist.  Makes rhona more friendly to
2704         katie/katie.py crashes/bugs without any undue cost.
2705
2706 2002-05-19  James Troup  <james@nocrew.org>
2707
2708         * lisa (main): if sorting a large number of changes give some
2709         feedback.
2710         (recheck): new function, run the same checks (modulo NEW,
2711         obviously) as katie does, if they fail do the standard
2712         reject/skip/quit dance.
2713         (do_pkg): use it.
2714
2715         * katie (install): don't try to unlink the symlink in the
2716         AcceptedAutoBuild support if the destination is not a symlink (or
2717         doesn't exist).  Avoids unnecessary bombs on previous partial
2718         accepts and will still bomb hard if the file exists and isn't a
2719         symlink.
2720
2721         * utils.py: blah, commands _is_ used when the mail stuff isn't
2722         commented out like it is in my test environment.
2723
2724         * lisa (changes_compare): "has note" overrides everything else.
2725         Use .katie files rather than running parse_changes, faster and
2726         allows "has note" to work.  Correct version compare, it was
2727         reversed.  Ctime check should only kick in if the source packages
2728         are not the same.
2729         (print_new): print out and return any note.  Rename 'ret_code' to
2730         'broken'.
2731         (edit_new): renamed from spawn_editor.  Don't leak file
2732         descriptors.  Clean up error message if editor fails.
2733         (edit_note): new function, allows one to edit notes.
2734         (do_new): add note support, editing and removing.
2735         (init): kill -s/--sort; with notes we always want to use our
2736         sorting method.
2737         (usage): likewise.
2738
2739         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2740         changes field.
2741
2742         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2743         it default to 0.  Adapt tests to assume it's boolean.
2744         * fernanda.py (check_changes): adjust call appropriately.
2745         * halle (check_changes): likewise.
2746         * jennifer (check_changes): likewise.
2747         * jeri (check_changes): likewise.
2748         * shania (flush_orphans): likewise.
2749
2750         * jennifer (check_dsc): pass is_a_dsc by name when calling
2751         build_file_list() for clarity.
2752         * shania (flush_orphans): likewise.
2753         * tea (check_missing_tar_gz_in_dsc): likewise.
2754
2755         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2756         calling parse_changes() for clarity.
2757         * tea (check_dscs): likewise.
2758
2759         * utils.py (parse_changes): make dsc_whitespace_rules default to
2760         not true.
2761         * halle (check_changes): adjust call appropriately.
2762         * jennifer (check_changes): likewise.
2763         * jeri (check_changes): likewise.
2764         * lisa (changes_compare): likewise.
2765         * utils.py (changes_compare): likewise.
2766         * melanie (main): likewise.
2767         * shania (flush_orphans): likewise.
2768         * fernanda.py (check_changes): likewise.
2769
2770 2002-05-18  James Troup  <james@nocrew.org>
2771
2772         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2773         it's not useful and by and large a duplication of information
2774         available in readable format in other files.
2775
2776 2002-05-16  Ryan Murray  <rmurray@debian.org>
2777
2778         * melanie: Dir::TemplatesDir -> Dir::Templates
2779
2780 2002-05-15  Ryan Murray  <rmurray@debian.org>
2781
2782         * cameron: correct the use of os.path.join
2783
2784 2002-05-15  Anthony Towns  <ajt@debian.org>
2785
2786         * ziyi: Update to match the new format for Architectures/Components
2787         in katie.conf.
2788
2789 2002-05-14  James Troup  <james@nocrew.org>
2790
2791         * amber: new script; 'installer' wrapper script for the security
2792         team.
2793
2794         * katie.py (Katie.announce): remove unused 'dsc' local
2795         variable. (pychecker)
2796
2797         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2798
2799         * neve: don't import sys, we don't use it. (pychecker)
2800         (check_signature): fix return type mismatch. (pychecker)
2801
2802         * utils.py: don't import commands, we don't use it.  (pychecker)
2803
2804         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2805
2806         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2807         obsoleted by the change to "othercomponents" handling in jennifer
2808         detailed below.
2809         (Katie.cross_suite_version_check): new function; implements
2810         cross-suite version checking rules specified in the conf file
2811         while also enforcing the standard "must be newer than target
2812         suite" rule.
2813         (Katie.check_binary_against_db): renamed, since it's invoked once
2814         per-binary, "binaries" was inaccurate.  Use
2815         cross_suite_version_check() and don't bother with the "oldfiles"
2816         rubbish as jennifer works out "othercomponents" herself now.
2817         (Katie.check_source_against_db): use cross_suite_version_check().
2818
2819         * katie (check): the version and file overwrite checks
2820         (check_{binary,source,dsc}_against_db) are not per-suite.
2821
2822         * jennifer (check_files): less duplication of
2823         'control.Find("Architecture", "")' by putting it in a local
2824         variable.
2825         (check_files): call check_binary_against_db higher up since it's
2826         not a per-suite check.
2827         (check_files): get "othercomponents" directly rather than having
2828         check_binary_against_db do it for us.
2829
2830         * heidi (main): 'if x:', not 'if x != []:'.
2831         * katie.py (Katie.in_override_p): likewise.
2832         (Katie.check_dsc_against_db): likewise.
2833         * natalie (main): likewise.
2834         * rene (main): likewise.
2835         * ziyi (real_arch): likewise.
2836
2837         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2838         and OverrideType are now value lists, not lists.
2839         * andrea (main): likewise.
2840         * cindy (main): likewise.
2841         * claire.py (find_dislocated_stable): likewise.
2842         * denise (main): likewise.
2843         * jenna (main): likewise.
2844         * jennifer (check_distributions): likewise.
2845         (check_files): likewise.
2846         (check_urgency): likewise (Urgency::Valid).
2847         * jeri (parse_packages): likewise.
2848         * neve (main): likewise (and Location::%s::Suites).
2849         * rene (main): likewise.
2850
2851 2002-05-13  James Troup  <james@nocrew.org>
2852
2853         * katie.py (Katie.check_source_against_db): correct case of reject
2854         message to be consistent with binary checks.
2855
2856         * jennifer (get_status_output): don't leak 2 file descriptors per
2857         invocation.
2858         (check_signature): add missing '\n' to "duplicate status token"
2859         error message.
2860
2861 2002-05-09  James Troup  <james@nocrew.org>
2862
2863         * utils.py (validate_changes_file_arg): new function; validates an
2864         argument which should be a .changes file.
2865         * ashley (main): use it.
2866         * lisa (main): likewise.
2867
2868         * katie.py (Katie.check_dsc_against_db): since there can be more
2869         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2870         entry still exists in files.
2871
2872         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2873         files, since check_dsc_against_db() deletes the .orig.tar.gz
2874         entry.
2875
2876         * cameron: cleanups.
2877
2878         * utils.py (changes_compare): change sort order so that source
2879         name and source version trump 'have source'; this should fix
2880         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2881         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2882         by Ryan.
2883
2884         * lisa (main): allow the arguments to be .katie files too.
2885
2886 2002-05-07  Ryan Murray  <rmurray@debian.org>
2887
2888         * cron.buildd: add s390 to arch list again
2889
2890 2002-05-05  Ryan Murray  <rmurray@debian.org>
2891
2892         * cron.buildd: new script, update w-b database from unstable_accepted
2893         table
2894         * cameron: new script, take list in unstable_accepted and write out
2895         a file list for apt-ftparchive
2896         * apt.conf.buildd: new apt configuration for Packages/Sources for
2897         unstable_accepted
2898         * vars: add s390 to arch list.
2899
2900 2002-05-03  James Troup  <james@nocrew.org>
2901
2902         * neve (main): don't hard code the calling user as that doesn't
2903         work with modern postgres installs.  Fix psql invocation for
2904         init_pool.sql (database name required).  Dont' hard code the
2905         database name.
2906         (process_sources): add support for fingerprint and install_date.
2907         (process_packages): add support for fingerprint.
2908         (do_sources): pass in the directory, fingerprint support needs it.
2909         (get_status_output): borrowed from jennifer.
2910         (reject): likewise.
2911         (check_signature): likewise.
2912
2913         * katie (install): only try to log urgencies if Urgency_Logger is
2914         defined.
2915         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2916         defined; only close Urgency_Logger if it's defined.
2917
2918         * catherine (poolize): adapt for Dir rationalization.
2919         * claire.py (find_dislocated_stable): likewise.
2920         * denise (main): likewise.
2921         * halle (check_joey): likewise.
2922         * jenna: likewise.
2923         * jennifer: likewise.
2924         * jeri: likewise.
2925         * katie.py: likewise.
2926         * katie: likewise.
2927         * lisa (do_bxa_notification): likewise.
2928         * logging.py (Logger.__init__): likewise
2929         * rene (main): likewise.
2930         * rhona (clean): likewise.
2931         * shania (init): likewise.
2932         * tea: likewise.
2933         * ziyi: likewise.
2934
2935         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2936         FindB, not FindI.
2937
2938         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2939         boolean, use FindB, not get.
2940
2941         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2942         .orig.tar.gz's which are an exact (size/md5sum) match.
2943
2944         * ashley (main): really allow *.katie files as arguments too;
2945         noticed by aj.
2946
2947         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2948
2949 2002-05-03  Anthony Towns  <ajt@debian.org>
2950
2951         * ziyi: support for security.
2952
2953 2002-05-02  James Troup  <james@nocrew.org>
2954
2955         * jennifer (accept): call Katie.check_override() unconditional as
2956         no-mail check moved into that function.
2957         (do_byhand): likewise.
2958
2959         * katie.py (Katie.check_override): don't do anything if we're a)
2960         not sending mail or b) the override disparity checks have been
2961         disbled via Dinstall::OverrideDisparityCheck.
2962
2963         * jennifer (check_files): don't hard code Unstable as the suite
2964         used to check for architecture validity; use
2965         Dinstall::DefaultSuite instead, if it exists.
2966         (accept): conditionalize
2967
2968         * katie.py (Katie.update_subst): support global maintainer
2969         override with Dinstall::OverrideMaintainer.
2970
2971         * jennifer (check_distributions): new function, Distribution
2972         validation and mapping.  Uses new SuiteMappings variable from
2973         config file to abstract suite mappings.
2974         (check_changes): call it.
2975
2976         * natalie: renamed; nothing imports or likely will for some time.
2977
2978         * denise (main): remove unused natalie import and init().
2979
2980         * natalie.py (init): removed.
2981         (main): initalize here instead and don't hardcode the database
2982         name.
2983
2984 2002-04-30  James Troup  <james@nocrew.org>
2985
2986         * katie.py (Katie.close_bugs): new function, split out from
2987         announce().
2988         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2989         true.
2990         (Katie.close_bugs): new function, split out
2991         (Katie.close_bugs): return immediately if there are no bugs to
2992         close.
2993
2994         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2995         * katie (do_reject): likewise.
2996         (stable_install): likewise.
2997         * katie.py (Katie.announce): likewise.
2998         (Katie.accept): likewise.
2999         (Katie.check_override): likewise.
3000         (Katie.do_reject): likewise.
3001         * lisa (do_bxa_notification): likewise.
3002         * melanie (main): likewise.
3003
3004         * utils.py (TemplateSubst): change second argument to be a
3005         filename rather than a template since every caller opened a file
3006         on the fly which was ugly and leaked file descriptor.
3007
3008 2002-04-29  James Troup  <james@nocrew.org>
3009
3010         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3011         <hertzog@debian.org> to send 'accepted' announce mails to the
3012         PTS. [#128140]
3013
3014 2002-04-24  James Troup  <james@nocrew.org>
3015
3016         * init_pool.sql (unstable_accepted): add two new fields to
3017         unstable_accepted; in_accepted is a boolean indicating whether or
3018         not the file is in accepted and last_used is a timestamp used by
3019         rhona to determine when to remove symlinks for installed packages.
3020
3021         * katie.py (Katie.accept): auto-build support take 2.  Create
3022         symlinks for all files into a seperate directory.  Add files to
3023         unstable_accepted as paths to the new directory; mark them as
3024         being in accepted for cameron.  Properly conditionalize it on a
3025         configuration variable.
3026
3027         * katie (install): likewise.  Update symlinks to point into the
3028         pool; mark the files for later deletion by rhona and mark them as
3029         not being in accepted for cameron.
3030
3031         * rhona (clean_accepted_autobuild): new function.
3032
3033 2002-04-22  James Troup  <james@nocrew.org>
3034
3035         * jennifer (check_files): handle db_access.get_location_id()
3036         returning -1 properly/better.
3037
3038         * rhona (clean_fingerprints): new function.
3039
3040 2002-04-21  James Troup  <james@nocrew.org>
3041
3042         * utils.py (touch_file): unused; remove.
3043         (plural): likewise.
3044
3045         * jennifer (check_files): close file descriptor used to get the
3046         control file.
3047         (check_md5sums): likewise.
3048         (callback): likewise.
3049
3050         * katie.py (Katie.do_reject): handle manual rejects much better;
3051         call the editor first and get confirmation from the user before
3052         proceeding.
3053
3054         * jennifer (check_signature): prefix_multi_line_string() moved to
3055         utils.
3056
3057         * utils.py (prefix_multi_line_string): moved here from jennifer.
3058
3059 2002-04-20  James Troup  <james@nocrew.org>
3060
3061         * lisa (main): handle non-existent files.
3062
3063         * ashley (main): allow *.katie files as arguments too.
3064
3065 2002-04-19  James Troup  <james@nocrew.org>
3066
3067         * katie.py (Katie.accept): add stuff to help auto-building from
3068         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3069         in the pool), create a symlink to it in the accepted directory and
3070         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3071
3072         * katie (install): undo the "auto-building from accepted" stuff
3073         (i.e. remove the .orig.tar.gz symlink and remove the files from
3074         unstable_accepted table).
3075
3076 2002-04-16  James Troup  <james@nocrew.org>
3077
3078         * jennifer (upload_too_new): fix typo which was causing all
3079         timestamp comparisons to be against the .changes file.  Also move
3080         back to the original directory so we do the comparisons against
3081         accurate timestamps.
3082
3083         * tea (check_missing_tar_gz_in_dsc): new function.
3084
3085         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3086         file mentioned in the .dsc.
3087
3088         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3089         way mails reach debian-{devel-,}changes@l.d.o.
3090
3091 2002-04-02  Ryan Murray  <rmurray@debian.org>
3092
3093         * cron.daily: run shania after rhona
3094         * cron.daily-non-US: likewise.
3095
3096 2002-04-01  James Troup  <james@nocrew.org>
3097
3098         * katie: re-add proposed-updates/stable install support.
3099
3100         * katie.py (Katie.dump_vars): add changes["changes"] as an
3101         optional field; should be mandatory later.
3102
3103 2002-03-31  James Troup  <james@nocrew.org>
3104
3105         * katie (install): support a Suite::<foo>::CopyKatie similar to
3106         CopyChanges.  Done seperately because .katie files don't need to
3107         be mirrored and will probably be copied to another directory as a
3108         result.
3109
3110         * halle (main): add missing debug to options.
3111
3112 2002-03-29  James Troup  <james@nocrew.org>
3113
3114         * madison (main): add a -r/--regex option.
3115
3116 2002-03-26  James Troup  <james@nocrew.org>
3117
3118         * lisa: don't trample on changes["distribution"]; make a copy of
3119         it as changes["suite"] instead and use that.
3120
3121 2002-03-16  Anthony Towns  <ajt@debian.org>
3122
3123         * templates/lisa.bxa_notification: Fix some grammatical errors.
3124         Encourage contact via bxa@ftp-master email address.
3125
3126 2002-03-15  James Troup  <james@nocrew.org>
3127
3128         * jennifer (check_timestamps): remove bogus raise in except.
3129
3130 2002-03-15  Anthony Towns  <ajt@debian.org>
3131
3132         * cron.monthly: rotate mail/archive/bxamail as well as
3133         mail/archive/mail. This is for a complete archive of
3134         correspondence with the BXA.
3135
3136 2002-03-14  Anthony Towns  <ajt@debian.org>
3137
3138         * crypto-in-main changes.
3139
3140         * utils.py (move, copy): add an optional perms= parameter to let you
3141         set the resulting permissions of the moved/copied file
3142         * katie.py (force_move): rejected/morgued files should be unreadable
3143         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3144         should be unreadable.
3145
3146 2002-03-07  Ryan Murray  <rmurray@debian.org>
3147
3148         * katie (install): check for existance of "files id" key as well as
3149         it being set to a valid value.
3150         * katie (install): check for existense and valid value for location
3151         id as well
3152
3153 2002-03-05  Ryan Murray  <rmurray@debian.org>
3154
3155         * katie.py (do_reject): reread the reason file after editing it.
3156
3157 2002-02-25  James Troup  <james@nocrew.org>
3158
3159         * jennifer (check_changes): don't enforce sanity in .changes file
3160         names since it doesn't seem to be possible; pcmica-cs and similar
3161         freak show packages in particular cause real problems.
3162
3163         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3164         each dsc_file since the .orig.tar.gz checking code now uses it as
3165         a boolean.  Fixes bizarro rejections which bogusly claimed
3166         .diff.gz md5sum/size was incorrect.
3167
3168 2002-02-24  James Troup  <james@nocrew.org>
3169
3170         * katie (process_it): reset reject_message.
3171
3172 2002-02-22  James Troup  <james@nocrew.org>
3173
3174         * db_access.py(set_files_id): disable use of
3175         currval('files_id_seq') because it was taking 3 seconds on auric
3176         which is insane (most calls take < 0.01) and simply call
3177         get_files_id() for the return value instead.
3178
3179         * katie.py (Katie.do_query): convenience function; unused by
3180         default, useful for profiling.
3181         * db_access.py (do_query): likewise.
3182
3183         * katie (install): fix insert SQL call when binary has no source.
3184
3185         * lisa (determine_new): auto-correct non-US/main to non-US.
3186         (determine_new): add a warning when adding things to stable.
3187         (edit_index): use our_raw_input().
3188         (edit_overrides): likewise.
3189         (do_new): likewise.  Use re.search() not re.match() since the
3190         default answer may not be the first one.
3191         (do_byhand): likewise.
3192         (do_new): Default to 'S'kip and never 'A'dd.
3193
3194         * jennifer (action): pass prompt to our_raw_input().
3195         * melanie (game_over): likewise.
3196         * katie (action): likewise.
3197
3198         * utils.py (our_raw_input): add an optional prompt argument to
3199         make the function more usable as a drop in replacement for
3200         raw_input().
3201
3202         * jennifer (check_files): correct reject() to not double prefix
3203         when using katie.py based functions.
3204         (check_dsc): likewise.
3205
3206         * katie.py (Katie.reject): prepend a new line if appropriate
3207         rathen than appending one to avoid double new lines when caller
3208         adds one of his own.
3209
3210         * lisa (determine_new): warn if the package is also in other
3211         components.
3212
3213 2002-02-20  James Troup  <james@nocrew.org>
3214
3215         * jennifer (check_files): if .changes file lists "source" in
3216         Architecture field, there must be a .dsc.
3217
3218 2002-02-15  James Troup  <james@nocrew.org>
3219
3220         * ashley (main): add some missing fields.
3221
3222         * katie.py (Katie.check_dsc_against_db): fix to take into account
3223         the fact that the .orig.tar.gz might be in byhand, accepted or
3224         new.  Also fix calling of reject().
3225         (Katie.check_binaries_against_db): fix calling of reject().
3226         (Katie.check_source_against_db): likewise.
3227         (Katie.dump_vars): add missing variables used for bug closures.
3228
3229         * lisa (changes_compare_by_time): sort by reverse time.
3230
3231         * katie.py (Katie.accept): log.
3232         (Katie.dump_vars): missing has_key test for optional changes fields.
3233
3234         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3235         (process_it): traceback goes to stderr, not stdout.
3236         (acknowledge_new): log.
3237         (do_byhand): likewise.
3238
3239         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3240
3241         * add_constraints.sql: add grants for the new fingerprint table.
3242
3243 2002-02-13  James Troup  <james@nocrew.org>
3244
3245         * katie (do_reject): basename the .changes filename before trying
3246         to use it to construct the .reason filename.
3247         (process_it): call Katie.update_subst() so do_reject() DTRT with
3248         the mail template.
3249         (do_reject): setup the mail template correctly.
3250
3251 2002-02-12  James Troup  <james@nocrew.org>
3252
3253         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3254         (check_files): don't abuse global dictionaries.
3255         (Ent): use all variables.
3256         (check_timestamps): don't abuse global dictionaries.
3257
3258         * fernanda.py: renamed to .py so lisa can import it.
3259         (check_dsc): remove unused local variables (pychecker).
3260         (display_changes): split off from check_changes.
3261
3262         * katie: rewritten; most of the functionality moves to jennifer;
3263         what's left is the code to install packages once a day from the
3264         'accepted' directory.
3265
3266         * jennifer: new program, processes packages in 'unchecked'
3267         (i.e. most of the non-install functionality of old katie).
3268
3269         * katie.py: common functions shared between the clique of
3270         jennifer, lisa and katie.
3271
3272         * lisa: new program; handles NEW and BYHAND packages.
3273
3274         * jeri (usage): new function.
3275         (main): use it.
3276         (check_package): remove unused local variable (pychecker).
3277
3278         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3279         binaries and source.  Add install_date to source.
3280
3281         * halle (usage): new function.
3282         (main): use it.  Remove unused options.
3283         (check_changes): remove unused local variable (pychecker).
3284
3285         * add_constraints.sql: add fingerprint references.
3286
3287         * db_access.py (get_or_set_fingerprint_id): new function.
3288
3289         * ashley (main): new program; dumps the contents of a .katie file
3290         to stdout.
3291
3292         * alyson (main): remove option handling since we don't actually
3293         support any.
3294         * cindy (main): likewise.
3295
3296         * remove unnecessary imports and pre-define globals (pychecker).
3297
3298 2002-02-11  Anthony Towns  <ajt@debian.org>
3299
3300         * added installation-report and upgrade-report pseudo-packages
3301
3302 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3303
3304         * katie (update_subst): use Dinstall::TrackingServer.
3305         * melanie (main): likewise.
3306
3307 2002-01-27  James Troup  <james@nocrew.org>
3308
3309         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3310         noticing, jgg@ for fix.
3311
3312 2002-01-19  James Troup  <james@nocrew.org>
3313
3314         * utils.py (extract_component_from_section): handle non-US
3315         non-main properly.
3316
3317 2002-01-12  James Troup  <james@nocrew.org>
3318
3319         * madison: add support for -S/--source-and-binary which displays
3320         information for the source package and all it's binary children.
3321
3322 2002-01-13  Anthony Towns  <ajt@debian.org>
3323
3324         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3325         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3326           and 2002 key ids.
3327         * katie.conf-non-US: Likewise.
3328         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3329           multiple keys automatically. This is probably only useful for
3330           transitioning from an expired (or revoked?) key.
3331
3332 2002-01-08  Ryan Murray  <rmurray@debian.org>
3333
3334         * debian/python-dep: new file that prints out python:Depends for
3335           substvars
3336         * debian/control: use python:Depends, build-depend on python
3337           lower Depends: on postgresql to Suggests:
3338         * debian/rules: determine python version, install to the correct
3339           versioned dir
3340
3341 2001-12-18  Anthony Towns  <ajt@debian.org>
3342
3343         * ziyi: unlink Release files before overwriting them (in case they've
3344           been merged)
3345         * ziyi: always include checksums/sizes for the uncompressed versions
3346           of Sources and Packages, even if they're not present on disk
3347
3348 2001-11-26  Ryan Murray  <rmurray@debian.org>
3349
3350         * ziyi (main): add SigningPubKey config option
3351         * katie.conf: use SigningPubKey config option
3352         * katie.conf-non-US: likewise
3353
3354 2001-11-24  James Troup  <james@nocrew.org>
3355
3356         * katie (acknowledge_new): log newness.
3357
3358 2001-11-24  Anthony Towns  <ajt@debian.org>
3359
3360         * ziyi (real_arch): bail out if some moron forgot to reset
3361         untouchable on stable.
3362         (real_arch): source Release files.
3363
3364 2001-11-19  James Troup  <james@nocrew.org>
3365
3366         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3367         utils.get_conf().
3368         * shania (main): likewise.
3369
3370         * rhona (main): add default options.
3371
3372         * db_access.py (get_archive_id): case independent.
3373
3374         * katie (action): sort files so that ordering is consistent
3375         between mails; noticed/requested by Joey.
3376
3377 2001-11-17  Ryan Murray  <rmurray@debian.org>
3378
3379         * utils.py: add get_conf function, change startup code to read all
3380           config files to the Cnf that get_conf returns
3381           use the component list from the katie conf rather than the hardcoded
3382           list.
3383         * all scripts: use new get_conf function
3384         * shania: fix try/except around changes files
3385         * jenna: only do debian-installer if it is a section in Cnf
3386
3387 2001-11-16  Ryan Murray  <rmurray@debian.org>
3388
3389         * shania (main): Initialize days to a string of a number.
3390                  (main): Initialize Cnf vars before reading in Cnf
3391
3392 2001-11-14  Ryan Murray  <rmurray@debian.org>
3393
3394         * shania (main): Initialize days to a number.
3395
3396 2001-11-04  James Troup  <james@nocrew.org>
3397
3398         * docs/Makefile: use docbook-utils' docbook2man binary.
3399
3400         * Change all "if foo == []" constructs into "if not foo".
3401
3402         * katie (check_changes): when installing into stable from
3403         proposed-updates, remove all non-stable target distributions.
3404         (check_override): don't check for override disparities on stable
3405         installs.
3406         (stable_install): update install_bytes appropriately.
3407         (reject): stable rejection support; i.e. don't remove files when
3408         rejecting files in the pool, rather remove them from the
3409         proposed-update suite instead, rhona will do the rest.
3410         (manual_reject): support for a stable specific template.
3411         (main): setup up stable rejector in subst.
3412
3413 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3414
3415         * debian/control (Build-Depends): docbook2man has been superseded
3416         by docbook-utils.
3417
3418         * neve (main): exit with a more useful error message.
3419         (update_suites): Suite::<suite>::Version, Origin and Description
3420         are not required, so don't fail if they don't exist.
3421
3422         * db_access.py (get_archive_id): return -1 on error rather than
3423         raise an exception.
3424         (get_location_id): likewise.
3425
3426         * madison (main): don't exit on the first not-found package,
3427         rather exit with an appropriate return code after processing all
3428         packages.
3429
3430 2001-11-03  James Troup  <james@nocrew.org>
3431
3432         * claire.py (find_dislocated_stable): add per-architecture
3433         symlinks for dislocated architecture: all debs.
3434
3435 2001-10-19  Anthony Towns  <ajt@debian.org>
3436
3437         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3438
3439 2001-10-10  Anthony Towns  <ajt@debian.org>
3440
3441         * claire.py (fix_component_section): do _not_ assign to None under
3442         any circumstances
3443
3444 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3445
3446         * melanie (main): don't duplicate architectures when removing from
3447         more than one suite.
3448
3449         * heidi (main, process_file, get_list): report suite name not ID.
3450
3451         * naima (nmu_p): be case insensitive.
3452
3453         * naima (action): more list handling clean ups.
3454
3455         * melanie (main): clean up lists handling to use string.join and
3456         IN's.
3457
3458         * madison (main): clean up suite and architecture argument parsing
3459         to use slices less and string.join more.
3460
3461         * utils.py (parse_changes): Use string.find() instead of slices for
3462         string comparisons thereby avoid hardcoding the length of strings.
3463         * ziyi (main): likewise.
3464
3465 2001-10-07  James Troup  <james@nocrew.org>
3466
3467         * Remove mode argument from utils.open_files() calls if it's the
3468         default, i.e. 'r'.
3469
3470 2001-09-27  James Troup  <james@nocrew.org>
3471
3472         * katie (init): new function; options clean up.
3473         (usage): add missing options, remove obsolete ones.
3474         (main): adapt for the two changes above.  If the lock file or
3475         new-ack log file don't exist, create them.  Don't try to open the
3476         new-ack log file except running in new-ack mode.
3477
3478         * alyson (main): initialize all the tables that are based on the
3479         conf file.
3480
3481         * utils.py (touch_file): like touch(1).
3482         (where_am_i): typo.
3483
3484         * catherine (usage): new.
3485         (main): use it.  options cleanup.
3486         * claire.py: likewise.
3487         * fernanda: likewise.
3488         * heidi: likewise.
3489         * jenna: likewise.
3490         * shania: likewise.
3491         * ziyi: likewise.
3492
3493         * andrea: options cleanup.
3494         * charisma: likewise.
3495         * julia: likewise.
3496         * madison: likewise.
3497         * melanie: likewise.
3498         * natalie: likewise.
3499         * rhona: likewise.
3500         * tea: likewise.
3501
3502 2001-09-26  James Troup  <james@nocrew.org>
3503
3504         * utils.py: default to sane config file locations
3505         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3506         or they can point to the real ones through use of a new Config
3507         section.  Based on an old patch by Adam Heath.
3508         (where_am_i): use the new default config stuff.
3509         (which_conf_file): likewise.
3510         (which_apt_conf_file): likewise.
3511
3512         * charisma (main): output defaults to
3513         `Package~Version\tMaintainer'; input can be of either form.  When
3514         parsing the new format do version comparisons, when parsing the
3515         old format assume anything in the extra file wins.  This fixes the
3516         problem of newer non-US packages being overwhelmed by older
3517         versions still in stable on main.
3518
3519 2001-09-17  James Troup  <james@nocrew.org>
3520
3521         * natalie.py (list): use result_join().
3522
3523         * denise (main): result_join() moved to utils.
3524
3525         * utils.py (result_join): move to utils; add an optional seperator
3526         argument.
3527
3528 2001-09-14  James Troup  <james@nocrew.org>
3529
3530         * heidi (set_suite): new function; does --set like natalie does,
3531         i.e. turns it into a sequence of --add's and --remove's
3532         internally.  This is a major win (~20 minute run time > ~20
3533         seconds) in the common, everday (i.e. testing) case.
3534         (get_id): common code used by set_suite() and process_file().
3535         (process_file): call set_suite() and get_id().
3536         (main): add logging support.
3537
3538         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3539         files.
3540
3541         * utils.py (parse_changes): use slices or simple string comparison
3542         in favour of regexes where possible.
3543
3544         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3545         fact that the string VARDATA() points to are not null terminated.
3546
3547         * denise (result_join): new function; like string.join() but
3548         handles None's.
3549         (list): use it.
3550         (main): likewise.
3551
3552         * charisma (main): python-pygresql 7.1 returns None not "".
3553
3554 2001-09-14  Ryan Murray  <rmurray@debian.org>
3555
3556         * natalie.py (list): handle python-pygresql 7.1 returning None.
3557
3558 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3559
3560         * madison (main): return 1 if no package is found.
3561
3562 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3563
3564         * madison (main): better error handling for incorrect
3565         -a/--architecture or -s/--suite arguments.
3566         (usage): new.
3567         (main): use it.
3568
3569 2001-09-05  Ryan Murray  <rmurray@debian.org>
3570
3571         * charisma, madison, katie: remove use of ROUser
3572         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3573
3574 2001-08-26  James Troup  <james@nocrew.org>
3575
3576         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3577         maintained packages at cjwatson@'s request.
3578
3579 2001-08-21  James Troup  <james@nocrew.org>
3580
3581         * madison (main): add -a/--architecture support.
3582
3583         * jenna: use logging instead of being overly verbose on stdout.
3584
3585 2001-08-11  Ryan Murray  <rmurray@debian.org>
3586
3587         * melanie: add functional help option
3588
3589 2001-08-07  Anthony Towns  <ajt@debian.org>
3590
3591         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3592
3593 2001-07-28  James Troup  <james@nocrew.org>
3594
3595         * katie (check_dsc): ensure source version is >> than existing
3596         source in target suite.
3597
3598 2001-07-25  James Troup  <james@nocrew.org>
3599
3600         * natalie.py: add logging support.
3601
3602         * utils.py (open_file): make the second argument optional and
3603         default to read-only.
3604
3605         * rene (main): work around broken source packages that duplicate
3606         arch: all packages with arch: !all packages (no longer allowed
3607         into the archive by katie).
3608
3609 2001-07-13  James Troup  <james@nocrew.org>
3610
3611         * katie (action): don't assume distribution is a dictionary.
3612         (update_subst): don't assume architecture is a dictionary and that
3613         maintainer822 is defined.
3614         (check_changes): recognise nk_format exceptions.
3615         (check_changes): reject on 'testing' only uploads.
3616         (check_files): when checking to ensure all packages are newer
3617         versions check against arch-all packages too.
3618         (check_dsc): enforce the existent of a sane set of mandatory
3619         fields.  Ensure the version number in the .dsc (modulo epoch)
3620         matches the version number in the .changes file.
3621
3622         * utils.py (changes_compare): ignore all exceptions when parsing
3623         the changes files.
3624         (build_file_list): don't UNDEF on a changes file with no format
3625         field.
3626
3627 2001-07-07  James Troup  <james@nocrew.org>
3628
3629         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3630         rather than 'changedbyname' to avoid false negatives on uploads
3631         with an email-address-only Changed-By field.
3632         (check_dsc): don't overwrite reject_message; append to it.
3633         (check_signature): likewise.
3634         (check_changes): likewise.
3635         (announce): condition logging on 'action'.
3636
3637         * logging.py: new logging module.
3638
3639         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3640         sub-tree into a separate (global) variable.
3641         (check_dsc): ensure format is 1.0 to retain backwards
3642         compatability with dpkg-source in potato.
3643         (main): only try to obtain the lock when not running in no-action
3644         mode.
3645         Use the new logging module.
3646
3647         * christina: initial version; only partially usable.
3648
3649 2001-06-28  Anthony Towns  <ajt@debian.org>
3650
3651         * apt.conf: Add ExtraOverrides to auric.
3652
3653 2001-06-25  James Troup  <james@nocrew.org>
3654
3655         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3656         they preferred the name 'Uploaders'.
3657
3658 2001-06-23  James Troup  <james@nocrew.org>
3659
3660         * katie (check_files): fix typo in uncommon rejection message,
3661         s/sourceversion/source version/.
3662
3663         * denise (main): we can't use print because stdout has been
3664         redirected.
3665
3666         * katie (source_exists): new function; moved out of check_files()
3667         and added support for binary-only NMUs of earlier sourceful NMUs.
3668
3669         * rhona (clean): find_next_free has moved.
3670
3671         * utils.py (find_next_free): new function; moved here from rhona.
3672         Change too_many to be an argument with a default value, rather
3673         than a hardcoded variable.
3674
3675         * shania: rewritten to work better; REJECTion reminder mail
3676         handling got lost though.
3677
3678 2001-06-22  James Troup  <james@nocrew.org>
3679
3680         * rhona (main): remove unused override code.
3681
3682         * fernanda (main): remove extraneous \n's from utils.warn calls.
3683         * natalie.py (list): likewise.
3684
3685         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3686         use utils.{warn,fubar} where appropriate.
3687
3688 2001-06-21  James Troup  <james@nocrew.org>
3689
3690         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3691         functionality.
3692         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3693         by the "Maintainers" field in the .dsc file and maintainer groups.
3694         (nmu_p.__init__): read in the list of group maintainer names.
3695         (announce): use nmu_p.
3696
3697 2001-06-20  James Troup  <james@nocrew.org>
3698
3699         * rene (main): hardcode the suite experimental is compared to by
3700         name rather than number.
3701
3702         * katie (check_files): differentiate between doesn't-exist and
3703         permission-denied in "can not read" rejections; requested by edd@.
3704         (check_dsc): use os.path.exists rather than os.access to allow the
3705         above check to kick in.
3706
3707         * heidi (process_file): read all input before doing anything and
3708         use transactions.
3709
3710 2001-06-15  James Troup  <james@nocrew.org>
3711
3712         * fernanda: new script; replaces old 'check' shell script
3713         nastiness.
3714
3715 2001-06-14  James Troup  <james@nocrew.org>
3716
3717         * katie: actually import traceback module to avoid amusing
3718         infinite loop.
3719
3720 2001-06-10  James Troup  <james@nocrew.org>
3721
3722         * utils.py (extract_component_from_section): fix to handle just
3723         'non-free' and 'contrib'.  Also fix to handle non-US in a
3724         completely case insensitive manner as a component.
3725
3726 2001-06-08  James Troup  <james@nocrew.org>
3727
3728         * madison (arch_compare): sort function that sorts 'source' first
3729         then alphabetically.
3730         (main): use it.
3731
3732 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3733
3734         * catherine (poolize): explicitly make poolized_size a long so it
3735         doesn't overflow when poolizing e.g. entire archives.
3736
3737 2001-06-01  James Troup  <james@nocrew.org>
3738
3739         * utils.py (send_mail): throw exceptions rather than exiting.
3740
3741         * katie (process_it): catch exceptions and ignore them.
3742
3743 2001-06-01  Michael Beattie  <mjb@debian.org>
3744
3745         * added update-mailingliststxt and update-readmenonus to update
3746         those files, respectively. modified cron.daily{,-non-US} to
3747         use them.
3748
3749 2001-05-31  Anthony Towns  <ajt@debian.org>
3750
3751         * rhona: make StayOfExecution work.
3752
3753 2001-05-31  James Troup  <james@nocrew.org>
3754
3755         * rhona (find_next_free): fixes to not overwrite files but rename
3756         them by appending .<n> instead.
3757         (clean): use find_next_free and use dated sub-directories in the
3758         morgue.
3759
3760         * utils.py (move): don't overwrite files unless forced to.
3761         (copy): likewise.
3762
3763 2001-05-24  James Troup  <james@nocrew.org>
3764
3765         * katie (check_files): determine the source version here instead
3766         of during install().
3767         (check_files): check for existent source with bin-only NMU
3768         support.
3769         (main): sort the list of changes so that the source-must-exist
3770         check Does The Right Thing(tm).
3771
3772         * utils.py (changes_compare): new function; sorts a list of
3773         changes files by 'have-source', source, version.
3774         (cc_fix_changes): helper function.
3775         (parse_changes): use compiled regexes.
3776         (fix_maintainer): likewise.
3777
3778         * rene (main): warn about packages in experimental that are
3779         superseded by newer versions in unstable.
3780
3781 2001-05-21  James Troup  <james@nocrew.org>
3782
3783         * rene (main): add support for checking for ANAIS (Architecture
3784         Not Allowed In Source) packages.
3785
3786 2001-05-17  James Troup  <james@nocrew.org>
3787
3788         * katie (check_changes): initalize `architecture' dictionary in
3789         changes global so that if we can't parse the changes file for
3790         whatever reason we don't undef later on.
3791
3792         * utils.py (parse_changes): fix handling of multi-line fields
3793         where the first line did have data.
3794
3795 2001-05-05  Anthony Towns  <ajt@debian.org>
3796
3797         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3798         (It should always have been there. Ooopsy.)
3799
3800 2001-05-03  Anthony Towns  <ajt@debian.org>
3801
3802         * jenna: Cleanup packages that move from arch:any to arch:all or
3803         vice-versa.
3804
3805 2001-04-24  Anthony Towns  <ajt@debian.org>
3806
3807         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3808         cope with debian-installer and boot-floppies' md5sum.txt.
3809
3810 2001-04-16  James Troup  <james@nocrew.org>
3811
3812         * katie (check_changes): add missing %s format string argument.
3813         (stable_install): temporary work around for morgue location to
3814         move installed changes files into.
3815         (stable_install): helps if you actually read in the template.
3816         (manual_reject): fix for editing of reject messages which was
3817         using the wrong variable name.
3818
3819         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3820
3821 2001-04-13  James Troup  <james@nocrew.org>
3822
3823         * katie (manual_reject): Cc the installer.
3824         (reject): don't.
3825         (check_changes): remove unused maintainer-determination code.
3826         (update_subst): add support for Changed-By when setting the
3827         *MAINTAINER* variables.
3828
3829         * rene (bar): new function to check for packages on architectures
3830         when they shouldn't be.
3831
3832         * natalie.py (main): use fubar() and warn() from utils.
3833
3834         * utils.py (whoami): new mini-function().
3835         * melanie (main): use it.
3836         * katie (manual_reject): likewise.
3837
3838 2001-04-03  James Troup  <james@nocrew.org>
3839
3840         * katie (action): ignore exceptions from os.path.getmtime() so we
3841         don't crash on non-existent changes files (e.g. when they are
3842         moved between the start of the install run in cron.daily and the
3843         time we get round to processing them).
3844
3845         * madison (main): also list source and accept -s/--suite.
3846
3847         * jenna (generate_src_list): missing \n in error message.
3848
3849         * katie (update_subst): add sane defaults for when changes is
3850         skeletal.
3851
3852 2001-03-29  James Troup  <james@nocrew.org>
3853
3854         * melanie (main): use fubar() and warn() from utils.  Remember who
3855         the maintainer for the removed packages are and display that info
3856         to the user.  Readd support for melanie-specific Bcc-ing that got
3857         lost in the TemplateSubst transition.
3858
3859         * utils.py (fubar): new function.
3860         (warn): like wise.
3861
3862         * db_access.py (get_maintainer): as below.
3863
3864         * charisma (get_maintainer): moved the bulk of this function to
3865         db_access so that melanie can use it too.
3866
3867         * claire.py (find_dislocated_stable): restrict the override join
3868         to those entries where the suite is stable; this avoids problems
3869         with packages which have moved to new sections (e.g. science)
3870         between stable and unstable.
3871
3872 2001-03-24  James Troup  <james@nocrew.org>
3873
3874         * catherine (poolize): new function; not really independent of
3875         main() fully, yet.
3876         (main): use it.
3877
3878         * katie (stable_install): __SUITE__ needs to be space prefixed
3879         because buildd's check for 'INSTALLED$'.
3880
3881 2001-03-22  James Troup  <james@nocrew.org>
3882
3883         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3884
3885         * jenna: rewritten; now does deletions on a per-suite level
3886         instead of a per-suite-component-architecture-type level.  This
3887         allows mutli-component packages to be auto-cleaned (and as a
3888         bonus, reduces the code size and duplication).
3889
3890 2001-03-22  Anthony Towns  <ajt@debian.org>
3891
3892         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3893         instead of just giving a gpg error.
3894
3895 2001-03-21  James Troup  <james@nocrew.org>
3896
3897         * madison (main): use apt_pkg.VersionCompare to sort versions so
3898         that output is correctly sorted for packages like debhlper.
3899         Noticed by ajt@.
3900
3901         * tea (check_source_in_one_dir): actually find problematic source
3902         packages.
3903
3904         * katie (check_dsc): remember the orig.tar.gz's location ID if
3905         it's not in a legacy suite.
3906         (check_diff): we don't use orig_tar_id.
3907         (install): add code to handle sourceful diff-only upload of
3908         packages which change components by copying the .orig.tar.gz into
3909         the new component, if it doesn't already exist there.
3910         (process_it): reset orig_tar_location (as above).
3911
3912         * melanie (main): use template substiution for the bug closing
3913         emails.
3914         (main): don't hardcode bugs.debian.org or packages.debian.org
3915         either; use configuration items.
3916
3917         * katie: likewise.
3918
3919         * natalie.py (init): use None rather than 'localhost' for the
3920         hostname given to pg.connect.
3921
3922         * utils.py (TemplateSubst): new function; lifted from
3923         userdir-ldap.
3924
3925 2001-03-21  Ryan Murray  <rmurray@debian.org>
3926
3927         * katie (announce): fix the case of non-existent
3928         Suite::$SUITE::Announce.
3929
3930 2001-03-20  Ryan Murray  <rmurray@debian.org>
3931
3932         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3933         /usr/.
3934
3935         * alyson (main): use config variable for database name.
3936         * andrea (main): likewise.
3937         * catherine (main): likewise.
3938         * charisma (main): likewise.
3939         * cindy (main): likewise.
3940         * claire.py (main): likewise.
3941         * denise (main): likewise.
3942         * heidi (main): likewise.
3943         * jenna (main): likewise.
3944         * katie (main): likewise.
3945         * madison (main): likewise.
3946         * melanie (main): likewise.
3947         * neve (main): likewise.
3948         * rhona (main): likewise.
3949         * tea (main): likewise.
3950
3951 2001-03-15  James Troup  <james@nocrew.org>
3952
3953         * rhona (check_sources): fixed evil off by one (letter) error
3954         which was causing only .dsc files to be deleted when cleaning
3955         source packages.
3956
3957         * charisma (get_maintainer_from_source): remove really stupid and
3958         gratuitous IN sub-query and replace with normal inner join.
3959         (main): connect as read-only user nobody.
3960
3961         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3962         with EXISTS.
3963         (check_files): likewise; still disabled by default though.
3964         (clean_binaries): add ' seconds' to the mysterious number in the
3965         output.
3966         (clean): likewise.
3967
3968         * tea (check_files): add missing global declaration on db_files.
3969
3970 2001-03-14  James Troup  <james@nocrew.org>
3971
3972         * rhona: rewritten large chunks. Removed a lot of the silly
3973         selecting into dictionaries and replaced it with 'where exists'
3974         based sub queries.  Added support for StayOfExecution.  Fix the
3975         problem with deleting dsc_files too early and disable cleaning of
3976         unattached files.
3977
3978 2001-03-14  Anthony Towns  <ajt@debian.org>
3979
3980         * katie (announce): also check Changed-By when trying to detect
3981         NMUs.
3982
3983 2001-03-06  Anthony Towns  <ajt@debian.org>
3984
3985         * ziyi (main): Generate Release.gpg files as well, using the key from
3986         Dinstall::SigningKey in katie.conf, if present. That key has to be
3987         passwordless, and hence kept fairly secretly.
3988
3989 2001-03-02  James Troup  <james@nocrew.org>
3990
3991         * utils.py (str_isnum): new function; checks to see if the string
3992         is a number.
3993
3994         * shania (main): fix _hideous_ bug which was causing all files > 2
3995         weeks old to be deleted from incoming, even if they were part of a
3996         valid upload.
3997
3998 2001-02-27  James Troup  <james@nocrew.org>
3999
4000         * melanie (main): accept new argument -C/--carbon-copy which
4001         allows arbitarty carbon-copying of the bug closure messages.
4002         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4003         separate variable.
4004
4005 2001-02-27  Anthony Towns  <ajt@debian.org>
4006
4007         * ziyi: new program; generates Release files.
4008
4009 2001-02-25  James Troup  <james@nocrew.org>
4010
4011         * katie (reject): add missing '\n' to error message.
4012         (manual_reject): likewise.
4013         (install): catch exceptions from moving the changes file into DONE
4014         and ignore them.
4015
4016         * tea (check_md5sums): new function.
4017
4018 2001-02-25  Michael Beattie  <mjb@debian.org>
4019
4020         * melanie: use $EDITOR if available.
4021
4022 2001-02-15  James Troup  <james@nocrew.org>
4023
4024         * utils.py (parse_changes): don't crash and burn on empty .changes
4025         files.  Symptoms noticed by mjb@.
4026
4027 2001-02-15  Adam Heath  <doogie@debian.org>
4028
4029         * denise (main): use an absolute path for the output filename.
4030
4031         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4032         compile errors with postgresql-dev >= 7.0.
4033
4034 2001-02-12  James Troup  <james@nocrew.org>
4035
4036         * rene: initial version.
4037
4038         * andrea: initial version.
4039
4040         * catherine (main): remove obsolete assignment of arguments.
4041
4042 2001-02-09  James Troup  <james@nocrew.org>
4043
4044         * catherine: first working version.
4045
4046 2001-02-06  James Troup  <james@nocrew.org>
4047
4048         * katie (check_files): validate the priority field; i.e. ensure it
4049         doesn't contain a '/' (to catch people prepending the priority
4050         with the component rather than the section).
4051         (check_override): don't warn about source packages; the only check
4052         is on section and we have no GUI tools that would use the Section
4053         field for a Sources file.
4054         (announce): use tags rather than severities for NMUs.  Requested
4055         by Josip Rodin <joy@>. [#78035]
4056
4057 2001-02-04  James Troup  <james@nocrew.org>
4058
4059         * tea (check_override): new function; ensures packages in suites
4060         are also in the override file.  Thanks to bod@ for noticing that
4061         such packages existed.
4062
4063         * katie: move file type compiled regular expressions to utils as
4064         catherine uses them too.
4065         (check_changes): always default maintainer822 to the installer
4066         address so that any bail out won't cause undefs later.
4067         (check_files): update file type re's to match above.
4068         (stable_install): likewise.
4069         (reject): handle any except from moving the changes files.  Fixes
4070         crashes on unreadable changes files.
4071
4072         * melanie (main): add an explanation of why things are not removed
4073         from testing.
4074
4075 2001-01-31  James Troup  <james@nocrew.org>
4076
4077         * melanie (main): ignore a) no message, b) removing from stable or
4078         testing when invoked with -n/--no-action.
4079
4080         * katie (check_override): lower section before checking to see if
4081         we're whining about 'non-US' versus 'non-US/main'.
4082
4083         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4084         function so that we can use inside of PostgreSQL.
4085
4086 2001-01-28  James Troup  <james@nocrew.org>
4087
4088         * katie: updated to pass new flag to parse_changes() and deal with
4089         the exception raised on invalid .dsc's if appropriate.
4090         * shania (main): likewise.
4091         * melanie (main): likewise.
4092
4093         * tea (check_dscs): new function to validate all .dsc files in
4094         unstable.
4095
4096         * utils.py (parse_changes): if passed an additional flag, validate
4097         the .dsc file to ensure it's extractable by dpkg-source.
4098         Requested by Ben Collins <bcollins@>.
4099
4100 2001-01-27  James Troup  <james@nocrew.org>
4101
4102         * madison (main): connect to the DB as nobody.
4103
4104         * katie (check_files): remove support for -r/--no-version-check
4105         since it makes no sense under katie (jenna will automatically
4106         remove the (new) older version) and was evil in any event.
4107         (check_changes): add missing new line to rejection message.
4108         (check_dsc): likewise.
4109         (process_it): reset reject_message here.
4110         (main): not here.  Also remove support for -r.
4111
4112 2001-01-26  James Troup  <james@nocrew.org>
4113
4114         * katie (check_override): don't whine about 'non-US/main' versus
4115         'non-US'.
4116
4117 2001-01-26  Michael Beattie  <mjb@debian.org>
4118
4119         * natalie.py (usage): new function.
4120         (main): use it.
4121
4122 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4123
4124         * update-mirrorlists: Update README.non-US too (request from Joy).
4125
4126 2001-01-25  James Troup  <james@nocrew.org>
4127
4128         * katie (reject): catch any exception from utils.move() and just
4129         pass, we previously only caught can't-overwrite errors and not
4130         can't-read ones.
4131
4132         * jenna (generate_src_list): use ORDER BY in selects to avoid
4133         unnecessary changes to Packages files.
4134         (generate_bin_list): likewise.
4135
4136         * utils.py (extract_component_from_section): separated out from
4137         build_file_list() as it's now used by claire too.
4138
4139         * claire.py (find_dislocated_stable): rewrite the query to extract
4140         section information and handle component-less locations properly.
4141         Thanks to ajt@ for the improved queries.
4142         (fix_component_section): new function to fix components and
4143         sections.
4144
4145 2001-01-23  James Troup  <james@nocrew.org>
4146
4147         * katie (check_files): set file type for (u?)debs first thing, so
4148         that if we continue, other functions which rely on file type
4149         existing don't bomb out.  If apt_pkg or apt_inst raise an
4150         exception when parsing the control file, don't try any other
4151         checks, just drop out.
4152         (check_changes): new test to ensure there is actually a target
4153         distribution.
4154
4155 2001-01-22  James Troup  <james@nocrew.org>
4156
4157         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4158         <grin@>.
4159         (check_changes): when mapping to unstable, remember to actually
4160         add unstable to the suite list and not just remove the invalid
4161         suite.
4162
4163 2001-01-21  James Troup  <james@nocrew.org>
4164
4165         * katie (check_files): catch exceptions from debExtractControl()
4166         and reject packages which raise any.
4167
4168 2001-01-19  James Troup  <james@nocrew.org>
4169
4170         * katie (check_signature): basename() file name in rejection
4171         message.
4172
4173 2001-01-18  James Troup  <james@nocrew.org>
4174
4175         * katie (in_override_p): remember the section and priority from
4176         the override file so we can check them against the package later.
4177         (check_override): new function; checks section and priority (for
4178         binaries) from the package against the override file and mails the
4179         maintainer about any disparities.
4180         (install): call check_override after announcing the upload.
4181
4182 2001-01-16  James Troup  <james@nocrew.org>
4183
4184         * utils.py (build_file_list): catch ValueError's from splitting up
4185         the files field and translate it into a parse error.
4186
4187         * tea: add support for finding unreferenced files.
4188
4189         * katie (in_override_p): add support for suite-aliasing so that
4190         proposed-updates uploads work again.
4191         (check_changes): catch parses errors from utils.build_file_list().
4192         (check_dsc): likewise.
4193         (check_diff): yet more dpkg breakage so we require even newer a
4194         version.
4195
4196         * jenna (generate_bin_list): don't do nasty path munging that's no
4197         longer needed.
4198
4199         * denise (main): support for non-US; and rename testing's override
4200         files so they're based on testing's codename.
4201
4202 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4203
4204         * melanie: add to the bug closing message explaining what happens
4205         (or rather doesn't) with bugs against packages that have been
4206         removed.
4207
4208 2001-01-14  James Troup  <james@nocrew.org>
4209
4210         * charisma (main): fix silly off-by-one error; suite priority
4211         checking was done using "less than" rather than "less than or
4212         equal to" which was causing weird hesienbugs with wrong Maintainer
4213         fields.
4214
4215 2001-01-10  James Troup  <james@nocrew.org>
4216
4217         * katie (in_override_p): adapted to use SQL-based overrides.
4218         read_override_file function disappears.
4219
4220         * db_access.py: add new functions get_section_id, get_priority_id
4221         and get_override_type_id.
4222         (get_architecture_id): return -1 if the architecture is not found.
4223
4224         * heidi: switch %d -> %d in all SQL queries.
4225         (get_list): Use string.join where appropriate.
4226
4227         * rhona (in_override_p): don't die if the override file doesn't
4228         exist.
4229         (main): warn if the override file doesn't exist.
4230
4231         * alyson: new script; will eventually sync the config file and the
4232         SQL database.
4233
4234         * natalie.py: new script; manipulates overrides.
4235
4236         * melanie: new script; removes packages from suites.
4237
4238 2001-01-08  James Troup  <james@nocrew.org>
4239
4240         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4241         anything it just changed the symptom.  Recognise the new breakage
4242         and reject them too.
4243
4244 2001-01-07  James Troup  <james@nocrew.org>
4245
4246         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4247         to the .changes file, be sure to set up files[filename]["type"]
4248         too.
4249
4250 2001-01-06  James Troup  <james@nocrew.org>
4251
4252         * katie (check_diff): new function; detects bad diff files
4253         produced by dpkg 1.8.1 and rejects thems.
4254         (process_it): call check_diff().
4255         (check_dsc): gar.  Add support for multiple versions of the
4256         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4257         and size against all versions and use one which matches if
4258         possible and exclude any that don't from being poolized to avoid
4259         file overwrites.  Thanks to broonie@ for providing the example.
4260         (install): skip any files marked as excluded as above.
4261
4262 2001-01-05  James Troup  <james@nocrew.org>
4263
4264         * heidi (process_file): add missing argument to error message.
4265
4266 2001-01-04  James Troup  <james@nocrew.org>
4267
4268         * heidi (main): fix handling of multiple files by reading all
4269         files not just the first file n times (where n = the number of
4270         files passed as arguments).
4271
4272 2001-01-04  Anthony Towns  <ajt@debian.org>
4273
4274         * katie (check_dsc): proper fix for the code which locates the
4275         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4276
4277 2000-12-20  James Troup  <james@nocrew.org>
4278
4279         * rhona: replace IN's with EXISTS's to make DELETE time for
4280         binaries and source sane on auric.  Add a -n/--no-action flag and
4281         make it stop actions if used.  Fixed a bug in binaries deletion
4282         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4283         -V/--version.  Giving timing info on deletion till I'm sure it's
4284         sane.
4285
4286         * katie (check_changes): map testing to unstable.
4287
4288         * madison: new script; shows versions in different architectures.
4289
4290         * katie (check_dsc): ensure size matches as well as md5sum;
4291         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4292         #69702.
4293
4294 2000-12-19  James Troup  <james@nocrew.org>
4295
4296         * katie (reject): ignore the "can't overwrite file" exception from
4297         utils.move() and leave the files where they are.
4298         (reject): doh! os.access() test was reversed so we only tried to
4299         move files which didn't exist... replaced with os.path.exists()
4300         test the right way round.
4301
4302         * utils.py (move): raise an exception if we can't overwrite the
4303         destination file.
4304         (copy): likewise.
4305
4306 2000-12-18  James Troup  <james@nocrew.org>
4307
4308         * rhona: first working version.
4309
4310         * db_access.py (get_files_id): force both sizes to be integers.
4311
4312         * katie (main): use size_type().
4313
4314         * utils.py (size_type): new function; pretty prints a file size.
4315
4316 2000-12-17  James Troup  <james@nocrew.org>
4317
4318         * charisma (main): do version compares so that older packages do
4319         not override newer ones and process source first as source wins
4320         over binaries in terms of who we think of as the Maintainer.
4321
4322 2000-12-15  James Troup  <james@nocrew.org>
4323
4324         * katie (install): use the files id for the .orig.tar.gz from
4325         check_dsc().
4326         (install): limit select for legacy source to a) source in legacy
4327         or legacy-mixed type locations and b) distinct on files.id.
4328         (install): rather than the bizarre insert new, delete old method
4329         for moving legacy source into the pool, use a simple update of
4330         files.
4331         (process_it): initalize some globals before each process.
4332
4333 2000-12-14  James Troup  <james@nocrew.org>
4334
4335         * katie (in_override_p): index on binary_type too since .udeb
4336         overrides are in a different file.
4337         (read_override_file): likewise.
4338         (check_files): correct filename passed to get_files_id().
4339         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4340         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4341         (check_dsc): remember the files id of the .orig.tar.gz, not the
4342         location id.
4343
4344 2000-12-13  James Troup  <james@nocrew.org>
4345
4346         * utils.py (poolify): force the component to lower case except for
4347         non-US.
4348
4349         * katie (in_override_p): handle .udeb-specific override files.
4350         (check_files): pass the binary type to in_override_p().
4351         (check_dsc): remember the location id of the old .orig.tar.gz in
4352         case it's not in the pool.
4353         (install): use location id from dsc_files; which is where
4354         check_dsc() puts it for old .orig.tar.gz files.
4355         (install): install files after all DB work is complete.
4356         (reject): basename() the changes filename.
4357         (manual_reject): likewise.
4358
4359         * shania: new progam; replaces incomingcleaner.
4360
4361 2000-12-05  James Troup  <james@nocrew.org>
4362
4363         * katie (check_changes): if inside stable and can't find files
4364         from the .changes; assume it's installed in the pool and chdir()
4365         to there.
4366         (check_files): we are not installing for stable installs, so don't
4367         check for overwriting existing files.
4368         (check_dsc): likewise.
4369         (check_dsc): reorder .orig.tar.gz handling so that we search in
4370         the pool first and only then fall back on any .orig.tar.gz in the
4371         cwd; this avoids false positives on the overwrite check when
4372         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4373         (install): if this is a stable install, bail out to
4374         stable_install() immediately.
4375         (install): dsc_files handling was horribly broken. a) we need to
4376         add files from the .dsc and not the .changes (duh), b) we need to
4377         add the .dsc file itself to dsc_files (to be consistent with neve
4378         if for no other reason).
4379         (stable_install): new function; handles installs from inside
4380         proposed-updates to stable.
4381         (acknowledge_new): basename changes_filename before doing
4382         anything.
4383         (process_it): absolutize the changes filename to avoid the
4384         requirement of being in the same directory as the .changes file.
4385         (process_it): save and restore the cwd as stable installs can
4386         potentially jump into the pool to find files.
4387
4388         * jenna: dislocated_files support using claire.
4389
4390         * heidi (process_file): select package field from binaries
4391         explicitly.
4392
4393         * db_access.py (get_files_id): fix cache key used.
4394
4395         * utils.py (build_file_list): fix 'non-US/non-free' case in
4396         section/component splitting.
4397         (move): use os.path.isdir() rather than stat.
4398         (copy): likewise.
4399
4400         * claire.py: new file; stable in non-stable munger.
4401
4402         * tea: new file; simply ensures all files in the DB exist.
4403
4404 2000-12-01  James Troup  <james@nocrew.org>
4405
4406         * katie (check_dsc): use regex_safe().
4407         (check_changes): typo in changes{} key:
4408         s/distributions/distribution/.
4409         (install): use changes["source"], not files[file]["source"] as the
4410         latter may not exist and the former is used elsewhere.  Commit the
4411         SQL transaction earlier.
4412
4413         * utils.py (regex_safe): new function; escapes characters which
4414         have meaning to SQL's regex comparison operator ('~').
4415
4416 2000-11-30  James Troup  <james@nocrew.org>
4417
4418         * katie (install): pool_location is based on source package name,
4419         not binary package.
4420
4421         * utils.py (move): if dest is a directory, append the filename
4422         before chmod-ing.
4423         (copy): ditto.
4424
4425         * katie (check_files): don't allow overwriting of existing .debs.
4426         (check_dsc): don't allow overwriting of existing source files.
4427
4428 2000-11-27  James Troup  <james@nocrew.org>
4429
4430         * katie (check_signature): don't try to load rsaref; it's
4431         obsolete.
4432         (in_override_p): don't try to lookup override entries for packages
4433         with an invalid suite name.
4434         (announce): don't assume the suite name is valid; use Find() to
4435         lookup the mailing list name for announcements.
4436
4437         * utils.py (where_am_i): typo; hostname is in the first element,
4438         not second.
4439
4440         * db_access.py (get_suite_id): return -1 on an unknown suite.
4441
4442 2000-11-26  James Troup  <james@nocrew.org>
4443
4444         * katie (install): fix CopyChanges handling; typo in in checking
4445         Cnf for CopyChanges flag and was calling non-existent function
4446         copy_file.
4447
4448         * utils.py (copy): new function; clone of move without the
4449         unlink().
4450
4451 2000-11-25  James Troup  <james@nocrew.org>
4452
4453         * utils.py (build_file_list): handle non-US prefixes properly
4454         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4455         + 'libs' not 'non-US/libs').
4456         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4457         delays.  This is possibly(/probably) exim speicifc and (like other
4458         sendmail options) needs to be in the config file.
4459
4460 2000-11-24  James Troup  <james@nocrew.org>
4461
4462         * rhona (check_sources): we need file id from dsc_files; not id.
4463         Handle non .dsc source files being re-referenced in dsc_files.
4464
4465         * katie (in_override_p): strip out any 'non-US' prefix.
4466         (check_files): use utils.where_am_i() rather than hardcoding.
4467         (check_files): validate the component.
4468         (install): use utils.where_am_i() rather than hardcoding.
4469         (install): fix mail to go to actual recepient.
4470         (reject): likewise.
4471         (manual_reject): likewise.
4472         (acknowledge_new): likewise.
4473         (announce): likewise.
4474
4475         * db_access.py (get_component_id): ignore case when searching for
4476         the component and don't crash if the component can't be found, but
4477         return -1.
4478         (get_location_id): handle -1 from get_component_id().
4479
4480         * jenna (generate_src_list): don't bring 'suite' into our big
4481         multi-table-joining select as we already know the 'suite_id'.
4482         (generate_bin_list): likewise.
4483
4484         * neve (main): don't quit if not on ftp-master.
4485         (process_packages): remove unused variable 'suite_codename'.
4486
4487         * utils.py (move): actually move the file.
4488         (build_file_list): handle non-US prefixes in the section.
4489
4490         * catherine (main): use which_conf_file().
4491         * charisma (main): likewise.
4492         * heidi (main): likewise.
4493         * jenna (main): likewise.
4494         * katie (main): likewise.
4495         * neve (main): likewise.
4496         * rhona (main): likewise.
4497
4498         * utils.py (where_am_i): new routine; determines the archive as
4499         understood by other 'dak' programs.
4500         (which_conf_file): new routine; determines the conf file to read.
4501
4502 2000-11-17  James Troup  <james@nocrew.org>
4503
4504         * katie (install): fix where .changes files for proposed-updates
4505         go.
4506
4507 2000-11-04  James Troup  <james@nocrew.org>
4508
4509         * jenna (main): handle architecture properly if no
4510         -a/--architecture argument is given, i.e. reset architecture with
4511         the values for the suite for each suite.
4512
4513         * Add apt_pkg.init() to the start of all scripts as it's now
4514         required by python-apt.
4515
4516 2000-10-29  James Troup  <james@nocrew.org>
4517
4518         * jenna (generate_bin_list): take an additional argument 'type'
4519         and use it in the SELECT.
4520         (main): if processing component 'main', process udebs and debs.
4521
4522         * neve (process_packages): set up 'type' in 'binaries' (by
4523         assuming .deb).
4524
4525         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4526         (check_files): set up files[file]["dbtype"].
4527         (install): use files[file]["dbtype"] to set up the 'type' field in
4528         the 'binaries' table.
4529
4530         * init_pool.sql: add a 'type' field to the 'binaries' table to
4531         distinguisgh between ".udeb" and ".deb" files.
4532
4533         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4534         dest ? dirname(dest)" type check instead.
4535
4536         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4537         in the pool without crashing.  Also handle the case of being asked
4538         to look for something other than an .orig.tar.gz in the pool.
4539
4540 2000-10-26  James Troup  <james@nocrew.org>
4541
4542         * katie (install): fix filenames put into files table during
4543         poolification of legacy source.
4544
4545         * utils.py (move): work around a bug in os.path.basename() which
4546         cunningly returns '' if there is a trailing slash on the path
4547         passed to it.
4548
4549         * katie (check_dsc): Remove more cruft.  If we find the
4550         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4551         location, make a note of that so we can fix things in install().
4552         (install): as above.  Move any old source out of legacy locations
4553         so that 'apt-get source' will work.
4554         (process_it): reset the flag that indicates to install that the
4555         source needs moved.
4556
4557         * cron.daily: more.  Nowhere near complete yet though.
4558
4559         * katie (install): don't run os.makedirs, a) utils.move() does
4560         this now, b) we weren't removing the user's umask and were
4561         creating dirs with SNAFU permissions.
4562         (check_dsc): rewrite the .orig.tar.gz handling to take into
4563         account, err, package pools.  i.e. look anywhere in the pool
4564         rather than faffing around with two simple paths.
4565
4566         * neve (process_sources): add the .dsc to dsc_files too.
4567
4568 2000-10-25  James Troup  <james@nocrew.org>
4569
4570         * neve (process_sources): don't duplicate .orig.tar.gz's.
4571
4572 2000-10-23  James Troup  <james@nocrew.org>
4573
4574         * utils.py (re_extract_src_version): moved here.
4575
4576         * neve: move re_extract_src_version to utils.
4577         (process_packages): reflect change.
4578
4579         * katie (install): reflect change.
4580
4581 2000-10-19  James Troup  <james@nocrew.org>
4582
4583         * jenna (generate_src_list): handle locations with null
4584         components.
4585         (generate_bin_list): likewise.
4586