]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
28c5aada6f97b3617a2601b9ba97f34a5e2cc71b
[dak.git] / ChangeLog
1 2008-04-22  Joerg Jaspert  <joerg@debian.org>
2
3         * config/debian/cron.daily: push katie@merkel to immediately start
4         the sync of projectb there.
5
6 2008-04-21  Joerg Jaspert  <joerg@debian.org>
7
8         * scripts/debian/expire_dumps: New script, expires old database
9         dumps, using a scheme to keep more of the recent dumps.
10
11         * config/debian/cron.daily: Use the new script. Also - compress
12         all files older than 7 days, instead of 30. 
13
14         * dak/process_accepted.py (install): Do not break if a
15         source/maintainer combination is already in src_uploaders, "just"
16         warn us.
17
18 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
19
20         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
21         Format lines (ie. those having extra text appended).
22
23 2008-04-18  Joerg Jaspert  <joerg@debian.org>
24
25         * config/debian/dak.conf: Add mapping stable-proposed-updates
26           -> proposed-updates.
27
28         * dak/transitions.py (load_transitions): Additionally check for
29         invalid package list indentation
30
31 2008-04-17  Joerg Jaspert  <joerg@debian.org>
32
33         * config/debian/dak.conf: Add TempPath statement for the Release
34         Transitions script
35
36         * dak/transitions.py (temp_transitions_file): Use the TempPath
37         (write_transitions_from_file): Check if the file we should get our
38         transitions from is in our TempPath, error out if it isnt
39         (main): Check for TempPath existance
40
41 2008-04-12  James Troup  <troup@debian.org>
42
43         * dak/clean_proposed_updates.py: add support for -s/--suite and
44         -n/--no-action.
45
46 2008-04-11  Anthony Towns  <ajt@debian.org>
47
48         * dak/utils.py: build_file_list() extra parameters so it can
49         build a file list for checksums-foo fields. Don't use float() to
50         compare formats, because Format: 1.10 should compare greater than
51         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
52
53         * dak/process_unchecked.py: check_md5sum becomes check_hashes
54         and check_hash. If changes format is 1.8 or later, also check
55         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
56         and reject on presence/absence of un/expected checksums-* fields.
57
58 2008-04-07  Joerg Jaspert  <joerg@debian.org>
59
60         * daklib/utils.py (build_file_list): Check for dpkg .changes
61         adjusted to reject newer (and right now broken) 1.8 version, until
62         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
63
64 2008-03-22  Joerg Jaspert  <joerg@debian.org>
65
66         * dak/transitions.py (load_transitions): Check if all our keys are
67         defined, if there are only keys defined we want and also the types
68         of the various keys.
69
70 2008-03-22  Anthony Towns  <ajt@debian.org>
71
72         * dak/edit_transitions.py: Add --import option.
73         Add --use-sudo option. Use fcntl locking for writing.
74         Move writing into a function (write_transitions).
75         Reinvoke self using sudo and --import if necessary.
76         Move temporary file creation into a function, use mkstemp.
77         Rename to "dak transitions".
78
79 2008-03-21  Joerg Jaspert  <joerg@debian.org>
80
81         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
82         edited file back in place
83         (check_transitions): Use proper locking and also use sudo to copy
84         the new file in place
85
86 2008-03-21  Anthony Towns <ajt@debian.org>
87
88         * config/debian/extensions.py: Add infrastructure for replacing
89         functions in dak modules; add upload blocking for dpkg.
90
91 2008-03-12  Joerg Jaspert  <joerg@debian.org>
92
93         * dak/edit_transitions.py: Done a number of cleanups to make code
94         working. Also changed the way prompting/answering goes, to not
95         have to import daklib/queue.
96         (edit_transitions): When done with a successful edit - also print
97         a final overview about defined transitions
98
99 2008-03-11  Joerg Jaspert  <joerg@debian.org>
100
101         * dak/process_unchecked.py: Import syck module directly, not "from
102         syck import *"
103         (check_transition): Do the check for sourceful upload in here
104         Also adjust the syck loading commands, rename new_vers to
105         expected, curvers to current, to make it more clear what they mean.
106
107         * daklib/database.py (get_suite_version): Renamed from
108         get_testing_version. Also changed the cache variables name
109
110         * The above changes are based on modifications from Anthony.
111
112         * dak/dak.py (init): Renamed check -> edit transitions
113
114         * dak/edit_transitions.py: Renamed from check_transitions.py
115         (main): Also rename new_vers/curvers to expected/current
116         Basically a nice rewrite, so it now does checks and edit,
117         depending on how you call it. Check also removes old transitions,
118         if user wants it.
119
120 2008-03-02  Joerg Jaspert  <joerg@debian.org>
121
122         * debian/control (Suggests): Add python-syck to Depends:
123
124         * dak/dak.py (init): Tell it about check_transitions
125
126         * dak/check_transitions.py (usage): Added, checks the transitions
127         file (if any)
128
129         * daklib/database.py (get_testing_version): Added. Returns the
130         version for the source in testing, if any
131
132         * dak/process_unchecked.py (check_transition): Added. Checks if a
133         release team member defined a transition, and rejects based on
134         that data.
135         (process_it): Use it.
136         (check_transition): Warn on broken transitions file and return,
137         not doing anything.
138         (check_transition): Moved out of here, into daklib/queue
139         (process_it): Call check_transitions only if
140         changes[architecture] has source included.
141         (check_transition): Now call the database.get_testing_version
142
143 2008-02-06  Joerg Jaspert  <joerg@debian.org>
144
145         * daklib/utils.py (check_signature): Make variable key available,
146         so we can access it.
147
148 2008-01-07  Joerg Jaspert  <joerg@debian.org>
149
150         * dak/examine_package.py (check_deb): Remove linda call. It
151         provides no added benefit to lintian anymore.
152
153 2008-01-06  Joerg Jaspert  <joerg@debian.org>
154
155         * dak/examine_package.py (do_lintian): lintian now supports html
156         coloring, so use it.
157         (do_command): Dont escape html chars if param escaped = 1
158
159 2007-12-31  Anthony Towns  <ajt@debian.org>
160
161         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
162         when processing result of check_dsc_against_db so we don't promote
163         warnings to rejections.
164
165 2007-12-30  Joerg Jaspert  <joerg@debian.org>
166
167         * dak/dak.py (init): add show-new. This is based on a patch
168         submitted by Thomas Viehmann in Bug #408318, but large parts of
169         handling it are rewritten and show-new is done by me.
170
171         * dak/queue_report.py (table_row): Add link to generated html page
172         for NEW package.
173
174         * dak/show_new.py: new file, generates html overview for NEW
175         packages, similar to what we see with examine-package.
176
177         * config/debian/cron.hourly: Add show-new call
178
179         * config/debian/dak.conf: Add HTMLPath for Show-New
180
181         * dak/examine_package.py (print_copyright): ignore stderr when
182         finding copyright file.
183         (main): add html option
184         (html_escape): new function
185         (escape_if_needed): ditto
186         (headline): ditto
187         (colour_output): ditto
188         (print_escaped_text): ditto
189         (print_formatted_text): ditto
190         - use those functions everywhere where we generate output, as they
191         easily know if we want html or not and just DTRT
192         (do_lintian): new function
193         (check_deb): use it
194         (output_deb_info): Use print_escaped_text, not print_formatted_text.
195         Also import daklib.queue, determine_new now lives there
196
197         Also add a variable to see if we want html output. Default is
198         disabled, show_new enables it for its use.
199         Most of html, besides header/footer are in examine_package instead
200         of show_new, as it makes it a whole lot easier to deal with it at
201         the point the info is generated.
202
203
204         * dak/process_new.py (determine_new): Moved out of here.
205         (check_valid): Moved out of here.
206         (get_type): Moved out of here.
207
208         * daklib/queue.py (determine_new): Moved here.
209         (check_valid): Moved here.
210         (get_type): Moved here.
211
212         * dak/init_db.py (do_section): Remove non-US code
213
214         * dak/make_overrides.py (main): ditto
215
216         * dak/process_new.py (determine_new): ditto
217
218         * daklib/queue.py (Upload.in_override_p),
219         (Upload.check_override): ditto
220
221         * daklib/utils.py (extract_component_from_section):,
222         (poolify): ditto
223
224         * dak/import_archive.py (update_section): ditto
225
226         * dak/symlink_dists.py (fix_component_section): ditto
227
228         * scripts/debian/mkmaintainers: ditto
229
230         * scripts/debian/update-mirrorlists (masterlist): ditto
231
232         * config/debian-non-US/*: Remove subdir
233
234         * scripts/debian/update-readmenonus: Removed.
235
236
237 2007-12-28  Anthony Towns  <ajt@debian.org>
238
239         * daklib/utils.py (check_signature): add NOTATION_DATA and
240         NOTATION_NAME to known keywords.
241
242         * daklib/queue.py (Upload.check_source_against_db): 
243
244         * dak/make_suite_file_list.py: add -f/--force option.
245
246         * dak/generate_releases.py: add -a/--apt-conf=FILE and
247         -f/--force-touch options.  Pull version info from the database.
248         Make suite description optional.
249
250         * config/debian/dak.conf: update
251         Reject-Proposed-Updates::MoreInfoURL.  Comment out
252         Suite::Stable::Version and ::Description.
253
254         * config/debian/apt.conf: Add hurd-i386 to unstable
255         debian-installer stanza.
256
257 2007-12-28  Joerg Jaspert  <joerg@debian.org>
258
259         * KEYEXPIRED is actually a known keyword. We do check it earlier
260         on and reject in case the sig is bad (or unknown)
261
262 2007-12-24  Joerg Jaspert  <joerg@debian.org>
263
264         * Also run lintian on the .dsc file to check the source itself.
265
266         * Fix the direct usage of ar | tar etc to get the copyright file
267         and use dpkg-deb, which is made for this and makes us able to
268         process data.tar.bz2 (or whatever format it will be in the
269         future).
270
271 2007-12-21  Joerg Jaspert  <joerg@debian.org>
272
273         * Remove the (now useless) check for a pre-depends on dpkg for
274           binaries that contain bzip2 compressed data tarballs.
275
276 2007-08-28  Anthony Towns  <ajt@debian.org>
277
278         * process_unchecked.py: Add support for automatic BYHAND
279         processing.
280         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
281         processing of tag-overrides.
282         * examine_package.py: Summarise duplicate copyright file entries
283         (same md5sum) with a reference to the previous instance, rather
284         than repeating them.
285         * process_new.py: When rejecting from the p-u-new or o-p-u-new
286         holding queues, don't worry if dak has its own reasons for
287         rejecting the package as well as the SRMs.
288
289 2007-06-19  Anthony Towns  <ajt@debian.org>
290
291         * Add nm.debian.org pseudopackage
292
293 2007-06-18  Anthony Towns  <ajt@debian.org>
294
295         * daklib/logging.py: Set umask to not exclude group-writability
296         so we don't get reminded at the start of each month. Thanks to
297         Random J.
298         * dak/override.py: More changes from Herr von Wifflepuck: warn
299         if section of source is different to binary section; restore
300         functionality on source-only overrides; croak if trying to set
301         priority of a source override; never set priority of source
302         overrides; correct typo in logging (s/priority/section/ at
303         one place)
304
305         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
306         * config/debian/cron.daily: auotmatically accept/reject
307         oldstable-proposed-updates based on COMMENTS directory
308
309 2007-06-18  Anthony Towns  <ajt@debian.org>
310
311         * config/debian/apt.conf, config/debian/apt.conf.stable,
312         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
313         (sarge), support for oldstable-proposed-updates, dropping m68k
314         from etch, creating etch-m68k suite, creating lenny.
315
316         * config/debian/vars: update for lenny
317
318         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
319         drop upload limitations, add release postgres user
320         
321         * dak/process_new.py: support for automatically accepting and rejecting
322         packages from proposed-updates holding queues via COMMENTS directory
323         * cron.daily: automatically process COMMENTS-based approvals
324         and rejections for proposed-updates holding queues
325
326         * dak/process_unchecked.py: add support for oldproposedupdates
327         holding queue
328
329         * dak/control_suite.py: allow control-suite to work with etch-m68k
330
331         * dak/generate_releases.py: unlink old Release files before updating
332         them if nlinks > 1 (ie, if two files used to be the same, maybe they
333         shouldn't be when generate-releases is run)
334
335         * dak/generate_releases.py: add a couple of commented lines to make
336         it easier to deal with point releases
337
338         * dak/make_overrides.py: generate overrides for !contrib udebs
339
340         * docs/README.stable-point-release: update docs for doing a
341         point release
342
343 2007-03-05  Anthony Towns  <ajt@debian.org>
344
345         * config/debian/dak.conf: update for 3.1r5.
346         * scripts/debian/ssh-move: add ssh-move script from debbugs
347         * config/debian/cron.unchecked: push version info to debbugs using
348         ssh-move.
349
350 2007-02-14  James Troup  <troup@ries.debian.org>
351
352         * docs/README.config: remove Dinstall::GroupOverrideFilename.
353         * config/debian/dak.conf: likewise.
354         * config/debian-non-US/dak.conf: likewise.
355         * config/debian-security/dak.conf: likewise.
356
357         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
358         experimental differently, just close the bugs and let version
359         tracking sort it out.
360          (nmu_p): remove entire class - now unused.
361          (Upload.__init__): don't use nmu_p.
362
363 2007-02-08  Anthony Towns  <ajt@debian.org>
364
365         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
366         signing key.  Drop maximum index diffs down to 14.
367
368         * config/debian/apt.conf: add udeb support for non-free (testing,
369         unstable) and experimental.
370         * config/debian/dak.conf: likewise.
371
372         * dak/generate_releases.py (main): handle udebs in any component.
373
374         * daklib/queue.py (Upload.build_summaries): handle files without a
375         'type' gracefully.
376
377         * dak/generate_releases.py (print_sha256_files): new function.
378         (main): use it.
379
380         * dak/process_accepted.py (stable_install): fix name of template
381         mail.
382
383         * dak/process_unchecked.py (is_stableupdate): fix invocation of
384         database.get_suite_id().
385
386         * templates/process-new.bxa_notification: Update on request
387         of/after discussion with BIS staff.
388
389         * scripts/debian/mkfilesindices: also handle proposed-updates.
390
391 2007-02-08  Ryan Murray  <rmurray@debian.org>
392
393         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
394         group name for chgrp of mail archives.
395
396         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
397         orig.tar.gz's by picking the first one by file id.
398
399         * dak/override.py (main): limit to binary overrides only for now.
400         (usage): update to match.
401
402         * config/debian/cron.daily: track when we have the accepted lock
403         and clean it up on exit if we have it.  Take/check the
404         cron.unchecked lock just before traping to cleanup on exit.
405         Remove potato override handling.  Remove any dangling symlinks in
406         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
407
408         * config/debian/apt.conf: change default compression scheme for
409         both Sources and Packages to gzip and bzip2 rather than
410         uncompressed and gzip (Packages) and gzip (Sources).  Use old
411         defaults for proposed-updates.
412
413         * dak/control_overrides.py (main): refuse to operate on
414         untouchable suites.
415
416         * config/debian/pseudo-packages.maintainers: drop install,
417         installation, boot-floppy, slink-cd, potato-cd and
418         nonus.debian.org.  Update base.
419         * config/debian/pseudo-packages.description: likewise.
420
421         * daklib/utils.py (re_srchasver): new regex.
422         (parse_changes): use regex to split 'Source (Version)' style
423         Source fields into 'source' and 'source-version'.
424
425         * config/debian/cron.daily: use $base instead of hardcoding path
426         name.
427
428         * scripts/debian/mkfilesindices: source 'vars' file and use it's
429         variables instead of hardcoding path names.
430
431         * config/debian/apt.conf: switch from /org to /srv.
432         * config/debian/apt.conf.buildd: likewise.
433         * config/debian/apt.conf.stable: likewise.
434         * config/debian/cron.daily: likewise.
435         * config/debian/cron.hourly: likewise.
436         * config/debian/cron.monthly: likewise.
437         * config/debian/cron.unchecked: likewise.
438         * config/debian/cron.weekly: likewise.
439         * config/debian/dak.conf: likewise.
440         * config/debian/vars: likewise.
441         * scripts/debian/mkfilesindices: likewise.
442         
443 2007-02-08  James Troup  <james@nocrew.org>
444
445         * dak/process_unchecked.py (check_signed_by_key): new function to
446         ensure .changes files are signed by an authorized uploader.
447         (process_it): use it.
448
449         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
450         to configure per suite/component/architecture binary upload
451         restrictions.
452
453 2006-10-09  James Troup  <james.troup@canonical.com>
454
455         * dak/process_unchecked.py (check_timestamps): change match to
456         search as recent versions of python-apt prefix the string with 'E: '.
457
458 2006-06-26  Ryan Murray  <rmurray@debian.org>
459
460         * dak/process_unchecked.py (check_files): strip optional source version
461         from Source: field in changes file, and ensure what is left is a valid
462         package name.
463
464 2006-06-23  Ryan Murray  <rmurray@debian.org>
465
466         * dak/process_unchecked.py (check_files): also check ProposedUpdates
467         queue for source.
468
469 2006-06-18  Ryan Murray  <rmurray@debian.org>
470
471         * dak/scripts/debian/update-ftpstats: look for dak named processes in
472         the log, too.
473
474         * dak/process_unchecked.py (check_files): only check embargoed and
475         unembargoed queues if the keys are set.
476
477         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
478         and bzip2 for etch.
479
480 2006-06-16  James Troup  <james@nocrew.org>
481
482         * dak/dak.py (init): add new-security-install.
483
484         * dak/new_security_install.py: cleanups and adapt for new naming
485         scheme and other changes.
486
487 2006-06-16  Anthony Towns  <ajt@debian.org>
488
489         * dak/new_security_install.py: initial version imported from
490         klecker.
491
492 2006-06-16  James Troup  <james@nocrew.org>
493
494         [Merged changes from klecker - original author unknown.]
495
496         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
497
498         * dak/security_install.py (do_upload): fix check for oldstable and
499         upload file list handling.
500
501         * dak/process_unchecked.py (check_files): update "check for
502         source" code to also look in Embargoed and Unembargoed queues.
503         (is_unembargo): fix handling of Dir::Queue::Disembargo.
504
505         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
506
507         * config/debian-security/vars (disembargo): add.
508
509         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
510         update.
511         (Process-Unchecked::AcceptedLockFile): add.
512         (Suite::Testing): clean up Version and Description.
513         (SuiteMappings): add silent map from etch-secure to testing.
514
515         * config/debian-security/cron.unchecked: add support for
516         disembargoed queues.
517
518         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
519         files too.
520
521         * config/debian-security/apt.conf: add amd64 to architectures for
522         testing-security.
523
524 2006-06-11  James Troup  <troup@spohr.debian.org>
525
526         * config/debian/cron.daily: invoke process-accepted not
527         process-unchecked.
528
529         * config/debian/vars (scriptsdir): new variable.
530         * config/debian/cron.daily: use it.
531
532         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
533         $base/misc/ instead of versioned $masterdir.  Correct 'dak
534         make-maintainers' invocation to look in $configdir for
535         pseudo-packages.maintainers.
536
537         * daklib/queue.py (Upload.do_reject): use correct name for
538         rejection template.
539
540 2006-06-11  James Troup  <james@nocrew.org>
541
542         * dak/override.py (main): temporarily add content of old X-Katie
543         header back as the PTS apparently filters on it.
544         * dak/process_accepted.py (main): likewise.
545         * dak/process_new.py (main): likewise.
546         * dak/process_unchecked.py (main): likewise.
547         * dak/reject_proposed_updates.py (main): likewise.
548         * dak/rm.py (main): likewise.
549         * daklib/queue.py (Upload.do_reject): likewise.
550
551         * config/debian/cron.unchecked: set -u to error out on undefined
552         variables.  Preset LOCKDAILY to "" accordingly.
553         * config/debian/cron.hourly: likewise.
554         * config/debian/cron.monthly: likewise.
555         * config/debian/cron.weekly: likewise.
556
557         * config/debian/vars (configdir): add new variable pointing to
558         this directory.
559
560         * config/debian/cron.daily: use $configdir inplace of $masterdir
561         when that's what we mean, and don't cd into $masterdir just to run
562         dak scripts as we don't need to do that anymore.
563         * config/debian/cron.hourly: likewise.
564         * config/debian/cron.unchecked: likewise.
565         * config/debian/cron.weekly: likewise.
566
567         * config/debian/dak.conf
568         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
569         user back to list of known users as it's non-trivial to entirely
570         change the owner of a database with postgresql 7.4.
571
572         * daklib/queue.py (Upload.source_exists): use string object
573         methods rather than string module.
574         (Upload.get_anyversion): likewise.
575
576         * daklib/utils.py (validate_changes_file_arg): update filename
577         slicing to cope with new .dak filenames.
578
579         * dak/ls.py (main): add back 'heidi' as a valid argument for
580         -f/--format as people are using it in scripts and breaking that
581         without warning seems rude.
582
583 2006-05-21  James Troup  <james@nocrew.org>
584
585         * dak/rm.py (main): use string .isdigit() rather than
586         utils.str_isnum().
587         * dak/process_new.py (edit_overrides): likewise.
588
589         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
590         string import.
591
592 2006-05-21  James Troup  <james@nocrew.org>
593
594         * dak/check_archive.py (check_indices_files_exist): use list
595         comprehension instead of map().  No longer need to import
596         deprecated string module as a side-effect.
597         * dak/check_overrides.py (process): likewise.
598         (main): likewise.
599         * dak/cruft_report.py (do_obsolete_source): likewise.
600         (main): likewise.
601         * dak/ls.py (main): likewise.
602         * dak/make_suite_file_list.py (write_filelists): likewise.
603         * dak/process_accepted.py (stable_install): likewise.
604         * dak/rm.py (main): likewise.
605         * dak/stats.py (number_of_packages): likewise.
606         * daklib/logging.py (Logger.log): likewise.
607         * daklib/queue.py (Upload.source_exists): likewise.
608         (Upload.cross_suite_version_check): likewise.
609         * daklib/utils.py (parse_args): likewise.
610
611 2006-05-21  James Troup  <james@nocrew.org>
612
613         * daklib/utils.py (process_gpgv_output): new function, split out
614         of check_signature().
615         (check_signature): adapt accordingly.
616         (retrieve_key): new function that will try to retrieve the key
617         that signed a given file from a keyserver.
618         (check_signature): add 'autofetch' argument that if not set
619         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
620         If 'autofetch' is true, invoke retrieve_key().  
621
622         * docs/README.config: document Dinstall::KeyAutoFetch and
623         Dinstall:KeyServer.
624
625 2006-05-20  James Troup  <james@nocrew.org>
626
627         * dak/find_null_maintainers.py (main):
628         s/createtimestamp/createTimestamp/ to make things work with modern
629         slapd.
630
631         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
632         Stable::Version and Stable::Description for 3.1r2.
633
634         * config/debian-non-US/dak.conf: sync with klecker - update
635         version number of 3.0 and MoreInfoURL.
636
637         * docs/README.stable-point-release: Add notes about updating
638         dak.conf and Reject-Proposed-Updates section in particular.
639         s/woody/stable/.  Also need to update README.html.
640
641         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
642
643         * config/debian/apt.conf: Add udeb tree for proposed-updates.
644
645 2006-05-20  Ryan Murray  <rmurray@debian.org>
646
647         * scripts/debian/update-ftpstats: new script to update daily
648         architecture size graph data.
649
650         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
651         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
652         there.
653
654         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
655         before we finish.  Don't push to merkel.
656
657         * dak/process_unchecked.py (check_changes): Also look in
658         ProposedUpdates queue dir.
659         (check_files): likewise.
660
661 2006-05-20  Anthony Towns  <ajt@debian.org>
662
663         * scripts/debian/mkfilesindices: new script to generate file
664         indices used for partial mirroring.
665
666         * config/debian/cron.daily: add progress timestamps.
667
668         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
669         amd64 to testing, unstable and experimental.  Drop sh from
670         experimental.  Move Experimental to dists/experimental.  Add
671         Dir::ProposedUpdates.  Add Architectures::amd64.
672
673         * config/debian/apt.conf: add amd64 to testing, unstable and
674         experimental.  Drop uncompressed Packages files from testing. Drop
675         sh from experimental.  Move experimental to dists/experimental/.
676
677         * config/debian/vars (archs): add amd64.
678
679         * dak/process_unchecked.py (action): Add support for
680         proposed-updates approval queue.
681         (is_stableupdate): new function - checks if the upload is targeted
682         at proposed-updates.
683         (do_stableupdate): likewise - moves upload to proposed-updates
684         holding area.
685
686         * dak/process_new.py (do_new): warn if original or new target
687         suite are invalid.
688
689         * dak/generate_releases.py (print_md5sha_files): less whitespace
690         between the hash and size.
691
692         * dak/generate_index_diffs.py (genchanges): don't say we're not
693         doing anything.  Better formatting of other messages.
694         (main): don't skip experimental and remove some 'doing stuff'
695         prints.
696
697 2006-05-18  James Troup  <james@nocrew.org>
698
699         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
700         query.
701
702         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
703         docstrings, untabify, don't shadow builtins, lowercase non-global
704         variable names, spaces after commas.  Also bail if given any
705         arguments since we don't accept any.
706         * dak/init_db.py: likewise.  Also split large main() into
707         subfunctions and rename get() to sql_get().
708
709         * dak/init_db.py (main): check returned value from
710         database.get_archive_id().
711
712         * dak/dak.py: renamed from shell.py.  Update to support new source
713         layout.  Created init() and usage() functions.  Various
714         pylint-inspired cleanups.  Use daklib utils.warn() and
715         utils.fubar().  Change 'functionality' variable to only have
716         (command, description) and always invoke main() when running the
717         module.  Also support -h.
718
719 2006-05-17  James Troup  <james@nocrew.org>
720
721         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
722         imports of and calls to daklib modules.  Change script name
723         everywhere, i.e. in output, mails, comments and configuration tree
724         + filenames.  Also update references to other renamed scripts,
725         classes and templates.  Use '.dak' instead of '.katie' for the
726         queue info storage files.
727         (Renamed from tea)
728         * dak/check_overrides.py: likewise.  (Renamed from cindy)
729         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
730         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
731         * dak/clean_queues.py: likewise.  (Renamed from shania)
732         * dak/clean_suites.py: likewise.  (Renamed from rhona)
733         * dak/compare_suites.py: likewise.  (Renamed from andrea)
734         * dak/control_overrides.py: likewise.  (Renamed from natalie)
735         * dak/control_suite.py: likewise.  (Renamed from heidi)
736         * dak/cruft_report.py: likewise.  (Renamed from rene)
737         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
738         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
739         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
740         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
741         * dak/import_archive.py: likewise.  (Renamed from neve)
742         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
743         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
744         * dak/init_db.py: likewise. (Renamed from alyson)
745         * dak/init_dirs.py: likewise. (Renamed from rose)
746         * dak/ls.py: likewise. (Renamed from madison)
747         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
748         * dak/make_overrides.py: likewise.  (Renamed from denise)
749         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
750         * dak/mirror_split.py: likewise.  (Renamed from billie)
751         * dak/override.py: likewise.  (Renamed from alicia)
752         * dak/poolize.py: likewise.  (Renamed from catherine)
753         * dak/process_accepted.py: likewise.  (Renamed from kelly)
754         * dak/process_new.py: likewise.  (Renamed from lisa)
755         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
756         * dak/queue_report.py: likewise.  (Renamed from helena)
757         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
758         * dak/rm.py: likewise.  (Renamed from melanie)
759         * dak/security_install.py: likewise.  (Renamed from amber)
760         * dak/split_done.py: likewise.  (Renamed from nina)
761         * dak/stats.py: likewise.  (Renamed from saffron)
762         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
763         * daklib/database.py: likewise.  (Renamed from db_access)
764         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
765         * daklib/utils.py: likewise.
766
767         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
768         doesn't need to notify anyone" string.
769         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
770
771         * dak/process_accepted.py (init): drop -V/--version argument.
772         * dak/process_new.py (init): likewise.
773         * dak/process_unchecked.py (init): likewise.
774         * dak/reject_proposed_updates.py (init): likewise
775
776         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
777
778         * dak/stats.py: in usage() output change STAT to MODE.
779
780 2006-05-15  James Troup  <james@nocrew.org>
781
782         * dak/queue_report.py: remove unused encodings imports.
783
784         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
785         imports.  Initalize 'Cnf' as a global.
786         (BillieDB._internal_recurse): fix 'util.' typo.
787
788         * dak/import_ldap_fingerprints.py (main): drop unused time import and
789         commented out time check for LDAP search.
790
791 2005-12-16  Ryan Murray  <rmurray@debian.org>
792
793         * halle: add support for udebs
794         * kelly: stable_install: add support for binNMU versions
795
796 2005-12-05  Anthony Towns  <aj@erisian.com.au>
797
798         * katie.py: Move accept() autobuilding support into separate function 
799         (queue_build), and generalise to build different queues
800
801         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
802
803         * jennifer: Initial support for enabling embargo handling with the
804         Dinstall::SecurityQueueHandling option.
805         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
806         functions.
807
808         * katie.conf-security: Include embargo options
809         * katie.conf-security: Add Lock dir
810         * init_pool.sql-security: Create disembargo table
811         * init_pool.sql-security: Add constraints for disembargo table
812
813 2005-11-26  Anthony Towns  <aj@erisian.com.au>
814
815         * Merge of changes from klecker, by various people
816
817         * amber: special casing for not passing on amd64 and oldstable updates
818         * amber: security mirror triggering
819         * templates/amber.advisory: updated advisory structure
820         * apt.conf.buildd-security: update for sarge's release
821         * apt.conf-security: update for sarge's release
822         * cron.buildd-security: generalise suite support, update for sarge's release
823         * cron.daily-security: update for sarge's release, add udeb support
824         * vars-security: update for sarge's release
825         * katie.conf-security: update for sarge's release, add amd64 support,
826         update signing key
827
828         * docs/README.names, docs/README.quotes: include the additions
829
830 2005-11-25  Anthony Towns  <aj@erisian.com.au>
831
832         * Changed accepted_autobuild to queue_build everywhere.
833         * Add a queue table.
834         * Add a "queue" field in the queue_build table (currently always 0)
835
836         * jennifer: Restructure to make it easier to support special
837         purpose queues between unchecked and accepted.
838
839 2005-11-25  Anthony Towns  <aj@erisian.com.au>
840
841         * Finishing merge of changes from spohr, by various people still
842
843         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
844         works
845         * jennifer: Re-enable .deb ar format checking
846         * katie.py: Convert to +bX binNMU special casing
847         * rhona: Add some debug output when deleting binaries
848         * cron.daily: Add emilie
849         * cron.unchecked: Add lock files
850
851 2005-11-15  Anthony Towns  <aj@erisian.com.au>
852
853         * Merge of changes from spohr, by various people.
854
855         * tiffani: new script to do patches to Packages, Sources and Contents
856         files for quicker downloads.
857         * ziyi: update to authenticate tiffani generated files
858
859         * dak: new script to provide a single binary with less arbitrary names
860         for access to dak functionality.
861
862         * cindy: script implemented
863
864         * saffron: cope with suites that don't have a Priority specified
865         * heidi: use get_suite_id()
866         * denise: don't hardcode stable and unstable, or limit udebs to unstable
867         * denise: remove override munging for testing (now done by cindy)
868         * helena: expanded help, added new, sort and age options, and fancy headers
869         * jennifer: require description, add a reject for missing dsc file
870         * jennifer: change lock file
871         * kelly: propogation support
872         * lisa: honour accepted lock, use mtime not ctime, add override type_id
873         * madison: don't say "dep-retry"
874         * melanie: bug fix in output (missing %)
875         * natalie: cope with maintainer_override == None; add type_id for overrides
876         * nina: use mtime, not ctime
877
878         * katie.py: propogation bug fixes
879         * logging.py: add debugging support, use | as the logfile separator
880
881         * katie.conf: updated signing key (4F368D5D)
882         * katie.conf: changed lockfile to dinstall.lock
883         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
884         * katie.conf: added tiffani, cindy support
885         * katie.conf: updated to match 3.0r6 release
886         * katie.conf: updated to match sarge's release
887
888         * apt.conf: update for sarge's release
889         * apt.conf.stable: update for sarge's release
890         * apt.conf: bump daily max Contents change to 25MB from 12MB
891
892         * cron.daily: add accepted lock and invoke cindy  
893         * cron.daily: add daily.lock
894         * cron.daily: invoke tiffani
895         * cron.daily: rebuild accepted buildd stuff
896         * cron.daily: save rene-daily output on the web site
897         * cron.daily: disable billie
898         * cron.daily: add stats pr0n
899
900         * cron.hourly: invoke helena
901
902         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
903         * vars: add lockdir, add etch to copyoverrides
904         * Makefile: add -Ipostgresql/server to CXXFLAGS
905
906         * docs/: added README.quotes
907         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
908         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
909
910         * TODO: correct spelling of "conflicts"
911
912 2005-05-28  James Troup  <james@nocrew.org>
913
914         * helena (process_changes_files): use MTIME rather than CTIME (the
915         C's not for 'creation', stupid).
916         * lisa (sort_changes): likewise.
917
918         * jennifer (check_distributions): use has_key rather than an 'in'
919         test which doesn't work with python2.1.  [Probably by AJ]
920
921 2005-03-19  James Troup  <james@nocrew.org>
922
923         * rene (main): use Suite::<suite>::UdebComponents to determine
924         what components have udebs rather than assuming only 'main' does.
925
926 2005-03-18  James Troup  <james@nocrew.org>
927
928         * utils.py (rfc2047_encode): use codecs.lookup() rather than
929         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
930         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
931         <andrew@ubuntu.com>.
932
933 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
934
935         * helena: add -n/--new HTML output option and improved sorting
936         options.
937
938 2005-03-06  Ryan Murray  <rmurray@debian.org>
939
940         * shania(main): use Cnf::Dir::Reject instead of REJECT
941
942 2005-02-08  James Troup  <james@nocrew.org>
943
944         * rene (main): add partial NBS support by checking that binary
945         packages are built by their real parent and not some random
946         stranger.
947         (do_partial_nbs): likewise.
948
949 2005-01-18  James Troup  <james@nocrew.org>
950
951         * katie.py (Katie.build_summaries): avoid leaking file handle when
952         extracting package description.
953         (Katie.force_reject): remember and close each file descriptor we
954         use.
955         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
956         s/reason_file/reason_fd/ because it's a file descriptor.
957         (Katie.check_dsc_against_db): avoid leaking file handle whenever
958         invoking apt_pkg.md5sum().
959
960         * jennifer (check_deb_ar): new function: sanity check the ar
961         contents of a .deb.
962         (check_files): use it.
963         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
964         found.
965         (check_files): accept 'raw-installer' as an alias for 'byhand'.
966
967 2005-01-14  Anthony Towns  <ajt@debian.org>
968
969         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
970
971         * propup stuff (thanks to Andreas Barth)
972         * katie.conf: add stable MustBeOlderThan testing, add -security
973           propup
974         * jennifer: set distribution-version in .katie if propup may be needed
975         * katie.py: add propogation to cross_suite_version_check
976
977 2004-11-27  James Troup  <james@nocrew.org>
978
979         * nina: new script to split monolithic queue/done into date-based
980         hierarchy.
981
982         * rene (usage): document -s/--suite.
983         (add_nbs): use .setdefault().
984         (do_anais): likewise.
985         (do_nbs): don't set a string to "" and then += it.
986         (do_obsolete_source): new function - looks for obsolete source
987         packages (i.e source packages whose binary packages are ALL a)
988         claimed by someone else and b) newer when built from the other
989         source package).
990         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
991         and 'full' check modes.  Check for obsolete source packages.
992         linux-wlan-ng has been fixed - remove hideous bodge.
993
994         * jennifer (check_distributions): support 'reject' suite map type.
995
996         * utils.py (validate_changes_file_arg): s/file/filename/.
997         s/fatal/require_changes/.  If require_changes is -1, ignore errors
998         and return the .changes filename regardless.
999         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1000         (re_no_revision): don't escape '-', it's not a special character.
1001         s/\*/+/ as there must be at least one non-dash character after the
1002         dash in a revision.  Thanks to Christian Reis for noticing both of
1003         these.
1004
1005         * ashley (main): pass require_changes=-1 to
1006         utils.validate_changes_file_arg().
1007
1008         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1009         Team <debian-kernel@lists.debian.org>'.
1010
1011         * katie.py (Katie.in_override_p): fix .startswith() usage.
1012
1013         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1014         (Lauren::MoreInfoURL): update to 3.0r3.
1015         (Suite::Stable::Version): likewise.
1016         (Suite::Stable::Description): likewise.
1017
1018         * cron.daily: disable automatic task override generation.
1019
1020         * cindy (process): restrict "find all packages" queries by
1021         component.  Respect Options["No-Action"].
1022         (main): add -n/--no-action support.  Only run on unstable.  Rename
1023         type to otype (pychecker).
1024
1025 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1026
1027         * katie.conf (Billie::BasicTrees): add all architectures.
1028         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1029         'everything'.
1030
1031         * cron.daily: Update a 'current' symlink when creating the
1032         post-daily-cron-job database backup to aid mirroring to merkel.
1033         Run billie.
1034
1035         * billie (BillieTarget.poolish_match): handle .udeb too.
1036
1037 2004-10-13  Ryan Murray  <rmurray@debian.org>
1038
1039         * amber (do_upload): Sort changes files in "katie" order so that
1040           source always arrives before binary-only rebuilds
1041         
1042 2004-10-05  James Troup  <james@nocrew.org>
1043
1044         * jennifer (check_dsc): correct reject message on invalid
1045         Maintainer field.
1046
1047 2004-09-20  James Troup  <james@nocrew.org>
1048
1049         * alicia: remove unused 'pwd' import.
1050
1051         * tea (check_override): underline suite name in output properly.
1052
1053         * rene (main): read a compressed Packages file.
1054         * tea (validate_packages): likewise.
1055
1056         * katie.py (re_fdnic): add 'r' prefix.
1057         (re_bin_only_nmu_of_mu): likewise.
1058         (re_bin_only_nmu_of_nmu): likewise.
1059
1060         * madison (main): retrieve component information too and display
1061         it if it's not 'main'.
1062         * melanie (reverse_depends_check): likewise.
1063
1064         * utils.py (pp_dep): renamed...
1065         (pp_deps): ... to this.
1066         * jeri (check_dep): update calls to utils.pp_deps().
1067         * melanie (reverse_depends_check): likewise.
1068
1069         * jennifer (check_changes): move initalization of email variables
1070         from here...
1071         (process_it): ...to here as we no longer always run
1072         check_changes().  Don't bother to initialize
1073         changes["architecture"].
1074
1075         * denise (list): renamed to...
1076         (do_list): ...this to avoid name clash with builtin 'list'.
1077         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1078         for dictionaries.
1079         (main): Likewise for name clash avoidance and also
1080         s/override_type/suffix/.  Adjust call to do_list().
1081
1082 2004-09-01  Ryan Murray  <rmurray@debian.org>
1083
1084         * tea (check_files): check the pool/ directory instead of dists/
1085
1086 2004-08-04  James Troup  <james@nocrew.org>
1087
1088         * jenna (cleanup): use .setdefault() for dictionaries.
1089         (write_filelists): likewise.
1090
1091         (write_filelists): Use utils.split_args() not split() to split
1092         command line arguments.
1093         (stable_dislocation_p): likewise.
1094
1095         (write_filelists): Add support for mapping side of suite-based
1096         "Arch: all mapping".
1097         (do_da_do_da): ensure that if we're not doing all suites that we
1098         process enough to be able correct map arch: all packages.
1099
1100         * utils.py (cant_open_exc): correct exception string,
1101         s/read/open/, s/.$//.
1102
1103         * templates/amber.advisory: update to match reality a little
1104         better.
1105
1106         * melanie (reverse_depends_check): read Packages.gz rather than
1107         Packages.
1108
1109         * jennifer (check_files): check for unknown component before
1110         checking for NEWness.
1111
1112         * katie.py (Katie.in_override_p): use .startswith in favour of a
1113         slice.
1114
1115         * docs/melanie.1.sgml: document -R/--rdep-check.
1116
1117 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1118
1119         * billie (main): Make the verbatim lists include all the README
1120           elements.
1121         * docs/README.names: Add billie in (correcting oversight)
1122
1123 2004-07-01  James Troup  <james@nocrew.org>
1124
1125         * emilie (main): handle woody's case-sensitive python-ldap,
1126         s/keyfingerprint/keyFingerPrint/.
1127
1128 2004-06-25  James Troup  <james@nocrew.org>
1129
1130         * debian/control (Depends): add dpkg-dev since jennifer uses
1131         dpkg-source.
1132
1133 2004-06-24  James Troup  <james@nocrew.org>
1134
1135         * melanie (main): s/file/temp_file/ and close file handle before
1136         removing the temporary file.
1137         (main): don't warn about needing a --carbon-copy if in no-action
1138         mode.
1139
1140         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1141         (main): likewise.
1142
1143         * test/006/test.py (main): check bracketed email-only form.
1144
1145         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1146         email-only, strip the brackets so we don't end up with
1147         <<james@nocrew.org>>.
1148
1149 2004-06-20  James Troup  <james@nocrew.org>
1150
1151         * jennifer (process_it): only run check_changes() if
1152         check_signature() returns something.  (Likewise)
1153
1154         * utils.py (changes_compare): if there's no changes["version"] use
1155         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1156
1157 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1158
1159         * jeri (pp_dep): moved from here to ...
1160         * utils.py (pp_dep): here.
1161
1162         * melanie (main): add reverse dependency checking.
1163
1164 2004-06-17  James Troup  <james@nocrew.org>
1165
1166         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1167         * tea (check_dscs): likewise.
1168
1169         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1170         change from boolean to a variable with 3 possible values, 0 and 1
1171         as before, -1 means don't require a signature.  Makes
1172         parse_changes() useful for parsing arbitary RFC822-style files,
1173         e.g. 'Release' files.
1174         (check_signature): add support for detached signatures by passing
1175         the files the signature is for as an optional third argument.
1176         s/filename/sig_filename/g.  Add a fourth optional argument to
1177         choose the keyring(s) to use.  Don't os.path.basename() the
1178         sig_filename before checking it for taint.
1179         (re_taint_free): allow '/'.
1180
1181 2004-06-11  James Troup  <james@nocrew.org>
1182
1183         * tea (check_files): make override.unreadable optional.
1184         (validate_sources): close the Sources file handle.
1185
1186         * docs/README.first: clarify that 'alyson' and running
1187         add_constraints.sql by hand is something you only want to do if
1188         you're not running 'neve'.
1189
1190         * docs/README.config (Location::$LOCATION::Suites): document.
1191
1192         * db_access.py (do_query): also print out the result of the query.
1193
1194 2004-06-10  James Troup  <james@nocrew.org>
1195
1196         * katie.py (Katie.cross_suite_version_check): post-woody versions
1197         of python-apt's apt_pkg.VersionCompare() function apparently
1198         returns variable integers for less than or greater than results -
1199         update our result checking to match.
1200         * jenna (resolve_arch_all_vs_any): likewise.
1201         * charisma (main): likewise.
1202
1203 2004-06-09  James Troup  <james@nocrew.org>
1204
1205         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1206         valid_dsc_p and don't run check_source() if check_dsc() failed.
1207         (check_dsc): on fatal failures return 0 so check_source() isn't
1208         run (since it makes fatal assumptions about the presence of
1209         mandatory .dsc fields).  
1210         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1211
1212 2004-05-07  James Troup  <james@nocrew.org>
1213
1214         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1215         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1216
1217         * katie.conf (Dir::Override): remove duplicate definition.
1218
1219         * neve (get_or_set_files_id): add an always-NULL last_used column
1220         to output.
1221
1222 2004-04-27  James Troup  <james@nocrew.org>
1223
1224         * apt.conf-security (tree "dists/stable/updates"): add
1225         ExtraOverride - noticed by Joey Hess (#246050).
1226         (tree "dists/testing/updates"): likewise.
1227
1228 2004-04-20  James Troup  <james@nocrew.org>
1229
1230         * jennifer (check_files): check for existing .changes or .katie
1231         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1232         directories.
1233
1234 2004-04-19  James Troup  <james@nocrew.org>
1235
1236         * jennifer (check_source): handle failure to remove the temporary
1237          directory (used for source tree extraction) better, specifically:
1238          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1239          and try again and if that works, REJECT the package.
1240
1241 2004-04-17  James Troup  <james@nocrew.org>
1242
1243         * docs/madison.1.sgml: document -b/--binary-type,
1244         -g/--greaterorequal and -G/--greaterthan.
1245
1246         * madison (usage): -b/--binary-type only takes a single argument.
1247         Document -g/--greaterorequal and -G/--greaterthan.
1248         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1249
1250 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1251
1252         * billie: Cleaned up a load of comments, added /README.non-US to
1253           the verbatim matches list.
1254
1255 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1256
1257         * utils.py (size_type): Make it use real binary megabytes and
1258           kilobytes, instead of the marketing terms used before.
1259
1260 2004-04-07  James Troup  <james@nocrew.org>
1261
1262         * katie.py (Katie.check_dsc_against_db): in the case we're
1263         ignoring an identical-to-existing orig.tar.gz remember the path to
1264         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1265         location.path too to be able to do so.
1266
1267 2004-04-03  James Troup  <james@nocrew.org>
1268
1269         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1270         needed for new utils.rfc2047_encode() function.
1271
1272         * utils.py (re_parse_maintainer): allow whitespace inside the
1273         email address.
1274         (Error): new exception base class.
1275         (ParseMaintError): new exception class.
1276         (force_to_utf8): new function.
1277         (rfc2047_encode): likewise.
1278         (fix_maintainer): rework.  use force_to_utf8() to force name and
1279         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1280         return an rfc2047 value.  Validate the address to catch missing
1281         email addresses and (some) broken ones.
1282
1283         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1284         by adopting foo2047 return value.
1285         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1286         mandatory changes fields.  Promote changes and maintainer822 to
1287         mandatory fields.
1288         (Katie.update_subst): default maintainer2047 rather than
1289         maintainer822.  User foo2047 rather than foo822 when setting
1290         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1291
1292         * jennifer (check_changes): set default changes["maintainer2047"]
1293         and changes["changedby2047"] values rather than their 822
1294         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1295         to new utils.fix_maintainer() - reject on exception and adopt
1296         foo2047 return value.
1297         (check_dsc): if a mandatory field is missing don't do any further
1298         checks and as a result reduce paranoia about dsc[var] existence.
1299         Validate the maintainer field by calling new
1300         utils.fix_maintainer().
1301
1302         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1303         changes fields.  Promote maintainer822 to a mandatory changes
1304         field.  add "pool name" to files fields.
1305
1306         * test/006/test.py: new file - tests for new
1307         utils.fix_maintainer().
1308
1309 2004-04-01  James Troup  <james@nocrew.org>
1310
1311         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1312
1313         * jennifer (get_changelog_versions): create a symlink mirror of
1314         the source files in the temporary directory.
1315         (check_source): if check_dsc_against_db() couldn't find the
1316         orig.tar.gz bail out.
1317
1318         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1319         part of the upload store the path to it in pkg.orig_tar_gz and if
1320         it can't be found set pkg.orig_tar_gz to -1.
1321
1322         Explicitly return the second value as None in the (usual) case
1323         where we don't have to reprocess.  Remove obsolete diagnostic
1324         logs.
1325
1326         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1327
1328         * utils.py (temp_filename): new helper function that wraps around
1329         tempfile.mktemp().
1330
1331         * katie.py (Katie.do_reject): use it and don't import tempfile.
1332         * lisa (prod_maintainer): likewise.
1333         (edit_note): likewise.
1334         (edit_new): likewise.
1335         * lauren (reject): likewise.
1336         * melanie (main): likewise.
1337         * neve (do_sources): likewise.
1338         * rene (main): likewise.
1339         * tea (validate_sources): likewise.
1340
1341 2004-03-31  James Troup  <james@nocrew.org>
1342
1343         * tea (validate_sources): remove unused 's' temporary variable.
1344
1345 2004-03-15  James Troup  <james@nocrew.org>
1346
1347         * jennifer (check_dsc): check changes["architecture"] for
1348         source before we do anything else.
1349
1350 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1351
1352         * billie: Added
1353         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1354
1355 2004-03-12  James Troup  <james@nocrew.org>
1356
1357         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1358
1359         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1360
1361         * katie.py (Katie.accept): add support for DebBugs Version
1362         Tracking by writing out .versions (generated in jennifer's
1363         get_changelog_versions()) and .debinfo (mapping of binary ->
1364         source) files.
1365
1366         * ashley (main): add dsc["bts changelog"].
1367
1368         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1369
1370         * jennifer (check_diff): obsoleted by check_source(), removed.
1371         (check_source): new function: create a temporary directory and
1372         move into it and call get_changelog_versions().
1373         (get_changelog_versions): new function: extract the source package
1374         and optionally parse debian/changelog to obtain the version
1375         history for the BTS.
1376         (process_it): call check_source() rather than check_diff().
1377
1378 2004-03-08  James Troup  <james@nocrew.org>
1379
1380         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1381         listbar" rather than "if listbar.count(varfoo)"' change on
1382         2004-02-24.
1383
1384 2004-03-05  James Troup  <james@nocrew.org>
1385
1386         * alicia (main): don't warn about not closing bugs - we don't
1387         manage overrides through the BTS.
1388
1389 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1390
1391         * docs/README.config: lots of updates and corrections.
1392         * docs/README.first: likewise.
1393
1394         * docs/README.config: drop unused Dir::Queue::Root.
1395         * katie.conf-non-US: likewise.
1396         * katie.conf: likewise.
1397         * katie.conf-security: likewise.
1398
1399 2004-02-27  James Troup  <james@nocrew.org>
1400
1401         * rose (process_tree): use 'if var in [ list ]' rather than long
1402         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1403         Michlmayr.
1404
1405         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1406         suggested by Martin Michlmayr.
1407         * catherine (poolize): likewise.
1408         * charisma (main): likewise.
1409         * halle (check_changes): likewise.
1410         * heidi (main): likewise.
1411         (process_file): likewise.
1412         * kelly (install): likewise.
1413         (stable_install): likewise.
1414         * utils.py (fix_maintainer): likewise.
1415
1416         * apt.conf: add support for debian-installer in testing-proposed-updates.
1417         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1418         add - set to main.
1419
1420         * mkmaintainers: add "-T15" option to wget of non-US packages file
1421         so that we don't hang cron.daily if non-US is down.
1422
1423         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1424
1425         * templates/jennifer.bug-close: add Source and Source-Version
1426         pseudo-headers that may be used for BTS Version Tracking someday
1427         [ajt@].
1428
1429         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1430         (main): likewise.
1431
1432         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1433
1434 2004-02-25  James Troup  <james@nocrew.org>
1435
1436         * katie.conf (SuiteMappings): don't map testing-security to
1437         proposed-updates.
1438
1439 2004-02-24  James Troup  <james@nocrew.org>
1440
1441         * katie.py (Katie.__init__): remove unused 'values' field.
1442
1443         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1444         rather than 's.count(c) > 0'.
1445
1446         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1447         rather than "if listbar.count(varfoo)".
1448         * halle (check_joey): likewise.
1449         * jeri (check_joey): likewise.
1450         * lisa (edit_index): likewise.
1451         * jenna (stable_dislocation_p): likewise.
1452
1453         * jennifer (main): remove unused global 'nmu'.
1454
1455 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1456
1457         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1458           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1459           the dak tools close bugs.
1460
1461 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1462
1463         * katie.conf (Alicia): Added an Alicia section with email address
1464         * templates/alicia.bug-close: Added
1465         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1466         * alicia (main): Added a -d/--done argument
1467
1468 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1469
1470         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1471
1472 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1473
1474         * lisa (prod_maintainer): Added function to prod the maintainer without
1475           accepting or rejecting the package
1476         * templates/lisa.prod: Added this template for the prodding mail
1477
1478         * .cvsignore: Added neve-files which turns up in new installations
1479
1480 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1481
1482         * alicia (usage): Fixed usage message to offer section and priority
1483           as seperately optional arguments.
1484         * alicia (main): Added a % (arg) interpolation needed when only
1485           one of section or priority is provided and it cannot be found.
1486
1487 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1488
1489         * alicia: Added
1490         * docs/alicia.1.sgml: Added
1491         * docs/Makefile: Added alicia to the list of manpages to build
1492         * docs/README.names: Noted what alicia does
1493         * docs/README.first: Noted where alicia is useful
1494
1495 2004-01-21  James Troup  <james@nocrew.org>
1496
1497         * madison (main): add -b/--binary-type.
1498         (usage): likewise.
1499
1500         * denise (main): generate debian-installer overrides for testing
1501         too.
1502         * apt.conf: add support for debian-installer in testing.
1503         * katie.conf (Suite::Testing::UdebComponents): set to main.
1504
1505         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1506         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1507         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1508
1509         * utils.py (parse_changes): don't process data not inside the
1510         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1511         pointing this out.
1512         * test/005/test.py (main): new test to test for above.
1513
1514 2004-01-04  James Troup  <james@nocrew.org>
1515
1516         * jenna (write_filelists): correct typo, s/Components/Component/
1517         for Options.
1518
1519 2004-01-04  Ryan Murray  <rmurray@debian.org>
1520
1521         * cron.buildd: move update of overrides and Packages file...
1522         * cron.unchecked: to here.
1523         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1524         * katie.conf-security: likewise
1525
1526 2003-11-20  James Troup  <james@nocrew.org>
1527
1528         * jenna (main): don't use utils.try_with_debug(), it produces way
1529         too much output.
1530
1531         * halle (check_changes): don't error out if a .changes refers to a
1532         non-existent package, just warn and skip the file.
1533
1534         * docs/README.stable-point-release: mention halle and .changes
1535         obsoleted by removal through melanie.  Update for 3.0r2.
1536
1537         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1538         (Suite::Stable::Description): update for 3.0r2.
1539         (Lauren::MoreInfoURL): likewise.
1540         * katie.conf-non-US (Suite::Stable::Version): likewise.
1541         (Suite::Stable::Description): likewise.
1542         (Lauren::MoreInfoURL): likewise.
1543
1544         * apt.conf.stable (Default): don't define MaxContentsChange.
1545         * apt.conf.stable-non-US (Default): likewise.
1546
1547         * lauren (reject): hack to work around partial replacement of an
1548         upload, i.e. one or more binaries superseded by another source
1549         package.
1550
1551 2003-11-17  James Troup  <james@nocrew.org>
1552
1553         * pseudo-packages.maintainers: point installation-reports at
1554         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1555         request.
1556
1557         * utils.py (parse_changes): calculate the number of lines once
1558         with len() rather than max().
1559
1560         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1561         files, since check_dsc_against_db() deletes the .orig.tar.gz
1562         entry.
1563
1564 2003-11-13  Ryan Murray  <rmurray@debian.org>
1565
1566         * apt.conf: specify a src override file for debian-installer
1567
1568 2003-11-10  James Troup  <james@nocrew.org>
1569
1570         * fernanda.py (strip_pgp_signature): new function - strips PGP
1571         signature from a file and returns the modified contents of the
1572         file in a string.
1573         (display_changes): use it.
1574         (read_dsc): likewise.
1575
1576 2003-11-09  Ryan Murray  <rmurray@debian.org>
1577
1578         * cron.buildd: export accepted_autobuild table for unstable, and use
1579         it to generate the incoming Packages/Sources rather than having apt
1580         walk the directory.
1581         * apt.conf.buildd: use exported table from cron.buildd to generate
1582         Packages/Sources
1583
1584 2003-11-07  James Troup  <james@nocrew.org>
1585
1586         * kelly: import errno.
1587
1588         * katie.py (Katie.build_summaries): sort override disparities.
1589
1590         * kelly (install): set dsc_component based on the .dsc's component
1591         not a random binaries.
1592
1593 2003-10-29  James Troup  <james@nocrew.org>
1594
1595         * katie.py (Katie.build_summaries): don't assume changes["source"]
1596         exists since it might not.
1597
1598 2003-10-20  James Troup  <james@nocrew.org>
1599
1600         * pseudo-packages.maintainers: update security.d.o to use
1601         team@s.d.o at joy@'s request.
1602
1603 2003-10-17  James Troup  <james@nocrew.org>
1604
1605         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1606
1607 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1608
1609         * tea (chk_bd_process_dir): use .endswith rather than slice.
1610
1611 2003-10-14  James Troup  <james@nocrew.org>
1612
1613         * tea (check_build_depends): new function.
1614         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1615         in the archive.
1616         (main): update for new function.
1617         (usage): likewise.
1618
1619         * katie.py (Katie.do_reject): sanitize variable names,
1620         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1621         os.close() to outside if clause.
1622
1623         * jennifer (check_dsc): check build-depends and
1624         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1625         Fold the ARRAY check into the same code block and tidy up it's
1626         rejection message.
1627         (check_changes): ensure that the Files field is non-empty.
1628         Suggested by Santiago Vila <sanvila@unex.es>
1629         (check_changes): normalize reject messages.
1630         (check_dsc): instead of doing most of the checks inside a for loop
1631         and an if, find the dsc_filename in a short loop over files first
1632         and then do all the checks.  Add check for more than one .dsc in a
1633         .changes which we can't handle.  Normalize reject messages.
1634
1635 2003-10-13  James Troup  <james@nocrew.org>
1636
1637         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1638         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1639
1640         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1641         variables while iterating over 'files'.  Don't regenerate it when
1642         checking for source if source is mentioned.
1643
1644         Reject source only uploads if the config variable
1645         Dinstall::Reject::NoSourceOnly is set.
1646
1647 2003-10-03  James Troup  <james@nocrew.org>
1648
1649         * rene (main): add nasty hardcoded reference to debian-installer
1650         so we detect NBS .udebs.
1651
1652 2003-09-29  James Troup  <james@nocrew.org>
1653
1654         * apt.conf (old-proposed-updates): remove.
1655         * apt.conf-non-US (old-proposed-updates): likewise.
1656
1657 2003-09-24  James Troup  <james@nocrew.org>
1658
1659         * tea (check_files_not_symlinks): new function, ensure files
1660         mentioned in the database aren't symlinks.  Includes code to
1661         update any files that are like this to their real filenames +
1662         location; commented out by though.
1663         (usage): update for new function.
1664         (main): likewise.
1665
1666 2003-09-24  Anthony Towns  <ajt@debian.org>
1667
1668         * vars: external-overrides variable added
1669         * cron.daily: Update testing/unstable Task: overrides from joeyh
1670         managed external source.
1671
1672 2003-09-22  James Troup  <james@nocrew.org>
1673
1674         * kelly (install): if we can't move the .changes into queue/done,
1675         fail don't warn and carry on.  The old behaviour pre-dates NI and
1676         doesn't make much sense now since jennifer checks both
1677         queue/accepted and queue/done for any .changes files it's
1678         processing.
1679
1680         * utils.py (move): don't throw exceptions on existing files or
1681         can't overwrite, instead just fubar out.
1682
1683         * jennifer (check_dsc): also check Build-Depends-Indep for
1684         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1685
1686 2003-09-18  James Troup  <james@nocrew.org>
1687
1688         * katie.py (Katie.close_bugs): only log the bugs we've closed
1689         once.
1690
1691         * kelly (main): log as 'kelly', not 'katie'.
1692
1693 2003-09-16  James Troup  <james@nocrew.org>
1694
1695         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1696
1697         * jennifer (check_changes): normalize reject message for "changes
1698         file already exists" to be %s: <foo>.
1699         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1700         produced by broken dpkg-source in 1.10.11.  Tone down and
1701         normalize rejection message for incompatible 'Format' version
1702         numbers.
1703         (check_diff): likewise tone down and normalize.
1704
1705 2003-09-07  James Troup  <james@nocrew.org>
1706
1707         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1708         don't bomb out on bogus empty lines.
1709         (build_file_list): check for changes["files"] earlier.  use Dict
1710         to create files[name] dictionary.
1711         (send_mail): don't bother validating arguments.
1712         (check_signature): minor improvements to some of the rejection
1713         messages including listing the key id of the key that wasn't found
1714         in the keyring.
1715         (wrap): new function.
1716
1717         * tea: add new check 'validate-indices' that ensures all files
1718         mentioned in indices (Packages, Sources) files do in fact exist.
1719
1720         * catherine (poolize): use a local re_isadeb which handles legacy
1721         (i.e. no architecture) style .deb filenames.
1722
1723         * rosamund: new script.
1724
1725         * rhona (check_binaries): when checking for binary packages not in
1726         a suite, don't bother selecting files that already have a
1727         last_used date.
1728         (check_sources): likewise.
1729
1730         * rhona: change all SQL EXISTS sub-query clauses to use the
1731         postgres suggested convention of "SELECT 1 FROM".
1732         * andrea (main): likewise.
1733         * tea (check_override): likewise.
1734         * catherine (main): likewise.
1735
1736         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1737         entries and in other suites MustBeNewerThan's.
1738         (SuiteMappings): likewise
1739         * katie.conf-non-US: likewise.
1740         * katie.conf-security: likewise.
1741
1742         * apt.conf-security: remove oldstable.
1743         * apt.conf.stable: likewise.
1744         * apt.conf.stable-non-US: likewise.
1745         * cron.buildd-security: likewise.
1746         * cron.daily-security: likewise.
1747         * vars-security (suites): likewise.
1748         * wanna-build/trigger.daily: likewise.
1749
1750         * claire.py (clean_symlink): move...
1751         * utils.py (clean_symlink): here.
1752
1753         * claire.py (find_dislocated_stable): update accordingly.
1754
1755 2003-08-16  Anthony Towns  <ajt@debian.org>
1756
1757         * katie.py (source_exists): expand the list of distributions
1758         the source may exist in to include any suite that's mapped to
1759         the destination suite (even transitively (a->b->c)). This should
1760         unbreak binary uploads to *-proposed-updates.
1761
1762 2003-08-09  Randall Donald  <rdonald@debian.org>
1763
1764         * lisa (recheck): change changes["distribution"].keys() to
1765         Katie.pkg.changes...
1766
1767 2003-08-08  Randall Donald  <rdonald@debian.org>
1768
1769         * katie.py: only tag bugs as fixed-in-experimental for
1770         experimental uploads
1771
1772 2003-07-26  Anthony Towns  <ajt@debian.org>
1773
1774         * katie.py (source_exists): add an extra parameter to limit the
1775         distribution(s) the source must exist in.
1776         * kelly, lisa, jennifer: update to use the new source_exists
1777
1778 2003-07-15  Anthony Towns  <ajt@debian.org>
1779
1780         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1781         checksums for debian-installer stuff even when it's just a symlink to
1782         another suite
1783
1784         * apt.conf: add the FakeDI line
1785
1786 2003-06-09  James Troup  <james@nocrew.org>
1787
1788         * kelly (check): make sure the 'file' we're looking for in 'files'
1789         hasn't been deleted by katie.check_dsc_against_db().
1790
1791 2003-05-07  James Troup  <james@nocrew.org>
1792
1793         * helena (time_pp): fix s/years/year/ typo.
1794
1795 2003-04-29  James Troup  <james@nocrew.org>
1796
1797         * madison (usage): document -c/--component.
1798
1799         * madison (usage): Fix s/seperated/separated/.
1800         * melanie (usage): likewise.
1801         * jenna (usage): likewise.
1802
1803 2003-04-24  James Troup  <james@nocrew.org>
1804
1805         * cron.daily-non-US: if there's nothing for kelly to install, say
1806         so.
1807
1808         * jennifer (check_timestamps): print sys.exc_value as well as
1809         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1810         failed' with 'deb contents' to make it clearer what timestamp(s)
1811         are being checked.
1812
1813 2003-04-15  James Troup  <james@nocrew.org>
1814
1815         * cron.daily-non-US: only run kelly if there are some .changes
1816         files in accepted.
1817
1818         * rene: add -m/--mode argument which can be either daily (default)
1819         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1820         Various changes to make this possible including a poor attempt at
1821         splitting main() up a little.  De-hardcode suite numbers from SQL
1822         queries and return quietly from do_nviu() if experimental doesn't
1823         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1824         is.
1825
1826         * debian/control (Depends): remove python-zlib as it's obsolete.
1827
1828         * charisma (main): don't slice the \n off strings when we're
1829         strip()-ing it anyway.
1830         * heidi (set_suite): likewise.
1831         (process_file): likewise.
1832         * natalie (process_file): likewise.
1833
1834 2003-04-08  James Troup  <james@nocrew.org>
1835
1836         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1837         slow queries by using one LIKE '%foo%' and then matching against
1838         '%s' or '/%s$' in python.  Also only join location when we need it
1839         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1840         query, so 6s for each sourceful package.
1841
1842         * cron.daily: invoke rene and send the report to ftpmaster.
1843         * cron.daily-non-US: likewise.
1844
1845 2003-03-14  James Troup  <james@nocrew.org>
1846
1847         * utils.py (send_mail): default filename to blank.
1848         * amber (make_advisory): adapt.
1849         * jennifer (acknowledge_new): likewise.
1850         * katie.py (Katie.close_bugs): likewise.
1851         (Katie.announce): likewise.
1852         (Katie.accept): likewise.
1853         (Katie.check_override): likewise.
1854         (Katie.do_reject): likewise.
1855         * kelly (do_reject): likewise.
1856         (stable_install): likewise.
1857         * lisa (do_bxa_notification): likewise.
1858         * lauren (reject): likewise.
1859         * melanie (main): likewise.
1860
1861         * rene (add_nbs): check any NBS packages against unstable to see
1862         if they haven't been removed already.
1863
1864         * templates/katie.rejected: remove paragraph about rejected files
1865         since they're o-rwx due to c-i-m and the uploader can't do
1866         anything about them and shania will take care of them anyway.
1867
1868         * madison (usage): update usage example to use comma seperation.
1869         * melanie (usage): likewise.
1870
1871         * utils.py (split_args): new function; splits command line
1872         arguments either by space or comma (whichever is used).  Also has
1873         optional-but-default DWIM spurious space detection to avoid
1874         'command -a i386, m68k' problems.
1875         (parse_args): use it.
1876         * melanie (main): likewise.
1877
1878         * melanie (main): force the admin to tell someone if we're not
1879         doing a rene-led removal (or closing a bug, which counts as
1880         telling someone).
1881
1882 2003-03-05  James Troup  <james@nocrew.org>
1883
1884         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1885         and python sections.
1886         * katie.conf-security (Section): likewise.
1887
1888         * add_constraints.sql: add uid and uid_id_seq to grants.
1889
1890         * lisa (determine_new): also warn about adding overrides to
1891         oldstable.
1892
1893         * madison (main): make the -S/--source-and-binary query obey
1894         -s/--suite restrictions.
1895
1896 2003-03-03  James Troup  <james@nocrew.org>
1897
1898         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1899         exists, warn the user that our output might seem strange.  (People
1900         get confused by multiple versions in a suite which happens
1901         post-kelly but pre-jenna.)
1902
1903 2003-02-21  James Troup  <james@nocrew.org>
1904
1905         * kelly (main): we don't need to worry about StableRejector.
1906
1907         * melanie (main): sort versions with apt_pkg.VersionCompare()
1908         prior to output.
1909
1910         * lauren: new script to manually reject packages from
1911         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1912
1913 2003-02-20  James Troup  <james@nocrew.org>
1914
1915         * kelly (init): remove unused -m/--manual-reject argument.
1916
1917         * katie.py (Katie.force_reject): renamed from force_move to make
1918         it more explicit what this function does.
1919         (Katie.do_reject): update to match.
1920
1921         * utils.py (prefix_multi_line_string): add an optional argument
1922         include_blank_lines which defaults to 0.  If non-zero, blank lines
1923         will be includes in the output.
1924
1925         * katie.py (Katie.do_reject): don't add leading space to each line
1926         of the reject message.  Include blank lines when showing the
1927         message to the user.
1928
1929 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1930
1931         * utils.py (fix_maintainer): replace pointless re.sub() with
1932         simple string format.
1933
1934 2003-02-11  James Troup  <james@nocrew.org>
1935
1936         * lisa (edit_overrides): only strip-to-one-char and upper-case
1937         non-numeric answers.  Fixes editing of items with indices >= 10;
1938         noticed by Randall.
1939         (edit_overrides): correct order of arguments to "not a valid
1940         index" error message.
1941
1942         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1943         remove_duplicate_versions(); thanks to aj for the initial
1944         diagnosis.
1945         (remove_duplicate_versions): correct how we return
1946         dominant_versions.
1947         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1948         a tuple rather than just a tuple.
1949
1950 2003-02-10  James Troup  <james@nocrew.org>
1951
1952         * emilie: new script - sync fingerprint and uid tables with a
1953         debian.org LDAP DB.
1954
1955         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1956         in 'fingerprint'.
1957
1958         * db_access.py (get_or_set_uid_id): new function.
1959
1960         * jennifer (main): update locking to a) not used FCNTL (deprecated
1961         in python >= 2.2) and b) acknowledge upstream's broken
1962         implementation of lockf (see Debian bug #74777), c) try to acquire
1963         the lock non-blocking.
1964         * kelly (main): likewise.
1965
1966         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1967
1968         * madison (main): only append the package to new_packages if it's
1969         not already in there; fixes -S/--source-and-binary for cases where
1970         the source builds a binary package of the same name.
1971
1972 2003-02-10  Anthony Towns  <ajt@debian.org>
1973
1974         * madison (main): use explicit JOIN syntax for
1975         -S/--source-and-binary queries to reduce the query's runtime from
1976         >10 seconds to negligible.
1977
1978 2003-02-08  James Troup  <james@nocrew.org>
1979
1980         * rene (main): in the NVIU output, append items to lists, not
1981         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1982         should be removed.
1983
1984 2003-02-07  James Troup  <james@nocrew.org>
1985
1986         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1987         Sources [aj].
1988
1989         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1990         O. Benham/Adam Heath/.
1991
1992         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1993         (Suite::Stable::Description): update for 3.0r1a.
1994         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1995
1996         * utils.py (gpgv_get_status_output): rename from
1997         get_status_output().
1998
1999         * neve (check_signature): use gpgv_get_status_output and Dict from
2000         utils().  Add missing newline to error message about duplicate tokens.
2001
2002         * saffron (per_arch_space_use): also print space used by source.
2003         (output_format): correct string.join() invocation.
2004
2005         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2006
2007 2003-02-04  James Troup  <james@nocrew.org>
2008
2009         * cron.buildd: correct generation of Packages/Sources and grep out
2010         non-US/non-free as well as non-free.
2011
2012 2003-02-03  Ryan Murray  <rmurray@debian.org>
2013
2014         * cron.buildd: generate quinn-diff output with full Packages/Sources
2015           files to get out-of-date vs. uncompiled right.
2016         * apt.conf.buildd: no longer generate uncompressed files, as they
2017           are generated in cron.buildd instead
2018         * add -i option to quinn-diff to ignore binary-all packages
2019         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2020           aren't in the packages file, the arch that uploaded them will build
2021           them anyways...
2022
2023 2003-01-30  James Troup  <james@nocrew.org>
2024
2025         * rene (main): only print suggested melanie command when there's
2026         some NBS to remove.
2027
2028 2003-01-30  Ryan Murray  <rmurray@debian.org>
2029
2030         * cron.buildd: fix incorrectly inverted lockfile check
2031
2032 2003-01-29  Ryan Murray  <rmurray@debian.org>
2033
2034         * cron.buildd: generate override.sid.all3.src
2035         * apt.conf.buildd: use generated override.sid.all3.src
2036
2037 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2038
2039         * utils.py (get_status_output): moved from jennifer.
2040         (Dict): likewise.
2041         (check_signature): likewise.
2042
2043         * jennifer (get_status_output): moved to utils.py.
2044         (Dict): likewise.
2045         (check_signature): likewise.
2046
2047         * utils.py (check_signature): add an argument to specifiy which
2048         function to call when an error was found.
2049         (check_signature): document this function better.
2050
2051         * jennifer (check_files): pass the reject function as an argument
2052         to utils.check_signature.
2053         (process_it): likewise.
2054
2055 2003-01-20  James Troup  <james@nocrew.org>
2056
2057         * rene (main): lots of changes to improve the output and make it
2058         more useful.
2059
2060         * katie.py (Katie.check_override): make the override messages
2061         clearer (hopefully).
2062
2063 2002-12-26  James Troup  <james@nocrew.org>
2064
2065         * ziyi (usage): document the ability to pass suite(s) as
2066         argument(s).
2067         (main): read apt.conf after checking for -h/--help.
2068
2069         * tea (main): take the check to run as an argument.
2070
2071         * saffron.R: R script to graph daily install runs.
2072
2073         * saffron: new script; various stats functions.
2074
2075         * rhona (main): connect to the database after checking for -h/--help.
2076
2077         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2078
2079         * melanie (main): sort versions with utils.arch_compare_sw().
2080
2081         * madison (usage): alphabetize order of options.
2082         * melanie (usage): likewise.
2083
2084         * kelly (usage): fix usage short description (we aren't dinstall).
2085
2086         * julia (usage): fix usage description and alphabetize order of
2087         options.
2088
2089         * jeri (usage): fix usage short description.
2090
2091         * jennifer (main): move --help and --version checks from here...
2092         (init): to here so that they work with an empty katie.conf.
2093         * kelly: likewise.
2094
2095         * alyson (usage): new function.
2096         (main): use it.
2097         * andrea: likewise.
2098         * ashley: likewise.
2099         * cindy: likewise.
2100         * denise: likewise.
2101         * helena: likewise.
2102         * neve: likewise.
2103         * rene: likewise.
2104         * rose: likewise.
2105         * tea: likewise.
2106
2107         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2108         entry that caused tasks to be omitted from 3.0r1.
2109
2110 2002-12-10  James Troup  <james@nocrew.org>
2111
2112         * jennifer (check_files): sanity check the Depends field to ensure
2113         it's non-empty if present since apt chokes on an empty one.
2114         Thanks to Ryan Murray for the idea.
2115
2116 2002-12-08  James Troup  <james@nocrew.org>
2117
2118         * katie.conf-security (Helena::Directories): new; include accepted
2119         in addition to byhand and new.
2120
2121         * helena (process_changes_files): use utils.arch_compare_sw().
2122         Justify things based on the longest [package, version,
2123         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2124         the commas in architecture and version lists for the same reason.
2125         (main): make directories we process configurable through
2126         Helena::Directories in the config file; if that doesn't exist
2127         default to the old hardcoded values (byhand & new).
2128
2129         * utils.py (arch_compare_sw): moved here from madison.
2130         * madison (main): adjust to compensate.
2131
2132 2002-12-06  James Troup  <james@nocrew.org>
2133
2134         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2135         right filename.
2136
2137 2002-12-05  James Troup  <james@nocrew.org>
2138
2139         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2140
2141 2002-11-28  Randall Donald  <rdonald@debian.org>
2142
2143         * fernanda.py (read_control): fix typo of 'Architecture'.
2144
2145 2002-11-26  James Troup  <james@nocrew.org>
2146
2147         * lisa (check_pkg): call less with '-R' so we see the colour from
2148         Randall's fernanda changes.
2149
2150         * neve (process_sources): if Directory points to a legacy location
2151         but the .dsc isn't there; assume it's broken and look in the pool.
2152         (update_section): new, borroed from alyson.
2153         (do_da_do_da): use it.
2154         (process_packages): add suite_it to the cache key used for
2155         arch_all_cache since otherwise we only add a package to the first
2156         suite it's in and ignore any subsequent ones.
2157
2158         * katie.conf-non-US (Location): fixed to reflect reality (all
2159         suites, except old-proposed-updates (which is legacy-mixed)) are
2160         pool.
2161
2162         * utils.py (try_with_debug): wrapper for print_exc().
2163         * jenna (main): use it.
2164         * neve (main): likewise.
2165
2166 2002-11-25  Randall Donald  <rdonald@debian.org>
2167
2168         * fernanda.py (main): added -R to less command line for raw control
2169         character support to print colours
2170         (check_deb): Instead of running dpkg -I on deb file, call
2171         output_deb_info, the new colourized control reporter.
2172         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2173         of printing out each .dsc line.
2174         (output_deb_info): new function. Outputs each key/value pair from
2175         read_control except in special cases where we highlight section,
2176         maintainer, architecture, depends and recommends.
2177         (create_depends_string): new function. Takes Depends tree and looks
2178         up it's compontent via projectb db, colourizes and constructs a
2179         depends string in original order.
2180         (read_dsc): new function. reads and parses .dsc info via
2181         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2182         colourized.
2183         (read_control): new function. reads and parses control info via
2184         apt_pkg. Depends and Recommends are split in to list structures,
2185         Section and Architecture are colourized. Maintainer is colourized
2186         if it has a localhost.localdomain address.
2187         (split_depends): new function. Creates a list of lists of
2188         dictionaries of depends (package,version relation). Top list is
2189         colected from comma delimited items. Sub lists are | delimited.
2190         (get_comma_list): new function. splits string input among commas
2191         (get_or_list): new function. splits string input among | delimiters
2192         (get_depends_parts): new function. Creates dictionary of package name
2193         and version relation from dependancy string.
2194         Colours for section and depends are per component. Unfound depends
2195         are in bold. Lookups using version info is not supported yet.
2196
2197 2002-11-22  James Troup  <james@nocrew.org>
2198
2199         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2200         'udmsearch'.
2201
2202         * amber (make_advisory): string.atol() is deprecated and hasn't
2203         been ported to string methods.  Use long() instead.
2204
2205         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2206         creating the database since we'll fail badly if it's created with
2207         e.g. UNICODE encoding.
2208
2209         * rose (main): AptCnf is a global.
2210
2211         * neve (get_location_path): new function determines the location
2212         from the the first (left-most) directory of a Filename/Directory.
2213         (process_sources): don't need 'location' anymore.  Use
2214         utils.warn().  Use the Directory: field for each package to find
2215         the .dsc.  Use get_location_path() to determine the location for
2216         each .dsc.
2217         (process_packages): do't need 'location' anymore.  Use
2218         utils.warn().  Use get_location_path().
2219         (do_sources): don't need 'location', drop 'prefix' in favour of
2220         being told the full path to the Sources file, like
2221         process_packages().
2222         (do_da_do_da): main() renamed, so that main can call us in a
2223         try/except.  Adapt for the changes in do_sources() and
2224         process_packages() above.  Assume Sources and Packages file are in
2225         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2226
2227         * katie.conf-security (Location): fixed to reflect reality (all
2228         suites are pool, not legacy).
2229
2230         * utils.py (print_exc): more useful (i.e. much more verbose)
2231         traceback; a recipe from the Python cookbook.
2232         * jenna (main): use it.
2233         * neve (main): likewise.
2234
2235 2002-11-19  James Troup  <james@nocrew.org>
2236
2237         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2238         handling which was FUBAR for multi-suite uploads.  Now we just
2239         make a dictionary of destinations to copy to and iterate over
2240         those.
2241
2242         * fernanda.py (check_deb): run linda as well as lintian.
2243
2244 2002-10-21  James Troup  <james@nocrew.org>
2245
2246         * melanie (main): change X-Melanie to X-Katie and prefix it with
2247         'melanie '.
2248
2249         * lisa (main): prefix X-Katie with 'lisa '.
2250
2251         * jennifer (clean_holding): fix typo in string method changes;
2252         s/file.find(file/file.find(/.
2253
2254         * cron.daily: invoke helena and send the report to ftpmaster.
2255         * cron.daily-non-US: likewise.
2256
2257 2002-10-16  James Troup  <james@nocrew.org>
2258
2259         * kelly (check): call reject() with a blank prefix when parsing
2260         the return of check_dsc_against_db() since it does its own
2261         prefix-ing.
2262
2263         * rose: new script; only handles directory creation initally.
2264
2265         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2266         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2267
2268 2002-10-06  James Troup  <james@nocrew.org>
2269
2270         * rene (main): remove bogus argument handling.
2271
2272         * kelly: katie, renamed.
2273         * cron.daily: adapt for katie being renamed to kelly.
2274         * cron.daily-non-US: likewise.
2275         * amber (main): likewise.
2276
2277         * Changes for python 2.1.
2278
2279         * kelly: time.strftime no longer requires a second argument of
2280         "time.localtime(time.time())".
2281         * logging.py: likewise.
2282         * rhona: likewise.
2283         * shania (init): likewise.
2284
2285         * amber: use augmented assignment.
2286         * catherine (poolize): likewise.
2287         * claire.py (fix_component_section): likewise.
2288         * halle (check_changes): likewise.
2289         * helena: likewise.
2290         * jenna: likewise.
2291         * jennifer: likewise.
2292         * jeri: likewise.
2293         * katie.py: likewise.
2294         * kelly: likewise.
2295         * lisa: likewise.
2296         * madison (main): likewise.
2297         * melanie: likewise.
2298         * natalie: likewise.
2299         * neve: likewise.
2300         * rhona: likewise.
2301         * tea: likewise.
2302         * utils.py: likewise.
2303         * ziyi: likewise.
2304
2305         * amber: use .endswith.
2306         * fernanda.py: likewise.
2307         * halle (main): likewise.
2308         * jennifer: likewise.
2309         * jeri: likewise.
2310         * katie.py: likewise.
2311         * kelly: likewise.
2312         * lisa: likewise.
2313         * neve: likewise.
2314         * shania (main): likewise.
2315         * utils.py: likewise.
2316
2317         * alyson: use string methods.
2318         * amber: likewise.
2319         * andrea: likewise.
2320         * ashley: likewise.
2321         * catherine: likewise.
2322         * charisma: likewise.
2323         * claire.py: likewise.
2324         * db_access.py: likewise.
2325         * denise: likewise.
2326         * halle: likewise.
2327         * heidi: likewise.
2328         * helena: likewise.
2329         * jenna: likewise.
2330         * jennifer: likewise.
2331         * jeri: likewise.
2332         * julia: likewise.
2333         * katie.py: likewise.
2334         * kelly: likewise.
2335         * lisa: likewise.
2336         * logging.py: likewise.
2337         * madison: likewise.
2338         * melanie: likewise.
2339         * natalie: likewise.
2340         * neve: likewise.
2341         * rene: likewise.
2342         * tea: likewise.
2343         * utils.py: likewise.
2344         * ziyi: likewise.
2345
2346 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2347
2348         * utils.py (parse_changes): use <string>.startswith() rather than
2349         string.find().
2350
2351 2002-08-27  Anthony Towns  <ajt@debian.org>
2352
2353         * katie.py (in_override_p): when searching for a source override,
2354         and the dsc query misses, search for both udeb and deb overrides
2355         as well. Should fix the UNACCEPT issues with udebs.
2356
2357 2002-08-24  James Troup  <james@nocrew.org>
2358
2359         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2360         source+binary package finding code which was causing severe
2361         performance degradation with postgres 7.2.
2362
2363 2002-08-14  James Troup  <james@nocrew.org>
2364
2365         * julia (main): use the pwd.getpwall() to get system user info
2366         rather than trying to read a password file.  Add a -n/--no-action
2367         option.
2368
2369         * cron.hourly: julia no longer takes any arguments.
2370         * cron.hourly-non-US: likewise.
2371
2372 2002-08-07  James Troup  <james@nocrew.org>
2373
2374         * katie (install): handle multi-suite uploads when CopyChanges
2375         and/or CopyKatie are in use, ensuring we only copy stuff once.
2376
2377 2002-08-01  Ryan Murray  <rmurray@debian.org>
2378
2379         * wanna-build/trigger.daily: initial commit, with locking
2380         * cron.buildd: add locking against daily run
2381
2382 2002-07-30  James Troup  <james@nocrew.org>
2383
2384         * melanie (main): readd creation of suite_ids_list so melanie is
2385         remotely useful again.
2386
2387         * katie.conf: adopt for woody release; diable
2388         StableDislocationSupport, add oldstable, adjust other suites and
2389         mappings, fix up location.
2390         * katie.conf-non-US: likewise.
2391         * katie.conf-security: likewise.
2392
2393         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2394         stable.
2395         * apt.conf.stable-non-US: likewise.
2396
2397         * apt.conf-security: adapt for woody release; adding oldstable,
2398         oldstable, adjust stable and testing.
2399         * cron.daily-security: likewise.
2400         * cron.buildd-security: likewise.
2401
2402         * apt.conf: adapt for woody release; rename woody-proposed-updates
2403         to testing-proposed-updates and proposed-updates to
2404         old-proposed-updates.
2405         * apt.conf-non-US: likewise.
2406
2407         * vars-non-US (copyoverrides): add sarge.
2408         * vars (copyoverrides): likewise.
2409
2410         * vars-security (suites): add oldstable.
2411
2412 2002-07-22  Ryan Murray  <rmurray@debian.org>
2413
2414         * apt.conf.security-buildd: use suite codenames instead of
2415           distnames.
2416
2417 2002-07-16  James Troup  <james@nocrew.org>
2418
2419         * denise (main): fix filenames for testing override files.
2420
2421 2002-07-14  James Troup  <james@nocrew.org>
2422
2423         * jennifer (process_it): call check_md5sums later so we can check
2424         files in the .dsc too
2425         (check_md5sums): check files in the .dsc too.  Check both md5sum
2426         and size.
2427
2428         * melanie (main): use parse_args() and join_with_commas_and() from
2429         utils.  If there's nothing to do, say so and exit, don't ask for
2430         confirmation etc.
2431
2432         * amber (join_with_commas_and): moved from here to ...
2433         * utils.py (join_with_commas_and): here.
2434
2435 2002-07-13  James Troup  <james@nocrew.org>
2436
2437         * madison (main): use parse_args() from utils.  Support
2438         -c/--component.
2439
2440         * jenna (parse_args): moved from here to ...
2441         * utils.py (parse_args): here.
2442
2443         * katie.conf (Architectures): minor corrections to the description
2444         for arm, mips and mipsel.
2445         * katie.conf-non-US (Architectures): likewise.
2446         * katie.conf-security (Architectures): likewise.
2447
2448         * cron.daily-security: use natalie's new -a/--add functionality to
2449         flesh out the security overrides.
2450
2451 2002-07-12  James Troup  <james@nocrew.org>
2452
2453         * cron.buildd (ARCHS): add arm.
2454
2455         * katie.conf: 2.2r7 was released.
2456         * katie.conf-non-US: likewise.
2457
2458         * utils.py (parse_changes): handle a multi-line field with no
2459         starting line.
2460
2461 2002-06-25  James Troup  <james@nocrew.org>
2462
2463         * templates/amber.advisory (To): add missing email address since
2464         __WHOAMI__ is only a name.
2465
2466         * katie.conf-security (Melane::LogFile): correct to go somewhere
2467         katie has write access to.
2468         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2469         Testing.
2470
2471         * natalie: add support for -a/-add which adds packages only
2472         (ignoring changes and deletions).
2473
2474         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2475         use FindB, not get.
2476
2477 2002-06-22  James Troup  <james@nocrew.org>
2478
2479         * jennifer (check_files): validate the package name and version
2480         field.  If 'Package', 'Version' or 'Architecture' are missing,
2481         don't try any further checks.
2482         (check_dsc): likewise.
2483
2484         * utils.py (re_taint_free): add '~' as a valid character.
2485
2486 2002-06-20  Anthony Towns  <ajt@debian.org>
2487
2488         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2489
2490 2002-06-09  James Troup  <james@nocrew.org>
2491
2492         * jennifer (check_files): reduce useless code.
2493
2494         * cron.daily-security: run symlinks -dr on $ftpdir.
2495
2496         * vars-security (ftpdir): add.
2497
2498 2002-06-08  James Troup  <james@nocrew.org>
2499
2500         * neve (update_override_type): transaction is handled higher up in
2501         main().
2502         (update_priority): likewise.
2503         (process_sources): remove code that makes testing a duplicate of
2504         stable.
2505         (process_packages): likewise.
2506
2507         * templates/amber.advisory: add missing mail headers.
2508
2509         * cron.daily-security: also call apt-ftparchive clean for
2510         apt.conf.buildd-security.
2511         * cron.weekly: likewise.
2512
2513         * amber (do_upload): write out a list of source packages (and
2514         their version) uploaded for testing.
2515         (make_advisory): add more Subst mappings for the mail headers.
2516         (spawn): check for suspicious characters in the command and abort
2517         if their found.
2518
2519 2002-06-07  James Troup  <james@nocrew.org>
2520
2521         * ziyi (main): remove the 'nonus'/'security' hacks and use
2522         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2523         the lower level Release files, even if they don't exist.  fubar
2524         out if we can't open a lower level Release file for writing.
2525
2526         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2527         ziyi.
2528         * katie.conf-security (Dinstall): likewise.
2529
2530         * amber (do_upload): renamed from get_file_list().  Determine the
2531         upload host from the original component.
2532         (init): Add a -n/--no-action option.  Fix how we get changes_files
2533         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2534         sys.argv).  Add an Options global.
2535         (make_advisory): support -n/--no-action.
2536         (spawn): likewise.
2537         (main): likewise.
2538         (usage): document -n/--no-action.
2539
2540         * cron.buildd-security: fix path to Packages-arch-specific in
2541         quinn-diff invocation.
2542
2543         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2544         to proper suite names (i.e. stable, testing) rather than codenames
2545         (potato, woody).
2546         (Dinstall::DefaultSuite): likewise.
2547         (Suite): likewise.
2548         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2549         * vars-security (suites): likewise.
2550         * apt.conf-security: likewise.
2551
2552         * katie.conf-security (Component): add "updates/" prefix.
2553         (Suite::*::Components): likewise.
2554         (ComponentMappings): new; map all {ftp-master,non-US} components
2555         -> updates/<foo>.
2556
2557         * katie.conf-security (Natalie): removed; the options have
2558         defaults and ComponentPosition is used by alyson which doesn't
2559         work on security.d.o.
2560         (Amber): replace UploadHost and UploadDir with ComponentMappings
2561         which is a mapping of components -> URI.
2562         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2563         (SuiteMappings): use "silent-map" in preference to "map".
2564
2565         * cron.unchecked-security: fix call to cron.buildd-security.
2566
2567         * cron.daily-security: map local suite (stable) -> override suite
2568         (potato) when fixing overrides.  Correct component in natalie call
2569         to take into account "updates/" prefix.  Fix cut'n'waste in
2570         override.$dist.all3 generation, the old files weren't being
2571         removed, so they were endlessly growing.
2572
2573         * neve (main): don't use .Find for the CodeName since we require
2574         it.  Location::*::Suites is a ValueList.
2575         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2576         out on expired keys, just warn.
2577         (update_override_type): new function; lifted from alyson.
2578         (update_priority): likewise.
2579         (main): use update_{override_type,priority}().
2580
2581         * jennifer (check_distributions): remove redunant test for
2582         SuiteMappings; ValueList("does-not-exist") returns [] which is
2583         fine.  Add support for a "silent-map" type which doesn't warn
2584         about the mapping to the user.
2585         (check_files): add support for ComponentMappings, similar to
2586         SuiteMappings, but there's no type, just a source and a
2587         destination and the original component is stored in "original
2588         component".
2589         * katie.py (Katie.dump_vars): add "original component" as an
2590         optionsal files[file] dump variable.
2591
2592         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2593         query.  Add support for section-less legacy locations like current
2594         security.debian.org through YetAnotherConfigBoolean
2595         'LegacyStableHasNoSections'.
2596         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2597
2598         * utils.py (real_arch): moved here from ziyi.
2599         * ziyi (real_arch): moved to utils.py.
2600         * ziyi (main): likewise.
2601
2602         * claire.py (find_dislocated_stable): use real_arch() with
2603         filter() to strip out source and all.
2604         * neve (main): likewise.
2605         * rene (main): likewise.
2606         * jeri (parse_packages): likewise.
2607
2608 2002-06-06  James Troup  <james@nocrew.org>
2609
2610         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2611         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2612         doing.
2613
2614 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2615
2616         * jeri (check_joey): check if the line contains two elements
2617         before accessing the second.  Also, strip trailing spaces as well
2618         as the newline.
2619         * halle (check_joey): likewise.
2620
2621 2002-06-05  James Troup  <james@nocrew.org>
2622
2623         * cron.unchecked-security: new file; like cron.unchecked but if
2624         there's nothing to do exit so we don't call cron.buildd-security.
2625
2626         * apt.conf.buildd-security: new file.
2627
2628         * vars (archs): alphabetize.
2629         * vars-non-US (archs): likewise.
2630
2631         * vars-security: add unchecked.
2632
2633         * madison (main): reduce rather bizarrely verbose and purposeless
2634         code to print arches to a simple string.join.
2635
2636         * katie.conf (Suites::Unstable): add UdebComponents, a new
2637         valuelist of suites, used by jenna to flesh out the list of
2638         <suite>_main-debian-installer-binary-<arch>.list files generated.
2639         (Dinstall): add StableDislocationSupport, a new boolean used by
2640         jenna to enable or disable stable dislocation support
2641         (i.e. claire), as true.
2642
2643         * katie.conf (Dinstall): add StableDislocationSupport, a new
2644         boolean used by jenna to enable or disable stable dislocation
2645         support (i.e. claire), as true.
2646         * katie.conf-non-US: likewise.
2647         * katie.conf-security: likewise.
2648
2649         * cron.daily-security: generate .all3 overrides for the buildd
2650         support.  Freshen a local copy of Packages-arch-specific from
2651         buildd.debian.org.
2652
2653         * claire.py (find_dislocated_stable): disable the support for
2654         files in legacy-mixed locations since none of the Debian archives
2655         have any anymore.
2656
2657         * helena: new script; produces a report on NEW and BYHAND
2658         packages.
2659
2660         * jenna: rewritten from scratch to fix speed problems.  Run time
2661         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2662         minutes, 105 seconds are the monster query and 70 odd seconds is
2663         claire.
2664
2665         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2666         irrelevant.
2667
2668 2002-06-05  Ryan Murray  <rmurray@debian.org>
2669
2670         * cron.buildd-security: new file.
2671
2672 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2673
2674         * denise (list): take a file argument and use it.
2675         (main): don't abuse sys.stdout, just write to the file.
2676
2677         * claire.py (usage): Fix misspelling.
2678         (clean_symlink): Simplify.
2679         (find_dislocated_stable): Avoid unnecessary work.
2680
2681 2002-05-29  James Troup  <james@nocrew.org>
2682
2683         * cameron: removed; apt-ftparchive can simply walk the directory.
2684
2685 2002-05-26  Anthony Towns  <ajt@debian.org>
2686
2687         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2688         for the autobuilders.
2689
2690 2002-05-24  Ryan Murray  <rmurray@debian.org>
2691
2692         * cron.buildd: update override files before running apt-ftparchive
2693
2694 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2695
2696         * amber (main): remove extra space in prompt.
2697
2698         * utils.py (validate_changes_file_arg): use original filename in
2699         error messages.
2700
2701         * jeri (check_joey): close file after use.
2702         (parse_packages): likewise.
2703         (main): setup debug option properly.
2704
2705         * melanie (main): remove unused packages variable and simplify the
2706         code to build up con_packages by using repr().
2707
2708 2002-05-23  James Troup  <james@nocrew.org>
2709
2710         * lisa (recheck): when we reject, also return 0 so the package is
2711         skipped.
2712         (sg_compare): fix note sorting.
2713         (recheck): remove the .katie file after rejection.
2714
2715         * katie.py (Katie.accept): accepted auto-build support take 3;
2716         this time adding support for security.  Security needs a) non-pool
2717         files copied rather than symlinked since accepted is readable only
2718         by katie/security and www-data needs to be able to see the files,
2719         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2720         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2721         SecurityAcceptedAutoBuild is a new boolean which controls whether
2722         or not normal or security style is used.  The unstable_accepted
2723         table was renamed to accepted_autobuild and a suite column added.
2724         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2725         didn't have it's last_used/in_accepted flags correctly updated.
2726         * katie (install): likewise.
2727         * rhona (clean_accepted_autobuild): likewise.
2728
2729 2002-05-22  James Troup  <james@nocrew.org>
2730
2731         * lisa (sort_changes): new function; sorts changes properly.
2732         Finally.
2733         (sg_compare): new function; helper for sort_changes().  Sorts by
2734         have note and time of oldest upload.
2735         (indiv_sg_compare): new function; helper for sort_changes().
2736         Sorts by source version, have source and filename.
2737         (main): use sort_changes().
2738         (changes_compare): obsoleted; removed.
2739
2740 2002-05-20  James Troup  <james@nocrew.org>
2741
2742         * rhona (clean_accepted_autobuild): don't die if a file we're
2743         trying to remove doesn't exist.  Makes rhona more friendly to
2744         katie/katie.py crashes/bugs without any undue cost.
2745
2746 2002-05-19  James Troup  <james@nocrew.org>
2747
2748         * lisa (main): if sorting a large number of changes give some
2749         feedback.
2750         (recheck): new function, run the same checks (modulo NEW,
2751         obviously) as katie does, if they fail do the standard
2752         reject/skip/quit dance.
2753         (do_pkg): use it.
2754
2755         * katie (install): don't try to unlink the symlink in the
2756         AcceptedAutoBuild support if the destination is not a symlink (or
2757         doesn't exist).  Avoids unnecessary bombs on previous partial
2758         accepts and will still bomb hard if the file exists and isn't a
2759         symlink.
2760
2761         * utils.py: blah, commands _is_ used when the mail stuff isn't
2762         commented out like it is in my test environment.
2763
2764         * lisa (changes_compare): "has note" overrides everything else.
2765         Use .katie files rather than running parse_changes, faster and
2766         allows "has note" to work.  Correct version compare, it was
2767         reversed.  Ctime check should only kick in if the source packages
2768         are not the same.
2769         (print_new): print out and return any note.  Rename 'ret_code' to
2770         'broken'.
2771         (edit_new): renamed from spawn_editor.  Don't leak file
2772         descriptors.  Clean up error message if editor fails.
2773         (edit_note): new function, allows one to edit notes.
2774         (do_new): add note support, editing and removing.
2775         (init): kill -s/--sort; with notes we always want to use our
2776         sorting method.
2777         (usage): likewise.
2778
2779         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2780         changes field.
2781
2782         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2783         it default to 0.  Adapt tests to assume it's boolean.
2784         * fernanda.py (check_changes): adjust call appropriately.
2785         * halle (check_changes): likewise.
2786         * jennifer (check_changes): likewise.
2787         * jeri (check_changes): likewise.
2788         * shania (flush_orphans): likewise.
2789
2790         * jennifer (check_dsc): pass is_a_dsc by name when calling
2791         build_file_list() for clarity.
2792         * shania (flush_orphans): likewise.
2793         * tea (check_missing_tar_gz_in_dsc): likewise.
2794
2795         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2796         calling parse_changes() for clarity.
2797         * tea (check_dscs): likewise.
2798
2799         * utils.py (parse_changes): make dsc_whitespace_rules default to
2800         not true.
2801         * halle (check_changes): adjust call appropriately.
2802         * jennifer (check_changes): likewise.
2803         * jeri (check_changes): likewise.
2804         * lisa (changes_compare): likewise.
2805         * utils.py (changes_compare): likewise.
2806         * melanie (main): likewise.
2807         * shania (flush_orphans): likewise.
2808         * fernanda.py (check_changes): likewise.
2809
2810 2002-05-18  James Troup  <james@nocrew.org>
2811
2812         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2813         it's not useful and by and large a duplication of information
2814         available in readable format in other files.
2815
2816 2002-05-16  Ryan Murray  <rmurray@debian.org>
2817
2818         * melanie: Dir::TemplatesDir -> Dir::Templates
2819
2820 2002-05-15  Ryan Murray  <rmurray@debian.org>
2821
2822         * cameron: correct the use of os.path.join
2823
2824 2002-05-15  Anthony Towns  <ajt@debian.org>
2825
2826         * ziyi: Update to match the new format for Architectures/Components
2827         in katie.conf.
2828
2829 2002-05-14  James Troup  <james@nocrew.org>
2830
2831         * amber: new script; 'installer' wrapper script for the security
2832         team.
2833
2834         * katie.py (Katie.announce): remove unused 'dsc' local
2835         variable. (pychecker)
2836
2837         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2838
2839         * neve: don't import sys, we don't use it. (pychecker)
2840         (check_signature): fix return type mismatch. (pychecker)
2841
2842         * utils.py: don't import commands, we don't use it.  (pychecker)
2843
2844         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2845
2846         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2847         obsoleted by the change to "othercomponents" handling in jennifer
2848         detailed below.
2849         (Katie.cross_suite_version_check): new function; implements
2850         cross-suite version checking rules specified in the conf file
2851         while also enforcing the standard "must be newer than target
2852         suite" rule.
2853         (Katie.check_binary_against_db): renamed, since it's invoked once
2854         per-binary, "binaries" was inaccurate.  Use
2855         cross_suite_version_check() and don't bother with the "oldfiles"
2856         rubbish as jennifer works out "othercomponents" herself now.
2857         (Katie.check_source_against_db): use cross_suite_version_check().
2858
2859         * katie (check): the version and file overwrite checks
2860         (check_{binary,source,dsc}_against_db) are not per-suite.
2861
2862         * jennifer (check_files): less duplication of
2863         'control.Find("Architecture", "")' by putting it in a local
2864         variable.
2865         (check_files): call check_binary_against_db higher up since it's
2866         not a per-suite check.
2867         (check_files): get "othercomponents" directly rather than having
2868         check_binary_against_db do it for us.
2869
2870         * heidi (main): 'if x:', not 'if x != []:'.
2871         * katie.py (Katie.in_override_p): likewise.
2872         (Katie.check_dsc_against_db): likewise.
2873         * natalie (main): likewise.
2874         * rene (main): likewise.
2875         * ziyi (real_arch): likewise.
2876
2877         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2878         and OverrideType are now value lists, not lists.
2879         * andrea (main): likewise.
2880         * cindy (main): likewise.
2881         * claire.py (find_dislocated_stable): likewise.
2882         * denise (main): likewise.
2883         * jenna (main): likewise.
2884         * jennifer (check_distributions): likewise.
2885         (check_files): likewise.
2886         (check_urgency): likewise (Urgency::Valid).
2887         * jeri (parse_packages): likewise.
2888         * neve (main): likewise (and Location::%s::Suites).
2889         * rene (main): likewise.
2890
2891 2002-05-13  James Troup  <james@nocrew.org>
2892
2893         * katie.py (Katie.check_source_against_db): correct case of reject
2894         message to be consistent with binary checks.
2895
2896         * jennifer (get_status_output): don't leak 2 file descriptors per
2897         invocation.
2898         (check_signature): add missing '\n' to "duplicate status token"
2899         error message.
2900
2901 2002-05-09  James Troup  <james@nocrew.org>
2902
2903         * utils.py (validate_changes_file_arg): new function; validates an
2904         argument which should be a .changes file.
2905         * ashley (main): use it.
2906         * lisa (main): likewise.
2907
2908         * katie.py (Katie.check_dsc_against_db): since there can be more
2909         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2910         entry still exists in files.
2911
2912         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2913         files, since check_dsc_against_db() deletes the .orig.tar.gz
2914         entry.
2915
2916         * cameron: cleanups.
2917
2918         * utils.py (changes_compare): change sort order so that source
2919         name and source version trump 'have source'; this should fix
2920         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2921         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2922         by Ryan.
2923
2924         * lisa (main): allow the arguments to be .katie files too.
2925
2926 2002-05-07  Ryan Murray  <rmurray@debian.org>
2927
2928         * cron.buildd: add s390 to arch list again
2929
2930 2002-05-05  Ryan Murray  <rmurray@debian.org>
2931
2932         * cron.buildd: new script, update w-b database from unstable_accepted
2933         table
2934         * cameron: new script, take list in unstable_accepted and write out
2935         a file list for apt-ftparchive
2936         * apt.conf.buildd: new apt configuration for Packages/Sources for
2937         unstable_accepted
2938         * vars: add s390 to arch list.
2939
2940 2002-05-03  James Troup  <james@nocrew.org>
2941
2942         * neve (main): don't hard code the calling user as that doesn't
2943         work with modern postgres installs.  Fix psql invocation for
2944         init_pool.sql (database name required).  Dont' hard code the
2945         database name.
2946         (process_sources): add support for fingerprint and install_date.
2947         (process_packages): add support for fingerprint.
2948         (do_sources): pass in the directory, fingerprint support needs it.
2949         (get_status_output): borrowed from jennifer.
2950         (reject): likewise.
2951         (check_signature): likewise.
2952
2953         * katie (install): only try to log urgencies if Urgency_Logger is
2954         defined.
2955         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2956         defined; only close Urgency_Logger if it's defined.
2957
2958         * catherine (poolize): adapt for Dir rationalization.
2959         * claire.py (find_dislocated_stable): likewise.
2960         * denise (main): likewise.
2961         * halle (check_joey): likewise.
2962         * jenna: likewise.
2963         * jennifer: likewise.
2964         * jeri: likewise.
2965         * katie.py: likewise.
2966         * katie: likewise.
2967         * lisa (do_bxa_notification): likewise.
2968         * logging.py (Logger.__init__): likewise
2969         * rene (main): likewise.
2970         * rhona (clean): likewise.
2971         * shania (init): likewise.
2972         * tea: likewise.
2973         * ziyi: likewise.
2974
2975         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2976         FindB, not FindI.
2977
2978         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2979         boolean, use FindB, not get.
2980
2981         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2982         .orig.tar.gz's which are an exact (size/md5sum) match.
2983
2984         * ashley (main): really allow *.katie files as arguments too;
2985         noticed by aj.
2986
2987         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2988
2989 2002-05-03  Anthony Towns  <ajt@debian.org>
2990
2991         * ziyi: support for security.
2992
2993 2002-05-02  James Troup  <james@nocrew.org>
2994
2995         * jennifer (accept): call Katie.check_override() unconditional as
2996         no-mail check moved into that function.
2997         (do_byhand): likewise.
2998
2999         * katie.py (Katie.check_override): don't do anything if we're a)
3000         not sending mail or b) the override disparity checks have been
3001         disbled via Dinstall::OverrideDisparityCheck.
3002
3003         * jennifer (check_files): don't hard code Unstable as the suite
3004         used to check for architecture validity; use
3005         Dinstall::DefaultSuite instead, if it exists.
3006         (accept): conditionalize
3007
3008         * katie.py (Katie.update_subst): support global maintainer
3009         override with Dinstall::OverrideMaintainer.
3010
3011         * jennifer (check_distributions): new function, Distribution
3012         validation and mapping.  Uses new SuiteMappings variable from
3013         config file to abstract suite mappings.
3014         (check_changes): call it.
3015
3016         * natalie: renamed; nothing imports or likely will for some time.
3017
3018         * denise (main): remove unused natalie import and init().
3019
3020         * natalie.py (init): removed.
3021         (main): initalize here instead and don't hardcode the database
3022         name.
3023
3024 2002-04-30  James Troup  <james@nocrew.org>
3025
3026         * katie.py (Katie.close_bugs): new function, split out from
3027         announce().
3028         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3029         true.
3030         (Katie.close_bugs): new function, split out
3031         (Katie.close_bugs): return immediately if there are no bugs to
3032         close.
3033
3034         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3035         * katie (do_reject): likewise.
3036         (stable_install): likewise.
3037         * katie.py (Katie.announce): likewise.
3038         (Katie.accept): likewise.
3039         (Katie.check_override): likewise.
3040         (Katie.do_reject): likewise.
3041         * lisa (do_bxa_notification): likewise.
3042         * melanie (main): likewise.
3043
3044         * utils.py (TemplateSubst): change second argument to be a
3045         filename rather than a template since every caller opened a file
3046         on the fly which was ugly and leaked file descriptor.
3047
3048 2002-04-29  James Troup  <james@nocrew.org>
3049
3050         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3051         <hertzog@debian.org> to send 'accepted' announce mails to the
3052         PTS. [#128140]
3053
3054 2002-04-24  James Troup  <james@nocrew.org>
3055
3056         * init_pool.sql (unstable_accepted): add two new fields to
3057         unstable_accepted; in_accepted is a boolean indicating whether or
3058         not the file is in accepted and last_used is a timestamp used by
3059         rhona to determine when to remove symlinks for installed packages.
3060
3061         * katie.py (Katie.accept): auto-build support take 2.  Create
3062         symlinks for all files into a seperate directory.  Add files to
3063         unstable_accepted as paths to the new directory; mark them as
3064         being in accepted for cameron.  Properly conditionalize it on a
3065         configuration variable.
3066
3067         * katie (install): likewise.  Update symlinks to point into the
3068         pool; mark the files for later deletion by rhona and mark them as
3069         not being in accepted for cameron.
3070
3071         * rhona (clean_accepted_autobuild): new function.
3072
3073 2002-04-22  James Troup  <james@nocrew.org>
3074
3075         * jennifer (check_files): handle db_access.get_location_id()
3076         returning -1 properly/better.
3077
3078         * rhona (clean_fingerprints): new function.
3079
3080 2002-04-21  James Troup  <james@nocrew.org>
3081
3082         * utils.py (touch_file): unused; remove.
3083         (plural): likewise.
3084
3085         * jennifer (check_files): close file descriptor used to get the
3086         control file.
3087         (check_md5sums): likewise.
3088         (callback): likewise.
3089
3090         * katie.py (Katie.do_reject): handle manual rejects much better;
3091         call the editor first and get confirmation from the user before
3092         proceeding.
3093
3094         * jennifer (check_signature): prefix_multi_line_string() moved to
3095         utils.
3096
3097         * utils.py (prefix_multi_line_string): moved here from jennifer.
3098
3099 2002-04-20  James Troup  <james@nocrew.org>
3100
3101         * lisa (main): handle non-existent files.
3102
3103         * ashley (main): allow *.katie files as arguments too.
3104
3105 2002-04-19  James Troup  <james@nocrew.org>
3106
3107         * katie.py (Katie.accept): add stuff to help auto-building from
3108         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3109         in the pool), create a symlink to it in the accepted directory and
3110         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3111
3112         * katie (install): undo the "auto-building from accepted" stuff
3113         (i.e. remove the .orig.tar.gz symlink and remove the files from
3114         unstable_accepted table).
3115
3116 2002-04-16  James Troup  <james@nocrew.org>
3117
3118         * jennifer (upload_too_new): fix typo which was causing all
3119         timestamp comparisons to be against the .changes file.  Also move
3120         back to the original directory so we do the comparisons against
3121         accurate timestamps.
3122
3123         * tea (check_missing_tar_gz_in_dsc): new function.
3124
3125         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3126         file mentioned in the .dsc.
3127
3128         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3129         way mails reach debian-{devel-,}changes@l.d.o.
3130
3131 2002-04-02  Ryan Murray  <rmurray@debian.org>
3132
3133         * cron.daily: run shania after rhona
3134         * cron.daily-non-US: likewise.
3135
3136 2002-04-01  James Troup  <james@nocrew.org>
3137
3138         * katie: re-add proposed-updates/stable install support.
3139
3140         * katie.py (Katie.dump_vars): add changes["changes"] as an
3141         optional field; should be mandatory later.
3142
3143 2002-03-31  James Troup  <james@nocrew.org>
3144
3145         * katie (install): support a Suite::<foo>::CopyKatie similar to
3146         CopyChanges.  Done seperately because .katie files don't need to
3147         be mirrored and will probably be copied to another directory as a
3148         result.
3149
3150         * halle (main): add missing debug to options.
3151
3152 2002-03-29  James Troup  <james@nocrew.org>
3153
3154         * madison (main): add a -r/--regex option.
3155
3156 2002-03-26  James Troup  <james@nocrew.org>
3157
3158         * lisa: don't trample on changes["distribution"]; make a copy of
3159         it as changes["suite"] instead and use that.
3160
3161 2002-03-16  Anthony Towns  <ajt@debian.org>
3162
3163         * templates/lisa.bxa_notification: Fix some grammatical errors.
3164         Encourage contact via bxa@ftp-master email address.
3165
3166 2002-03-15  James Troup  <james@nocrew.org>
3167
3168         * jennifer (check_timestamps): remove bogus raise in except.
3169
3170 2002-03-15  Anthony Towns  <ajt@debian.org>
3171
3172         * cron.monthly: rotate mail/archive/bxamail as well as
3173         mail/archive/mail. This is for a complete archive of
3174         correspondence with the BXA.
3175
3176 2002-03-14  Anthony Towns  <ajt@debian.org>
3177
3178         * crypto-in-main changes.
3179
3180         * utils.py (move, copy): add an optional perms= parameter to let you
3181         set the resulting permissions of the moved/copied file
3182         * katie.py (force_move): rejected/morgued files should be unreadable
3183         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3184         should be unreadable.
3185
3186 2002-03-07  Ryan Murray  <rmurray@debian.org>
3187
3188         * katie (install): check for existance of "files id" key as well as
3189         it being set to a valid value.
3190         * katie (install): check for existense and valid value for location
3191         id as well
3192
3193 2002-03-05  Ryan Murray  <rmurray@debian.org>
3194
3195         * katie.py (do_reject): reread the reason file after editing it.
3196
3197 2002-02-25  James Troup  <james@nocrew.org>
3198
3199         * jennifer (check_changes): don't enforce sanity in .changes file
3200         names since it doesn't seem to be possible; pcmica-cs and similar
3201         freak show packages in particular cause real problems.
3202
3203         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3204         each dsc_file since the .orig.tar.gz checking code now uses it as
3205         a boolean.  Fixes bizarro rejections which bogusly claimed
3206         .diff.gz md5sum/size was incorrect.
3207
3208 2002-02-24  James Troup  <james@nocrew.org>
3209
3210         * katie (process_it): reset reject_message.
3211
3212 2002-02-22  James Troup  <james@nocrew.org>
3213
3214         * db_access.py(set_files_id): disable use of
3215         currval('files_id_seq') because it was taking 3 seconds on auric
3216         which is insane (most calls take < 0.01) and simply call
3217         get_files_id() for the return value instead.
3218
3219         * katie.py (Katie.do_query): convenience function; unused by
3220         default, useful for profiling.
3221         * db_access.py (do_query): likewise.
3222
3223         * katie (install): fix insert SQL call when binary has no source.
3224
3225         * lisa (determine_new): auto-correct non-US/main to non-US.
3226         (determine_new): add a warning when adding things to stable.
3227         (edit_index): use our_raw_input().
3228         (edit_overrides): likewise.
3229         (do_new): likewise.  Use re.search() not re.match() since the
3230         default answer may not be the first one.
3231         (do_byhand): likewise.
3232         (do_new): Default to 'S'kip and never 'A'dd.
3233
3234         * jennifer (action): pass prompt to our_raw_input().
3235         * melanie (game_over): likewise.
3236         * katie (action): likewise.
3237
3238         * utils.py (our_raw_input): add an optional prompt argument to
3239         make the function more usable as a drop in replacement for
3240         raw_input().
3241
3242         * jennifer (check_files): correct reject() to not double prefix
3243         when using katie.py based functions.
3244         (check_dsc): likewise.
3245
3246         * katie.py (Katie.reject): prepend a new line if appropriate
3247         rathen than appending one to avoid double new lines when caller
3248         adds one of his own.
3249
3250         * lisa (determine_new): warn if the package is also in other
3251         components.
3252
3253 2002-02-20  James Troup  <james@nocrew.org>
3254
3255         * jennifer (check_files): if .changes file lists "source" in
3256         Architecture field, there must be a .dsc.
3257
3258 2002-02-15  James Troup  <james@nocrew.org>
3259
3260         * ashley (main): add some missing fields.
3261
3262         * katie.py (Katie.check_dsc_against_db): fix to take into account
3263         the fact that the .orig.tar.gz might be in byhand, accepted or
3264         new.  Also fix calling of reject().
3265         (Katie.check_binaries_against_db): fix calling of reject().
3266         (Katie.check_source_against_db): likewise.
3267         (Katie.dump_vars): add missing variables used for bug closures.
3268
3269         * lisa (changes_compare_by_time): sort by reverse time.
3270
3271         * katie.py (Katie.accept): log.
3272         (Katie.dump_vars): missing has_key test for optional changes fields.
3273
3274         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3275         (process_it): traceback goes to stderr, not stdout.
3276         (acknowledge_new): log.
3277         (do_byhand): likewise.
3278
3279         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3280
3281         * add_constraints.sql: add grants for the new fingerprint table.
3282
3283 2002-02-13  James Troup  <james@nocrew.org>
3284
3285         * katie (do_reject): basename the .changes filename before trying
3286         to use it to construct the .reason filename.
3287         (process_it): call Katie.update_subst() so do_reject() DTRT with
3288         the mail template.
3289         (do_reject): setup the mail template correctly.
3290
3291 2002-02-12  James Troup  <james@nocrew.org>
3292
3293         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3294         (check_files): don't abuse global dictionaries.
3295         (Ent): use all variables.
3296         (check_timestamps): don't abuse global dictionaries.
3297
3298         * fernanda.py: renamed to .py so lisa can import it.
3299         (check_dsc): remove unused local variables (pychecker).
3300         (display_changes): split off from check_changes.
3301
3302         * katie: rewritten; most of the functionality moves to jennifer;
3303         what's left is the code to install packages once a day from the
3304         'accepted' directory.
3305
3306         * jennifer: new program, processes packages in 'unchecked'
3307         (i.e. most of the non-install functionality of old katie).
3308
3309         * katie.py: common functions shared between the clique of
3310         jennifer, lisa and katie.
3311
3312         * lisa: new program; handles NEW and BYHAND packages.
3313
3314         * jeri (usage): new function.
3315         (main): use it.
3316         (check_package): remove unused local variable (pychecker).
3317
3318         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3319         binaries and source.  Add install_date to source.
3320
3321         * halle (usage): new function.
3322         (main): use it.  Remove unused options.
3323         (check_changes): remove unused local variable (pychecker).
3324
3325         * add_constraints.sql: add fingerprint references.
3326
3327         * db_access.py (get_or_set_fingerprint_id): new function.
3328
3329         * ashley (main): new program; dumps the contents of a .katie file
3330         to stdout.
3331
3332         * alyson (main): remove option handling since we don't actually
3333         support any.
3334         * cindy (main): likewise.
3335
3336         * remove unnecessary imports and pre-define globals (pychecker).
3337
3338 2002-02-11  Anthony Towns  <ajt@debian.org>
3339
3340         * added installation-report and upgrade-report pseudo-packages
3341
3342 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3343
3344         * katie (update_subst): use Dinstall::TrackingServer.
3345         * melanie (main): likewise.
3346
3347 2002-01-27  James Troup  <james@nocrew.org>
3348
3349         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3350         noticing, jgg@ for fix.
3351
3352 2002-01-19  James Troup  <james@nocrew.org>
3353
3354         * utils.py (extract_component_from_section): handle non-US
3355         non-main properly.
3356
3357 2002-01-12  James Troup  <james@nocrew.org>
3358
3359         * madison: add support for -S/--source-and-binary which displays
3360         information for the source package and all it's binary children.
3361
3362 2002-01-13  Anthony Towns  <ajt@debian.org>
3363
3364         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3365         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3366           and 2002 key ids.
3367         * katie.conf-non-US: Likewise.
3368         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3369           multiple keys automatically. This is probably only useful for
3370           transitioning from an expired (or revoked?) key.
3371
3372 2002-01-08  Ryan Murray  <rmurray@debian.org>
3373
3374         * debian/python-dep: new file that prints out python:Depends for
3375           substvars
3376         * debian/control: use python:Depends, build-depend on python
3377           lower Depends: on postgresql to Suggests:
3378         * debian/rules: determine python version, install to the correct
3379           versioned dir
3380
3381 2001-12-18  Anthony Towns  <ajt@debian.org>
3382
3383         * ziyi: unlink Release files before overwriting them (in case they've
3384           been merged)
3385         * ziyi: always include checksums/sizes for the uncompressed versions
3386           of Sources and Packages, even if they're not present on disk
3387
3388 2001-11-26  Ryan Murray  <rmurray@debian.org>
3389
3390         * ziyi (main): add SigningPubKey config option
3391         * katie.conf: use SigningPubKey config option
3392         * katie.conf-non-US: likewise
3393
3394 2001-11-24  James Troup  <james@nocrew.org>
3395
3396         * katie (acknowledge_new): log newness.
3397
3398 2001-11-24  Anthony Towns  <ajt@debian.org>
3399
3400         * ziyi (real_arch): bail out if some moron forgot to reset
3401         untouchable on stable.
3402         (real_arch): source Release files.
3403
3404 2001-11-19  James Troup  <james@nocrew.org>
3405
3406         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3407         utils.get_conf().
3408         * shania (main): likewise.
3409
3410         * rhona (main): add default options.
3411
3412         * db_access.py (get_archive_id): case independent.
3413
3414         * katie (action): sort files so that ordering is consistent
3415         between mails; noticed/requested by Joey.
3416
3417 2001-11-17  Ryan Murray  <rmurray@debian.org>
3418
3419         * utils.py: add get_conf function, change startup code to read all
3420           config files to the Cnf that get_conf returns
3421           use the component list from the katie conf rather than the hardcoded
3422           list.
3423         * all scripts: use new get_conf function
3424         * shania: fix try/except around changes files
3425         * jenna: only do debian-installer if it is a section in Cnf
3426
3427 2001-11-16  Ryan Murray  <rmurray@debian.org>
3428
3429         * shania (main): Initialize days to a string of a number.
3430                  (main): Initialize Cnf vars before reading in Cnf
3431
3432 2001-11-14  Ryan Murray  <rmurray@debian.org>
3433
3434         * shania (main): Initialize days to a number.
3435
3436 2001-11-04  James Troup  <james@nocrew.org>
3437
3438         * docs/Makefile: use docbook-utils' docbook2man binary.
3439
3440         * Change all "if foo == []" constructs into "if not foo".
3441
3442         * katie (check_changes): when installing into stable from
3443         proposed-updates, remove all non-stable target distributions.
3444         (check_override): don't check for override disparities on stable
3445         installs.
3446         (stable_install): update install_bytes appropriately.
3447         (reject): stable rejection support; i.e. don't remove files when
3448         rejecting files in the pool, rather remove them from the
3449         proposed-update suite instead, rhona will do the rest.
3450         (manual_reject): support for a stable specific template.
3451         (main): setup up stable rejector in subst.
3452
3453 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3454
3455         * debian/control (Build-Depends): docbook2man has been superseded
3456         by docbook-utils.
3457
3458         * neve (main): exit with a more useful error message.
3459         (update_suites): Suite::<suite>::Version, Origin and Description
3460         are not required, so don't fail if they don't exist.
3461
3462         * db_access.py (get_archive_id): return -1 on error rather than
3463         raise an exception.
3464         (get_location_id): likewise.
3465
3466         * madison (main): don't exit on the first not-found package,
3467         rather exit with an appropriate return code after processing all
3468         packages.
3469
3470 2001-11-03  James Troup  <james@nocrew.org>
3471
3472         * claire.py (find_dislocated_stable): add per-architecture
3473         symlinks for dislocated architecture: all debs.
3474
3475 2001-10-19  Anthony Towns  <ajt@debian.org>
3476
3477         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3478
3479 2001-10-10  Anthony Towns  <ajt@debian.org>
3480
3481         * claire.py (fix_component_section): do _not_ assign to None under
3482         any circumstances
3483
3484 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3485
3486         * melanie (main): don't duplicate architectures when removing from
3487         more than one suite.
3488
3489         * heidi (main, process_file, get_list): report suite name not ID.
3490
3491         * naima (nmu_p): be case insensitive.
3492
3493         * naima (action): more list handling clean ups.
3494
3495         * melanie (main): clean up lists handling to use string.join and
3496         IN's.
3497
3498         * madison (main): clean up suite and architecture argument parsing
3499         to use slices less and string.join more.
3500
3501         * utils.py (parse_changes): Use string.find() instead of slices for
3502         string comparisons thereby avoid hardcoding the length of strings.
3503         * ziyi (main): likewise.
3504
3505 2001-10-07  James Troup  <james@nocrew.org>
3506
3507         * Remove mode argument from utils.open_files() calls if it's the
3508         default, i.e. 'r'.
3509
3510 2001-09-27  James Troup  <james@nocrew.org>
3511
3512         * katie (init): new function; options clean up.
3513         (usage): add missing options, remove obsolete ones.
3514         (main): adapt for the two changes above.  If the lock file or
3515         new-ack log file don't exist, create them.  Don't try to open the
3516         new-ack log file except running in new-ack mode.
3517
3518         * alyson (main): initialize all the tables that are based on the
3519         conf file.
3520
3521         * utils.py (touch_file): like touch(1).
3522         (where_am_i): typo.
3523
3524         * catherine (usage): new.
3525         (main): use it.  options cleanup.
3526         * claire.py: likewise.
3527         * fernanda: likewise.
3528         * heidi: likewise.
3529         * jenna: likewise.
3530         * shania: likewise.
3531         * ziyi: likewise.
3532
3533         * andrea: options cleanup.
3534         * charisma: likewise.
3535         * julia: likewise.
3536         * madison: likewise.
3537         * melanie: likewise.
3538         * natalie: likewise.
3539         * rhona: likewise.
3540         * tea: likewise.
3541
3542 2001-09-26  James Troup  <james@nocrew.org>
3543
3544         * utils.py: default to sane config file locations
3545         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3546         or they can point to the real ones through use of a new Config
3547         section.  Based on an old patch by Adam Heath.
3548         (where_am_i): use the new default config stuff.
3549         (which_conf_file): likewise.
3550         (which_apt_conf_file): likewise.
3551
3552         * charisma (main): output defaults to
3553         `Package~Version\tMaintainer'; input can be of either form.  When
3554         parsing the new format do version comparisons, when parsing the
3555         old format assume anything in the extra file wins.  This fixes the
3556         problem of newer non-US packages being overwhelmed by older
3557         versions still in stable on main.
3558
3559 2001-09-17  James Troup  <james@nocrew.org>
3560
3561         * natalie.py (list): use result_join().
3562
3563         * denise (main): result_join() moved to utils.
3564
3565         * utils.py (result_join): move to utils; add an optional seperator
3566         argument.
3567
3568 2001-09-14  James Troup  <james@nocrew.org>
3569
3570         * heidi (set_suite): new function; does --set like natalie does,
3571         i.e. turns it into a sequence of --add's and --remove's
3572         internally.  This is a major win (~20 minute run time > ~20
3573         seconds) in the common, everday (i.e. testing) case.
3574         (get_id): common code used by set_suite() and process_file().
3575         (process_file): call set_suite() and get_id().
3576         (main): add logging support.
3577
3578         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3579         files.
3580
3581         * utils.py (parse_changes): use slices or simple string comparison
3582         in favour of regexes where possible.
3583
3584         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3585         fact that the string VARDATA() points to are not null terminated.
3586
3587         * denise (result_join): new function; like string.join() but
3588         handles None's.
3589         (list): use it.
3590         (main): likewise.
3591
3592         * charisma (main): python-pygresql 7.1 returns None not "".
3593
3594 2001-09-14  Ryan Murray  <rmurray@debian.org>
3595
3596         * natalie.py (list): handle python-pygresql 7.1 returning None.
3597
3598 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3599
3600         * madison (main): return 1 if no package is found.
3601
3602 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3603
3604         * madison (main): better error handling for incorrect
3605         -a/--architecture or -s/--suite arguments.
3606         (usage): new.
3607         (main): use it.
3608
3609 2001-09-05  Ryan Murray  <rmurray@debian.org>
3610
3611         * charisma, madison, katie: remove use of ROUser
3612         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3613
3614 2001-08-26  James Troup  <james@nocrew.org>
3615
3616         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3617         maintained packages at cjwatson@'s request.
3618
3619 2001-08-21  James Troup  <james@nocrew.org>
3620
3621         * madison (main): add -a/--architecture support.
3622
3623         * jenna: use logging instead of being overly verbose on stdout.
3624
3625 2001-08-11  Ryan Murray  <rmurray@debian.org>
3626
3627         * melanie: add functional help option
3628
3629 2001-08-07  Anthony Towns  <ajt@debian.org>
3630
3631         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3632
3633 2001-07-28  James Troup  <james@nocrew.org>
3634
3635         * katie (check_dsc): ensure source version is >> than existing
3636         source in target suite.
3637
3638 2001-07-25  James Troup  <james@nocrew.org>
3639
3640         * natalie.py: add logging support.
3641
3642         * utils.py (open_file): make the second argument optional and
3643         default to read-only.
3644
3645         * rene (main): work around broken source packages that duplicate
3646         arch: all packages with arch: !all packages (no longer allowed
3647         into the archive by katie).
3648
3649 2001-07-13  James Troup  <james@nocrew.org>
3650
3651         * katie (action): don't assume distribution is a dictionary.
3652         (update_subst): don't assume architecture is a dictionary and that
3653         maintainer822 is defined.
3654         (check_changes): recognise nk_format exceptions.
3655         (check_changes): reject on 'testing' only uploads.
3656         (check_files): when checking to ensure all packages are newer
3657         versions check against arch-all packages too.
3658         (check_dsc): enforce the existent of a sane set of mandatory
3659         fields.  Ensure the version number in the .dsc (modulo epoch)
3660         matches the version number in the .changes file.
3661
3662         * utils.py (changes_compare): ignore all exceptions when parsing
3663         the changes files.
3664         (build_file_list): don't UNDEF on a changes file with no format
3665         field.
3666
3667 2001-07-07  James Troup  <james@nocrew.org>
3668
3669         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3670         rather than 'changedbyname' to avoid false negatives on uploads
3671         with an email-address-only Changed-By field.
3672         (check_dsc): don't overwrite reject_message; append to it.
3673         (check_signature): likewise.
3674         (check_changes): likewise.
3675         (announce): condition logging on 'action'.
3676
3677         * logging.py: new logging module.
3678
3679         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3680         sub-tree into a separate (global) variable.
3681         (check_dsc): ensure format is 1.0 to retain backwards
3682         compatability with dpkg-source in potato.
3683         (main): only try to obtain the lock when not running in no-action
3684         mode.
3685         Use the new logging module.
3686
3687         * christina: initial version; only partially usable.
3688
3689 2001-06-28  Anthony Towns  <ajt@debian.org>
3690
3691         * apt.conf: Add ExtraOverrides to auric.
3692
3693 2001-06-25  James Troup  <james@nocrew.org>
3694
3695         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3696         they preferred the name 'Uploaders'.
3697
3698 2001-06-23  James Troup  <james@nocrew.org>
3699
3700         * katie (check_files): fix typo in uncommon rejection message,
3701         s/sourceversion/source version/.
3702
3703         * denise (main): we can't use print because stdout has been
3704         redirected.
3705
3706         * katie (source_exists): new function; moved out of check_files()
3707         and added support for binary-only NMUs of earlier sourceful NMUs.
3708
3709         * rhona (clean): find_next_free has moved.
3710
3711         * utils.py (find_next_free): new function; moved here from rhona.
3712         Change too_many to be an argument with a default value, rather
3713         than a hardcoded variable.
3714
3715         * shania: rewritten to work better; REJECTion reminder mail
3716         handling got lost though.
3717
3718 2001-06-22  James Troup  <james@nocrew.org>
3719
3720         * rhona (main): remove unused override code.
3721
3722         * fernanda (main): remove extraneous \n's from utils.warn calls.
3723         * natalie.py (list): likewise.
3724
3725         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3726         use utils.{warn,fubar} where appropriate.
3727
3728 2001-06-21  James Troup  <james@nocrew.org>
3729
3730         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3731         functionality.
3732         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3733         by the "Maintainers" field in the .dsc file and maintainer groups.
3734         (nmu_p.__init__): read in the list of group maintainer names.
3735         (announce): use nmu_p.
3736
3737 2001-06-20  James Troup  <james@nocrew.org>
3738
3739         * rene (main): hardcode the suite experimental is compared to by
3740         name rather than number.
3741
3742         * katie (check_files): differentiate between doesn't-exist and
3743         permission-denied in "can not read" rejections; requested by edd@.
3744         (check_dsc): use os.path.exists rather than os.access to allow the
3745         above check to kick in.
3746
3747         * heidi (process_file): read all input before doing anything and
3748         use transactions.
3749
3750 2001-06-15  James Troup  <james@nocrew.org>
3751
3752         * fernanda: new script; replaces old 'check' shell script
3753         nastiness.
3754
3755 2001-06-14  James Troup  <james@nocrew.org>
3756
3757         * katie: actually import traceback module to avoid amusing
3758         infinite loop.
3759
3760 2001-06-10  James Troup  <james@nocrew.org>
3761
3762         * utils.py (extract_component_from_section): fix to handle just
3763         'non-free' and 'contrib'.  Also fix to handle non-US in a
3764         completely case insensitive manner as a component.
3765
3766 2001-06-08  James Troup  <james@nocrew.org>
3767
3768         * madison (arch_compare): sort function that sorts 'source' first
3769         then alphabetically.
3770         (main): use it.
3771
3772 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3773
3774         * catherine (poolize): explicitly make poolized_size a long so it
3775         doesn't overflow when poolizing e.g. entire archives.
3776
3777 2001-06-01  James Troup  <james@nocrew.org>
3778
3779         * utils.py (send_mail): throw exceptions rather than exiting.
3780
3781         * katie (process_it): catch exceptions and ignore them.
3782
3783 2001-06-01  Michael Beattie  <mjb@debian.org>
3784
3785         * added update-mailingliststxt and update-readmenonus to update
3786         those files, respectively. modified cron.daily{,-non-US} to
3787         use them.
3788
3789 2001-05-31  Anthony Towns  <ajt@debian.org>
3790
3791         * rhona: make StayOfExecution work.
3792
3793 2001-05-31  James Troup  <james@nocrew.org>
3794
3795         * rhona (find_next_free): fixes to not overwrite files but rename
3796         them by appending .<n> instead.
3797         (clean): use find_next_free and use dated sub-directories in the
3798         morgue.
3799
3800         * utils.py (move): don't overwrite files unless forced to.
3801         (copy): likewise.
3802
3803 2001-05-24  James Troup  <james@nocrew.org>
3804
3805         * katie (check_files): determine the source version here instead
3806         of during install().
3807         (check_files): check for existent source with bin-only NMU
3808         support.
3809         (main): sort the list of changes so that the source-must-exist
3810         check Does The Right Thing(tm).
3811
3812         * utils.py (changes_compare): new function; sorts a list of
3813         changes files by 'have-source', source, version.
3814         (cc_fix_changes): helper function.
3815         (parse_changes): use compiled regexes.
3816         (fix_maintainer): likewise.
3817
3818         * rene (main): warn about packages in experimental that are
3819         superseded by newer versions in unstable.
3820
3821 2001-05-21  James Troup  <james@nocrew.org>
3822
3823         * rene (main): add support for checking for ANAIS (Architecture
3824         Not Allowed In Source) packages.
3825
3826 2001-05-17  James Troup  <james@nocrew.org>
3827
3828         * katie (check_changes): initalize `architecture' dictionary in
3829         changes global so that if we can't parse the changes file for
3830         whatever reason we don't undef later on.
3831
3832         * utils.py (parse_changes): fix handling of multi-line fields
3833         where the first line did have data.
3834
3835 2001-05-05  Anthony Towns  <ajt@debian.org>
3836
3837         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3838         (It should always have been there. Ooopsy.)
3839
3840 2001-05-03  Anthony Towns  <ajt@debian.org>
3841
3842         * jenna: Cleanup packages that move from arch:any to arch:all or
3843         vice-versa.
3844
3845 2001-04-24  Anthony Towns  <ajt@debian.org>
3846
3847         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3848         cope with debian-installer and boot-floppies' md5sum.txt.
3849
3850 2001-04-16  James Troup  <james@nocrew.org>
3851
3852         * katie (check_changes): add missing %s format string argument.
3853         (stable_install): temporary work around for morgue location to
3854         move installed changes files into.
3855         (stable_install): helps if you actually read in the template.
3856         (manual_reject): fix for editing of reject messages which was
3857         using the wrong variable name.
3858
3859         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3860
3861 2001-04-13  James Troup  <james@nocrew.org>
3862
3863         * katie (manual_reject): Cc the installer.
3864         (reject): don't.
3865         (check_changes): remove unused maintainer-determination code.
3866         (update_subst): add support for Changed-By when setting the
3867         *MAINTAINER* variables.
3868
3869         * rene (bar): new function to check for packages on architectures
3870         when they shouldn't be.
3871
3872         * natalie.py (main): use fubar() and warn() from utils.
3873
3874         * utils.py (whoami): new mini-function().
3875         * melanie (main): use it.
3876         * katie (manual_reject): likewise.
3877
3878 2001-04-03  James Troup  <james@nocrew.org>
3879
3880         * katie (action): ignore exceptions from os.path.getmtime() so we
3881         don't crash on non-existent changes files (e.g. when they are
3882         moved between the start of the install run in cron.daily and the
3883         time we get round to processing them).
3884
3885         * madison (main): also list source and accept -s/--suite.
3886
3887         * jenna (generate_src_list): missing \n in error message.
3888
3889         * katie (update_subst): add sane defaults for when changes is
3890         skeletal.
3891
3892 2001-03-29  James Troup  <james@nocrew.org>
3893
3894         * melanie (main): use fubar() and warn() from utils.  Remember who
3895         the maintainer for the removed packages are and display that info
3896         to the user.  Readd support for melanie-specific Bcc-ing that got
3897         lost in the TemplateSubst transition.
3898
3899         * utils.py (fubar): new function.
3900         (warn): like wise.
3901
3902         * db_access.py (get_maintainer): as below.
3903
3904         * charisma (get_maintainer): moved the bulk of this function to
3905         db_access so that melanie can use it too.
3906
3907         * claire.py (find_dislocated_stable): restrict the override join
3908         to those entries where the suite is stable; this avoids problems
3909         with packages which have moved to new sections (e.g. science)
3910         between stable and unstable.
3911
3912 2001-03-24  James Troup  <james@nocrew.org>
3913
3914         * catherine (poolize): new function; not really independent of
3915         main() fully, yet.
3916         (main): use it.
3917
3918         * katie (stable_install): __SUITE__ needs to be space prefixed
3919         because buildd's check for 'INSTALLED$'.
3920
3921 2001-03-22  James Troup  <james@nocrew.org>
3922
3923         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3924
3925         * jenna: rewritten; now does deletions on a per-suite level
3926         instead of a per-suite-component-architecture-type level.  This
3927         allows mutli-component packages to be auto-cleaned (and as a
3928         bonus, reduces the code size and duplication).
3929
3930 2001-03-22  Anthony Towns  <ajt@debian.org>
3931
3932         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3933         instead of just giving a gpg error.
3934
3935 2001-03-21  James Troup  <james@nocrew.org>
3936
3937         * madison (main): use apt_pkg.VersionCompare to sort versions so
3938         that output is correctly sorted for packages like debhlper.
3939         Noticed by ajt@.
3940
3941         * tea (check_source_in_one_dir): actually find problematic source
3942         packages.
3943
3944         * katie (check_dsc): remember the orig.tar.gz's location ID if
3945         it's not in a legacy suite.
3946         (check_diff): we don't use orig_tar_id.
3947         (install): add code to handle sourceful diff-only upload of
3948         packages which change components by copying the .orig.tar.gz into
3949         the new component, if it doesn't already exist there.
3950         (process_it): reset orig_tar_location (as above).
3951
3952         * melanie (main): use template substiution for the bug closing
3953         emails.
3954         (main): don't hardcode bugs.debian.org or packages.debian.org
3955         either; use configuration items.
3956
3957         * katie: likewise.
3958
3959         * natalie.py (init): use None rather than 'localhost' for the
3960         hostname given to pg.connect.
3961
3962         * utils.py (TemplateSubst): new function; lifted from
3963         userdir-ldap.
3964
3965 2001-03-21  Ryan Murray  <rmurray@debian.org>
3966
3967         * katie (announce): fix the case of non-existent
3968         Suite::$SUITE::Announce.
3969
3970 2001-03-20  Ryan Murray  <rmurray@debian.org>
3971
3972         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3973         /usr/.
3974
3975         * alyson (main): use config variable for database name.
3976         * andrea (main): likewise.
3977         * catherine (main): likewise.
3978         * charisma (main): likewise.
3979         * cindy (main): likewise.
3980         * claire.py (main): likewise.
3981         * denise (main): likewise.
3982         * heidi (main): likewise.
3983         * jenna (main): likewise.
3984         * katie (main): likewise.
3985         * madison (main): likewise.
3986         * melanie (main): likewise.
3987         * neve (main): likewise.
3988         * rhona (main): likewise.
3989         * tea (main): likewise.
3990
3991 2001-03-15  James Troup  <james@nocrew.org>
3992
3993         * rhona (check_sources): fixed evil off by one (letter) error
3994         which was causing only .dsc files to be deleted when cleaning
3995         source packages.
3996
3997         * charisma (get_maintainer_from_source): remove really stupid and
3998         gratuitous IN sub-query and replace with normal inner join.
3999         (main): connect as read-only user nobody.
4000
4001         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4002         with EXISTS.
4003         (check_files): likewise; still disabled by default though.
4004         (clean_binaries): add ' seconds' to the mysterious number in the
4005         output.
4006         (clean): likewise.
4007
4008         * tea (check_files): add missing global declaration on db_files.
4009
4010 2001-03-14  James Troup  <james@nocrew.org>
4011
4012         * rhona: rewritten large chunks. Removed a lot of the silly
4013         selecting into dictionaries and replaced it with 'where exists'
4014         based sub queries.  Added support for StayOfExecution.  Fix the
4015         problem with deleting dsc_files too early and disable cleaning of
4016         unattached files.
4017
4018 2001-03-14  Anthony Towns  <ajt@debian.org>
4019
4020         * katie (announce): also check Changed-By when trying to detect
4021         NMUs.
4022
4023 2001-03-06  Anthony Towns  <ajt@debian.org>
4024
4025         * ziyi (main): Generate Release.gpg files as well, using the key from
4026         Dinstall::SigningKey in katie.conf, if present. That key has to be
4027         passwordless, and hence kept fairly secretly.
4028
4029 2001-03-02  James Troup  <james@nocrew.org>
4030
4031         * utils.py (str_isnum): new function; checks to see if the string
4032         is a number.
4033
4034         * shania (main): fix _hideous_ bug which was causing all files > 2
4035         weeks old to be deleted from incoming, even if they were part of a
4036         valid upload.
4037
4038 2001-02-27  James Troup  <james@nocrew.org>
4039
4040         * melanie (main): accept new argument -C/--carbon-copy which
4041         allows arbitarty carbon-copying of the bug closure messages.
4042         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4043         separate variable.
4044
4045 2001-02-27  Anthony Towns  <ajt@debian.org>
4046
4047         * ziyi: new program; generates Release files.
4048
4049 2001-02-25  James Troup  <james@nocrew.org>
4050
4051         * katie (reject): add missing '\n' to error message.
4052         (manual_reject): likewise.
4053         (install): catch exceptions from moving the changes file into DONE
4054         and ignore them.
4055
4056         * tea (check_md5sums): new function.
4057
4058 2001-02-25  Michael Beattie  <mjb@debian.org>
4059
4060         * melanie: use $EDITOR if available.
4061
4062 2001-02-15  James Troup  <james@nocrew.org>
4063
4064         * utils.py (parse_changes): don't crash and burn on empty .changes
4065         files.  Symptoms noticed by mjb@.
4066
4067 2001-02-15  Adam Heath  <doogie@debian.org>
4068
4069         * denise (main): use an absolute path for the output filename.
4070
4071         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4072         compile errors with postgresql-dev >= 7.0.
4073
4074 2001-02-12  James Troup  <james@nocrew.org>
4075
4076         * rene: initial version.
4077
4078         * andrea: initial version.
4079
4080         * catherine (main): remove obsolete assignment of arguments.
4081
4082 2001-02-09  James Troup  <james@nocrew.org>
4083
4084         * catherine: first working version.
4085
4086 2001-02-06  James Troup  <james@nocrew.org>
4087
4088         * katie (check_files): validate the priority field; i.e. ensure it
4089         doesn't contain a '/' (to catch people prepending the priority
4090         with the component rather than the section).
4091         (check_override): don't warn about source packages; the only check
4092         is on section and we have no GUI tools that would use the Section
4093         field for a Sources file.
4094         (announce): use tags rather than severities for NMUs.  Requested
4095         by Josip Rodin <joy@>. [#78035]
4096
4097 2001-02-04  James Troup  <james@nocrew.org>
4098
4099         * tea (check_override): new function; ensures packages in suites
4100         are also in the override file.  Thanks to bod@ for noticing that
4101         such packages existed.
4102
4103         * katie: move file type compiled regular expressions to utils as
4104         catherine uses them too.
4105         (check_changes): always default maintainer822 to the installer
4106         address so that any bail out won't cause undefs later.
4107         (check_files): update file type re's to match above.
4108         (stable_install): likewise.
4109         (reject): handle any except from moving the changes files.  Fixes
4110         crashes on unreadable changes files.
4111
4112         * melanie (main): add an explanation of why things are not removed
4113         from testing.
4114
4115 2001-01-31  James Troup  <james@nocrew.org>
4116
4117         * melanie (main): ignore a) no message, b) removing from stable or
4118         testing when invoked with -n/--no-action.
4119
4120         * katie (check_override): lower section before checking to see if
4121         we're whining about 'non-US' versus 'non-US/main'.
4122
4123         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4124         function so that we can use inside of PostgreSQL.
4125
4126 2001-01-28  James Troup  <james@nocrew.org>
4127
4128         * katie: updated to pass new flag to parse_changes() and deal with
4129         the exception raised on invalid .dsc's if appropriate.
4130         * shania (main): likewise.
4131         * melanie (main): likewise.
4132
4133         * tea (check_dscs): new function to validate all .dsc files in
4134         unstable.
4135
4136         * utils.py (parse_changes): if passed an additional flag, validate
4137         the .dsc file to ensure it's extractable by dpkg-source.
4138         Requested by Ben Collins <bcollins@>.
4139
4140 2001-01-27  James Troup  <james@nocrew.org>
4141
4142         * madison (main): connect to the DB as nobody.
4143
4144         * katie (check_files): remove support for -r/--no-version-check
4145         since it makes no sense under katie (jenna will automatically
4146         remove the (new) older version) and was evil in any event.
4147         (check_changes): add missing new line to rejection message.
4148         (check_dsc): likewise.
4149         (process_it): reset reject_message here.
4150         (main): not here.  Also remove support for -r.
4151
4152 2001-01-26  James Troup  <james@nocrew.org>
4153
4154         * katie (check_override): don't whine about 'non-US/main' versus
4155         'non-US'.
4156
4157 2001-01-26  Michael Beattie  <mjb@debian.org>
4158
4159         * natalie.py (usage): new function.
4160         (main): use it.
4161
4162 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4163
4164         * update-mirrorlists: Update README.non-US too (request from Joy).
4165
4166 2001-01-25  James Troup  <james@nocrew.org>
4167
4168         * katie (reject): catch any exception from utils.move() and just
4169         pass, we previously only caught can't-overwrite errors and not
4170         can't-read ones.
4171
4172         * jenna (generate_src_list): use ORDER BY in selects to avoid
4173         unnecessary changes to Packages files.
4174         (generate_bin_list): likewise.
4175
4176         * utils.py (extract_component_from_section): separated out from
4177         build_file_list() as it's now used by claire too.
4178
4179         * claire.py (find_dislocated_stable): rewrite the query to extract
4180         section information and handle component-less locations properly.
4181         Thanks to ajt@ for the improved queries.
4182         (fix_component_section): new function to fix components and
4183         sections.
4184
4185 2001-01-23  James Troup  <james@nocrew.org>
4186
4187         * katie (check_files): set file type for (u?)debs first thing, so
4188         that if we continue, other functions which rely on file type
4189         existing don't bomb out.  If apt_pkg or apt_inst raise an
4190         exception when parsing the control file, don't try any other
4191         checks, just drop out.
4192         (check_changes): new test to ensure there is actually a target
4193         distribution.
4194
4195 2001-01-22  James Troup  <james@nocrew.org>
4196
4197         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4198         <grin@>.
4199         (check_changes): when mapping to unstable, remember to actually
4200         add unstable to the suite list and not just remove the invalid
4201         suite.
4202
4203 2001-01-21  James Troup  <james@nocrew.org>
4204
4205         * katie (check_files): catch exceptions from debExtractControl()
4206         and reject packages which raise any.
4207
4208 2001-01-19  James Troup  <james@nocrew.org>
4209
4210         * katie (check_signature): basename() file name in rejection
4211         message.
4212
4213 2001-01-18  James Troup  <james@nocrew.org>
4214
4215         * katie (in_override_p): remember the section and priority from
4216         the override file so we can check them against the package later.
4217         (check_override): new function; checks section and priority (for
4218         binaries) from the package against the override file and mails the
4219         maintainer about any disparities.
4220         (install): call check_override after announcing the upload.
4221
4222 2001-01-16  James Troup  <james@nocrew.org>
4223
4224         * utils.py (build_file_list): catch ValueError's from splitting up
4225         the files field and translate it into a parse error.
4226
4227         * tea: add support for finding unreferenced files.
4228
4229         * katie (in_override_p): add support for suite-aliasing so that
4230         proposed-updates uploads work again.
4231         (check_changes): catch parses errors from utils.build_file_list().
4232         (check_dsc): likewise.
4233         (check_diff): yet more dpkg breakage so we require even newer a
4234         version.
4235
4236         * jenna (generate_bin_list): don't do nasty path munging that's no
4237         longer needed.
4238
4239         * denise (main): support for non-US; and rename testing's override
4240         files so they're based on testing's codename.
4241
4242 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4243
4244         * melanie: add to the bug closing message explaining what happens
4245         (or rather doesn't) with bugs against packages that have been
4246         removed.
4247
4248 2001-01-14  James Troup  <james@nocrew.org>
4249
4250         * charisma (main): fix silly off-by-one error; suite priority
4251         checking was done using "less than" rather than "less than or
4252         equal to" which was causing weird hesienbugs with wrong Maintainer
4253         fields.
4254
4255 2001-01-10  James Troup  <james@nocrew.org>
4256
4257         * katie (in_override_p): adapted to use SQL-based overrides.
4258         read_override_file function disappears.
4259
4260         * db_access.py: add new functions get_section_id, get_priority_id
4261         and get_override_type_id.
4262         (get_architecture_id): return -1 if the architecture is not found.
4263
4264         * heidi: switch %d -> %d in all SQL queries.
4265         (get_list): Use string.join where appropriate.
4266
4267         * rhona (in_override_p): don't die if the override file doesn't
4268         exist.
4269         (main): warn if the override file doesn't exist.
4270
4271         * alyson: new script; will eventually sync the config file and the
4272         SQL database.
4273
4274         * natalie.py: new script; manipulates overrides.
4275
4276         * melanie: new script; removes packages from suites.
4277
4278 2001-01-08  James Troup  <james@nocrew.org>
4279
4280         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4281         anything it just changed the symptom.  Recognise the new breakage
4282         and reject them too.
4283
4284 2001-01-07  James Troup  <james@nocrew.org>
4285
4286         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4287         to the .changes file, be sure to set up files[filename]["type"]
4288         too.
4289
4290 2001-01-06  James Troup  <james@nocrew.org>
4291
4292         * katie (check_diff): new function; detects bad diff files
4293         produced by dpkg 1.8.1 and rejects thems.
4294         (process_it): call check_diff().
4295         (check_dsc): gar.  Add support for multiple versions of the
4296         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4297         and size against all versions and use one which matches if
4298         possible and exclude any that don't from being poolized to avoid
4299         file overwrites.  Thanks to broonie@ for providing the example.
4300         (install): skip any files marked as excluded as above.
4301
4302 2001-01-05  James Troup  <james@nocrew.org>
4303
4304         * heidi (process_file): add missing argument to error message.
4305
4306 2001-01-04  James Troup  <james@nocrew.org>
4307
4308         * heidi (main): fix handling of multiple files by reading all
4309         files not just the first file n times (where n = the number of
4310         files passed as arguments).
4311
4312 2001-01-04  Anthony Towns  <ajt@debian.org>
4313
4314         * katie (check_dsc): proper fix for the code which locates the
4315         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4316
4317 2000-12-20  James Troup  <james@nocrew.org>
4318
4319         * rhona: replace IN's with EXISTS's to make DELETE time for
4320         binaries and source sane on auric.  Add a -n/--no-action flag and
4321         make it stop actions if used.  Fixed a bug in binaries deletion
4322         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4323         -V/--version.  Giving timing info on deletion till I'm sure it's
4324         sane.
4325
4326         * katie (check_changes): map testing to unstable.
4327
4328         * madison: new script; shows versions in different architectures.
4329
4330         * katie (check_dsc): ensure size matches as well as md5sum;
4331         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4332         #69702.
4333
4334 2000-12-19  James Troup  <james@nocrew.org>
4335
4336         * katie (reject): ignore the "can't overwrite file" exception from
4337         utils.move() and leave the files where they are.
4338         (reject): doh! os.access() test was reversed so we only tried to
4339         move files which didn't exist... replaced with os.path.exists()
4340         test the right way round.
4341
4342         * utils.py (move): raise an exception if we can't overwrite the
4343         destination file.
4344         (copy): likewise.
4345
4346 2000-12-18  James Troup  <james@nocrew.org>
4347
4348         * rhona: first working version.
4349
4350         * db_access.py (get_files_id): force both sizes to be integers.
4351
4352         * katie (main): use size_type().
4353
4354         * utils.py (size_type): new function; pretty prints a file size.
4355
4356 2000-12-17  James Troup  <james@nocrew.org>
4357
4358         * charisma (main): do version compares so that older packages do
4359         not override newer ones and process source first as source wins
4360         over binaries in terms of who we think of as the Maintainer.
4361
4362 2000-12-15  James Troup  <james@nocrew.org>
4363
4364         * katie (install): use the files id for the .orig.tar.gz from
4365         check_dsc().
4366         (install): limit select for legacy source to a) source in legacy
4367         or legacy-mixed type locations and b) distinct on files.id.
4368         (install): rather than the bizarre insert new, delete old method
4369         for moving legacy source into the pool, use a simple update of
4370         files.
4371         (process_it): initalize some globals before each process.
4372
4373 2000-12-14  James Troup  <james@nocrew.org>
4374
4375         * katie (in_override_p): index on binary_type too since .udeb
4376         overrides are in a different file.
4377         (read_override_file): likewise.
4378         (check_files): correct filename passed to get_files_id().
4379         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4380         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4381         (check_dsc): remember the files id of the .orig.tar.gz, not the
4382         location id.
4383
4384 2000-12-13  James Troup  <james@nocrew.org>
4385
4386         * utils.py (poolify): force the component to lower case except for
4387         non-US.
4388
4389         * katie (in_override_p): handle .udeb-specific override files.
4390         (check_files): pass the binary type to in_override_p().
4391         (check_dsc): remember the location id of the old .orig.tar.gz in
4392         case it's not in the pool.
4393         (install): use location id from dsc_files; which is where
4394         check_dsc() puts it for old .orig.tar.gz files.
4395         (install): install files after all DB work is complete.
4396         (reject): basename() the changes filename.
4397         (manual_reject): likewise.
4398
4399         * shania: new progam; replaces incomingcleaner.
4400
4401 2000-12-05  James Troup  <james@nocrew.org>
4402
4403         * katie (check_changes): if inside stable and can't find files
4404         from the .changes; assume it's installed in the pool and chdir()
4405         to there.
4406         (check_files): we are not installing for stable installs, so don't
4407         check for overwriting existing files.
4408         (check_dsc): likewise.
4409         (check_dsc): reorder .orig.tar.gz handling so that we search in
4410         the pool first and only then fall back on any .orig.tar.gz in the
4411         cwd; this avoids false positives on the overwrite check when
4412         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4413         (install): if this is a stable install, bail out to
4414         stable_install() immediately.
4415         (install): dsc_files handling was horribly broken. a) we need to
4416         add files from the .dsc and not the .changes (duh), b) we need to
4417         add the .dsc file itself to dsc_files (to be consistent with neve
4418         if for no other reason).
4419         (stable_install): new function; handles installs from inside
4420         proposed-updates to stable.
4421         (acknowledge_new): basename changes_filename before doing
4422         anything.
4423         (process_it): absolutize the changes filename to avoid the
4424         requirement of being in the same directory as the .changes file.
4425         (process_it): save and restore the cwd as stable installs can
4426         potentially jump into the pool to find files.
4427
4428         * jenna: dislocated_files support using claire.
4429
4430         * heidi (process_file): select package field from binaries
4431         explicitly.
4432
4433         * db_access.py (get_files_id): fix cache key used.
4434
4435         * utils.py (build_file_list): fix 'non-US/non-free' case in
4436         section/component splitting.
4437         (move): use os.path.isdir() rather than stat.
4438         (copy): likewise.
4439
4440         * claire.py: new file; stable in non-stable munger.
4441
4442         * tea: new file; simply ensures all files in the DB exist.
4443
4444 2000-12-01  James Troup  <james@nocrew.org>
4445
4446         * katie (check_dsc): use regex_safe().
4447         (check_changes): typo in changes{} key:
4448         s/distributions/distribution/.
4449         (install): use changes["source"], not files[file]["source"] as the
4450         latter may not exist and the former is used elsewhere.  Commit the
4451         SQL transaction earlier.
4452
4453         * utils.py (regex_safe): new function; escapes characters which
4454         have meaning to SQL's regex comparison operator ('~').
4455
4456 2000-11-30  James Troup  <james@nocrew.org>
4457
4458         * katie (install): pool_location is based on source package name,
4459         not binary package.
4460
4461         * utils.py (move): if dest is a directory, append the filename
4462         before chmod-ing.
4463         (copy): ditto.
4464
4465         * katie (check_files): don't allow overwriting of existing .debs.
4466         (check_dsc): don't allow overwriting of existing source files.
4467
4468 2000-11-27  James Troup  <james@nocrew.org>
4469
4470         * katie (check_signature): don't try to load rsaref; it's
4471         obsolete.
4472         (in_override_p): don't try to lookup override entries for packages
4473         with an invalid suite name.
4474         (announce): don't assume the suite name is valid; use Find() to
4475         lookup the mailing list name for announcements.
4476
4477         * utils.py (where_am_i): typo; hostname is in the first element,
4478         not second.
4479
4480         * db_access.py (get_suite_id): return -1 on an unknown suite.
4481
4482 2000-11-26  James Troup  <james@nocrew.org>
4483
4484         * katie (install): fix CopyChanges handling; typo in in checking
4485         Cnf for CopyChanges flag and was calling non-existent function
4486         copy_file.
4487
4488         * utils.py (copy): new function; clone of move without the
4489         unlink().
4490
4491 2000-11-25  James Troup  <james@nocrew.org>
4492
4493         * utils.py (build_file_list): handle non-US prefixes properly
4494         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4495         + 'libs' not 'non-US/libs').
4496         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4497         delays.  This is possibly(/probably) exim speicifc and (like other
4498         sendmail options) needs to be in the config file.
4499
4500 2000-11-24  James Troup  <james@nocrew.org>
4501
4502         * rhona (check_sources): we need file id from dsc_files; not id.
4503         Handle non .dsc source files being re-referenced in dsc_files.
4504
4505         * katie (in_override_p): strip out any 'non-US' prefix.
4506         (check_files): use utils.where_am_i() rather than hardcoding.
4507         (check_files): validate the component.
4508         (install): use utils.where_am_i() rather than hardcoding.
4509         (install): fix mail to go to actual recepient.
4510         (reject): likewise.
4511         (manual_reject): likewise.
4512         (acknowledge_new): likewise.
4513         (announce): likewise.
4514
4515         * db_access.py (get_component_id): ignore case when searching for
4516         the component and don't crash if the component can't be found, but
4517         return -1.
4518         (get_location_id): handle -1 from get_component_id().
4519
4520         * jenna (generate_src_list): don't bring 'suite' into our big
4521         multi-table-joining select as we already know the 'suite_id'.
4522         (generate_bin_list): likewise.
4523
4524         * neve (main): don't quit if not on ftp-master.
4525         (process_packages): remove unused variable 'suite_codename'.
4526
4527         * utils.py (move): actually move the file.
4528         (build_file_list): handle non-US prefixes in the section.
4529
4530         * catherine (main): use which_conf_file().
4531         * charisma (main): likewise.
4532         * heidi (main): likewise.
4533         * jenna (main): likewise.
4534         * katie (main): likewise.
4535         * neve (main): likewise.
4536         * rhona (main): likewise.
4537
4538         * utils.py (where_am_i): new routine; determines the archive as
4539         understood by other 'dak' programs.
4540         (which_conf_file): new routine; determines the conf file to read.
4541
4542 2000-11-17  James Troup  <james@nocrew.org>
4543
4544         * katie (install): fix where .changes files for proposed-updates
4545         go.
4546
4547 2000-11-04  James Troup  <james@nocrew.org>
4548
4549         * jenna (main): handle architecture properly if no
4550         -a/--architecture argument is given, i.e. reset architecture with
4551         the values for the suite for each suite.
4552
4553         * Add apt_pkg.init() to the start of all scripts as it's now
4554         required by python-apt.
4555
4556 2000-10-29  James Troup  <james@nocrew.org>
4557
4558         * jenna (generate_bin_list): take an additional argument 'type'
4559         and use it in the SELECT.
4560         (main): if processing component 'main', process udebs and debs.
4561
4562         * neve (process_packages): set up 'type' in 'binaries' (by
4563         assuming .deb).
4564
4565         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4566         (check_files): set up files[file]["dbtype"].
4567         (install): use files[file]["dbtype"] to set up the 'type' field in
4568         the 'binaries' table.
4569
4570         * init_pool.sql: add a 'type' field to the 'binaries' table to
4571         distinguisgh between ".udeb" and ".deb" files.
4572
4573         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4574         dest ? dirname(dest)" type check instead.
4575
4576         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4577         in the pool without crashing.  Also handle the case of being asked
4578         to look for something other than an .orig.tar.gz in the pool.
4579
4580 2000-10-26  James Troup  <james@nocrew.org>
4581
4582         * katie (install): fix filenames put into files table during
4583         poolification of legacy source.
4584
4585         * utils.py (move): work around a bug in os.path.basename() which
4586         cunningly returns '' if there is a trailing slash on the path
4587         passed to it.
4588
4589         * katie (check_dsc): Remove more cruft.  If we find the
4590         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4591         location, make a note of that so we can fix things in install().
4592         (install): as above.  Move any old source out of legacy locations
4593         so that 'apt-get source' will work.
4594         (process_it): reset the flag that indicates to install that the
4595         source needs moved.
4596
4597         * cron.daily: more.  Nowhere near complete yet though.
4598
4599         * katie (install): don't run os.makedirs, a) utils.move() does
4600         this now, b) we weren't removing the user's umask and were
4601         creating dirs with SNAFU permissions.
4602         (check_dsc): rewrite the .orig.tar.gz handling to take into
4603         account, err, package pools.  i.e. look anywhere in the pool
4604         rather than faffing around with two simple paths.
4605
4606         * neve (process_sources): add the .dsc to dsc_files too.
4607
4608 2000-10-25  James Troup  <james@nocrew.org>
4609
4610         * neve (process_sources): don't duplicate .orig.tar.gz's.
4611
4612 2000-10-23  James Troup  <james@nocrew.org>
4613
4614         * utils.py (re_extract_src_version): moved here.
4615
4616         * neve: move re_extract_src_version to utils.
4617         (process_packages): reflect change.
4618
4619         * katie (install): reflect change.
4620
4621 2000-10-19  James Troup  <james@nocrew.org>
4622
4623         * jenna (generate_src_list): handle locations with null
4624         components.
4625         (generate_bin_list): likewise.
4626