]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Merge mainline
[dak.git] / ChangeLog
1 2008-04-25  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/cruft_report.py (main): Make it possible to look at
4         experimental too, especially NBS
5
6         * dak/split_done.py (main): Only move files into their subdirs if
7         they are older than 30 days. That enables us to run this script as
8         part of a cronjob.
9
10         * config/debian/cron.weekly: Run dak split-done
11
12 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
13
14         * dak/process_unchecked.py: add changes["sponsoremail"]
15           for sponsored uploads if desired
16         * daklib/queue.py: add changes["sponsoremail"] to
17           Subst["__MAINTAINER_TO__"] if present
18         * daklib/utils.py: add functions
19           is_email_alias to check which accounts allow email forwarding,
20           which_alias_file to find the alias file, and
21           gpg_get_key_addresses to find uid addresses for a given
22             fingerprint
23
24 2008-04-22  Joerg Jaspert  <joerg@debian.org>
25
26         * setup/init_pool.sql: added a function/aggregate for the release
27         team to base some script on it.
28
29         * config/debian/cron.daily: push katie@merkel to immediately start
30         the sync of projectb there.
31
32 2008-04-21  Joerg Jaspert  <joerg@debian.org>
33
34         * scripts/debian/expire_dumps: New script, expires old database
35         dumps, using a scheme to keep more of the recent dumps.
36
37         * config/debian/cron.daily: Use the new script. Also - compress
38         all files older than 7 days, instead of 30.
39
40         * dak/process_accepted.py (install): Do not break if a
41         source/maintainer combination is already in src_uploaders, "just"
42         warn us.
43
44 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
45
46         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
47         Format lines (ie. those having extra text appended).
48
49 2008-04-19  Joerg Jaspert  <joerg@debian.org>
50
51         * dak/process_unchecked.py (check_files): Sanity check the
52         provides field, which closes #472783
53
54 2008-04-18  Joerg Jaspert  <joerg@debian.org>
55
56         * config/debian/dak.conf: Add mapping stable-proposed-updates
57           -> proposed-updates.
58
59         * dak/transitions.py (load_transitions): Additionally check for
60         invalid package list indentation
61
62 2008-04-17  Joerg Jaspert  <joerg@debian.org>
63
64         * config/debian/dak.conf: Add TempPath statement for the Release
65         Transitions script
66
67         * dak/transitions.py (temp_transitions_file): Use the TempPath
68         (write_transitions_from_file): Check if the file we should get our
69         transitions from is in our TempPath, error out if it isnt
70         (main): Check for TempPath existance
71
72 2008-04-12  James Troup  <troup@debian.org>
73
74         * dak/clean_proposed_updates.py: add support for -s/--suite and
75         -n/--no-action.
76
77 2008-04-11  Anthony Towns  <ajt@debian.org>
78
79         * dak/utils.py: build_file_list() extra parameters so it can
80         build a file list for checksums-foo fields. Don't use float() to
81         compare formats, because Format: 1.10 should compare greater than
82         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
83
84         * dak/process_unchecked.py: check_md5sum becomes check_hashes
85         and check_hash. If changes format is 1.8 or later, also check
86         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
87         and reject on presence/absence of un/expected checksums-* fields.
88
89 2008-04-07  Joerg Jaspert  <joerg@debian.org>
90
91         * daklib/utils.py (build_file_list): Check for dpkg .changes
92         adjusted to reject newer (and right now broken) 1.8 version, until
93         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
94
95 2008-03-22  Joerg Jaspert  <joerg@debian.org>
96
97         * dak/transitions.py (load_transitions): Check if all our keys are
98         defined, if there are only keys defined we want and also the types
99         of the various keys.
100
101 2008-03-22  Anthony Towns  <ajt@debian.org>
102
103         * dak/edit_transitions.py: Add --import option.
104         Add --use-sudo option. Use fcntl locking for writing.
105         Move writing into a function (write_transitions).
106         Reinvoke self using sudo and --import if necessary.
107         Move temporary file creation into a function, use mkstemp.
108         Rename to "dak transitions".
109
110 2008-03-21  Joerg Jaspert  <joerg@debian.org>
111
112         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
113         edited file back in place
114         (check_transitions): Use proper locking and also use sudo to copy
115         the new file in place
116
117 2008-03-21  Anthony Towns <ajt@debian.org>
118
119         * config/debian/extensions.py: Add infrastructure for replacing
120         functions in dak modules; add upload blocking for dpkg.
121
122 2008-03-12  Joerg Jaspert  <joerg@debian.org>
123
124         * dak/edit_transitions.py: Done a number of cleanups to make code
125         working. Also changed the way prompting/answering goes, to not
126         have to import daklib/queue.
127         (edit_transitions): When done with a successful edit - also print
128         a final overview about defined transitions
129
130 2008-03-11  Joerg Jaspert  <joerg@debian.org>
131
132         * dak/process_unchecked.py: Import syck module directly, not "from
133         syck import *"
134         (check_transition): Do the check for sourceful upload in here
135         Also adjust the syck loading commands, rename new_vers to
136         expected, curvers to current, to make it more clear what they mean.
137
138         * daklib/database.py (get_suite_version): Renamed from
139         get_testing_version. Also changed the cache variables name
140
141         * The above changes are based on modifications from Anthony.
142
143         * dak/dak.py (init): Renamed check -> edit transitions
144
145         * dak/edit_transitions.py: Renamed from check_transitions.py
146         (main): Also rename new_vers/curvers to expected/current
147         Basically a nice rewrite, so it now does checks and edit,
148         depending on how you call it. Check also removes old transitions,
149         if user wants it.
150
151 2008-03-02  Joerg Jaspert  <joerg@debian.org>
152
153         * debian/control (Suggests): Add python-syck to Depends:
154
155         * dak/dak.py (init): Tell it about check_transitions
156
157         * dak/check_transitions.py (usage): Added, checks the transitions
158         file (if any)
159
160         * daklib/database.py (get_testing_version): Added. Returns the
161         version for the source in testing, if any
162
163         * dak/process_unchecked.py (check_transition): Added. Checks if a
164         release team member defined a transition, and rejects based on
165         that data.
166         (process_it): Use it.
167         (check_transition): Warn on broken transitions file and return,
168         not doing anything.
169         (check_transition): Moved out of here, into daklib/queue
170         (process_it): Call check_transitions only if
171         changes[architecture] has source included.
172         (check_transition): Now call the database.get_testing_version
173
174 2008-02-09  Christoph Berg <myon@debian.org>
175
176         * daklib/queue.py (get_type): fubar does not exist in global
177         namespace.
178
179         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
180         to source table, and move src_uploaders after source so the REFERNCES
181         clause works.
182         * dak/process_accepted.py (install): Fill the changedby column from
183         the information found in the .changes. This will allow to identify
184         NMUs and sponsored uploads more precisely in tools querying projectb.
185         * scripts/debian/insert_missing_changedby.py: Script to import yet
186         missing fields from filippo's uploads-history DB.
187
188 2008-02-06  Joerg Jaspert  <joerg@debian.org>
189
190         * daklib/utils.py (check_signature): Make variable key available,
191         so we can access it.
192
193 2008-01-07  Joerg Jaspert  <joerg@debian.org>
194
195         * dak/examine_package.py (check_deb): Remove linda call. It
196         provides no added benefit to lintian anymore.
197
198 2008-01-06  Joerg Jaspert  <joerg@debian.org>
199
200         * dak/examine_package.py (do_lintian): lintian now supports html
201         coloring, so use it.
202         (do_command): Dont escape html chars if param escaped = 1
203
204 2007-12-31  Anthony Towns  <ajt@debian.org>
205
206         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
207         when processing result of check_dsc_against_db so we don't promote
208         warnings to rejections.
209
210 2007-12-30  Joerg Jaspert  <joerg@debian.org>
211
212         * dak/dak.py (init): add show-new. This is based on a patch
213         submitted by Thomas Viehmann in Bug #408318, but large parts of
214         handling it are rewritten and show-new is done by me.
215
216         * dak/queue_report.py (table_row): Add link to generated html page
217         for NEW package.
218
219         * dak/show_new.py: new file, generates html overview for NEW
220         packages, similar to what we see with examine-package.
221
222         * config/debian/cron.hourly: Add show-new call
223
224         * config/debian/dak.conf: Add HTMLPath for Show-New
225
226         * dak/examine_package.py (print_copyright): ignore stderr when
227         finding copyright file.
228         (main): add html option
229         (html_escape): new function
230         (escape_if_needed): ditto
231         (headline): ditto
232         (colour_output): ditto
233         (print_escaped_text): ditto
234         (print_formatted_text): ditto
235         - use those functions everywhere where we generate output, as they
236         easily know if we want html or not and just DTRT
237         (do_lintian): new function
238         (check_deb): use it
239         (output_deb_info): Use print_escaped_text, not print_formatted_text.
240         Also import daklib.queue, determine_new now lives there
241
242         Also add a variable to see if we want html output. Default is
243         disabled, show_new enables it for its use.
244         Most of html, besides header/footer are in examine_package instead
245         of show_new, as it makes it a whole lot easier to deal with it at
246         the point the info is generated.
247
248
249         * dak/process_new.py (determine_new): Moved out of here.
250         (check_valid): Moved out of here.
251         (get_type): Moved out of here.
252
253         * daklib/queue.py (determine_new): Moved here.
254         (check_valid): Moved here.
255         (get_type): Moved here.
256
257         * dak/init_db.py (do_section): Remove non-US code
258
259         * dak/make_overrides.py (main): ditto
260
261         * dak/process_new.py (determine_new): ditto
262
263         * daklib/queue.py (Upload.in_override_p),
264         (Upload.check_override): ditto
265
266         * daklib/utils.py (extract_component_from_section):,
267         (poolify): ditto
268
269         * dak/import_archive.py (update_section): ditto
270
271         * dak/symlink_dists.py (fix_component_section): ditto
272
273         * scripts/debian/mkmaintainers: ditto
274
275         * scripts/debian/update-mirrorlists (masterlist): ditto
276
277         * config/debian-non-US/*: Remove subdir
278
279         * scripts/debian/update-readmenonus: Removed.
280
281
282 2007-12-28  Anthony Towns  <ajt@debian.org>
283
284         * daklib/utils.py (check_signature): add NOTATION_DATA and
285         NOTATION_NAME to known keywords.
286
287         * daklib/queue.py (Upload.check_source_against_db): 
288
289         * dak/make_suite_file_list.py: add -f/--force option.
290
291         * dak/generate_releases.py: add -a/--apt-conf=FILE and
292         -f/--force-touch options.  Pull version info from the database.
293         Make suite description optional.
294
295         * config/debian/dak.conf: update
296         Reject-Proposed-Updates::MoreInfoURL.  Comment out
297         Suite::Stable::Version and ::Description.
298
299         * config/debian/apt.conf: Add hurd-i386 to unstable
300         debian-installer stanza.
301
302 2007-12-28  Joerg Jaspert  <joerg@debian.org>
303
304         * KEYEXPIRED is actually a known keyword. We do check it earlier
305         on and reject in case the sig is bad (or unknown)
306
307 2007-12-24  Joerg Jaspert  <joerg@debian.org>
308
309         * Also run lintian on the .dsc file to check the source itself.
310
311         * Fix the direct usage of ar | tar etc to get the copyright file
312         and use dpkg-deb, which is made for this and makes us able to
313         process data.tar.bz2 (or whatever format it will be in the
314         future).
315
316 2007-12-21  Joerg Jaspert  <joerg@debian.org>
317
318         * Remove the (now useless) check for a pre-depends on dpkg for
319           binaries that contain bzip2 compressed data tarballs.
320
321 2007-08-28  Anthony Towns  <ajt@debian.org>
322
323         * process_unchecked.py: Add support for automatic BYHAND
324         processing.
325         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
326         processing of tag-overrides.
327         * examine_package.py: Summarise duplicate copyright file entries
328         (same md5sum) with a reference to the previous instance, rather
329         than repeating them.
330         * process_new.py: When rejecting from the p-u-new or o-p-u-new
331         holding queues, don't worry if dak has its own reasons for
332         rejecting the package as well as the SRMs.
333
334 2007-06-19  Anthony Towns  <ajt@debian.org>
335
336         * Add nm.debian.org pseudopackage
337
338 2007-06-18  Anthony Towns  <ajt@debian.org>
339
340         * daklib/logging.py: Set umask to not exclude group-writability
341         so we don't get reminded at the start of each month. Thanks to
342         Random J.
343         * dak/override.py: More changes from Herr von Wifflepuck: warn
344         if section of source is different to binary section; restore
345         functionality on source-only overrides; croak if trying to set
346         priority of a source override; never set priority of source
347         overrides; correct typo in logging (s/priority/section/ at
348         one place)
349
350         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
351         * config/debian/cron.daily: auotmatically accept/reject
352         oldstable-proposed-updates based on COMMENTS directory
353
354 2007-06-18  Anthony Towns  <ajt@debian.org>
355
356         * config/debian/apt.conf, config/debian/apt.conf.stable,
357         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
358         (sarge), support for oldstable-proposed-updates, dropping m68k
359         from etch, creating etch-m68k suite, creating lenny.
360
361         * config/debian/vars: update for lenny
362
363         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
364         drop upload limitations, add release postgres user
365         
366         * dak/process_new.py: support for automatically accepting and rejecting
367         packages from proposed-updates holding queues via COMMENTS directory
368         * cron.daily: automatically process COMMENTS-based approvals
369         and rejections for proposed-updates holding queues
370
371         * dak/process_unchecked.py: add support for oldproposedupdates
372         holding queue
373
374         * dak/control_suite.py: allow control-suite to work with etch-m68k
375
376         * dak/generate_releases.py: unlink old Release files before updating
377         them if nlinks > 1 (ie, if two files used to be the same, maybe they
378         shouldn't be when generate-releases is run)
379
380         * dak/generate_releases.py: add a couple of commented lines to make
381         it easier to deal with point releases
382
383         * dak/make_overrides.py: generate overrides for !contrib udebs
384
385         * docs/README.stable-point-release: update docs for doing a
386         point release
387
388 2007-03-05  Anthony Towns  <ajt@debian.org>
389
390         * config/debian/dak.conf: update for 3.1r5.
391         * scripts/debian/ssh-move: add ssh-move script from debbugs
392         * config/debian/cron.unchecked: push version info to debbugs using
393         ssh-move.
394
395 2007-02-14  James Troup  <troup@ries.debian.org>
396
397         * docs/README.config: remove Dinstall::GroupOverrideFilename.
398         * config/debian/dak.conf: likewise.
399         * config/debian-non-US/dak.conf: likewise.
400         * config/debian-security/dak.conf: likewise.
401
402         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
403         experimental differently, just close the bugs and let version
404         tracking sort it out.
405          (nmu_p): remove entire class - now unused.
406          (Upload.__init__): don't use nmu_p.
407
408 2007-02-08  Anthony Towns  <ajt@debian.org>
409
410         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
411         signing key.  Drop maximum index diffs down to 14.
412
413         * config/debian/apt.conf: add udeb support for non-free (testing,
414         unstable) and experimental.
415         * config/debian/dak.conf: likewise.
416
417         * dak/generate_releases.py (main): handle udebs in any component.
418
419         * daklib/queue.py (Upload.build_summaries): handle files without a
420         'type' gracefully.
421
422         * dak/generate_releases.py (print_sha256_files): new function.
423         (main): use it.
424
425         * dak/process_accepted.py (stable_install): fix name of template
426         mail.
427
428         * dak/process_unchecked.py (is_stableupdate): fix invocation of
429         database.get_suite_id().
430
431         * templates/process-new.bxa_notification: Update on request
432         of/after discussion with BIS staff.
433
434         * scripts/debian/mkfilesindices: also handle proposed-updates.
435
436 2007-02-08  Ryan Murray  <rmurray@debian.org>
437
438         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
439         group name for chgrp of mail archives.
440
441         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
442         orig.tar.gz's by picking the first one by file id.
443
444         * dak/override.py (main): limit to binary overrides only for now.
445         (usage): update to match.
446
447         * config/debian/cron.daily: track when we have the accepted lock
448         and clean it up on exit if we have it.  Take/check the
449         cron.unchecked lock just before traping to cleanup on exit.
450         Remove potato override handling.  Remove any dangling symlinks in
451         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
452
453         * config/debian/apt.conf: change default compression scheme for
454         both Sources and Packages to gzip and bzip2 rather than
455         uncompressed and gzip (Packages) and gzip (Sources).  Use old
456         defaults for proposed-updates.
457
458         * dak/control_overrides.py (main): refuse to operate on
459         untouchable suites.
460
461         * config/debian/pseudo-packages.maintainers: drop install,
462         installation, boot-floppy, slink-cd, potato-cd and
463         nonus.debian.org.  Update base.
464         * config/debian/pseudo-packages.description: likewise.
465
466         * daklib/utils.py (re_srchasver): new regex.
467         (parse_changes): use regex to split 'Source (Version)' style
468         Source fields into 'source' and 'source-version'.
469
470         * config/debian/cron.daily: use $base instead of hardcoding path
471         name.
472
473         * scripts/debian/mkfilesindices: source 'vars' file and use it's
474         variables instead of hardcoding path names.
475
476         * config/debian/apt.conf: switch from /org to /srv.
477         * config/debian/apt.conf.buildd: likewise.
478         * config/debian/apt.conf.stable: likewise.
479         * config/debian/cron.daily: likewise.
480         * config/debian/cron.hourly: likewise.
481         * config/debian/cron.monthly: likewise.
482         * config/debian/cron.unchecked: likewise.
483         * config/debian/cron.weekly: likewise.
484         * config/debian/dak.conf: likewise.
485         * config/debian/vars: likewise.
486         * scripts/debian/mkfilesindices: likewise.
487         
488 2007-02-08  James Troup  <james@nocrew.org>
489
490         * dak/process_unchecked.py (check_signed_by_key): new function to
491         ensure .changes files are signed by an authorized uploader.
492         (process_it): use it.
493
494         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
495         to configure per suite/component/architecture binary upload
496         restrictions.
497
498 2006-10-09  James Troup  <james.troup@canonical.com>
499
500         * dak/process_unchecked.py (check_timestamps): change match to
501         search as recent versions of python-apt prefix the string with 'E: '.
502
503 2006-06-26  Ryan Murray  <rmurray@debian.org>
504
505         * dak/process_unchecked.py (check_files): strip optional source version
506         from Source: field in changes file, and ensure what is left is a valid
507         package name.
508
509 2006-06-23  Ryan Murray  <rmurray@debian.org>
510
511         * dak/process_unchecked.py (check_files): also check ProposedUpdates
512         queue for source.
513
514 2006-06-18  Ryan Murray  <rmurray@debian.org>
515
516         * dak/scripts/debian/update-ftpstats: look for dak named processes in
517         the log, too.
518
519         * dak/process_unchecked.py (check_files): only check embargoed and
520         unembargoed queues if the keys are set.
521
522         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
523         and bzip2 for etch.
524
525 2006-06-16  James Troup  <james@nocrew.org>
526
527         * dak/dak.py (init): add new-security-install.
528
529         * dak/new_security_install.py: cleanups and adapt for new naming
530         scheme and other changes.
531
532 2006-06-16  Anthony Towns  <ajt@debian.org>
533
534         * dak/new_security_install.py: initial version imported from
535         klecker.
536
537 2006-06-16  James Troup  <james@nocrew.org>
538
539         [Merged changes from klecker - original author unknown.]
540
541         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
542
543         * dak/security_install.py (do_upload): fix check for oldstable and
544         upload file list handling.
545
546         * dak/process_unchecked.py (check_files): update "check for
547         source" code to also look in Embargoed and Unembargoed queues.
548         (is_unembargo): fix handling of Dir::Queue::Disembargo.
549
550         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
551
552         * config/debian-security/vars (disembargo): add.
553
554         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
555         update.
556         (Process-Unchecked::AcceptedLockFile): add.
557         (Suite::Testing): clean up Version and Description.
558         (SuiteMappings): add silent map from etch-secure to testing.
559
560         * config/debian-security/cron.unchecked: add support for
561         disembargoed queues.
562
563         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
564         files too.
565
566         * config/debian-security/apt.conf: add amd64 to architectures for
567         testing-security.
568
569 2006-06-11  James Troup  <troup@spohr.debian.org>
570
571         * config/debian/cron.daily: invoke process-accepted not
572         process-unchecked.
573
574         * config/debian/vars (scriptsdir): new variable.
575         * config/debian/cron.daily: use it.
576
577         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
578         $base/misc/ instead of versioned $masterdir.  Correct 'dak
579         make-maintainers' invocation to look in $configdir for
580         pseudo-packages.maintainers.
581
582         * daklib/queue.py (Upload.do_reject): use correct name for
583         rejection template.
584
585 2006-06-11  James Troup  <james@nocrew.org>
586
587         * dak/override.py (main): temporarily add content of old X-Katie
588         header back as the PTS apparently filters on it.
589         * dak/process_accepted.py (main): likewise.
590         * dak/process_new.py (main): likewise.
591         * dak/process_unchecked.py (main): likewise.
592         * dak/reject_proposed_updates.py (main): likewise.
593         * dak/rm.py (main): likewise.
594         * daklib/queue.py (Upload.do_reject): likewise.
595
596         * config/debian/cron.unchecked: set -u to error out on undefined
597         variables.  Preset LOCKDAILY to "" accordingly.
598         * config/debian/cron.hourly: likewise.
599         * config/debian/cron.monthly: likewise.
600         * config/debian/cron.weekly: likewise.
601
602         * config/debian/vars (configdir): add new variable pointing to
603         this directory.
604
605         * config/debian/cron.daily: use $configdir inplace of $masterdir
606         when that's what we mean, and don't cd into $masterdir just to run
607         dak scripts as we don't need to do that anymore.
608         * config/debian/cron.hourly: likewise.
609         * config/debian/cron.unchecked: likewise.
610         * config/debian/cron.weekly: likewise.
611
612         * config/debian/dak.conf
613         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
614         user back to list of known users as it's non-trivial to entirely
615         change the owner of a database with postgresql 7.4.
616
617         * daklib/queue.py (Upload.source_exists): use string object
618         methods rather than string module.
619         (Upload.get_anyversion): likewise.
620
621         * daklib/utils.py (validate_changes_file_arg): update filename
622         slicing to cope with new .dak filenames.
623
624         * dak/ls.py (main): add back 'heidi' as a valid argument for
625         -f/--format as people are using it in scripts and breaking that
626         without warning seems rude.
627
628 2006-05-21  James Troup  <james@nocrew.org>
629
630         * dak/rm.py (main): use string .isdigit() rather than
631         utils.str_isnum().
632         * dak/process_new.py (edit_overrides): likewise.
633
634         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
635         string import.
636
637 2006-05-21  James Troup  <james@nocrew.org>
638
639         * dak/check_archive.py (check_indices_files_exist): use list
640         comprehension instead of map().  No longer need to import
641         deprecated string module as a side-effect.
642         * dak/check_overrides.py (process): likewise.
643         (main): likewise.
644         * dak/cruft_report.py (do_obsolete_source): likewise.
645         (main): likewise.
646         * dak/ls.py (main): likewise.
647         * dak/make_suite_file_list.py (write_filelists): likewise.
648         * dak/process_accepted.py (stable_install): likewise.
649         * dak/rm.py (main): likewise.
650         * dak/stats.py (number_of_packages): likewise.
651         * daklib/logging.py (Logger.log): likewise.
652         * daklib/queue.py (Upload.source_exists): likewise.
653         (Upload.cross_suite_version_check): likewise.
654         * daklib/utils.py (parse_args): likewise.
655
656 2006-05-21  James Troup  <james@nocrew.org>
657
658         * daklib/utils.py (process_gpgv_output): new function, split out
659         of check_signature().
660         (check_signature): adapt accordingly.
661         (retrieve_key): new function that will try to retrieve the key
662         that signed a given file from a keyserver.
663         (check_signature): add 'autofetch' argument that if not set
664         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
665         If 'autofetch' is true, invoke retrieve_key().  
666
667         * docs/README.config: document Dinstall::KeyAutoFetch and
668         Dinstall:KeyServer.
669
670 2006-05-20  James Troup  <james@nocrew.org>
671
672         * dak/find_null_maintainers.py (main):
673         s/createtimestamp/createTimestamp/ to make things work with modern
674         slapd.
675
676         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
677         Stable::Version and Stable::Description for 3.1r2.
678
679         * config/debian-non-US/dak.conf: sync with klecker - update
680         version number of 3.0 and MoreInfoURL.
681
682         * docs/README.stable-point-release: Add notes about updating
683         dak.conf and Reject-Proposed-Updates section in particular.
684         s/woody/stable/.  Also need to update README.html.
685
686         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
687
688         * config/debian/apt.conf: Add udeb tree for proposed-updates.
689
690 2006-05-20  Ryan Murray  <rmurray@debian.org>
691
692         * scripts/debian/update-ftpstats: new script to update daily
693         architecture size graph data.
694
695         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
696         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
697         there.
698
699         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
700         before we finish.  Don't push to merkel.
701
702         * dak/process_unchecked.py (check_changes): Also look in
703         ProposedUpdates queue dir.
704         (check_files): likewise.
705
706 2006-05-20  Anthony Towns  <ajt@debian.org>
707
708         * scripts/debian/mkfilesindices: new script to generate file
709         indices used for partial mirroring.
710
711         * config/debian/cron.daily: add progress timestamps.
712
713         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
714         amd64 to testing, unstable and experimental.  Drop sh from
715         experimental.  Move Experimental to dists/experimental.  Add
716         Dir::ProposedUpdates.  Add Architectures::amd64.
717
718         * config/debian/apt.conf: add amd64 to testing, unstable and
719         experimental.  Drop uncompressed Packages files from testing. Drop
720         sh from experimental.  Move experimental to dists/experimental/.
721
722         * config/debian/vars (archs): add amd64.
723
724         * dak/process_unchecked.py (action): Add support for
725         proposed-updates approval queue.
726         (is_stableupdate): new function - checks if the upload is targeted
727         at proposed-updates.
728         (do_stableupdate): likewise - moves upload to proposed-updates
729         holding area.
730
731         * dak/process_new.py (do_new): warn if original or new target
732         suite are invalid.
733
734         * dak/generate_releases.py (print_md5sha_files): less whitespace
735         between the hash and size.
736
737         * dak/generate_index_diffs.py (genchanges): don't say we're not
738         doing anything.  Better formatting of other messages.
739         (main): don't skip experimental and remove some 'doing stuff'
740         prints.
741
742 2006-05-18  James Troup  <james@nocrew.org>
743
744         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
745         query.
746
747         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
748         docstrings, untabify, don't shadow builtins, lowercase non-global
749         variable names, spaces after commas.  Also bail if given any
750         arguments since we don't accept any.
751         * dak/init_db.py: likewise.  Also split large main() into
752         subfunctions and rename get() to sql_get().
753
754         * dak/init_db.py (main): check returned value from
755         database.get_archive_id().
756
757         * dak/dak.py: renamed from shell.py.  Update to support new source
758         layout.  Created init() and usage() functions.  Various
759         pylint-inspired cleanups.  Use daklib utils.warn() and
760         utils.fubar().  Change 'functionality' variable to only have
761         (command, description) and always invoke main() when running the
762         module.  Also support -h.
763
764 2006-05-17  James Troup  <james@nocrew.org>
765
766         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
767         imports of and calls to daklib modules.  Change script name
768         everywhere, i.e. in output, mails, comments and configuration tree
769         + filenames.  Also update references to other renamed scripts,
770         classes and templates.  Use '.dak' instead of '.katie' for the
771         queue info storage files.
772         (Renamed from tea)
773         * dak/check_overrides.py: likewise.  (Renamed from cindy)
774         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
775         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
776         * dak/clean_queues.py: likewise.  (Renamed from shania)
777         * dak/clean_suites.py: likewise.  (Renamed from rhona)
778         * dak/compare_suites.py: likewise.  (Renamed from andrea)
779         * dak/control_overrides.py: likewise.  (Renamed from natalie)
780         * dak/control_suite.py: likewise.  (Renamed from heidi)
781         * dak/cruft_report.py: likewise.  (Renamed from rene)
782         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
783         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
784         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
785         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
786         * dak/import_archive.py: likewise.  (Renamed from neve)
787         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
788         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
789         * dak/init_db.py: likewise. (Renamed from alyson)
790         * dak/init_dirs.py: likewise. (Renamed from rose)
791         * dak/ls.py: likewise. (Renamed from madison)
792         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
793         * dak/make_overrides.py: likewise.  (Renamed from denise)
794         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
795         * dak/mirror_split.py: likewise.  (Renamed from billie)
796         * dak/override.py: likewise.  (Renamed from alicia)
797         * dak/poolize.py: likewise.  (Renamed from catherine)
798         * dak/process_accepted.py: likewise.  (Renamed from kelly)
799         * dak/process_new.py: likewise.  (Renamed from lisa)
800         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
801         * dak/queue_report.py: likewise.  (Renamed from helena)
802         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
803         * dak/rm.py: likewise.  (Renamed from melanie)
804         * dak/security_install.py: likewise.  (Renamed from amber)
805         * dak/split_done.py: likewise.  (Renamed from nina)
806         * dak/stats.py: likewise.  (Renamed from saffron)
807         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
808         * daklib/database.py: likewise.  (Renamed from db_access)
809         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
810         * daklib/utils.py: likewise.
811
812         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
813         doesn't need to notify anyone" string.
814         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
815
816         * dak/process_accepted.py (init): drop -V/--version argument.
817         * dak/process_new.py (init): likewise.
818         * dak/process_unchecked.py (init): likewise.
819         * dak/reject_proposed_updates.py (init): likewise
820
821         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
822
823         * dak/stats.py: in usage() output change STAT to MODE.
824
825 2006-05-15  James Troup  <james@nocrew.org>
826
827         * dak/queue_report.py: remove unused encodings imports.
828
829         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
830         imports.  Initalize 'Cnf' as a global.
831         (BillieDB._internal_recurse): fix 'util.' typo.
832
833         * dak/import_ldap_fingerprints.py (main): drop unused time import and
834         commented out time check for LDAP search.
835
836 2005-12-16  Ryan Murray  <rmurray@debian.org>
837
838         * halle: add support for udebs
839         * kelly: stable_install: add support for binNMU versions
840
841 2005-12-05  Anthony Towns  <aj@erisian.com.au>
842
843         * katie.py: Move accept() autobuilding support into separate function 
844         (queue_build), and generalise to build different queues
845
846         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
847
848         * jennifer: Initial support for enabling embargo handling with the
849         Dinstall::SecurityQueueHandling option.
850         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
851         functions.
852
853         * katie.conf-security: Include embargo options
854         * katie.conf-security: Add Lock dir
855         * init_pool.sql-security: Create disembargo table
856         * init_pool.sql-security: Add constraints for disembargo table
857
858 2005-11-26  Anthony Towns  <aj@erisian.com.au>
859
860         * Merge of changes from klecker, by various people
861
862         * amber: special casing for not passing on amd64 and oldstable updates
863         * amber: security mirror triggering
864         * templates/amber.advisory: updated advisory structure
865         * apt.conf.buildd-security: update for sarge's release
866         * apt.conf-security: update for sarge's release
867         * cron.buildd-security: generalise suite support, update for sarge's release
868         * cron.daily-security: update for sarge's release, add udeb support
869         * vars-security: update for sarge's release
870         * katie.conf-security: update for sarge's release, add amd64 support,
871         update signing key
872
873         * docs/README.names, docs/README.quotes: include the additions
874
875 2005-11-25  Anthony Towns  <aj@erisian.com.au>
876
877         * Changed accepted_autobuild to queue_build everywhere.
878         * Add a queue table.
879         * Add a "queue" field in the queue_build table (currently always 0)
880
881         * jennifer: Restructure to make it easier to support special
882         purpose queues between unchecked and accepted.
883
884 2005-11-25  Anthony Towns  <aj@erisian.com.au>
885
886         * Finishing merge of changes from spohr, by various people still
887
888         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
889         works
890         * jennifer: Re-enable .deb ar format checking
891         * katie.py: Convert to +bX binNMU special casing
892         * rhona: Add some debug output when deleting binaries
893         * cron.daily: Add emilie
894         * cron.unchecked: Add lock files
895
896 2005-11-15  Anthony Towns  <aj@erisian.com.au>
897
898         * Merge of changes from spohr, by various people.
899
900         * tiffani: new script to do patches to Packages, Sources and Contents
901         files for quicker downloads.
902         * ziyi: update to authenticate tiffani generated files
903
904         * dak: new script to provide a single binary with less arbitrary names
905         for access to dak functionality.
906
907         * cindy: script implemented
908
909         * saffron: cope with suites that don't have a Priority specified
910         * heidi: use get_suite_id()
911         * denise: don't hardcode stable and unstable, or limit udebs to unstable
912         * denise: remove override munging for testing (now done by cindy)
913         * helena: expanded help, added new, sort and age options, and fancy headers
914         * jennifer: require description, add a reject for missing dsc file
915         * jennifer: change lock file
916         * kelly: propogation support
917         * lisa: honour accepted lock, use mtime not ctime, add override type_id
918         * madison: don't say "dep-retry"
919         * melanie: bug fix in output (missing %)
920         * natalie: cope with maintainer_override == None; add type_id for overrides
921         * nina: use mtime, not ctime
922
923         * katie.py: propogation bug fixes
924         * logging.py: add debugging support, use | as the logfile separator
925
926         * katie.conf: updated signing key (4F368D5D)
927         * katie.conf: changed lockfile to dinstall.lock
928         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
929         * katie.conf: added tiffani, cindy support
930         * katie.conf: updated to match 3.0r6 release
931         * katie.conf: updated to match sarge's release
932
933         * apt.conf: update for sarge's release
934         * apt.conf.stable: update for sarge's release
935         * apt.conf: bump daily max Contents change to 25MB from 12MB
936
937         * cron.daily: add accepted lock and invoke cindy  
938         * cron.daily: add daily.lock
939         * cron.daily: invoke tiffani
940         * cron.daily: rebuild accepted buildd stuff
941         * cron.daily: save rene-daily output on the web site
942         * cron.daily: disable billie
943         * cron.daily: add stats pr0n
944
945         * cron.hourly: invoke helena
946
947         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
948         * vars: add lockdir, add etch to copyoverrides
949         * Makefile: add -Ipostgresql/server to CXXFLAGS
950
951         * docs/: added README.quotes
952         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
953         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
954
955         * TODO: correct spelling of "conflicts"
956
957 2005-05-28  James Troup  <james@nocrew.org>
958
959         * helena (process_changes_files): use MTIME rather than CTIME (the
960         C's not for 'creation', stupid).
961         * lisa (sort_changes): likewise.
962
963         * jennifer (check_distributions): use has_key rather than an 'in'
964         test which doesn't work with python2.1.  [Probably by AJ]
965
966 2005-03-19  James Troup  <james@nocrew.org>
967
968         * rene (main): use Suite::<suite>::UdebComponents to determine
969         what components have udebs rather than assuming only 'main' does.
970
971 2005-03-18  James Troup  <james@nocrew.org>
972
973         * utils.py (rfc2047_encode): use codecs.lookup() rather than
974         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
975         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
976         <andrew@ubuntu.com>.
977
978 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
979
980         * helena: add -n/--new HTML output option and improved sorting
981         options.
982
983 2005-03-06  Ryan Murray  <rmurray@debian.org>
984
985         * shania(main): use Cnf::Dir::Reject instead of REJECT
986
987 2005-02-08  James Troup  <james@nocrew.org>
988
989         * rene (main): add partial NBS support by checking that binary
990         packages are built by their real parent and not some random
991         stranger.
992         (do_partial_nbs): likewise.
993
994 2005-01-18  James Troup  <james@nocrew.org>
995
996         * katie.py (Katie.build_summaries): avoid leaking file handle when
997         extracting package description.
998         (Katie.force_reject): remember and close each file descriptor we
999         use.
1000         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1001         s/reason_file/reason_fd/ because it's a file descriptor.
1002         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1003         invoking apt_pkg.md5sum().
1004
1005         * jennifer (check_deb_ar): new function: sanity check the ar
1006         contents of a .deb.
1007         (check_files): use it.
1008         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1009         found.
1010         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1011
1012 2005-01-14  Anthony Towns  <ajt@debian.org>
1013
1014         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1015
1016         * propup stuff (thanks to Andreas Barth)
1017         * katie.conf: add stable MustBeOlderThan testing, add -security
1018           propup
1019         * jennifer: set distribution-version in .katie if propup may be needed
1020         * katie.py: add propogation to cross_suite_version_check
1021
1022 2004-11-27  James Troup  <james@nocrew.org>
1023
1024         * nina: new script to split monolithic queue/done into date-based
1025         hierarchy.
1026
1027         * rene (usage): document -s/--suite.
1028         (add_nbs): use .setdefault().
1029         (do_anais): likewise.
1030         (do_nbs): don't set a string to "" and then += it.
1031         (do_obsolete_source): new function - looks for obsolete source
1032         packages (i.e source packages whose binary packages are ALL a)
1033         claimed by someone else and b) newer when built from the other
1034         source package).
1035         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1036         and 'full' check modes.  Check for obsolete source packages.
1037         linux-wlan-ng has been fixed - remove hideous bodge.
1038
1039         * jennifer (check_distributions): support 'reject' suite map type.
1040
1041         * utils.py (validate_changes_file_arg): s/file/filename/.
1042         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1043         and return the .changes filename regardless.
1044         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1045         (re_no_revision): don't escape '-', it's not a special character.
1046         s/\*/+/ as there must be at least one non-dash character after the
1047         dash in a revision.  Thanks to Christian Reis for noticing both of
1048         these.
1049
1050         * ashley (main): pass require_changes=-1 to
1051         utils.validate_changes_file_arg().
1052
1053         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1054         Team <debian-kernel@lists.debian.org>'.
1055
1056         * katie.py (Katie.in_override_p): fix .startswith() usage.
1057
1058         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1059         (Lauren::MoreInfoURL): update to 3.0r3.
1060         (Suite::Stable::Version): likewise.
1061         (Suite::Stable::Description): likewise.
1062
1063         * cron.daily: disable automatic task override generation.
1064
1065         * cindy (process): restrict "find all packages" queries by
1066         component.  Respect Options["No-Action"].
1067         (main): add -n/--no-action support.  Only run on unstable.  Rename
1068         type to otype (pychecker).
1069
1070 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1071
1072         * katie.conf (Billie::BasicTrees): add all architectures.
1073         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1074         'everything'.
1075
1076         * cron.daily: Update a 'current' symlink when creating the
1077         post-daily-cron-job database backup to aid mirroring to merkel.
1078         Run billie.
1079
1080         * billie (BillieTarget.poolish_match): handle .udeb too.
1081
1082 2004-10-13  Ryan Murray  <rmurray@debian.org>
1083
1084         * amber (do_upload): Sort changes files in "katie" order so that
1085           source always arrives before binary-only rebuilds
1086         
1087 2004-10-05  James Troup  <james@nocrew.org>
1088
1089         * jennifer (check_dsc): correct reject message on invalid
1090         Maintainer field.
1091
1092 2004-09-20  James Troup  <james@nocrew.org>
1093
1094         * alicia: remove unused 'pwd' import.
1095
1096         * tea (check_override): underline suite name in output properly.
1097
1098         * rene (main): read a compressed Packages file.
1099         * tea (validate_packages): likewise.
1100
1101         * katie.py (re_fdnic): add 'r' prefix.
1102         (re_bin_only_nmu_of_mu): likewise.
1103         (re_bin_only_nmu_of_nmu): likewise.
1104
1105         * madison (main): retrieve component information too and display
1106         it if it's not 'main'.
1107         * melanie (reverse_depends_check): likewise.
1108
1109         * utils.py (pp_dep): renamed...
1110         (pp_deps): ... to this.
1111         * jeri (check_dep): update calls to utils.pp_deps().
1112         * melanie (reverse_depends_check): likewise.
1113
1114         * jennifer (check_changes): move initalization of email variables
1115         from here...
1116         (process_it): ...to here as we no longer always run
1117         check_changes().  Don't bother to initialize
1118         changes["architecture"].
1119
1120         * denise (list): renamed to...
1121         (do_list): ...this to avoid name clash with builtin 'list'.
1122         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1123         for dictionaries.
1124         (main): Likewise for name clash avoidance and also
1125         s/override_type/suffix/.  Adjust call to do_list().
1126
1127 2004-09-01  Ryan Murray  <rmurray@debian.org>
1128
1129         * tea (check_files): check the pool/ directory instead of dists/
1130
1131 2004-08-04  James Troup  <james@nocrew.org>
1132
1133         * jenna (cleanup): use .setdefault() for dictionaries.
1134         (write_filelists): likewise.
1135
1136         (write_filelists): Use utils.split_args() not split() to split
1137         command line arguments.
1138         (stable_dislocation_p): likewise.
1139
1140         (write_filelists): Add support for mapping side of suite-based
1141         "Arch: all mapping".
1142         (do_da_do_da): ensure that if we're not doing all suites that we
1143         process enough to be able correct map arch: all packages.
1144
1145         * utils.py (cant_open_exc): correct exception string,
1146         s/read/open/, s/.$//.
1147
1148         * templates/amber.advisory: update to match reality a little
1149         better.
1150
1151         * melanie (reverse_depends_check): read Packages.gz rather than
1152         Packages.
1153
1154         * jennifer (check_files): check for unknown component before
1155         checking for NEWness.
1156
1157         * katie.py (Katie.in_override_p): use .startswith in favour of a
1158         slice.
1159
1160         * docs/melanie.1.sgml: document -R/--rdep-check.
1161
1162 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1163
1164         * billie (main): Make the verbatim lists include all the README
1165           elements.
1166         * docs/README.names: Add billie in (correcting oversight)
1167
1168 2004-07-01  James Troup  <james@nocrew.org>
1169
1170         * emilie (main): handle woody's case-sensitive python-ldap,
1171         s/keyfingerprint/keyFingerPrint/.
1172
1173 2004-06-25  James Troup  <james@nocrew.org>
1174
1175         * debian/control (Depends): add dpkg-dev since jennifer uses
1176         dpkg-source.
1177
1178 2004-06-24  James Troup  <james@nocrew.org>
1179
1180         * melanie (main): s/file/temp_file/ and close file handle before
1181         removing the temporary file.
1182         (main): don't warn about needing a --carbon-copy if in no-action
1183         mode.
1184
1185         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1186         (main): likewise.
1187
1188         * test/006/test.py (main): check bracketed email-only form.
1189
1190         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1191         email-only, strip the brackets so we don't end up with
1192         <<james@nocrew.org>>.
1193
1194 2004-06-20  James Troup  <james@nocrew.org>
1195
1196         * jennifer (process_it): only run check_changes() if
1197         check_signature() returns something.  (Likewise)
1198
1199         * utils.py (changes_compare): if there's no changes["version"] use
1200         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1201
1202 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1203
1204         * jeri (pp_dep): moved from here to ...
1205         * utils.py (pp_dep): here.
1206
1207         * melanie (main): add reverse dependency checking.
1208
1209 2004-06-17  James Troup  <james@nocrew.org>
1210
1211         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1212         * tea (check_dscs): likewise.
1213
1214         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1215         change from boolean to a variable with 3 possible values, 0 and 1
1216         as before, -1 means don't require a signature.  Makes
1217         parse_changes() useful for parsing arbitary RFC822-style files,
1218         e.g. 'Release' files.
1219         (check_signature): add support for detached signatures by passing
1220         the files the signature is for as an optional third argument.
1221         s/filename/sig_filename/g.  Add a fourth optional argument to
1222         choose the keyring(s) to use.  Don't os.path.basename() the
1223         sig_filename before checking it for taint.
1224         (re_taint_free): allow '/'.
1225
1226 2004-06-11  James Troup  <james@nocrew.org>
1227
1228         * tea (check_files): make override.unreadable optional.
1229         (validate_sources): close the Sources file handle.
1230
1231         * docs/README.first: clarify that 'alyson' and running
1232         add_constraints.sql by hand is something you only want to do if
1233         you're not running 'neve'.
1234
1235         * docs/README.config (Location::$LOCATION::Suites): document.
1236
1237         * db_access.py (do_query): also print out the result of the query.
1238
1239 2004-06-10  James Troup  <james@nocrew.org>
1240
1241         * katie.py (Katie.cross_suite_version_check): post-woody versions
1242         of python-apt's apt_pkg.VersionCompare() function apparently
1243         returns variable integers for less than or greater than results -
1244         update our result checking to match.
1245         * jenna (resolve_arch_all_vs_any): likewise.
1246         * charisma (main): likewise.
1247
1248 2004-06-09  James Troup  <james@nocrew.org>
1249
1250         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1251         valid_dsc_p and don't run check_source() if check_dsc() failed.
1252         (check_dsc): on fatal failures return 0 so check_source() isn't
1253         run (since it makes fatal assumptions about the presence of
1254         mandatory .dsc fields).  
1255         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1256
1257 2004-05-07  James Troup  <james@nocrew.org>
1258
1259         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1260         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1261
1262         * katie.conf (Dir::Override): remove duplicate definition.
1263
1264         * neve (get_or_set_files_id): add an always-NULL last_used column
1265         to output.
1266
1267 2004-04-27  James Troup  <james@nocrew.org>
1268
1269         * apt.conf-security (tree "dists/stable/updates"): add
1270         ExtraOverride - noticed by Joey Hess (#246050).
1271         (tree "dists/testing/updates"): likewise.
1272
1273 2004-04-20  James Troup  <james@nocrew.org>
1274
1275         * jennifer (check_files): check for existing .changes or .katie
1276         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1277         directories.
1278
1279 2004-04-19  James Troup  <james@nocrew.org>
1280
1281         * jennifer (check_source): handle failure to remove the temporary
1282          directory (used for source tree extraction) better, specifically:
1283          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1284          and try again and if that works, REJECT the package.
1285
1286 2004-04-17  James Troup  <james@nocrew.org>
1287
1288         * docs/madison.1.sgml: document -b/--binary-type,
1289         -g/--greaterorequal and -G/--greaterthan.
1290
1291         * madison (usage): -b/--binary-type only takes a single argument.
1292         Document -g/--greaterorequal and -G/--greaterthan.
1293         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1294
1295 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1296
1297         * billie: Cleaned up a load of comments, added /README.non-US to
1298           the verbatim matches list.
1299
1300 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1301
1302         * utils.py (size_type): Make it use real binary megabytes and
1303           kilobytes, instead of the marketing terms used before.
1304
1305 2004-04-07  James Troup  <james@nocrew.org>
1306
1307         * katie.py (Katie.check_dsc_against_db): in the case we're
1308         ignoring an identical-to-existing orig.tar.gz remember the path to
1309         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1310         location.path too to be able to do so.
1311
1312 2004-04-03  James Troup  <james@nocrew.org>
1313
1314         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1315         needed for new utils.rfc2047_encode() function.
1316
1317         * utils.py (re_parse_maintainer): allow whitespace inside the
1318         email address.
1319         (Error): new exception base class.
1320         (ParseMaintError): new exception class.
1321         (force_to_utf8): new function.
1322         (rfc2047_encode): likewise.
1323         (fix_maintainer): rework.  use force_to_utf8() to force name and
1324         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1325         return an rfc2047 value.  Validate the address to catch missing
1326         email addresses and (some) broken ones.
1327
1328         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1329         by adopting foo2047 return value.
1330         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1331         mandatory changes fields.  Promote changes and maintainer822 to
1332         mandatory fields.
1333         (Katie.update_subst): default maintainer2047 rather than
1334         maintainer822.  User foo2047 rather than foo822 when setting
1335         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1336
1337         * jennifer (check_changes): set default changes["maintainer2047"]
1338         and changes["changedby2047"] values rather than their 822
1339         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1340         to new utils.fix_maintainer() - reject on exception and adopt
1341         foo2047 return value.
1342         (check_dsc): if a mandatory field is missing don't do any further
1343         checks and as a result reduce paranoia about dsc[var] existence.
1344         Validate the maintainer field by calling new
1345         utils.fix_maintainer().
1346
1347         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1348         changes fields.  Promote maintainer822 to a mandatory changes
1349         field.  add "pool name" to files fields.
1350
1351         * test/006/test.py: new file - tests for new
1352         utils.fix_maintainer().
1353
1354 2004-04-01  James Troup  <james@nocrew.org>
1355
1356         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1357
1358         * jennifer (get_changelog_versions): create a symlink mirror of
1359         the source files in the temporary directory.
1360         (check_source): if check_dsc_against_db() couldn't find the
1361         orig.tar.gz bail out.
1362
1363         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1364         part of the upload store the path to it in pkg.orig_tar_gz and if
1365         it can't be found set pkg.orig_tar_gz to -1.
1366
1367         Explicitly return the second value as None in the (usual) case
1368         where we don't have to reprocess.  Remove obsolete diagnostic
1369         logs.
1370
1371         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1372
1373         * utils.py (temp_filename): new helper function that wraps around
1374         tempfile.mktemp().
1375
1376         * katie.py (Katie.do_reject): use it and don't import tempfile.
1377         * lisa (prod_maintainer): likewise.
1378         (edit_note): likewise.
1379         (edit_new): likewise.
1380         * lauren (reject): likewise.
1381         * melanie (main): likewise.
1382         * neve (do_sources): likewise.
1383         * rene (main): likewise.
1384         * tea (validate_sources): likewise.
1385
1386 2004-03-31  James Troup  <james@nocrew.org>
1387
1388         * tea (validate_sources): remove unused 's' temporary variable.
1389
1390 2004-03-15  James Troup  <james@nocrew.org>
1391
1392         * jennifer (check_dsc): check changes["architecture"] for
1393         source before we do anything else.
1394
1395 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1396
1397         * billie: Added
1398         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1399
1400 2004-03-12  James Troup  <james@nocrew.org>
1401
1402         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1403
1404         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1405
1406         * katie.py (Katie.accept): add support for DebBugs Version
1407         Tracking by writing out .versions (generated in jennifer's
1408         get_changelog_versions()) and .debinfo (mapping of binary ->
1409         source) files.
1410
1411         * ashley (main): add dsc["bts changelog"].
1412
1413         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1414
1415         * jennifer (check_diff): obsoleted by check_source(), removed.
1416         (check_source): new function: create a temporary directory and
1417         move into it and call get_changelog_versions().
1418         (get_changelog_versions): new function: extract the source package
1419         and optionally parse debian/changelog to obtain the version
1420         history for the BTS.
1421         (process_it): call check_source() rather than check_diff().
1422
1423 2004-03-08  James Troup  <james@nocrew.org>
1424
1425         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1426         listbar" rather than "if listbar.count(varfoo)"' change on
1427         2004-02-24.
1428
1429 2004-03-05  James Troup  <james@nocrew.org>
1430
1431         * alicia (main): don't warn about not closing bugs - we don't
1432         manage overrides through the BTS.
1433
1434 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1435
1436         * docs/README.config: lots of updates and corrections.
1437         * docs/README.first: likewise.
1438
1439         * docs/README.config: drop unused Dir::Queue::Root.
1440         * katie.conf-non-US: likewise.
1441         * katie.conf: likewise.
1442         * katie.conf-security: likewise.
1443
1444 2004-02-27  James Troup  <james@nocrew.org>
1445
1446         * rose (process_tree): use 'if var in [ list ]' rather than long
1447         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1448         Michlmayr.
1449
1450         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1451         suggested by Martin Michlmayr.
1452         * catherine (poolize): likewise.
1453         * charisma (main): likewise.
1454         * halle (check_changes): likewise.
1455         * heidi (main): likewise.
1456         (process_file): likewise.
1457         * kelly (install): likewise.
1458         (stable_install): likewise.
1459         * utils.py (fix_maintainer): likewise.
1460
1461         * apt.conf: add support for debian-installer in testing-proposed-updates.
1462         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1463         add - set to main.
1464
1465         * mkmaintainers: add "-T15" option to wget of non-US packages file
1466         so that we don't hang cron.daily if non-US is down.
1467
1468         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1469
1470         * templates/jennifer.bug-close: add Source and Source-Version
1471         pseudo-headers that may be used for BTS Version Tracking someday
1472         [ajt@].
1473
1474         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1475         (main): likewise.
1476
1477         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1478
1479 2004-02-25  James Troup  <james@nocrew.org>
1480
1481         * katie.conf (SuiteMappings): don't map testing-security to
1482         proposed-updates.
1483
1484 2004-02-24  James Troup  <james@nocrew.org>
1485
1486         * katie.py (Katie.__init__): remove unused 'values' field.
1487
1488         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1489         rather than 's.count(c) > 0'.
1490
1491         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1492         rather than "if listbar.count(varfoo)".
1493         * halle (check_joey): likewise.
1494         * jeri (check_joey): likewise.
1495         * lisa (edit_index): likewise.
1496         * jenna (stable_dislocation_p): likewise.
1497
1498         * jennifer (main): remove unused global 'nmu'.
1499
1500 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1501
1502         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1503           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1504           the dak tools close bugs.
1505
1506 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1507
1508         * katie.conf (Alicia): Added an Alicia section with email address
1509         * templates/alicia.bug-close: Added
1510         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1511         * alicia (main): Added a -d/--done argument
1512
1513 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1514
1515         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1516
1517 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1518
1519         * lisa (prod_maintainer): Added function to prod the maintainer without
1520           accepting or rejecting the package
1521         * templates/lisa.prod: Added this template for the prodding mail
1522
1523         * .cvsignore: Added neve-files which turns up in new installations
1524
1525 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1526
1527         * alicia (usage): Fixed usage message to offer section and priority
1528           as seperately optional arguments.
1529         * alicia (main): Added a % (arg) interpolation needed when only
1530           one of section or priority is provided and it cannot be found.
1531
1532 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1533
1534         * alicia: Added
1535         * docs/alicia.1.sgml: Added
1536         * docs/Makefile: Added alicia to the list of manpages to build
1537         * docs/README.names: Noted what alicia does
1538         * docs/README.first: Noted where alicia is useful
1539
1540 2004-01-21  James Troup  <james@nocrew.org>
1541
1542         * madison (main): add -b/--binary-type.
1543         (usage): likewise.
1544
1545         * denise (main): generate debian-installer overrides for testing
1546         too.
1547         * apt.conf: add support for debian-installer in testing.
1548         * katie.conf (Suite::Testing::UdebComponents): set to main.
1549
1550         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1551         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1552         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1553
1554         * utils.py (parse_changes): don't process data not inside the
1555         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1556         pointing this out.
1557         * test/005/test.py (main): new test to test for above.
1558
1559 2004-01-04  James Troup  <james@nocrew.org>
1560
1561         * jenna (write_filelists): correct typo, s/Components/Component/
1562         for Options.
1563
1564 2004-01-04  Ryan Murray  <rmurray@debian.org>
1565
1566         * cron.buildd: move update of overrides and Packages file...
1567         * cron.unchecked: to here.
1568         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1569         * katie.conf-security: likewise
1570
1571 2003-11-20  James Troup  <james@nocrew.org>
1572
1573         * jenna (main): don't use utils.try_with_debug(), it produces way
1574         too much output.
1575
1576         * halle (check_changes): don't error out if a .changes refers to a
1577         non-existent package, just warn and skip the file.
1578
1579         * docs/README.stable-point-release: mention halle and .changes
1580         obsoleted by removal through melanie.  Update for 3.0r2.
1581
1582         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1583         (Suite::Stable::Description): update for 3.0r2.
1584         (Lauren::MoreInfoURL): likewise.
1585         * katie.conf-non-US (Suite::Stable::Version): likewise.
1586         (Suite::Stable::Description): likewise.
1587         (Lauren::MoreInfoURL): likewise.
1588
1589         * apt.conf.stable (Default): don't define MaxContentsChange.
1590         * apt.conf.stable-non-US (Default): likewise.
1591
1592         * lauren (reject): hack to work around partial replacement of an
1593         upload, i.e. one or more binaries superseded by another source
1594         package.
1595
1596 2003-11-17  James Troup  <james@nocrew.org>
1597
1598         * pseudo-packages.maintainers: point installation-reports at
1599         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1600         request.
1601
1602         * utils.py (parse_changes): calculate the number of lines once
1603         with len() rather than max().
1604
1605         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1606         files, since check_dsc_against_db() deletes the .orig.tar.gz
1607         entry.
1608
1609 2003-11-13  Ryan Murray  <rmurray@debian.org>
1610
1611         * apt.conf: specify a src override file for debian-installer
1612
1613 2003-11-10  James Troup  <james@nocrew.org>
1614
1615         * fernanda.py (strip_pgp_signature): new function - strips PGP
1616         signature from a file and returns the modified contents of the
1617         file in a string.
1618         (display_changes): use it.
1619         (read_dsc): likewise.
1620
1621 2003-11-09  Ryan Murray  <rmurray@debian.org>
1622
1623         * cron.buildd: export accepted_autobuild table for unstable, and use
1624         it to generate the incoming Packages/Sources rather than having apt
1625         walk the directory.
1626         * apt.conf.buildd: use exported table from cron.buildd to generate
1627         Packages/Sources
1628
1629 2003-11-07  James Troup  <james@nocrew.org>
1630
1631         * kelly: import errno.
1632
1633         * katie.py (Katie.build_summaries): sort override disparities.
1634
1635         * kelly (install): set dsc_component based on the .dsc's component
1636         not a random binaries.
1637
1638 2003-10-29  James Troup  <james@nocrew.org>
1639
1640         * katie.py (Katie.build_summaries): don't assume changes["source"]
1641         exists since it might not.
1642
1643 2003-10-20  James Troup  <james@nocrew.org>
1644
1645         * pseudo-packages.maintainers: update security.d.o to use
1646         team@s.d.o at joy@'s request.
1647
1648 2003-10-17  James Troup  <james@nocrew.org>
1649
1650         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1651
1652 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1653
1654         * tea (chk_bd_process_dir): use .endswith rather than slice.
1655
1656 2003-10-14  James Troup  <james@nocrew.org>
1657
1658         * tea (check_build_depends): new function.
1659         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1660         in the archive.
1661         (main): update for new function.
1662         (usage): likewise.
1663
1664         * katie.py (Katie.do_reject): sanitize variable names,
1665         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1666         os.close() to outside if clause.
1667
1668         * jennifer (check_dsc): check build-depends and
1669         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1670         Fold the ARRAY check into the same code block and tidy up it's
1671         rejection message.
1672         (check_changes): ensure that the Files field is non-empty.
1673         Suggested by Santiago Vila <sanvila@unex.es>
1674         (check_changes): normalize reject messages.
1675         (check_dsc): instead of doing most of the checks inside a for loop
1676         and an if, find the dsc_filename in a short loop over files first
1677         and then do all the checks.  Add check for more than one .dsc in a
1678         .changes which we can't handle.  Normalize reject messages.
1679
1680 2003-10-13  James Troup  <james@nocrew.org>
1681
1682         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1683         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1684
1685         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1686         variables while iterating over 'files'.  Don't regenerate it when
1687         checking for source if source is mentioned.
1688
1689         Reject source only uploads if the config variable
1690         Dinstall::Reject::NoSourceOnly is set.
1691
1692 2003-10-03  James Troup  <james@nocrew.org>
1693
1694         * rene (main): add nasty hardcoded reference to debian-installer
1695         so we detect NBS .udebs.
1696
1697 2003-09-29  James Troup  <james@nocrew.org>
1698
1699         * apt.conf (old-proposed-updates): remove.
1700         * apt.conf-non-US (old-proposed-updates): likewise.
1701
1702 2003-09-24  James Troup  <james@nocrew.org>
1703
1704         * tea (check_files_not_symlinks): new function, ensure files
1705         mentioned in the database aren't symlinks.  Includes code to
1706         update any files that are like this to their real filenames +
1707         location; commented out by though.
1708         (usage): update for new function.
1709         (main): likewise.
1710
1711 2003-09-24  Anthony Towns  <ajt@debian.org>
1712
1713         * vars: external-overrides variable added
1714         * cron.daily: Update testing/unstable Task: overrides from joeyh
1715         managed external source.
1716
1717 2003-09-22  James Troup  <james@nocrew.org>
1718
1719         * kelly (install): if we can't move the .changes into queue/done,
1720         fail don't warn and carry on.  The old behaviour pre-dates NI and
1721         doesn't make much sense now since jennifer checks both
1722         queue/accepted and queue/done for any .changes files it's
1723         processing.
1724
1725         * utils.py (move): don't throw exceptions on existing files or
1726         can't overwrite, instead just fubar out.
1727
1728         * jennifer (check_dsc): also check Build-Depends-Indep for
1729         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1730
1731 2003-09-18  James Troup  <james@nocrew.org>
1732
1733         * katie.py (Katie.close_bugs): only log the bugs we've closed
1734         once.
1735
1736         * kelly (main): log as 'kelly', not 'katie'.
1737
1738 2003-09-16  James Troup  <james@nocrew.org>
1739
1740         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1741
1742         * jennifer (check_changes): normalize reject message for "changes
1743         file already exists" to be %s: <foo>.
1744         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1745         produced by broken dpkg-source in 1.10.11.  Tone down and
1746         normalize rejection message for incompatible 'Format' version
1747         numbers.
1748         (check_diff): likewise tone down and normalize.
1749
1750 2003-09-07  James Troup  <james@nocrew.org>
1751
1752         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1753         don't bomb out on bogus empty lines.
1754         (build_file_list): check for changes["files"] earlier.  use Dict
1755         to create files[name] dictionary.
1756         (send_mail): don't bother validating arguments.
1757         (check_signature): minor improvements to some of the rejection
1758         messages including listing the key id of the key that wasn't found
1759         in the keyring.
1760         (wrap): new function.
1761
1762         * tea: add new check 'validate-indices' that ensures all files
1763         mentioned in indices (Packages, Sources) files do in fact exist.
1764
1765         * catherine (poolize): use a local re_isadeb which handles legacy
1766         (i.e. no architecture) style .deb filenames.
1767
1768         * rosamund: new script.
1769
1770         * rhona (check_binaries): when checking for binary packages not in
1771         a suite, don't bother selecting files that already have a
1772         last_used date.
1773         (check_sources): likewise.
1774
1775         * rhona: change all SQL EXISTS sub-query clauses to use the
1776         postgres suggested convention of "SELECT 1 FROM".
1777         * andrea (main): likewise.
1778         * tea (check_override): likewise.
1779         * catherine (main): likewise.
1780
1781         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1782         entries and in other suites MustBeNewerThan's.
1783         (SuiteMappings): likewise
1784         * katie.conf-non-US: likewise.
1785         * katie.conf-security: likewise.
1786
1787         * apt.conf-security: remove oldstable.
1788         * apt.conf.stable: likewise.
1789         * apt.conf.stable-non-US: likewise.
1790         * cron.buildd-security: likewise.
1791         * cron.daily-security: likewise.
1792         * vars-security (suites): likewise.
1793         * wanna-build/trigger.daily: likewise.
1794
1795         * claire.py (clean_symlink): move...
1796         * utils.py (clean_symlink): here.
1797
1798         * claire.py (find_dislocated_stable): update accordingly.
1799
1800 2003-08-16  Anthony Towns  <ajt@debian.org>
1801
1802         * katie.py (source_exists): expand the list of distributions
1803         the source may exist in to include any suite that's mapped to
1804         the destination suite (even transitively (a->b->c)). This should
1805         unbreak binary uploads to *-proposed-updates.
1806
1807 2003-08-09  Randall Donald  <rdonald@debian.org>
1808
1809         * lisa (recheck): change changes["distribution"].keys() to
1810         Katie.pkg.changes...
1811
1812 2003-08-08  Randall Donald  <rdonald@debian.org>
1813
1814         * katie.py: only tag bugs as fixed-in-experimental for
1815         experimental uploads
1816
1817 2003-07-26  Anthony Towns  <ajt@debian.org>
1818
1819         * katie.py (source_exists): add an extra parameter to limit the
1820         distribution(s) the source must exist in.
1821         * kelly, lisa, jennifer: update to use the new source_exists
1822
1823 2003-07-15  Anthony Towns  <ajt@debian.org>
1824
1825         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1826         checksums for debian-installer stuff even when it's just a symlink to
1827         another suite
1828
1829         * apt.conf: add the FakeDI line
1830
1831 2003-06-09  James Troup  <james@nocrew.org>
1832
1833         * kelly (check): make sure the 'file' we're looking for in 'files'
1834         hasn't been deleted by katie.check_dsc_against_db().
1835
1836 2003-05-07  James Troup  <james@nocrew.org>
1837
1838         * helena (time_pp): fix s/years/year/ typo.
1839
1840 2003-04-29  James Troup  <james@nocrew.org>
1841
1842         * madison (usage): document -c/--component.
1843
1844         * madison (usage): Fix s/seperated/separated/.
1845         * melanie (usage): likewise.
1846         * jenna (usage): likewise.
1847
1848 2003-04-24  James Troup  <james@nocrew.org>
1849
1850         * cron.daily-non-US: if there's nothing for kelly to install, say
1851         so.
1852
1853         * jennifer (check_timestamps): print sys.exc_value as well as
1854         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1855         failed' with 'deb contents' to make it clearer what timestamp(s)
1856         are being checked.
1857
1858 2003-04-15  James Troup  <james@nocrew.org>
1859
1860         * cron.daily-non-US: only run kelly if there are some .changes
1861         files in accepted.
1862
1863         * rene: add -m/--mode argument which can be either daily (default)
1864         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1865         Various changes to make this possible including a poor attempt at
1866         splitting main() up a little.  De-hardcode suite numbers from SQL
1867         queries and return quietly from do_nviu() if experimental doesn't
1868         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1869         is.
1870
1871         * debian/control (Depends): remove python-zlib as it's obsolete.
1872
1873         * charisma (main): don't slice the \n off strings when we're
1874         strip()-ing it anyway.
1875         * heidi (set_suite): likewise.
1876         (process_file): likewise.
1877         * natalie (process_file): likewise.
1878
1879 2003-04-08  James Troup  <james@nocrew.org>
1880
1881         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1882         slow queries by using one LIKE '%foo%' and then matching against
1883         '%s' or '/%s$' in python.  Also only join location when we need it
1884         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1885         query, so 6s for each sourceful package.
1886
1887         * cron.daily: invoke rene and send the report to ftpmaster.
1888         * cron.daily-non-US: likewise.
1889
1890 2003-03-14  James Troup  <james@nocrew.org>
1891
1892         * utils.py (send_mail): default filename to blank.
1893         * amber (make_advisory): adapt.
1894         * jennifer (acknowledge_new): likewise.
1895         * katie.py (Katie.close_bugs): likewise.
1896         (Katie.announce): likewise.
1897         (Katie.accept): likewise.
1898         (Katie.check_override): likewise.
1899         (Katie.do_reject): likewise.
1900         * kelly (do_reject): likewise.
1901         (stable_install): likewise.
1902         * lisa (do_bxa_notification): likewise.
1903         * lauren (reject): likewise.
1904         * melanie (main): likewise.
1905
1906         * rene (add_nbs): check any NBS packages against unstable to see
1907         if they haven't been removed already.
1908
1909         * templates/katie.rejected: remove paragraph about rejected files
1910         since they're o-rwx due to c-i-m and the uploader can't do
1911         anything about them and shania will take care of them anyway.
1912
1913         * madison (usage): update usage example to use comma seperation.
1914         * melanie (usage): likewise.
1915
1916         * utils.py (split_args): new function; splits command line
1917         arguments either by space or comma (whichever is used).  Also has
1918         optional-but-default DWIM spurious space detection to avoid
1919         'command -a i386, m68k' problems.
1920         (parse_args): use it.
1921         * melanie (main): likewise.
1922
1923         * melanie (main): force the admin to tell someone if we're not
1924         doing a rene-led removal (or closing a bug, which counts as
1925         telling someone).
1926
1927 2003-03-05  James Troup  <james@nocrew.org>
1928
1929         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1930         and python sections.
1931         * katie.conf-security (Section): likewise.
1932
1933         * add_constraints.sql: add uid and uid_id_seq to grants.
1934
1935         * lisa (determine_new): also warn about adding overrides to
1936         oldstable.
1937
1938         * madison (main): make the -S/--source-and-binary query obey
1939         -s/--suite restrictions.
1940
1941 2003-03-03  James Troup  <james@nocrew.org>
1942
1943         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1944         exists, warn the user that our output might seem strange.  (People
1945         get confused by multiple versions in a suite which happens
1946         post-kelly but pre-jenna.)
1947
1948 2003-02-21  James Troup  <james@nocrew.org>
1949
1950         * kelly (main): we don't need to worry about StableRejector.
1951
1952         * melanie (main): sort versions with apt_pkg.VersionCompare()
1953         prior to output.
1954
1955         * lauren: new script to manually reject packages from
1956         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1957
1958 2003-02-20  James Troup  <james@nocrew.org>
1959
1960         * kelly (init): remove unused -m/--manual-reject argument.
1961
1962         * katie.py (Katie.force_reject): renamed from force_move to make
1963         it more explicit what this function does.
1964         (Katie.do_reject): update to match.
1965
1966         * utils.py (prefix_multi_line_string): add an optional argument
1967         include_blank_lines which defaults to 0.  If non-zero, blank lines
1968         will be includes in the output.
1969
1970         * katie.py (Katie.do_reject): don't add leading space to each line
1971         of the reject message.  Include blank lines when showing the
1972         message to the user.
1973
1974 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1975
1976         * utils.py (fix_maintainer): replace pointless re.sub() with
1977         simple string format.
1978
1979 2003-02-11  James Troup  <james@nocrew.org>
1980
1981         * lisa (edit_overrides): only strip-to-one-char and upper-case
1982         non-numeric answers.  Fixes editing of items with indices >= 10;
1983         noticed by Randall.
1984         (edit_overrides): correct order of arguments to "not a valid
1985         index" error message.
1986
1987         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1988         remove_duplicate_versions(); thanks to aj for the initial
1989         diagnosis.
1990         (remove_duplicate_versions): correct how we return
1991         dominant_versions.
1992         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1993         a tuple rather than just a tuple.
1994
1995 2003-02-10  James Troup  <james@nocrew.org>
1996
1997         * emilie: new script - sync fingerprint and uid tables with a
1998         debian.org LDAP DB.
1999
2000         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2001         in 'fingerprint'.
2002
2003         * db_access.py (get_or_set_uid_id): new function.
2004
2005         * jennifer (main): update locking to a) not used FCNTL (deprecated
2006         in python >= 2.2) and b) acknowledge upstream's broken
2007         implementation of lockf (see Debian bug #74777), c) try to acquire
2008         the lock non-blocking.
2009         * kelly (main): likewise.
2010
2011         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2012
2013         * madison (main): only append the package to new_packages if it's
2014         not already in there; fixes -S/--source-and-binary for cases where
2015         the source builds a binary package of the same name.
2016
2017 2003-02-10  Anthony Towns  <ajt@debian.org>
2018
2019         * madison (main): use explicit JOIN syntax for
2020         -S/--source-and-binary queries to reduce the query's runtime from
2021         >10 seconds to negligible.
2022
2023 2003-02-08  James Troup  <james@nocrew.org>
2024
2025         * rene (main): in the NVIU output, append items to lists, not
2026         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2027         should be removed.
2028
2029 2003-02-07  James Troup  <james@nocrew.org>
2030
2031         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2032         Sources [aj].
2033
2034         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2035         O. Benham/Adam Heath/.
2036
2037         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2038         (Suite::Stable::Description): update for 3.0r1a.
2039         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2040
2041         * utils.py (gpgv_get_status_output): rename from
2042         get_status_output().
2043
2044         * neve (check_signature): use gpgv_get_status_output and Dict from
2045         utils().  Add missing newline to error message about duplicate tokens.
2046
2047         * saffron (per_arch_space_use): also print space used by source.
2048         (output_format): correct string.join() invocation.
2049
2050         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2051
2052 2003-02-04  James Troup  <james@nocrew.org>
2053
2054         * cron.buildd: correct generation of Packages/Sources and grep out
2055         non-US/non-free as well as non-free.
2056
2057 2003-02-03  Ryan Murray  <rmurray@debian.org>
2058
2059         * cron.buildd: generate quinn-diff output with full Packages/Sources
2060           files to get out-of-date vs. uncompiled right.
2061         * apt.conf.buildd: no longer generate uncompressed files, as they
2062           are generated in cron.buildd instead
2063         * add -i option to quinn-diff to ignore binary-all packages
2064         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2065           aren't in the packages file, the arch that uploaded them will build
2066           them anyways...
2067
2068 2003-01-30  James Troup  <james@nocrew.org>
2069
2070         * rene (main): only print suggested melanie command when there's
2071         some NBS to remove.
2072
2073 2003-01-30  Ryan Murray  <rmurray@debian.org>
2074
2075         * cron.buildd: fix incorrectly inverted lockfile check
2076
2077 2003-01-29  Ryan Murray  <rmurray@debian.org>
2078
2079         * cron.buildd: generate override.sid.all3.src
2080         * apt.conf.buildd: use generated override.sid.all3.src
2081
2082 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2083
2084         * utils.py (get_status_output): moved from jennifer.
2085         (Dict): likewise.
2086         (check_signature): likewise.
2087
2088         * jennifer (get_status_output): moved to utils.py.
2089         (Dict): likewise.
2090         (check_signature): likewise.
2091
2092         * utils.py (check_signature): add an argument to specifiy which
2093         function to call when an error was found.
2094         (check_signature): document this function better.
2095
2096         * jennifer (check_files): pass the reject function as an argument
2097         to utils.check_signature.
2098         (process_it): likewise.
2099
2100 2003-01-20  James Troup  <james@nocrew.org>
2101
2102         * rene (main): lots of changes to improve the output and make it
2103         more useful.
2104
2105         * katie.py (Katie.check_override): make the override messages
2106         clearer (hopefully).
2107
2108 2002-12-26  James Troup  <james@nocrew.org>
2109
2110         * ziyi (usage): document the ability to pass suite(s) as
2111         argument(s).
2112         (main): read apt.conf after checking for -h/--help.
2113
2114         * tea (main): take the check to run as an argument.
2115
2116         * saffron.R: R script to graph daily install runs.
2117
2118         * saffron: new script; various stats functions.
2119
2120         * rhona (main): connect to the database after checking for -h/--help.
2121
2122         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2123
2124         * melanie (main): sort versions with utils.arch_compare_sw().
2125
2126         * madison (usage): alphabetize order of options.
2127         * melanie (usage): likewise.
2128
2129         * kelly (usage): fix usage short description (we aren't dinstall).
2130
2131         * julia (usage): fix usage description and alphabetize order of
2132         options.
2133
2134         * jeri (usage): fix usage short description.
2135
2136         * jennifer (main): move --help and --version checks from here...
2137         (init): to here so that they work with an empty katie.conf.
2138         * kelly: likewise.
2139
2140         * alyson (usage): new function.
2141         (main): use it.
2142         * andrea: likewise.
2143         * ashley: likewise.
2144         * cindy: likewise.
2145         * denise: likewise.
2146         * helena: likewise.
2147         * neve: likewise.
2148         * rene: likewise.
2149         * rose: likewise.
2150         * tea: likewise.
2151
2152         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2153         entry that caused tasks to be omitted from 3.0r1.
2154
2155 2002-12-10  James Troup  <james@nocrew.org>
2156
2157         * jennifer (check_files): sanity check the Depends field to ensure
2158         it's non-empty if present since apt chokes on an empty one.
2159         Thanks to Ryan Murray for the idea.
2160
2161 2002-12-08  James Troup  <james@nocrew.org>
2162
2163         * katie.conf-security (Helena::Directories): new; include accepted
2164         in addition to byhand and new.
2165
2166         * helena (process_changes_files): use utils.arch_compare_sw().
2167         Justify things based on the longest [package, version,
2168         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2169         the commas in architecture and version lists for the same reason.
2170         (main): make directories we process configurable through
2171         Helena::Directories in the config file; if that doesn't exist
2172         default to the old hardcoded values (byhand & new).
2173
2174         * utils.py (arch_compare_sw): moved here from madison.
2175         * madison (main): adjust to compensate.
2176
2177 2002-12-06  James Troup  <james@nocrew.org>
2178
2179         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2180         right filename.
2181
2182 2002-12-05  James Troup  <james@nocrew.org>
2183
2184         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2185
2186 2002-11-28  Randall Donald  <rdonald@debian.org>
2187
2188         * fernanda.py (read_control): fix typo of 'Architecture'.
2189
2190 2002-11-26  James Troup  <james@nocrew.org>
2191
2192         * lisa (check_pkg): call less with '-R' so we see the colour from
2193         Randall's fernanda changes.
2194
2195         * neve (process_sources): if Directory points to a legacy location
2196         but the .dsc isn't there; assume it's broken and look in the pool.
2197         (update_section): new, borroed from alyson.
2198         (do_da_do_da): use it.
2199         (process_packages): add suite_it to the cache key used for
2200         arch_all_cache since otherwise we only add a package to the first
2201         suite it's in and ignore any subsequent ones.
2202
2203         * katie.conf-non-US (Location): fixed to reflect reality (all
2204         suites, except old-proposed-updates (which is legacy-mixed)) are
2205         pool.
2206
2207         * utils.py (try_with_debug): wrapper for print_exc().
2208         * jenna (main): use it.
2209         * neve (main): likewise.
2210
2211 2002-11-25  Randall Donald  <rdonald@debian.org>
2212
2213         * fernanda.py (main): added -R to less command line for raw control
2214         character support to print colours
2215         (check_deb): Instead of running dpkg -I on deb file, call
2216         output_deb_info, the new colourized control reporter.
2217         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2218         of printing out each .dsc line.
2219         (output_deb_info): new function. Outputs each key/value pair from
2220         read_control except in special cases where we highlight section,
2221         maintainer, architecture, depends and recommends.
2222         (create_depends_string): new function. Takes Depends tree and looks
2223         up it's compontent via projectb db, colourizes and constructs a
2224         depends string in original order.
2225         (read_dsc): new function. reads and parses .dsc info via
2226         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2227         colourized.
2228         (read_control): new function. reads and parses control info via
2229         apt_pkg. Depends and Recommends are split in to list structures,
2230         Section and Architecture are colourized. Maintainer is colourized
2231         if it has a localhost.localdomain address.
2232         (split_depends): new function. Creates a list of lists of
2233         dictionaries of depends (package,version relation). Top list is
2234         colected from comma delimited items. Sub lists are | delimited.
2235         (get_comma_list): new function. splits string input among commas
2236         (get_or_list): new function. splits string input among | delimiters
2237         (get_depends_parts): new function. Creates dictionary of package name
2238         and version relation from dependancy string.
2239         Colours for section and depends are per component. Unfound depends
2240         are in bold. Lookups using version info is not supported yet.
2241
2242 2002-11-22  James Troup  <james@nocrew.org>
2243
2244         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2245         'udmsearch'.
2246
2247         * amber (make_advisory): string.atol() is deprecated and hasn't
2248         been ported to string methods.  Use long() instead.
2249
2250         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2251         creating the database since we'll fail badly if it's created with
2252         e.g. UNICODE encoding.
2253
2254         * rose (main): AptCnf is a global.
2255
2256         * neve (get_location_path): new function determines the location
2257         from the the first (left-most) directory of a Filename/Directory.
2258         (process_sources): don't need 'location' anymore.  Use
2259         utils.warn().  Use the Directory: field for each package to find
2260         the .dsc.  Use get_location_path() to determine the location for
2261         each .dsc.
2262         (process_packages): do't need 'location' anymore.  Use
2263         utils.warn().  Use get_location_path().
2264         (do_sources): don't need 'location', drop 'prefix' in favour of
2265         being told the full path to the Sources file, like
2266         process_packages().
2267         (do_da_do_da): main() renamed, so that main can call us in a
2268         try/except.  Adapt for the changes in do_sources() and
2269         process_packages() above.  Assume Sources and Packages file are in
2270         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2271
2272         * katie.conf-security (Location): fixed to reflect reality (all
2273         suites are pool, not legacy).
2274
2275         * utils.py (print_exc): more useful (i.e. much more verbose)
2276         traceback; a recipe from the Python cookbook.
2277         * jenna (main): use it.
2278         * neve (main): likewise.
2279
2280 2002-11-19  James Troup  <james@nocrew.org>
2281
2282         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2283         handling which was FUBAR for multi-suite uploads.  Now we just
2284         make a dictionary of destinations to copy to and iterate over
2285         those.
2286
2287         * fernanda.py (check_deb): run linda as well as lintian.
2288
2289 2002-10-21  James Troup  <james@nocrew.org>
2290
2291         * melanie (main): change X-Melanie to X-Katie and prefix it with
2292         'melanie '.
2293
2294         * lisa (main): prefix X-Katie with 'lisa '.
2295
2296         * jennifer (clean_holding): fix typo in string method changes;
2297         s/file.find(file/file.find(/.
2298
2299         * cron.daily: invoke helena and send the report to ftpmaster.
2300         * cron.daily-non-US: likewise.
2301
2302 2002-10-16  James Troup  <james@nocrew.org>
2303
2304         * kelly (check): call reject() with a blank prefix when parsing
2305         the return of check_dsc_against_db() since it does its own
2306         prefix-ing.
2307
2308         * rose: new script; only handles directory creation initally.
2309
2310         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2311         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2312
2313 2002-10-06  James Troup  <james@nocrew.org>
2314
2315         * rene (main): remove bogus argument handling.
2316
2317         * kelly: katie, renamed.
2318         * cron.daily: adapt for katie being renamed to kelly.
2319         * cron.daily-non-US: likewise.
2320         * amber (main): likewise.
2321
2322         * Changes for python 2.1.
2323
2324         * kelly: time.strftime no longer requires a second argument of
2325         "time.localtime(time.time())".
2326         * logging.py: likewise.
2327         * rhona: likewise.
2328         * shania (init): likewise.
2329
2330         * amber: use augmented assignment.
2331         * catherine (poolize): likewise.
2332         * claire.py (fix_component_section): likewise.
2333         * halle (check_changes): likewise.
2334         * helena: likewise.
2335         * jenna: likewise.
2336         * jennifer: likewise.
2337         * jeri: likewise.
2338         * katie.py: likewise.
2339         * kelly: likewise.
2340         * lisa: likewise.
2341         * madison (main): likewise.
2342         * melanie: likewise.
2343         * natalie: likewise.
2344         * neve: likewise.
2345         * rhona: likewise.
2346         * tea: likewise.
2347         * utils.py: likewise.
2348         * ziyi: likewise.
2349
2350         * amber: use .endswith.
2351         * fernanda.py: likewise.
2352         * halle (main): likewise.
2353         * jennifer: likewise.
2354         * jeri: likewise.
2355         * katie.py: likewise.
2356         * kelly: likewise.
2357         * lisa: likewise.
2358         * neve: likewise.
2359         * shania (main): likewise.
2360         * utils.py: likewise.
2361
2362         * alyson: use string methods.
2363         * amber: likewise.
2364         * andrea: likewise.
2365         * ashley: likewise.
2366         * catherine: likewise.
2367         * charisma: likewise.
2368         * claire.py: likewise.
2369         * db_access.py: likewise.
2370         * denise: likewise.
2371         * halle: likewise.
2372         * heidi: likewise.
2373         * helena: likewise.
2374         * jenna: likewise.
2375         * jennifer: likewise.
2376         * jeri: likewise.
2377         * julia: likewise.
2378         * katie.py: likewise.
2379         * kelly: likewise.
2380         * lisa: likewise.
2381         * logging.py: likewise.
2382         * madison: likewise.
2383         * melanie: likewise.
2384         * natalie: likewise.
2385         * neve: likewise.
2386         * rene: likewise.
2387         * tea: likewise.
2388         * utils.py: likewise.
2389         * ziyi: likewise.
2390
2391 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2392
2393         * utils.py (parse_changes): use <string>.startswith() rather than
2394         string.find().
2395
2396 2002-08-27  Anthony Towns  <ajt@debian.org>
2397
2398         * katie.py (in_override_p): when searching for a source override,
2399         and the dsc query misses, search for both udeb and deb overrides
2400         as well. Should fix the UNACCEPT issues with udebs.
2401
2402 2002-08-24  James Troup  <james@nocrew.org>
2403
2404         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2405         source+binary package finding code which was causing severe
2406         performance degradation with postgres 7.2.
2407
2408 2002-08-14  James Troup  <james@nocrew.org>
2409
2410         * julia (main): use the pwd.getpwall() to get system user info
2411         rather than trying to read a password file.  Add a -n/--no-action
2412         option.
2413
2414         * cron.hourly: julia no longer takes any arguments.
2415         * cron.hourly-non-US: likewise.
2416
2417 2002-08-07  James Troup  <james@nocrew.org>
2418
2419         * katie (install): handle multi-suite uploads when CopyChanges
2420         and/or CopyKatie are in use, ensuring we only copy stuff once.
2421
2422 2002-08-01  Ryan Murray  <rmurray@debian.org>
2423
2424         * wanna-build/trigger.daily: initial commit, with locking
2425         * cron.buildd: add locking against daily run
2426
2427 2002-07-30  James Troup  <james@nocrew.org>
2428
2429         * melanie (main): readd creation of suite_ids_list so melanie is
2430         remotely useful again.
2431
2432         * katie.conf: adopt for woody release; diable
2433         StableDislocationSupport, add oldstable, adjust other suites and
2434         mappings, fix up location.
2435         * katie.conf-non-US: likewise.
2436         * katie.conf-security: likewise.
2437
2438         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2439         stable.
2440         * apt.conf.stable-non-US: likewise.
2441
2442         * apt.conf-security: adapt for woody release; adding oldstable,
2443         oldstable, adjust stable and testing.
2444         * cron.daily-security: likewise.
2445         * cron.buildd-security: likewise.
2446
2447         * apt.conf: adapt for woody release; rename woody-proposed-updates
2448         to testing-proposed-updates and proposed-updates to
2449         old-proposed-updates.
2450         * apt.conf-non-US: likewise.
2451
2452         * vars-non-US (copyoverrides): add sarge.
2453         * vars (copyoverrides): likewise.
2454
2455         * vars-security (suites): add oldstable.
2456
2457 2002-07-22  Ryan Murray  <rmurray@debian.org>
2458
2459         * apt.conf.security-buildd: use suite codenames instead of
2460           distnames.
2461
2462 2002-07-16  James Troup  <james@nocrew.org>
2463
2464         * denise (main): fix filenames for testing override files.
2465
2466 2002-07-14  James Troup  <james@nocrew.org>
2467
2468         * jennifer (process_it): call check_md5sums later so we can check
2469         files in the .dsc too
2470         (check_md5sums): check files in the .dsc too.  Check both md5sum
2471         and size.
2472
2473         * melanie (main): use parse_args() and join_with_commas_and() from
2474         utils.  If there's nothing to do, say so and exit, don't ask for
2475         confirmation etc.
2476
2477         * amber (join_with_commas_and): moved from here to ...
2478         * utils.py (join_with_commas_and): here.
2479
2480 2002-07-13  James Troup  <james@nocrew.org>
2481
2482         * madison (main): use parse_args() from utils.  Support
2483         -c/--component.
2484
2485         * jenna (parse_args): moved from here to ...
2486         * utils.py (parse_args): here.
2487
2488         * katie.conf (Architectures): minor corrections to the description
2489         for arm, mips and mipsel.
2490         * katie.conf-non-US (Architectures): likewise.
2491         * katie.conf-security (Architectures): likewise.
2492
2493         * cron.daily-security: use natalie's new -a/--add functionality to
2494         flesh out the security overrides.
2495
2496 2002-07-12  James Troup  <james@nocrew.org>
2497
2498         * cron.buildd (ARCHS): add arm.
2499
2500         * katie.conf: 2.2r7 was released.
2501         * katie.conf-non-US: likewise.
2502
2503         * utils.py (parse_changes): handle a multi-line field with no
2504         starting line.
2505
2506 2002-06-25  James Troup  <james@nocrew.org>
2507
2508         * templates/amber.advisory (To): add missing email address since
2509         __WHOAMI__ is only a name.
2510
2511         * katie.conf-security (Melane::LogFile): correct to go somewhere
2512         katie has write access to.
2513         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2514         Testing.
2515
2516         * natalie: add support for -a/-add which adds packages only
2517         (ignoring changes and deletions).
2518
2519         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2520         use FindB, not get.
2521
2522 2002-06-22  James Troup  <james@nocrew.org>
2523
2524         * jennifer (check_files): validate the package name and version
2525         field.  If 'Package', 'Version' or 'Architecture' are missing,
2526         don't try any further checks.
2527         (check_dsc): likewise.
2528
2529         * utils.py (re_taint_free): add '~' as a valid character.
2530
2531 2002-06-20  Anthony Towns  <ajt@debian.org>
2532
2533         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2534
2535 2002-06-09  James Troup  <james@nocrew.org>
2536
2537         * jennifer (check_files): reduce useless code.
2538
2539         * cron.daily-security: run symlinks -dr on $ftpdir.
2540
2541         * vars-security (ftpdir): add.
2542
2543 2002-06-08  James Troup  <james@nocrew.org>
2544
2545         * neve (update_override_type): transaction is handled higher up in
2546         main().
2547         (update_priority): likewise.
2548         (process_sources): remove code that makes testing a duplicate of
2549         stable.
2550         (process_packages): likewise.
2551
2552         * templates/amber.advisory: add missing mail headers.
2553
2554         * cron.daily-security: also call apt-ftparchive clean for
2555         apt.conf.buildd-security.
2556         * cron.weekly: likewise.
2557
2558         * amber (do_upload): write out a list of source packages (and
2559         their version) uploaded for testing.
2560         (make_advisory): add more Subst mappings for the mail headers.
2561         (spawn): check for suspicious characters in the command and abort
2562         if their found.
2563
2564 2002-06-07  James Troup  <james@nocrew.org>
2565
2566         * ziyi (main): remove the 'nonus'/'security' hacks and use
2567         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2568         the lower level Release files, even if they don't exist.  fubar
2569         out if we can't open a lower level Release file for writing.
2570
2571         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2572         ziyi.
2573         * katie.conf-security (Dinstall): likewise.
2574
2575         * amber (do_upload): renamed from get_file_list().  Determine the
2576         upload host from the original component.
2577         (init): Add a -n/--no-action option.  Fix how we get changes_files
2578         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2579         sys.argv).  Add an Options global.
2580         (make_advisory): support -n/--no-action.
2581         (spawn): likewise.
2582         (main): likewise.
2583         (usage): document -n/--no-action.
2584
2585         * cron.buildd-security: fix path to Packages-arch-specific in
2586         quinn-diff invocation.
2587
2588         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2589         to proper suite names (i.e. stable, testing) rather than codenames
2590         (potato, woody).
2591         (Dinstall::DefaultSuite): likewise.
2592         (Suite): likewise.
2593         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2594         * vars-security (suites): likewise.
2595         * apt.conf-security: likewise.
2596
2597         * katie.conf-security (Component): add "updates/" prefix.
2598         (Suite::*::Components): likewise.
2599         (ComponentMappings): new; map all {ftp-master,non-US} components
2600         -> updates/<foo>.
2601
2602         * katie.conf-security (Natalie): removed; the options have
2603         defaults and ComponentPosition is used by alyson which doesn't
2604         work on security.d.o.
2605         (Amber): replace UploadHost and UploadDir with ComponentMappings
2606         which is a mapping of components -> URI.
2607         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2608         (SuiteMappings): use "silent-map" in preference to "map".
2609
2610         * cron.unchecked-security: fix call to cron.buildd-security.
2611
2612         * cron.daily-security: map local suite (stable) -> override suite
2613         (potato) when fixing overrides.  Correct component in natalie call
2614         to take into account "updates/" prefix.  Fix cut'n'waste in
2615         override.$dist.all3 generation, the old files weren't being
2616         removed, so they were endlessly growing.
2617
2618         * neve (main): don't use .Find for the CodeName since we require
2619         it.  Location::*::Suites is a ValueList.
2620         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2621         out on expired keys, just warn.
2622         (update_override_type): new function; lifted from alyson.
2623         (update_priority): likewise.
2624         (main): use update_{override_type,priority}().
2625
2626         * jennifer (check_distributions): remove redunant test for
2627         SuiteMappings; ValueList("does-not-exist") returns [] which is
2628         fine.  Add support for a "silent-map" type which doesn't warn
2629         about the mapping to the user.
2630         (check_files): add support for ComponentMappings, similar to
2631         SuiteMappings, but there's no type, just a source and a
2632         destination and the original component is stored in "original
2633         component".
2634         * katie.py (Katie.dump_vars): add "original component" as an
2635         optionsal files[file] dump variable.
2636
2637         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2638         query.  Add support for section-less legacy locations like current
2639         security.debian.org through YetAnotherConfigBoolean
2640         'LegacyStableHasNoSections'.
2641         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2642
2643         * utils.py (real_arch): moved here from ziyi.
2644         * ziyi (real_arch): moved to utils.py.
2645         * ziyi (main): likewise.
2646
2647         * claire.py (find_dislocated_stable): use real_arch() with
2648         filter() to strip out source and all.
2649         * neve (main): likewise.
2650         * rene (main): likewise.
2651         * jeri (parse_packages): likewise.
2652
2653 2002-06-06  James Troup  <james@nocrew.org>
2654
2655         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2656         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2657         doing.
2658
2659 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2660
2661         * jeri (check_joey): check if the line contains two elements
2662         before accessing the second.  Also, strip trailing spaces as well
2663         as the newline.
2664         * halle (check_joey): likewise.
2665
2666 2002-06-05  James Troup  <james@nocrew.org>
2667
2668         * cron.unchecked-security: new file; like cron.unchecked but if
2669         there's nothing to do exit so we don't call cron.buildd-security.
2670
2671         * apt.conf.buildd-security: new file.
2672
2673         * vars (archs): alphabetize.
2674         * vars-non-US (archs): likewise.
2675
2676         * vars-security: add unchecked.
2677
2678         * madison (main): reduce rather bizarrely verbose and purposeless
2679         code to print arches to a simple string.join.
2680
2681         * katie.conf (Suites::Unstable): add UdebComponents, a new
2682         valuelist of suites, used by jenna to flesh out the list of
2683         <suite>_main-debian-installer-binary-<arch>.list files generated.
2684         (Dinstall): add StableDislocationSupport, a new boolean used by
2685         jenna to enable or disable stable dislocation support
2686         (i.e. claire), as true.
2687
2688         * katie.conf (Dinstall): add StableDislocationSupport, a new
2689         boolean used by jenna to enable or disable stable dislocation
2690         support (i.e. claire), as true.
2691         * katie.conf-non-US: likewise.
2692         * katie.conf-security: likewise.
2693
2694         * cron.daily-security: generate .all3 overrides for the buildd
2695         support.  Freshen a local copy of Packages-arch-specific from
2696         buildd.debian.org.
2697
2698         * claire.py (find_dislocated_stable): disable the support for
2699         files in legacy-mixed locations since none of the Debian archives
2700         have any anymore.
2701
2702         * helena: new script; produces a report on NEW and BYHAND
2703         packages.
2704
2705         * jenna: rewritten from scratch to fix speed problems.  Run time
2706         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2707         minutes, 105 seconds are the monster query and 70 odd seconds is
2708         claire.
2709
2710         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2711         irrelevant.
2712
2713 2002-06-05  Ryan Murray  <rmurray@debian.org>
2714
2715         * cron.buildd-security: new file.
2716
2717 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2718
2719         * denise (list): take a file argument and use it.
2720         (main): don't abuse sys.stdout, just write to the file.
2721
2722         * claire.py (usage): Fix misspelling.
2723         (clean_symlink): Simplify.
2724         (find_dislocated_stable): Avoid unnecessary work.
2725
2726 2002-05-29  James Troup  <james@nocrew.org>
2727
2728         * cameron: removed; apt-ftparchive can simply walk the directory.
2729
2730 2002-05-26  Anthony Towns  <ajt@debian.org>
2731
2732         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2733         for the autobuilders.
2734
2735 2002-05-24  Ryan Murray  <rmurray@debian.org>
2736
2737         * cron.buildd: update override files before running apt-ftparchive
2738
2739 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2740
2741         * amber (main): remove extra space in prompt.
2742
2743         * utils.py (validate_changes_file_arg): use original filename in
2744         error messages.
2745
2746         * jeri (check_joey): close file after use.
2747         (parse_packages): likewise.
2748         (main): setup debug option properly.
2749
2750         * melanie (main): remove unused packages variable and simplify the
2751         code to build up con_packages by using repr().
2752
2753 2002-05-23  James Troup  <james@nocrew.org>
2754
2755         * lisa (recheck): when we reject, also return 0 so the package is
2756         skipped.
2757         (sg_compare): fix note sorting.
2758         (recheck): remove the .katie file after rejection.
2759
2760         * katie.py (Katie.accept): accepted auto-build support take 3;
2761         this time adding support for security.  Security needs a) non-pool
2762         files copied rather than symlinked since accepted is readable only
2763         by katie/security and www-data needs to be able to see the files,
2764         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2765         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2766         SecurityAcceptedAutoBuild is a new boolean which controls whether
2767         or not normal or security style is used.  The unstable_accepted
2768         table was renamed to accepted_autobuild and a suite column added.
2769         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2770         didn't have it's last_used/in_accepted flags correctly updated.
2771         * katie (install): likewise.
2772         * rhona (clean_accepted_autobuild): likewise.
2773
2774 2002-05-22  James Troup  <james@nocrew.org>
2775
2776         * lisa (sort_changes): new function; sorts changes properly.
2777         Finally.
2778         (sg_compare): new function; helper for sort_changes().  Sorts by
2779         have note and time of oldest upload.
2780         (indiv_sg_compare): new function; helper for sort_changes().
2781         Sorts by source version, have source and filename.
2782         (main): use sort_changes().
2783         (changes_compare): obsoleted; removed.
2784
2785 2002-05-20  James Troup  <james@nocrew.org>
2786
2787         * rhona (clean_accepted_autobuild): don't die if a file we're
2788         trying to remove doesn't exist.  Makes rhona more friendly to
2789         katie/katie.py crashes/bugs without any undue cost.
2790
2791 2002-05-19  James Troup  <james@nocrew.org>
2792
2793         * lisa (main): if sorting a large number of changes give some
2794         feedback.
2795         (recheck): new function, run the same checks (modulo NEW,
2796         obviously) as katie does, if they fail do the standard
2797         reject/skip/quit dance.
2798         (do_pkg): use it.
2799
2800         * katie (install): don't try to unlink the symlink in the
2801         AcceptedAutoBuild support if the destination is not a symlink (or
2802         doesn't exist).  Avoids unnecessary bombs on previous partial
2803         accepts and will still bomb hard if the file exists and isn't a
2804         symlink.
2805
2806         * utils.py: blah, commands _is_ used when the mail stuff isn't
2807         commented out like it is in my test environment.
2808
2809         * lisa (changes_compare): "has note" overrides everything else.
2810         Use .katie files rather than running parse_changes, faster and
2811         allows "has note" to work.  Correct version compare, it was
2812         reversed.  Ctime check should only kick in if the source packages
2813         are not the same.
2814         (print_new): print out and return any note.  Rename 'ret_code' to
2815         'broken'.
2816         (edit_new): renamed from spawn_editor.  Don't leak file
2817         descriptors.  Clean up error message if editor fails.
2818         (edit_note): new function, allows one to edit notes.
2819         (do_new): add note support, editing and removing.
2820         (init): kill -s/--sort; with notes we always want to use our
2821         sorting method.
2822         (usage): likewise.
2823
2824         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2825         changes field.
2826
2827         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2828         it default to 0.  Adapt tests to assume it's boolean.
2829         * fernanda.py (check_changes): adjust call appropriately.
2830         * halle (check_changes): likewise.
2831         * jennifer (check_changes): likewise.
2832         * jeri (check_changes): likewise.
2833         * shania (flush_orphans): likewise.
2834
2835         * jennifer (check_dsc): pass is_a_dsc by name when calling
2836         build_file_list() for clarity.
2837         * shania (flush_orphans): likewise.
2838         * tea (check_missing_tar_gz_in_dsc): likewise.
2839
2840         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2841         calling parse_changes() for clarity.
2842         * tea (check_dscs): likewise.
2843
2844         * utils.py (parse_changes): make dsc_whitespace_rules default to
2845         not true.
2846         * halle (check_changes): adjust call appropriately.
2847         * jennifer (check_changes): likewise.
2848         * jeri (check_changes): likewise.
2849         * lisa (changes_compare): likewise.
2850         * utils.py (changes_compare): likewise.
2851         * melanie (main): likewise.
2852         * shania (flush_orphans): likewise.
2853         * fernanda.py (check_changes): likewise.
2854
2855 2002-05-18  James Troup  <james@nocrew.org>
2856
2857         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2858         it's not useful and by and large a duplication of information
2859         available in readable format in other files.
2860
2861 2002-05-16  Ryan Murray  <rmurray@debian.org>
2862
2863         * melanie: Dir::TemplatesDir -> Dir::Templates
2864
2865 2002-05-15  Ryan Murray  <rmurray@debian.org>
2866
2867         * cameron: correct the use of os.path.join
2868
2869 2002-05-15  Anthony Towns  <ajt@debian.org>
2870
2871         * ziyi: Update to match the new format for Architectures/Components
2872         in katie.conf.
2873
2874 2002-05-14  James Troup  <james@nocrew.org>
2875
2876         * amber: new script; 'installer' wrapper script for the security
2877         team.
2878
2879         * katie.py (Katie.announce): remove unused 'dsc' local
2880         variable. (pychecker)
2881
2882         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2883
2884         * neve: don't import sys, we don't use it. (pychecker)
2885         (check_signature): fix return type mismatch. (pychecker)
2886
2887         * utils.py: don't import commands, we don't use it.  (pychecker)
2888
2889         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2890
2891         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2892         obsoleted by the change to "othercomponents" handling in jennifer
2893         detailed below.
2894         (Katie.cross_suite_version_check): new function; implements
2895         cross-suite version checking rules specified in the conf file
2896         while also enforcing the standard "must be newer than target
2897         suite" rule.
2898         (Katie.check_binary_against_db): renamed, since it's invoked once
2899         per-binary, "binaries" was inaccurate.  Use
2900         cross_suite_version_check() and don't bother with the "oldfiles"
2901         rubbish as jennifer works out "othercomponents" herself now.
2902         (Katie.check_source_against_db): use cross_suite_version_check().
2903
2904         * katie (check): the version and file overwrite checks
2905         (check_{binary,source,dsc}_against_db) are not per-suite.
2906
2907         * jennifer (check_files): less duplication of
2908         'control.Find("Architecture", "")' by putting it in a local
2909         variable.
2910         (check_files): call check_binary_against_db higher up since it's
2911         not a per-suite check.
2912         (check_files): get "othercomponents" directly rather than having
2913         check_binary_against_db do it for us.
2914
2915         * heidi (main): 'if x:', not 'if x != []:'.
2916         * katie.py (Katie.in_override_p): likewise.
2917         (Katie.check_dsc_against_db): likewise.
2918         * natalie (main): likewise.
2919         * rene (main): likewise.
2920         * ziyi (real_arch): likewise.
2921
2922         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2923         and OverrideType are now value lists, not lists.
2924         * andrea (main): likewise.
2925         * cindy (main): likewise.
2926         * claire.py (find_dislocated_stable): likewise.
2927         * denise (main): likewise.
2928         * jenna (main): likewise.
2929         * jennifer (check_distributions): likewise.
2930         (check_files): likewise.
2931         (check_urgency): likewise (Urgency::Valid).
2932         * jeri (parse_packages): likewise.
2933         * neve (main): likewise (and Location::%s::Suites).
2934         * rene (main): likewise.
2935
2936 2002-05-13  James Troup  <james@nocrew.org>
2937
2938         * katie.py (Katie.check_source_against_db): correct case of reject
2939         message to be consistent with binary checks.
2940
2941         * jennifer (get_status_output): don't leak 2 file descriptors per
2942         invocation.
2943         (check_signature): add missing '\n' to "duplicate status token"
2944         error message.
2945
2946 2002-05-09  James Troup  <james@nocrew.org>
2947
2948         * utils.py (validate_changes_file_arg): new function; validates an
2949         argument which should be a .changes file.
2950         * ashley (main): use it.
2951         * lisa (main): likewise.
2952
2953         * katie.py (Katie.check_dsc_against_db): since there can be more
2954         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2955         entry still exists in files.
2956
2957         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2958         files, since check_dsc_against_db() deletes the .orig.tar.gz
2959         entry.
2960
2961         * cameron: cleanups.
2962
2963         * utils.py (changes_compare): change sort order so that source
2964         name and source version trump 'have source'; this should fix
2965         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2966         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2967         by Ryan.
2968
2969         * lisa (main): allow the arguments to be .katie files too.
2970
2971 2002-05-07  Ryan Murray  <rmurray@debian.org>
2972
2973         * cron.buildd: add s390 to arch list again
2974
2975 2002-05-05  Ryan Murray  <rmurray@debian.org>
2976
2977         * cron.buildd: new script, update w-b database from unstable_accepted
2978         table
2979         * cameron: new script, take list in unstable_accepted and write out
2980         a file list for apt-ftparchive
2981         * apt.conf.buildd: new apt configuration for Packages/Sources for
2982         unstable_accepted
2983         * vars: add s390 to arch list.
2984
2985 2002-05-03  James Troup  <james@nocrew.org>
2986
2987         * neve (main): don't hard code the calling user as that doesn't
2988         work with modern postgres installs.  Fix psql invocation for
2989         init_pool.sql (database name required).  Dont' hard code the
2990         database name.
2991         (process_sources): add support for fingerprint and install_date.
2992         (process_packages): add support for fingerprint.
2993         (do_sources): pass in the directory, fingerprint support needs it.
2994         (get_status_output): borrowed from jennifer.
2995         (reject): likewise.
2996         (check_signature): likewise.
2997
2998         * katie (install): only try to log urgencies if Urgency_Logger is
2999         defined.
3000         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3001         defined; only close Urgency_Logger if it's defined.
3002
3003         * catherine (poolize): adapt for Dir rationalization.
3004         * claire.py (find_dislocated_stable): likewise.
3005         * denise (main): likewise.
3006         * halle (check_joey): likewise.
3007         * jenna: likewise.
3008         * jennifer: likewise.
3009         * jeri: likewise.
3010         * katie.py: likewise.
3011         * katie: likewise.
3012         * lisa (do_bxa_notification): likewise.
3013         * logging.py (Logger.__init__): likewise
3014         * rene (main): likewise.
3015         * rhona (clean): likewise.
3016         * shania (init): likewise.
3017         * tea: likewise.
3018         * ziyi: likewise.
3019
3020         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3021         FindB, not FindI.
3022
3023         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3024         boolean, use FindB, not get.
3025
3026         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3027         .orig.tar.gz's which are an exact (size/md5sum) match.
3028
3029         * ashley (main): really allow *.katie files as arguments too;
3030         noticed by aj.
3031
3032         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3033
3034 2002-05-03  Anthony Towns  <ajt@debian.org>
3035
3036         * ziyi: support for security.
3037
3038 2002-05-02  James Troup  <james@nocrew.org>
3039
3040         * jennifer (accept): call Katie.check_override() unconditional as
3041         no-mail check moved into that function.
3042         (do_byhand): likewise.
3043
3044         * katie.py (Katie.check_override): don't do anything if we're a)
3045         not sending mail or b) the override disparity checks have been
3046         disbled via Dinstall::OverrideDisparityCheck.
3047
3048         * jennifer (check_files): don't hard code Unstable as the suite
3049         used to check for architecture validity; use
3050         Dinstall::DefaultSuite instead, if it exists.
3051         (accept): conditionalize
3052
3053         * katie.py (Katie.update_subst): support global maintainer
3054         override with Dinstall::OverrideMaintainer.
3055
3056         * jennifer (check_distributions): new function, Distribution
3057         validation and mapping.  Uses new SuiteMappings variable from
3058         config file to abstract suite mappings.
3059         (check_changes): call it.
3060
3061         * natalie: renamed; nothing imports or likely will for some time.
3062
3063         * denise (main): remove unused natalie import and init().
3064
3065         * natalie.py (init): removed.
3066         (main): initalize here instead and don't hardcode the database
3067         name.
3068
3069 2002-04-30  James Troup  <james@nocrew.org>
3070
3071         * katie.py (Katie.close_bugs): new function, split out from
3072         announce().
3073         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3074         true.
3075         (Katie.close_bugs): new function, split out
3076         (Katie.close_bugs): return immediately if there are no bugs to
3077         close.
3078
3079         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3080         * katie (do_reject): likewise.
3081         (stable_install): likewise.
3082         * katie.py (Katie.announce): likewise.
3083         (Katie.accept): likewise.
3084         (Katie.check_override): likewise.
3085         (Katie.do_reject): likewise.
3086         * lisa (do_bxa_notification): likewise.
3087         * melanie (main): likewise.
3088
3089         * utils.py (TemplateSubst): change second argument to be a
3090         filename rather than a template since every caller opened a file
3091         on the fly which was ugly and leaked file descriptor.
3092
3093 2002-04-29  James Troup  <james@nocrew.org>
3094
3095         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3096         <hertzog@debian.org> to send 'accepted' announce mails to the
3097         PTS. [#128140]
3098
3099 2002-04-24  James Troup  <james@nocrew.org>
3100
3101         * init_pool.sql (unstable_accepted): add two new fields to
3102         unstable_accepted; in_accepted is a boolean indicating whether or
3103         not the file is in accepted and last_used is a timestamp used by
3104         rhona to determine when to remove symlinks for installed packages.
3105
3106         * katie.py (Katie.accept): auto-build support take 2.  Create
3107         symlinks for all files into a seperate directory.  Add files to
3108         unstable_accepted as paths to the new directory; mark them as
3109         being in accepted for cameron.  Properly conditionalize it on a
3110         configuration variable.
3111
3112         * katie (install): likewise.  Update symlinks to point into the
3113         pool; mark the files for later deletion by rhona and mark them as
3114         not being in accepted for cameron.
3115
3116         * rhona (clean_accepted_autobuild): new function.
3117
3118 2002-04-22  James Troup  <james@nocrew.org>
3119
3120         * jennifer (check_files): handle db_access.get_location_id()
3121         returning -1 properly/better.
3122
3123         * rhona (clean_fingerprints): new function.
3124
3125 2002-04-21  James Troup  <james@nocrew.org>
3126
3127         * utils.py (touch_file): unused; remove.
3128         (plural): likewise.
3129
3130         * jennifer (check_files): close file descriptor used to get the
3131         control file.
3132         (check_md5sums): likewise.
3133         (callback): likewise.
3134
3135         * katie.py (Katie.do_reject): handle manual rejects much better;
3136         call the editor first and get confirmation from the user before
3137         proceeding.
3138
3139         * jennifer (check_signature): prefix_multi_line_string() moved to
3140         utils.
3141
3142         * utils.py (prefix_multi_line_string): moved here from jennifer.
3143
3144 2002-04-20  James Troup  <james@nocrew.org>
3145
3146         * lisa (main): handle non-existent files.
3147
3148         * ashley (main): allow *.katie files as arguments too.
3149
3150 2002-04-19  James Troup  <james@nocrew.org>
3151
3152         * katie.py (Katie.accept): add stuff to help auto-building from
3153         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3154         in the pool), create a symlink to it in the accepted directory and
3155         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3156
3157         * katie (install): undo the "auto-building from accepted" stuff
3158         (i.e. remove the .orig.tar.gz symlink and remove the files from
3159         unstable_accepted table).
3160
3161 2002-04-16  James Troup  <james@nocrew.org>
3162
3163         * jennifer (upload_too_new): fix typo which was causing all
3164         timestamp comparisons to be against the .changes file.  Also move
3165         back to the original directory so we do the comparisons against
3166         accurate timestamps.
3167
3168         * tea (check_missing_tar_gz_in_dsc): new function.
3169
3170         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3171         file mentioned in the .dsc.
3172
3173         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3174         way mails reach debian-{devel-,}changes@l.d.o.
3175
3176 2002-04-02  Ryan Murray  <rmurray@debian.org>
3177
3178         * cron.daily: run shania after rhona
3179         * cron.daily-non-US: likewise.
3180
3181 2002-04-01  James Troup  <james@nocrew.org>
3182
3183         * katie: re-add proposed-updates/stable install support.
3184
3185         * katie.py (Katie.dump_vars): add changes["changes"] as an
3186         optional field; should be mandatory later.
3187
3188 2002-03-31  James Troup  <james@nocrew.org>
3189
3190         * katie (install): support a Suite::<foo>::CopyKatie similar to
3191         CopyChanges.  Done seperately because .katie files don't need to
3192         be mirrored and will probably be copied to another directory as a
3193         result.
3194
3195         * halle (main): add missing debug to options.
3196
3197 2002-03-29  James Troup  <james@nocrew.org>
3198
3199         * madison (main): add a -r/--regex option.
3200
3201 2002-03-26  James Troup  <james@nocrew.org>
3202
3203         * lisa: don't trample on changes["distribution"]; make a copy of
3204         it as changes["suite"] instead and use that.
3205
3206 2002-03-16  Anthony Towns  <ajt@debian.org>
3207
3208         * templates/lisa.bxa_notification: Fix some grammatical errors.
3209         Encourage contact via bxa@ftp-master email address.
3210
3211 2002-03-15  James Troup  <james@nocrew.org>
3212
3213         * jennifer (check_timestamps): remove bogus raise in except.
3214
3215 2002-03-15  Anthony Towns  <ajt@debian.org>
3216
3217         * cron.monthly: rotate mail/archive/bxamail as well as
3218         mail/archive/mail. This is for a complete archive of
3219         correspondence with the BXA.
3220
3221 2002-03-14  Anthony Towns  <ajt@debian.org>
3222
3223         * crypto-in-main changes.
3224
3225         * utils.py (move, copy): add an optional perms= parameter to let you
3226         set the resulting permissions of the moved/copied file
3227         * katie.py (force_move): rejected/morgued files should be unreadable
3228         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3229         should be unreadable.
3230
3231 2002-03-07  Ryan Murray  <rmurray@debian.org>
3232
3233         * katie (install): check for existance of "files id" key as well as
3234         it being set to a valid value.
3235         * katie (install): check for existense and valid value for location
3236         id as well
3237
3238 2002-03-05  Ryan Murray  <rmurray@debian.org>
3239
3240         * katie.py (do_reject): reread the reason file after editing it.
3241
3242 2002-02-25  James Troup  <james@nocrew.org>
3243
3244         * jennifer (check_changes): don't enforce sanity in .changes file
3245         names since it doesn't seem to be possible; pcmica-cs and similar
3246         freak show packages in particular cause real problems.
3247
3248         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3249         each dsc_file since the .orig.tar.gz checking code now uses it as
3250         a boolean.  Fixes bizarro rejections which bogusly claimed
3251         .diff.gz md5sum/size was incorrect.
3252
3253 2002-02-24  James Troup  <james@nocrew.org>
3254
3255         * katie (process_it): reset reject_message.
3256
3257 2002-02-22  James Troup  <james@nocrew.org>
3258
3259         * db_access.py(set_files_id): disable use of
3260         currval('files_id_seq') because it was taking 3 seconds on auric
3261         which is insane (most calls take < 0.01) and simply call
3262         get_files_id() for the return value instead.
3263
3264         * katie.py (Katie.do_query): convenience function; unused by
3265         default, useful for profiling.
3266         * db_access.py (do_query): likewise.
3267
3268         * katie (install): fix insert SQL call when binary has no source.
3269
3270         * lisa (determine_new): auto-correct non-US/main to non-US.
3271         (determine_new): add a warning when adding things to stable.
3272         (edit_index): use our_raw_input().
3273         (edit_overrides): likewise.
3274         (do_new): likewise.  Use re.search() not re.match() since the
3275         default answer may not be the first one.
3276         (do_byhand): likewise.
3277         (do_new): Default to 'S'kip and never 'A'dd.
3278
3279         * jennifer (action): pass prompt to our_raw_input().
3280         * melanie (game_over): likewise.
3281         * katie (action): likewise.
3282
3283         * utils.py (our_raw_input): add an optional prompt argument to
3284         make the function more usable as a drop in replacement for
3285         raw_input().
3286
3287         * jennifer (check_files): correct reject() to not double prefix
3288         when using katie.py based functions.
3289         (check_dsc): likewise.
3290
3291         * katie.py (Katie.reject): prepend a new line if appropriate
3292         rathen than appending one to avoid double new lines when caller
3293         adds one of his own.
3294
3295         * lisa (determine_new): warn if the package is also in other
3296         components.
3297
3298 2002-02-20  James Troup  <james@nocrew.org>
3299
3300         * jennifer (check_files): if .changes file lists "source" in
3301         Architecture field, there must be a .dsc.
3302
3303 2002-02-15  James Troup  <james@nocrew.org>
3304
3305         * ashley (main): add some missing fields.
3306
3307         * katie.py (Katie.check_dsc_against_db): fix to take into account
3308         the fact that the .orig.tar.gz might be in byhand, accepted or
3309         new.  Also fix calling of reject().
3310         (Katie.check_binaries_against_db): fix calling of reject().
3311         (Katie.check_source_against_db): likewise.
3312         (Katie.dump_vars): add missing variables used for bug closures.
3313
3314         * lisa (changes_compare_by_time): sort by reverse time.
3315
3316         * katie.py (Katie.accept): log.
3317         (Katie.dump_vars): missing has_key test for optional changes fields.
3318
3319         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3320         (process_it): traceback goes to stderr, not stdout.
3321         (acknowledge_new): log.
3322         (do_byhand): likewise.
3323
3324         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3325
3326         * add_constraints.sql: add grants for the new fingerprint table.
3327
3328 2002-02-13  James Troup  <james@nocrew.org>
3329
3330         * katie (do_reject): basename the .changes filename before trying
3331         to use it to construct the .reason filename.
3332         (process_it): call Katie.update_subst() so do_reject() DTRT with
3333         the mail template.
3334         (do_reject): setup the mail template correctly.
3335
3336 2002-02-12  James Troup  <james@nocrew.org>
3337
3338         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3339         (check_files): don't abuse global dictionaries.
3340         (Ent): use all variables.
3341         (check_timestamps): don't abuse global dictionaries.
3342
3343         * fernanda.py: renamed to .py so lisa can import it.
3344         (check_dsc): remove unused local variables (pychecker).
3345         (display_changes): split off from check_changes.
3346
3347         * katie: rewritten; most of the functionality moves to jennifer;
3348         what's left is the code to install packages once a day from the
3349         'accepted' directory.
3350
3351         * jennifer: new program, processes packages in 'unchecked'
3352         (i.e. most of the non-install functionality of old katie).
3353
3354         * katie.py: common functions shared between the clique of
3355         jennifer, lisa and katie.
3356
3357         * lisa: new program; handles NEW and BYHAND packages.
3358
3359         * jeri (usage): new function.
3360         (main): use it.
3361         (check_package): remove unused local variable (pychecker).
3362
3363         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3364         binaries and source.  Add install_date to source.
3365
3366         * halle (usage): new function.
3367         (main): use it.  Remove unused options.
3368         (check_changes): remove unused local variable (pychecker).
3369
3370         * add_constraints.sql: add fingerprint references.
3371
3372         * db_access.py (get_or_set_fingerprint_id): new function.
3373
3374         * ashley (main): new program; dumps the contents of a .katie file
3375         to stdout.
3376
3377         * alyson (main): remove option handling since we don't actually
3378         support any.
3379         * cindy (main): likewise.
3380
3381         * remove unnecessary imports and pre-define globals (pychecker).
3382
3383 2002-02-11  Anthony Towns  <ajt@debian.org>
3384
3385         * added installation-report and upgrade-report pseudo-packages
3386
3387 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3388
3389         * katie (update_subst): use Dinstall::TrackingServer.
3390         * melanie (main): likewise.
3391
3392 2002-01-27  James Troup  <james@nocrew.org>
3393
3394         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3395         noticing, jgg@ for fix.
3396
3397 2002-01-19  James Troup  <james@nocrew.org>
3398
3399         * utils.py (extract_component_from_section): handle non-US
3400         non-main properly.
3401
3402 2002-01-12  James Troup  <james@nocrew.org>
3403
3404         * madison: add support for -S/--source-and-binary which displays
3405         information for the source package and all it's binary children.
3406
3407 2002-01-13  Anthony Towns  <ajt@debian.org>
3408
3409         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3410         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3411           and 2002 key ids.
3412         * katie.conf-non-US: Likewise.
3413         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3414           multiple keys automatically. This is probably only useful for
3415           transitioning from an expired (or revoked?) key.
3416
3417 2002-01-08  Ryan Murray  <rmurray@debian.org>
3418
3419         * debian/python-dep: new file that prints out python:Depends for
3420           substvars
3421         * debian/control: use python:Depends, build-depend on python
3422           lower Depends: on postgresql to Suggests:
3423         * debian/rules: determine python version, install to the correct
3424           versioned dir
3425
3426 2001-12-18  Anthony Towns  <ajt@debian.org>
3427
3428         * ziyi: unlink Release files before overwriting them (in case they've
3429           been merged)
3430         * ziyi: always include checksums/sizes for the uncompressed versions
3431           of Sources and Packages, even if they're not present on disk
3432
3433 2001-11-26  Ryan Murray  <rmurray@debian.org>
3434
3435         * ziyi (main): add SigningPubKey config option
3436         * katie.conf: use SigningPubKey config option
3437         * katie.conf-non-US: likewise
3438
3439 2001-11-24  James Troup  <james@nocrew.org>
3440
3441         * katie (acknowledge_new): log newness.
3442
3443 2001-11-24  Anthony Towns  <ajt@debian.org>
3444
3445         * ziyi (real_arch): bail out if some moron forgot to reset
3446         untouchable on stable.
3447         (real_arch): source Release files.
3448
3449 2001-11-19  James Troup  <james@nocrew.org>
3450
3451         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3452         utils.get_conf().
3453         * shania (main): likewise.
3454
3455         * rhona (main): add default options.
3456
3457         * db_access.py (get_archive_id): case independent.
3458
3459         * katie (action): sort files so that ordering is consistent
3460         between mails; noticed/requested by Joey.
3461
3462 2001-11-17  Ryan Murray  <rmurray@debian.org>
3463
3464         * utils.py: add get_conf function, change startup code to read all
3465           config files to the Cnf that get_conf returns
3466           use the component list from the katie conf rather than the hardcoded
3467           list.
3468         * all scripts: use new get_conf function
3469         * shania: fix try/except around changes files
3470         * jenna: only do debian-installer if it is a section in Cnf
3471
3472 2001-11-16  Ryan Murray  <rmurray@debian.org>
3473
3474         * shania (main): Initialize days to a string of a number.
3475                  (main): Initialize Cnf vars before reading in Cnf
3476
3477 2001-11-14  Ryan Murray  <rmurray@debian.org>
3478
3479         * shania (main): Initialize days to a number.
3480
3481 2001-11-04  James Troup  <james@nocrew.org>
3482
3483         * docs/Makefile: use docbook-utils' docbook2man binary.
3484
3485         * Change all "if foo == []" constructs into "if not foo".
3486
3487         * katie (check_changes): when installing into stable from
3488         proposed-updates, remove all non-stable target distributions.
3489         (check_override): don't check for override disparities on stable
3490         installs.
3491         (stable_install): update install_bytes appropriately.
3492         (reject): stable rejection support; i.e. don't remove files when
3493         rejecting files in the pool, rather remove them from the
3494         proposed-update suite instead, rhona will do the rest.
3495         (manual_reject): support for a stable specific template.
3496         (main): setup up stable rejector in subst.
3497
3498 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3499
3500         * debian/control (Build-Depends): docbook2man has been superseded
3501         by docbook-utils.
3502
3503         * neve (main): exit with a more useful error message.
3504         (update_suites): Suite::<suite>::Version, Origin and Description
3505         are not required, so don't fail if they don't exist.
3506
3507         * db_access.py (get_archive_id): return -1 on error rather than
3508         raise an exception.
3509         (get_location_id): likewise.
3510
3511         * madison (main): don't exit on the first not-found package,
3512         rather exit with an appropriate return code after processing all
3513         packages.
3514
3515 2001-11-03  James Troup  <james@nocrew.org>
3516
3517         * claire.py (find_dislocated_stable): add per-architecture
3518         symlinks for dislocated architecture: all debs.
3519
3520 2001-10-19  Anthony Towns  <ajt@debian.org>
3521
3522         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3523
3524 2001-10-10  Anthony Towns  <ajt@debian.org>
3525
3526         * claire.py (fix_component_section): do _not_ assign to None under
3527         any circumstances
3528
3529 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3530
3531         * melanie (main): don't duplicate architectures when removing from
3532         more than one suite.
3533
3534         * heidi (main, process_file, get_list): report suite name not ID.
3535
3536         * naima (nmu_p): be case insensitive.
3537
3538         * naima (action): more list handling clean ups.
3539
3540         * melanie (main): clean up lists handling to use string.join and
3541         IN's.
3542
3543         * madison (main): clean up suite and architecture argument parsing
3544         to use slices less and string.join more.
3545
3546         * utils.py (parse_changes): Use string.find() instead of slices for
3547         string comparisons thereby avoid hardcoding the length of strings.
3548         * ziyi (main): likewise.
3549
3550 2001-10-07  James Troup  <james@nocrew.org>
3551
3552         * Remove mode argument from utils.open_files() calls if it's the
3553         default, i.e. 'r'.
3554
3555 2001-09-27  James Troup  <james@nocrew.org>
3556
3557         * katie (init): new function; options clean up.
3558         (usage): add missing options, remove obsolete ones.
3559         (main): adapt for the two changes above.  If the lock file or
3560         new-ack log file don't exist, create them.  Don't try to open the
3561         new-ack log file except running in new-ack mode.
3562
3563         * alyson (main): initialize all the tables that are based on the
3564         conf file.
3565
3566         * utils.py (touch_file): like touch(1).
3567         (where_am_i): typo.
3568
3569         * catherine (usage): new.
3570         (main): use it.  options cleanup.
3571         * claire.py: likewise.
3572         * fernanda: likewise.
3573         * heidi: likewise.
3574         * jenna: likewise.
3575         * shania: likewise.
3576         * ziyi: likewise.
3577
3578         * andrea: options cleanup.
3579         * charisma: likewise.
3580         * julia: likewise.
3581         * madison: likewise.
3582         * melanie: likewise.
3583         * natalie: likewise.
3584         * rhona: likewise.
3585         * tea: likewise.
3586
3587 2001-09-26  James Troup  <james@nocrew.org>
3588
3589         * utils.py: default to sane config file locations
3590         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3591         or they can point to the real ones through use of a new Config
3592         section.  Based on an old patch by Adam Heath.
3593         (where_am_i): use the new default config stuff.
3594         (which_conf_file): likewise.
3595         (which_apt_conf_file): likewise.
3596
3597         * charisma (main): output defaults to
3598         `Package~Version\tMaintainer'; input can be of either form.  When
3599         parsing the new format do version comparisons, when parsing the
3600         old format assume anything in the extra file wins.  This fixes the
3601         problem of newer non-US packages being overwhelmed by older
3602         versions still in stable on main.
3603
3604 2001-09-17  James Troup  <james@nocrew.org>
3605
3606         * natalie.py (list): use result_join().
3607
3608         * denise (main): result_join() moved to utils.
3609
3610         * utils.py (result_join): move to utils; add an optional seperator
3611         argument.
3612
3613 2001-09-14  James Troup  <james@nocrew.org>
3614
3615         * heidi (set_suite): new function; does --set like natalie does,
3616         i.e. turns it into a sequence of --add's and --remove's
3617         internally.  This is a major win (~20 minute run time > ~20
3618         seconds) in the common, everday (i.e. testing) case.
3619         (get_id): common code used by set_suite() and process_file().
3620         (process_file): call set_suite() and get_id().
3621         (main): add logging support.
3622
3623         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3624         files.
3625
3626         * utils.py (parse_changes): use slices or simple string comparison
3627         in favour of regexes where possible.
3628
3629         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3630         fact that the string VARDATA() points to are not null terminated.
3631
3632         * denise (result_join): new function; like string.join() but
3633         handles None's.
3634         (list): use it.
3635         (main): likewise.
3636
3637         * charisma (main): python-pygresql 7.1 returns None not "".
3638
3639 2001-09-14  Ryan Murray  <rmurray@debian.org>
3640
3641         * natalie.py (list): handle python-pygresql 7.1 returning None.
3642
3643 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3644
3645         * madison (main): return 1 if no package is found.
3646
3647 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3648
3649         * madison (main): better error handling for incorrect
3650         -a/--architecture or -s/--suite arguments.
3651         (usage): new.
3652         (main): use it.
3653
3654 2001-09-05  Ryan Murray  <rmurray@debian.org>
3655
3656         * charisma, madison, katie: remove use of ROUser
3657         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3658
3659 2001-08-26  James Troup  <james@nocrew.org>
3660
3661         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3662         maintained packages at cjwatson@'s request.
3663
3664 2001-08-21  James Troup  <james@nocrew.org>
3665
3666         * madison (main): add -a/--architecture support.
3667
3668         * jenna: use logging instead of being overly verbose on stdout.
3669
3670 2001-08-11  Ryan Murray  <rmurray@debian.org>
3671
3672         * melanie: add functional help option
3673
3674 2001-08-07  Anthony Towns  <ajt@debian.org>
3675
3676         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3677
3678 2001-07-28  James Troup  <james@nocrew.org>
3679
3680         * katie (check_dsc): ensure source version is >> than existing
3681         source in target suite.
3682
3683 2001-07-25  James Troup  <james@nocrew.org>
3684
3685         * natalie.py: add logging support.
3686
3687         * utils.py (open_file): make the second argument optional and
3688         default to read-only.
3689
3690         * rene (main): work around broken source packages that duplicate
3691         arch: all packages with arch: !all packages (no longer allowed
3692         into the archive by katie).
3693
3694 2001-07-13  James Troup  <james@nocrew.org>
3695
3696         * katie (action): don't assume distribution is a dictionary.
3697         (update_subst): don't assume architecture is a dictionary and that
3698         maintainer822 is defined.
3699         (check_changes): recognise nk_format exceptions.
3700         (check_changes): reject on 'testing' only uploads.
3701         (check_files): when checking to ensure all packages are newer
3702         versions check against arch-all packages too.
3703         (check_dsc): enforce the existent of a sane set of mandatory
3704         fields.  Ensure the version number in the .dsc (modulo epoch)
3705         matches the version number in the .changes file.
3706
3707         * utils.py (changes_compare): ignore all exceptions when parsing
3708         the changes files.
3709         (build_file_list): don't UNDEF on a changes file with no format
3710         field.
3711
3712 2001-07-07  James Troup  <james@nocrew.org>
3713
3714         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3715         rather than 'changedbyname' to avoid false negatives on uploads
3716         with an email-address-only Changed-By field.
3717         (check_dsc): don't overwrite reject_message; append to it.
3718         (check_signature): likewise.
3719         (check_changes): likewise.
3720         (announce): condition logging on 'action'.
3721
3722         * logging.py: new logging module.
3723
3724         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3725         sub-tree into a separate (global) variable.
3726         (check_dsc): ensure format is 1.0 to retain backwards
3727         compatability with dpkg-source in potato.
3728         (main): only try to obtain the lock when not running in no-action
3729         mode.
3730         Use the new logging module.
3731
3732         * christina: initial version; only partially usable.
3733
3734 2001-06-28  Anthony Towns  <ajt@debian.org>
3735
3736         * apt.conf: Add ExtraOverrides to auric.
3737
3738 2001-06-25  James Troup  <james@nocrew.org>
3739
3740         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3741         they preferred the name 'Uploaders'.
3742
3743 2001-06-23  James Troup  <james@nocrew.org>
3744
3745         * katie (check_files): fix typo in uncommon rejection message,
3746         s/sourceversion/source version/.
3747
3748         * denise (main): we can't use print because stdout has been
3749         redirected.
3750
3751         * katie (source_exists): new function; moved out of check_files()
3752         and added support for binary-only NMUs of earlier sourceful NMUs.
3753
3754         * rhona (clean): find_next_free has moved.
3755
3756         * utils.py (find_next_free): new function; moved here from rhona.
3757         Change too_many to be an argument with a default value, rather
3758         than a hardcoded variable.
3759
3760         * shania: rewritten to work better; REJECTion reminder mail
3761         handling got lost though.
3762
3763 2001-06-22  James Troup  <james@nocrew.org>
3764
3765         * rhona (main): remove unused override code.
3766
3767         * fernanda (main): remove extraneous \n's from utils.warn calls.
3768         * natalie.py (list): likewise.
3769
3770         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3771         use utils.{warn,fubar} where appropriate.
3772
3773 2001-06-21  James Troup  <james@nocrew.org>
3774
3775         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3776         functionality.
3777         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3778         by the "Maintainers" field in the .dsc file and maintainer groups.
3779         (nmu_p.__init__): read in the list of group maintainer names.
3780         (announce): use nmu_p.
3781
3782 2001-06-20  James Troup  <james@nocrew.org>
3783
3784         * rene (main): hardcode the suite experimental is compared to by
3785         name rather than number.
3786
3787         * katie (check_files): differentiate between doesn't-exist and
3788         permission-denied in "can not read" rejections; requested by edd@.
3789         (check_dsc): use os.path.exists rather than os.access to allow the
3790         above check to kick in.
3791
3792         * heidi (process_file): read all input before doing anything and
3793         use transactions.
3794
3795 2001-06-15  James Troup  <james@nocrew.org>
3796
3797         * fernanda: new script; replaces old 'check' shell script
3798         nastiness.
3799
3800 2001-06-14  James Troup  <james@nocrew.org>
3801
3802         * katie: actually import traceback module to avoid amusing
3803         infinite loop.
3804
3805 2001-06-10  James Troup  <james@nocrew.org>
3806
3807         * utils.py (extract_component_from_section): fix to handle just
3808         'non-free' and 'contrib'.  Also fix to handle non-US in a
3809         completely case insensitive manner as a component.
3810
3811 2001-06-08  James Troup  <james@nocrew.org>
3812
3813         * madison (arch_compare): sort function that sorts 'source' first
3814         then alphabetically.
3815         (main): use it.
3816
3817 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3818
3819         * catherine (poolize): explicitly make poolized_size a long so it
3820         doesn't overflow when poolizing e.g. entire archives.
3821
3822 2001-06-01  James Troup  <james@nocrew.org>
3823
3824         * utils.py (send_mail): throw exceptions rather than exiting.
3825
3826         * katie (process_it): catch exceptions and ignore them.
3827
3828 2001-06-01  Michael Beattie  <mjb@debian.org>
3829
3830         * added update-mailingliststxt and update-readmenonus to update
3831         those files, respectively. modified cron.daily{,-non-US} to
3832         use them.
3833
3834 2001-05-31  Anthony Towns  <ajt@debian.org>
3835
3836         * rhona: make StayOfExecution work.
3837
3838 2001-05-31  James Troup  <james@nocrew.org>
3839
3840         * rhona (find_next_free): fixes to not overwrite files but rename
3841         them by appending .<n> instead.
3842         (clean): use find_next_free and use dated sub-directories in the
3843         morgue.
3844
3845         * utils.py (move): don't overwrite files unless forced to.
3846         (copy): likewise.
3847
3848 2001-05-24  James Troup  <james@nocrew.org>
3849
3850         * katie (check_files): determine the source version here instead
3851         of during install().
3852         (check_files): check for existent source with bin-only NMU
3853         support.
3854         (main): sort the list of changes so that the source-must-exist
3855         check Does The Right Thing(tm).
3856
3857         * utils.py (changes_compare): new function; sorts a list of
3858         changes files by 'have-source', source, version.
3859         (cc_fix_changes): helper function.
3860         (parse_changes): use compiled regexes.
3861         (fix_maintainer): likewise.
3862
3863         * rene (main): warn about packages in experimental that are
3864         superseded by newer versions in unstable.
3865
3866 2001-05-21  James Troup  <james@nocrew.org>
3867
3868         * rene (main): add support for checking for ANAIS (Architecture
3869         Not Allowed In Source) packages.
3870
3871 2001-05-17  James Troup  <james@nocrew.org>
3872
3873         * katie (check_changes): initalize `architecture' dictionary in
3874         changes global so that if we can't parse the changes file for
3875         whatever reason we don't undef later on.
3876
3877         * utils.py (parse_changes): fix handling of multi-line fields
3878         where the first line did have data.
3879
3880 2001-05-05  Anthony Towns  <ajt@debian.org>
3881
3882         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3883         (It should always have been there. Ooopsy.)
3884
3885 2001-05-03  Anthony Towns  <ajt@debian.org>
3886
3887         * jenna: Cleanup packages that move from arch:any to arch:all or
3888         vice-versa.
3889
3890 2001-04-24  Anthony Towns  <ajt@debian.org>
3891
3892         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3893         cope with debian-installer and boot-floppies' md5sum.txt.
3894
3895 2001-04-16  James Troup  <james@nocrew.org>
3896
3897         * katie (check_changes): add missing %s format string argument.
3898         (stable_install): temporary work around for morgue location to
3899         move installed changes files into.
3900         (stable_install): helps if you actually read in the template.
3901         (manual_reject): fix for editing of reject messages which was
3902         using the wrong variable name.
3903
3904         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3905
3906 2001-04-13  James Troup  <james@nocrew.org>
3907
3908         * katie (manual_reject): Cc the installer.
3909         (reject): don't.
3910         (check_changes): remove unused maintainer-determination code.
3911         (update_subst): add support for Changed-By when setting the
3912         *MAINTAINER* variables.
3913
3914         * rene (bar): new function to check for packages on architectures
3915         when they shouldn't be.
3916
3917         * natalie.py (main): use fubar() and warn() from utils.
3918
3919         * utils.py (whoami): new mini-function().
3920         * melanie (main): use it.
3921         * katie (manual_reject): likewise.
3922
3923 2001-04-03  James Troup  <james@nocrew.org>
3924
3925         * katie (action): ignore exceptions from os.path.getmtime() so we
3926         don't crash on non-existent changes files (e.g. when they are
3927         moved between the start of the install run in cron.daily and the
3928         time we get round to processing them).
3929
3930         * madison (main): also list source and accept -s/--suite.
3931
3932         * jenna (generate_src_list): missing \n in error message.
3933
3934         * katie (update_subst): add sane defaults for when changes is
3935         skeletal.
3936
3937 2001-03-29  James Troup  <james@nocrew.org>
3938
3939         * melanie (main): use fubar() and warn() from utils.  Remember who
3940         the maintainer for the removed packages are and display that info
3941         to the user.  Readd support for melanie-specific Bcc-ing that got
3942         lost in the TemplateSubst transition.
3943
3944         * utils.py (fubar): new function.
3945         (warn): like wise.
3946
3947         * db_access.py (get_maintainer): as below.
3948
3949         * charisma (get_maintainer): moved the bulk of this function to
3950         db_access so that melanie can use it too.
3951
3952         * claire.py (find_dislocated_stable): restrict the override join
3953         to those entries where the suite is stable; this avoids problems
3954         with packages which have moved to new sections (e.g. science)
3955         between stable and unstable.
3956
3957 2001-03-24  James Troup  <james@nocrew.org>
3958
3959         * catherine (poolize): new function; not really independent of
3960         main() fully, yet.
3961         (main): use it.
3962
3963         * katie (stable_install): __SUITE__ needs to be space prefixed
3964         because buildd's check for 'INSTALLED$'.
3965
3966 2001-03-22  James Troup  <james@nocrew.org>
3967
3968         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3969
3970         * jenna: rewritten; now does deletions on a per-suite level
3971         instead of a per-suite-component-architecture-type level.  This
3972         allows mutli-component packages to be auto-cleaned (and as a
3973         bonus, reduces the code size and duplication).
3974
3975 2001-03-22  Anthony Towns  <ajt@debian.org>
3976
3977         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3978         instead of just giving a gpg error.
3979
3980 2001-03-21  James Troup  <james@nocrew.org>
3981
3982         * madison (main): use apt_pkg.VersionCompare to sort versions so
3983         that output is correctly sorted for packages like debhlper.
3984         Noticed by ajt@.
3985
3986         * tea (check_source_in_one_dir): actually find problematic source
3987         packages.
3988
3989         * katie (check_dsc): remember the orig.tar.gz's location ID if
3990         it's not in a legacy suite.
3991         (check_diff): we don't use orig_tar_id.
3992         (install): add code to handle sourceful diff-only upload of
3993         packages which change components by copying the .orig.tar.gz into
3994         the new component, if it doesn't already exist there.
3995         (process_it): reset orig_tar_location (as above).
3996
3997         * melanie (main): use template substiution for the bug closing
3998         emails.
3999         (main): don't hardcode bugs.debian.org or packages.debian.org
4000         either; use configuration items.
4001
4002         * katie: likewise.
4003
4004         * natalie.py (init): use None rather than 'localhost' for the
4005         hostname given to pg.connect.
4006
4007         * utils.py (TemplateSubst): new function; lifted from
4008         userdir-ldap.
4009
4010 2001-03-21  Ryan Murray  <rmurray@debian.org>
4011
4012         * katie (announce): fix the case of non-existent
4013         Suite::$SUITE::Announce.
4014
4015 2001-03-20  Ryan Murray  <rmurray@debian.org>
4016
4017         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4018         /usr/.
4019
4020         * alyson (main): use config variable for database name.
4021         * andrea (main): likewise.
4022         * catherine (main): likewise.
4023         * charisma (main): likewise.
4024         * cindy (main): likewise.
4025         * claire.py (main): likewise.
4026         * denise (main): likewise.
4027         * heidi (main): likewise.
4028         * jenna (main): likewise.
4029         * katie (main): likewise.
4030         * madison (main): likewise.
4031         * melanie (main): likewise.
4032         * neve (main): likewise.
4033         * rhona (main): likewise.
4034         * tea (main): likewise.
4035
4036 2001-03-15  James Troup  <james@nocrew.org>
4037
4038         * rhona (check_sources): fixed evil off by one (letter) error
4039         which was causing only .dsc files to be deleted when cleaning
4040         source packages.
4041
4042         * charisma (get_maintainer_from_source): remove really stupid and
4043         gratuitous IN sub-query and replace with normal inner join.
4044         (main): connect as read-only user nobody.
4045
4046         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4047         with EXISTS.
4048         (check_files): likewise; still disabled by default though.
4049         (clean_binaries): add ' seconds' to the mysterious number in the
4050         output.
4051         (clean): likewise.
4052
4053         * tea (check_files): add missing global declaration on db_files.
4054
4055 2001-03-14  James Troup  <james@nocrew.org>
4056
4057         * rhona: rewritten large chunks. Removed a lot of the silly
4058         selecting into dictionaries and replaced it with 'where exists'
4059         based sub queries.  Added support for StayOfExecution.  Fix the
4060         problem with deleting dsc_files too early and disable cleaning of
4061         unattached files.
4062
4063 2001-03-14  Anthony Towns  <ajt@debian.org>
4064
4065         * katie (announce): also check Changed-By when trying to detect
4066         NMUs.
4067
4068 2001-03-06  Anthony Towns  <ajt@debian.org>
4069
4070         * ziyi (main): Generate Release.gpg files as well, using the key from
4071         Dinstall::SigningKey in katie.conf, if present. That key has to be
4072         passwordless, and hence kept fairly secretly.
4073
4074 2001-03-02  James Troup  <james@nocrew.org>
4075
4076         * utils.py (str_isnum): new function; checks to see if the string
4077         is a number.
4078
4079         * shania (main): fix _hideous_ bug which was causing all files > 2
4080         weeks old to be deleted from incoming, even if they were part of a
4081         valid upload.
4082
4083 2001-02-27  James Troup  <james@nocrew.org>
4084
4085         * melanie (main): accept new argument -C/--carbon-copy which
4086         allows arbitarty carbon-copying of the bug closure messages.
4087         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4088         separate variable.
4089
4090 2001-02-27  Anthony Towns  <ajt@debian.org>
4091
4092         * ziyi: new program; generates Release files.
4093
4094 2001-02-25  James Troup  <james@nocrew.org>
4095
4096         * katie (reject): add missing '\n' to error message.
4097         (manual_reject): likewise.
4098         (install): catch exceptions from moving the changes file into DONE
4099         and ignore them.
4100
4101         * tea (check_md5sums): new function.
4102
4103 2001-02-25  Michael Beattie  <mjb@debian.org>
4104
4105         * melanie: use $EDITOR if available.
4106
4107 2001-02-15  James Troup  <james@nocrew.org>
4108
4109         * utils.py (parse_changes): don't crash and burn on empty .changes
4110         files.  Symptoms noticed by mjb@.
4111
4112 2001-02-15  Adam Heath  <doogie@debian.org>
4113
4114         * denise (main): use an absolute path for the output filename.
4115
4116         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4117         compile errors with postgresql-dev >= 7.0.
4118
4119 2001-02-12  James Troup  <james@nocrew.org>
4120
4121         * rene: initial version.
4122
4123         * andrea: initial version.
4124
4125         * catherine (main): remove obsolete assignment of arguments.
4126
4127 2001-02-09  James Troup  <james@nocrew.org>
4128
4129         * catherine: first working version.
4130
4131 2001-02-06  James Troup  <james@nocrew.org>
4132
4133         * katie (check_files): validate the priority field; i.e. ensure it
4134         doesn't contain a '/' (to catch people prepending the priority
4135         with the component rather than the section).
4136         (check_override): don't warn about source packages; the only check
4137         is on section and we have no GUI tools that would use the Section
4138         field for a Sources file.
4139         (announce): use tags rather than severities for NMUs.  Requested
4140         by Josip Rodin <joy@>. [#78035]
4141
4142 2001-02-04  James Troup  <james@nocrew.org>
4143
4144         * tea (check_override): new function; ensures packages in suites
4145         are also in the override file.  Thanks to bod@ for noticing that
4146         such packages existed.
4147
4148         * katie: move file type compiled regular expressions to utils as
4149         catherine uses them too.
4150         (check_changes): always default maintainer822 to the installer
4151         address so that any bail out won't cause undefs later.
4152         (check_files): update file type re's to match above.
4153         (stable_install): likewise.
4154         (reject): handle any except from moving the changes files.  Fixes
4155         crashes on unreadable changes files.
4156
4157         * melanie (main): add an explanation of why things are not removed
4158         from testing.
4159
4160 2001-01-31  James Troup  <james@nocrew.org>
4161
4162         * melanie (main): ignore a) no message, b) removing from stable or
4163         testing when invoked with -n/--no-action.
4164
4165         * katie (check_override): lower section before checking to see if
4166         we're whining about 'non-US' versus 'non-US/main'.
4167
4168         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4169         function so that we can use inside of PostgreSQL.
4170
4171 2001-01-28  James Troup  <james@nocrew.org>
4172
4173         * katie: updated to pass new flag to parse_changes() and deal with
4174         the exception raised on invalid .dsc's if appropriate.
4175         * shania (main): likewise.
4176         * melanie (main): likewise.
4177
4178         * tea (check_dscs): new function to validate all .dsc files in
4179         unstable.
4180
4181         * utils.py (parse_changes): if passed an additional flag, validate
4182         the .dsc file to ensure it's extractable by dpkg-source.
4183         Requested by Ben Collins <bcollins@>.
4184
4185 2001-01-27  James Troup  <james@nocrew.org>
4186
4187         * madison (main): connect to the DB as nobody.
4188
4189         * katie (check_files): remove support for -r/--no-version-check
4190         since it makes no sense under katie (jenna will automatically
4191         remove the (new) older version) and was evil in any event.
4192         (check_changes): add missing new line to rejection message.
4193         (check_dsc): likewise.
4194         (process_it): reset reject_message here.
4195         (main): not here.  Also remove support for -r.
4196
4197 2001-01-26  James Troup  <james@nocrew.org>
4198
4199         * katie (check_override): don't whine about 'non-US/main' versus
4200         'non-US'.
4201
4202 2001-01-26  Michael Beattie  <mjb@debian.org>
4203
4204         * natalie.py (usage): new function.
4205         (main): use it.
4206
4207 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4208
4209         * update-mirrorlists: Update README.non-US too (request from Joy).
4210
4211 2001-01-25  James Troup  <james@nocrew.org>
4212
4213         * katie (reject): catch any exception from utils.move() and just
4214         pass, we previously only caught can't-overwrite errors and not
4215         can't-read ones.
4216
4217         * jenna (generate_src_list): use ORDER BY in selects to avoid
4218         unnecessary changes to Packages files.
4219         (generate_bin_list): likewise.
4220
4221         * utils.py (extract_component_from_section): separated out from
4222         build_file_list() as it's now used by claire too.
4223
4224         * claire.py (find_dislocated_stable): rewrite the query to extract
4225         section information and handle component-less locations properly.
4226         Thanks to ajt@ for the improved queries.
4227         (fix_component_section): new function to fix components and
4228         sections.
4229
4230 2001-01-23  James Troup  <james@nocrew.org>
4231
4232         * katie (check_files): set file type for (u?)debs first thing, so
4233         that if we continue, other functions which rely on file type
4234         existing don't bomb out.  If apt_pkg or apt_inst raise an
4235         exception when parsing the control file, don't try any other
4236         checks, just drop out.
4237         (check_changes): new test to ensure there is actually a target
4238         distribution.
4239
4240 2001-01-22  James Troup  <james@nocrew.org>
4241
4242         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4243         <grin@>.
4244         (check_changes): when mapping to unstable, remember to actually
4245         add unstable to the suite list and not just remove the invalid
4246         suite.
4247
4248 2001-01-21  James Troup  <james@nocrew.org>
4249
4250         * katie (check_files): catch exceptions from debExtractControl()
4251         and reject packages which raise any.
4252
4253 2001-01-19  James Troup  <james@nocrew.org>
4254
4255         * katie (check_signature): basename() file name in rejection
4256         message.
4257
4258 2001-01-18  James Troup  <james@nocrew.org>
4259
4260         * katie (in_override_p): remember the section and priority from
4261         the override file so we can check them against the package later.
4262         (check_override): new function; checks section and priority (for
4263         binaries) from the package against the override file and mails the
4264         maintainer about any disparities.
4265         (install): call check_override after announcing the upload.
4266
4267 2001-01-16  James Troup  <james@nocrew.org>
4268
4269         * utils.py (build_file_list): catch ValueError's from splitting up
4270         the files field and translate it into a parse error.
4271
4272         * tea: add support for finding unreferenced files.
4273
4274         * katie (in_override_p): add support for suite-aliasing so that
4275         proposed-updates uploads work again.
4276         (check_changes): catch parses errors from utils.build_file_list().
4277         (check_dsc): likewise.
4278         (check_diff): yet more dpkg breakage so we require even newer a
4279         version.
4280
4281         * jenna (generate_bin_list): don't do nasty path munging that's no
4282         longer needed.
4283
4284         * denise (main): support for non-US; and rename testing's override
4285         files so they're based on testing's codename.
4286
4287 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4288
4289         * melanie: add to the bug closing message explaining what happens
4290         (or rather doesn't) with bugs against packages that have been
4291         removed.
4292
4293 2001-01-14  James Troup  <james@nocrew.org>
4294
4295         * charisma (main): fix silly off-by-one error; suite priority
4296         checking was done using "less than" rather than "less than or
4297         equal to" which was causing weird hesienbugs with wrong Maintainer
4298         fields.
4299
4300 2001-01-10  James Troup  <james@nocrew.org>
4301
4302         * katie (in_override_p): adapted to use SQL-based overrides.
4303         read_override_file function disappears.
4304
4305         * db_access.py: add new functions get_section_id, get_priority_id
4306         and get_override_type_id.
4307         (get_architecture_id): return -1 if the architecture is not found.
4308
4309         * heidi: switch %d -> %d in all SQL queries.
4310         (get_list): Use string.join where appropriate.
4311
4312         * rhona (in_override_p): don't die if the override file doesn't
4313         exist.
4314         (main): warn if the override file doesn't exist.
4315
4316         * alyson: new script; will eventually sync the config file and the
4317         SQL database.
4318
4319         * natalie.py: new script; manipulates overrides.
4320
4321         * melanie: new script; removes packages from suites.
4322
4323 2001-01-08  James Troup  <james@nocrew.org>
4324
4325         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4326         anything it just changed the symptom.  Recognise the new breakage
4327         and reject them too.
4328
4329 2001-01-07  James Troup  <james@nocrew.org>
4330
4331         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4332         to the .changes file, be sure to set up files[filename]["type"]
4333         too.
4334
4335 2001-01-06  James Troup  <james@nocrew.org>
4336
4337         * katie (check_diff): new function; detects bad diff files
4338         produced by dpkg 1.8.1 and rejects thems.
4339         (process_it): call check_diff().
4340         (check_dsc): gar.  Add support for multiple versions of the
4341         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4342         and size against all versions and use one which matches if
4343         possible and exclude any that don't from being poolized to avoid
4344         file overwrites.  Thanks to broonie@ for providing the example.
4345         (install): skip any files marked as excluded as above.
4346
4347 2001-01-05  James Troup  <james@nocrew.org>
4348
4349         * heidi (process_file): add missing argument to error message.
4350
4351 2001-01-04  James Troup  <james@nocrew.org>
4352
4353         * heidi (main): fix handling of multiple files by reading all
4354         files not just the first file n times (where n = the number of
4355         files passed as arguments).
4356
4357 2001-01-04  Anthony Towns  <ajt@debian.org>
4358
4359         * katie (check_dsc): proper fix for the code which locates the
4360         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4361
4362 2000-12-20  James Troup  <james@nocrew.org>
4363
4364         * rhona: replace IN's with EXISTS's to make DELETE time for
4365         binaries and source sane on auric.  Add a -n/--no-action flag and
4366         make it stop actions if used.  Fixed a bug in binaries deletion
4367         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4368         -V/--version.  Giving timing info on deletion till I'm sure it's
4369         sane.
4370
4371         * katie (check_changes): map testing to unstable.
4372
4373         * madison: new script; shows versions in different architectures.
4374
4375         * katie (check_dsc): ensure size matches as well as md5sum;
4376         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4377         #69702.
4378
4379 2000-12-19  James Troup  <james@nocrew.org>
4380
4381         * katie (reject): ignore the "can't overwrite file" exception from
4382         utils.move() and leave the files where they are.
4383         (reject): doh! os.access() test was reversed so we only tried to
4384         move files which didn't exist... replaced with os.path.exists()
4385         test the right way round.
4386
4387         * utils.py (move): raise an exception if we can't overwrite the
4388         destination file.
4389         (copy): likewise.
4390
4391 2000-12-18  James Troup  <james@nocrew.org>
4392
4393         * rhona: first working version.
4394
4395         * db_access.py (get_files_id): force both sizes to be integers.
4396
4397         * katie (main): use size_type().
4398
4399         * utils.py (size_type): new function; pretty prints a file size.
4400
4401 2000-12-17  James Troup  <james@nocrew.org>
4402
4403         * charisma (main): do version compares so that older packages do
4404         not override newer ones and process source first as source wins
4405         over binaries in terms of who we think of as the Maintainer.
4406
4407 2000-12-15  James Troup  <james@nocrew.org>
4408
4409         * katie (install): use the files id for the .orig.tar.gz from
4410         check_dsc().
4411         (install): limit select for legacy source to a) source in legacy
4412         or legacy-mixed type locations and b) distinct on files.id.
4413         (install): rather than the bizarre insert new, delete old method
4414         for moving legacy source into the pool, use a simple update of
4415         files.
4416         (process_it): initalize some globals before each process.
4417
4418 2000-12-14  James Troup  <james@nocrew.org>
4419
4420         * katie (in_override_p): index on binary_type too since .udeb
4421         overrides are in a different file.
4422         (read_override_file): likewise.
4423         (check_files): correct filename passed to get_files_id().
4424         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4425         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4426         (check_dsc): remember the files id of the .orig.tar.gz, not the
4427         location id.
4428
4429 2000-12-13  James Troup  <james@nocrew.org>
4430
4431         * utils.py (poolify): force the component to lower case except for
4432         non-US.
4433
4434         * katie (in_override_p): handle .udeb-specific override files.
4435         (check_files): pass the binary type to in_override_p().
4436         (check_dsc): remember the location id of the old .orig.tar.gz in
4437         case it's not in the pool.
4438         (install): use location id from dsc_files; which is where
4439         check_dsc() puts it for old .orig.tar.gz files.
4440         (install): install files after all DB work is complete.
4441         (reject): basename() the changes filename.
4442         (manual_reject): likewise.
4443
4444         * shania: new progam; replaces incomingcleaner.
4445
4446 2000-12-05  James Troup  <james@nocrew.org>
4447
4448         * katie (check_changes): if inside stable and can't find files
4449         from the .changes; assume it's installed in the pool and chdir()
4450         to there.
4451         (check_files): we are not installing for stable installs, so don't
4452         check for overwriting existing files.
4453         (check_dsc): likewise.
4454         (check_dsc): reorder .orig.tar.gz handling so that we search in
4455         the pool first and only then fall back on any .orig.tar.gz in the
4456         cwd; this avoids false positives on the overwrite check when
4457         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4458         (install): if this is a stable install, bail out to
4459         stable_install() immediately.
4460         (install): dsc_files handling was horribly broken. a) we need to
4461         add files from the .dsc and not the .changes (duh), b) we need to
4462         add the .dsc file itself to dsc_files (to be consistent with neve
4463         if for no other reason).
4464         (stable_install): new function; handles installs from inside
4465         proposed-updates to stable.
4466         (acknowledge_new): basename changes_filename before doing
4467         anything.
4468         (process_it): absolutize the changes filename to avoid the
4469         requirement of being in the same directory as the .changes file.
4470         (process_it): save and restore the cwd as stable installs can
4471         potentially jump into the pool to find files.
4472
4473         * jenna: dislocated_files support using claire.
4474
4475         * heidi (process_file): select package field from binaries
4476         explicitly.
4477
4478         * db_access.py (get_files_id): fix cache key used.
4479
4480         * utils.py (build_file_list): fix 'non-US/non-free' case in
4481         section/component splitting.
4482         (move): use os.path.isdir() rather than stat.
4483         (copy): likewise.
4484
4485         * claire.py: new file; stable in non-stable munger.
4486
4487         * tea: new file; simply ensures all files in the DB exist.
4488
4489 2000-12-01  James Troup  <james@nocrew.org>
4490
4491         * katie (check_dsc): use regex_safe().
4492         (check_changes): typo in changes{} key:
4493         s/distributions/distribution/.
4494         (install): use changes["source"], not files[file]["source"] as the
4495         latter may not exist and the former is used elsewhere.  Commit the
4496         SQL transaction earlier.
4497
4498         * utils.py (regex_safe): new function; escapes characters which
4499         have meaning to SQL's regex comparison operator ('~').
4500
4501 2000-11-30  James Troup  <james@nocrew.org>
4502
4503         * katie (install): pool_location is based on source package name,
4504         not binary package.
4505
4506         * utils.py (move): if dest is a directory, append the filename
4507         before chmod-ing.
4508         (copy): ditto.
4509
4510         * katie (check_files): don't allow overwriting of existing .debs.
4511         (check_dsc): don't allow overwriting of existing source files.
4512
4513 2000-11-27  James Troup  <james@nocrew.org>
4514
4515         * katie (check_signature): don't try to load rsaref; it's
4516         obsolete.
4517         (in_override_p): don't try to lookup override entries for packages
4518         with an invalid suite name.
4519         (announce): don't assume the suite name is valid; use Find() to
4520         lookup the mailing list name for announcements.
4521
4522         * utils.py (where_am_i): typo; hostname is in the first element,
4523         not second.
4524
4525         * db_access.py (get_suite_id): return -1 on an unknown suite.
4526
4527 2000-11-26  James Troup  <james@nocrew.org>
4528
4529         * katie (install): fix CopyChanges handling; typo in in checking
4530         Cnf for CopyChanges flag and was calling non-existent function
4531         copy_file.
4532
4533         * utils.py (copy): new function; clone of move without the
4534         unlink().
4535
4536 2000-11-25  James Troup  <james@nocrew.org>
4537
4538         * utils.py (build_file_list): handle non-US prefixes properly
4539         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4540         + 'libs' not 'non-US/libs').
4541         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4542         delays.  This is possibly(/probably) exim speicifc and (like other
4543         sendmail options) needs to be in the config file.
4544
4545 2000-11-24  James Troup  <james@nocrew.org>
4546
4547         * rhona (check_sources): we need file id from dsc_files; not id.
4548         Handle non .dsc source files being re-referenced in dsc_files.
4549
4550         * katie (in_override_p): strip out any 'non-US' prefix.
4551         (check_files): use utils.where_am_i() rather than hardcoding.
4552         (check_files): validate the component.
4553         (install): use utils.where_am_i() rather than hardcoding.
4554         (install): fix mail to go to actual recepient.
4555         (reject): likewise.
4556         (manual_reject): likewise.
4557         (acknowledge_new): likewise.
4558         (announce): likewise.
4559
4560         * db_access.py (get_component_id): ignore case when searching for
4561         the component and don't crash if the component can't be found, but
4562         return -1.
4563         (get_location_id): handle -1 from get_component_id().
4564
4565         * jenna (generate_src_list): don't bring 'suite' into our big
4566         multi-table-joining select as we already know the 'suite_id'.
4567         (generate_bin_list): likewise.
4568
4569         * neve (main): don't quit if not on ftp-master.
4570         (process_packages): remove unused variable 'suite_codename'.
4571
4572         * utils.py (move): actually move the file.
4573         (build_file_list): handle non-US prefixes in the section.
4574
4575         * catherine (main): use which_conf_file().
4576         * charisma (main): likewise.
4577         * heidi (main): likewise.
4578         * jenna (main): likewise.
4579         * katie (main): likewise.
4580         * neve (main): likewise.
4581         * rhona (main): likewise.
4582
4583         * utils.py (where_am_i): new routine; determines the archive as
4584         understood by other 'dak' programs.
4585         (which_conf_file): new routine; determines the conf file to read.
4586
4587 2000-11-17  James Troup  <james@nocrew.org>
4588
4589         * katie (install): fix where .changes files for proposed-updates
4590         go.
4591
4592 2000-11-04  James Troup  <james@nocrew.org>
4593
4594         * jenna (main): handle architecture properly if no
4595         -a/--architecture argument is given, i.e. reset architecture with
4596         the values for the suite for each suite.
4597
4598         * Add apt_pkg.init() to the start of all scripts as it's now
4599         required by python-apt.
4600
4601 2000-10-29  James Troup  <james@nocrew.org>
4602
4603         * jenna (generate_bin_list): take an additional argument 'type'
4604         and use it in the SELECT.
4605         (main): if processing component 'main', process udebs and debs.
4606
4607         * neve (process_packages): set up 'type' in 'binaries' (by
4608         assuming .deb).
4609
4610         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4611         (check_files): set up files[file]["dbtype"].
4612         (install): use files[file]["dbtype"] to set up the 'type' field in
4613         the 'binaries' table.
4614
4615         * init_pool.sql: add a 'type' field to the 'binaries' table to
4616         distinguisgh between ".udeb" and ".deb" files.
4617
4618         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4619         dest ? dirname(dest)" type check instead.
4620
4621         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4622         in the pool without crashing.  Also handle the case of being asked
4623         to look for something other than an .orig.tar.gz in the pool.
4624
4625 2000-10-26  James Troup  <james@nocrew.org>
4626
4627         * katie (install): fix filenames put into files table during
4628         poolification of legacy source.
4629
4630         * utils.py (move): work around a bug in os.path.basename() which
4631         cunningly returns '' if there is a trailing slash on the path
4632         passed to it.
4633
4634         * katie (check_dsc): Remove more cruft.  If we find the
4635         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4636         location, make a note of that so we can fix things in install().
4637         (install): as above.  Move any old source out of legacy locations
4638         so that 'apt-get source' will work.
4639         (process_it): reset the flag that indicates to install that the
4640         source needs moved.
4641
4642         * cron.daily: more.  Nowhere near complete yet though.
4643
4644         * katie (install): don't run os.makedirs, a) utils.move() does
4645         this now, b) we weren't removing the user's umask and were
4646         creating dirs with SNAFU permissions.
4647         (check_dsc): rewrite the .orig.tar.gz handling to take into
4648         account, err, package pools.  i.e. look anywhere in the pool
4649         rather than faffing around with two simple paths.
4650
4651         * neve (process_sources): add the .dsc to dsc_files too.
4652
4653 2000-10-25  James Troup  <james@nocrew.org>
4654
4655         * neve (process_sources): don't duplicate .orig.tar.gz's.
4656
4657 2000-10-23  James Troup  <james@nocrew.org>
4658
4659         * utils.py (re_extract_src_version): moved here.
4660
4661         * neve: move re_extract_src_version to utils.
4662         (process_packages): reflect change.
4663
4664         * katie (install): reflect change.
4665
4666 2000-10-19  James Troup  <james@nocrew.org>
4667
4668         * jenna (generate_src_list): handle locations with null
4669         components.
4670         (generate_bin_list): likewise.
4671