]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
That much for trusting an example - which assumed stuff like "import * from os" or...
[dak.git] / ChangeLog
1 2008-04-27  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
4         configured path does not exist or is not writeable by us. Use a
5         tmp path if so, so we do not lose the urgencies in such cases.
6
7         * config/debian/dak.conf: Changed path for UrgencyLog
8         Same for the ReleaseTransitions file
9
10         * config/debian/cron.daily: Notify qa user on merkel of dinstall
11         start, Remove the britney call
12
13 2008-04-26  Joerg Jaspert  <joerg@debian.org>
14
15         * dak/process_new.py: Call end() whenever we try to leave by
16         pressing Q
17
18         * config/debian/cron.daily: Also report NBS in experimental
19
20 2008-04-25  Joerg Jaspert  <joerg@debian.org>
21
22         * dak/cruft_report.py (main): Make it possible to look at
23         experimental too, especially NBS
24
25         * dak/split_done.py (main): Only move files into their subdirs if
26         they are older than 30 days. That enables us to run this script as
27         part of a cronjob.
28
29         * config/debian/cron.weekly: Run dak split-done
30
31 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
32
33         * dak/process_unchecked.py: add changes["sponsoremail"]
34           for sponsored uploads if desired
35         * daklib/queue.py: add changes["sponsoremail"] to
36           Subst["__MAINTAINER_TO__"] if present
37         * daklib/utils.py: add functions
38           is_email_alias to check which accounts allow email forwarding,
39           which_alias_file to find the alias file, and
40           gpg_get_key_addresses to find uid addresses for a given
41             fingerprint
42
43 2008-04-22  Joerg Jaspert  <joerg@debian.org>
44
45         * setup/init_pool.sql: added a function/aggregate for the release
46         team to base some script on it.
47
48         * config/debian/cron.daily: push katie@merkel to immediately start
49         the sync of projectb there.
50
51 2008-04-21  Joerg Jaspert  <joerg@debian.org>
52
53         * scripts/debian/expire_dumps: New script, expires old database
54         dumps, using a scheme to keep more of the recent dumps.
55
56         * config/debian/cron.daily: Use the new script. Also - compress
57         all files older than 7 days, instead of 30.
58
59         * dak/process_accepted.py (install): Do not break if a
60         source/maintainer combination is already in src_uploaders, "just"
61         warn us.
62
63 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
64
65         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
66         Format lines (ie. those having extra text appended).
67
68 2008-04-19  Joerg Jaspert  <joerg@debian.org>
69
70         * dak/process_unchecked.py (check_files): Sanity check the
71         provides field, which closes #472783
72
73 2008-04-18  Joerg Jaspert  <joerg@debian.org>
74
75         * config/debian/dak.conf: Add mapping stable-proposed-updates
76           -> proposed-updates.
77
78         * dak/transitions.py (load_transitions): Additionally check for
79         invalid package list indentation
80
81 2008-04-17  Joerg Jaspert  <joerg@debian.org>
82
83         * config/debian/dak.conf: Add TempPath statement for the Release
84         Transitions script
85
86         * dak/transitions.py (temp_transitions_file): Use the TempPath
87         (write_transitions_from_file): Check if the file we should get our
88         transitions from is in our TempPath, error out if it isnt
89         (main): Check for TempPath existance
90
91 2008-04-12  James Troup  <troup@debian.org>
92
93         * dak/clean_proposed_updates.py: add support for -s/--suite and
94         -n/--no-action.
95
96 2008-04-11  Anthony Towns  <ajt@debian.org>
97
98         * dak/utils.py: build_file_list() extra parameters so it can
99         build a file list for checksums-foo fields. Don't use float() to
100         compare formats, because Format: 1.10 should compare greater than
101         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
102
103         * dak/process_unchecked.py: check_md5sum becomes check_hashes
104         and check_hash. If changes format is 1.8 or later, also check
105         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
106         and reject on presence/absence of un/expected checksums-* fields.
107
108 2008-04-07  Joerg Jaspert  <joerg@debian.org>
109
110         * daklib/utils.py (build_file_list): Check for dpkg .changes
111         adjusted to reject newer (and right now broken) 1.8 version, until
112         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
113
114 2008-03-22  Joerg Jaspert  <joerg@debian.org>
115
116         * dak/transitions.py (load_transitions): Check if all our keys are
117         defined, if there are only keys defined we want and also the types
118         of the various keys.
119
120 2008-03-22  Anthony Towns  <ajt@debian.org>
121
122         * dak/edit_transitions.py: Add --import option.
123         Add --use-sudo option. Use fcntl locking for writing.
124         Move writing into a function (write_transitions).
125         Reinvoke self using sudo and --import if necessary.
126         Move temporary file creation into a function, use mkstemp.
127         Rename to "dak transitions".
128
129 2008-03-21  Joerg Jaspert  <joerg@debian.org>
130
131         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
132         edited file back in place
133         (check_transitions): Use proper locking and also use sudo to copy
134         the new file in place
135
136 2008-03-21  Anthony Towns <ajt@debian.org>
137
138         * config/debian/extensions.py: Add infrastructure for replacing
139         functions in dak modules; add upload blocking for dpkg.
140
141 2008-03-12  Joerg Jaspert  <joerg@debian.org>
142
143         * dak/edit_transitions.py: Done a number of cleanups to make code
144         working. Also changed the way prompting/answering goes, to not
145         have to import daklib/queue.
146         (edit_transitions): When done with a successful edit - also print
147         a final overview about defined transitions
148
149 2008-03-11  Joerg Jaspert  <joerg@debian.org>
150
151         * dak/process_unchecked.py: Import syck module directly, not "from
152         syck import *"
153         (check_transition): Do the check for sourceful upload in here
154         Also adjust the syck loading commands, rename new_vers to
155         expected, curvers to current, to make it more clear what they mean.
156
157         * daklib/database.py (get_suite_version): Renamed from
158         get_testing_version. Also changed the cache variables name
159
160         * The above changes are based on modifications from Anthony.
161
162         * dak/dak.py (init): Renamed check -> edit transitions
163
164         * dak/edit_transitions.py: Renamed from check_transitions.py
165         (main): Also rename new_vers/curvers to expected/current
166         Basically a nice rewrite, so it now does checks and edit,
167         depending on how you call it. Check also removes old transitions,
168         if user wants it.
169
170 2008-03-02  Joerg Jaspert  <joerg@debian.org>
171
172         * debian/control (Suggests): Add python-syck to Depends:
173
174         * dak/dak.py (init): Tell it about check_transitions
175
176         * dak/check_transitions.py (usage): Added, checks the transitions
177         file (if any)
178
179         * daklib/database.py (get_testing_version): Added. Returns the
180         version for the source in testing, if any
181
182         * dak/process_unchecked.py (check_transition): Added. Checks if a
183         release team member defined a transition, and rejects based on
184         that data.
185         (process_it): Use it.
186         (check_transition): Warn on broken transitions file and return,
187         not doing anything.
188         (check_transition): Moved out of here, into daklib/queue
189         (process_it): Call check_transitions only if
190         changes[architecture] has source included.
191         (check_transition): Now call the database.get_testing_version
192
193 2008-02-09  Christoph Berg <myon@debian.org>
194
195         * daklib/queue.py (get_type): fubar does not exist in global
196         namespace.
197
198         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
199         to source table, and move src_uploaders after source so the REFERNCES
200         clause works.
201         * dak/process_accepted.py (install): Fill the changedby column from
202         the information found in the .changes. This will allow to identify
203         NMUs and sponsored uploads more precisely in tools querying projectb.
204         * scripts/debian/insert_missing_changedby.py: Script to import yet
205         missing fields from filippo's uploads-history DB.
206
207 2008-02-06  Joerg Jaspert  <joerg@debian.org>
208
209         * daklib/utils.py (check_signature): Make variable key available,
210         so we can access it.
211
212 2008-01-07  Joerg Jaspert  <joerg@debian.org>
213
214         * dak/examine_package.py (check_deb): Remove linda call. It
215         provides no added benefit to lintian anymore.
216
217 2008-01-06  Joerg Jaspert  <joerg@debian.org>
218
219         * dak/examine_package.py (do_lintian): lintian now supports html
220         coloring, so use it.
221         (do_command): Dont escape html chars if param escaped = 1
222
223 2007-12-31  Anthony Towns  <ajt@debian.org>
224
225         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
226         when processing result of check_dsc_against_db so we don't promote
227         warnings to rejections.
228
229 2007-12-30  Joerg Jaspert  <joerg@debian.org>
230
231         * dak/dak.py (init): add show-new. This is based on a patch
232         submitted by Thomas Viehmann in Bug #408318, but large parts of
233         handling it are rewritten and show-new is done by me.
234
235         * dak/queue_report.py (table_row): Add link to generated html page
236         for NEW package.
237
238         * dak/show_new.py: new file, generates html overview for NEW
239         packages, similar to what we see with examine-package.
240
241         * config/debian/cron.hourly: Add show-new call
242
243         * config/debian/dak.conf: Add HTMLPath for Show-New
244
245         * dak/examine_package.py (print_copyright): ignore stderr when
246         finding copyright file.
247         (main): add html option
248         (html_escape): new function
249         (escape_if_needed): ditto
250         (headline): ditto
251         (colour_output): ditto
252         (print_escaped_text): ditto
253         (print_formatted_text): ditto
254         - use those functions everywhere where we generate output, as they
255         easily know if we want html or not and just DTRT
256         (do_lintian): new function
257         (check_deb): use it
258         (output_deb_info): Use print_escaped_text, not print_formatted_text.
259         Also import daklib.queue, determine_new now lives there
260
261         Also add a variable to see if we want html output. Default is
262         disabled, show_new enables it for its use.
263         Most of html, besides header/footer are in examine_package instead
264         of show_new, as it makes it a whole lot easier to deal with it at
265         the point the info is generated.
266
267
268         * dak/process_new.py (determine_new): Moved out of here.
269         (check_valid): Moved out of here.
270         (get_type): Moved out of here.
271
272         * daklib/queue.py (determine_new): Moved here.
273         (check_valid): Moved here.
274         (get_type): Moved here.
275
276         * dak/init_db.py (do_section): Remove non-US code
277
278         * dak/make_overrides.py (main): ditto
279
280         * dak/process_new.py (determine_new): ditto
281
282         * daklib/queue.py (Upload.in_override_p),
283         (Upload.check_override): ditto
284
285         * daklib/utils.py (extract_component_from_section):,
286         (poolify): ditto
287
288         * dak/import_archive.py (update_section): ditto
289
290         * dak/symlink_dists.py (fix_component_section): ditto
291
292         * scripts/debian/mkmaintainers: ditto
293
294         * scripts/debian/update-mirrorlists (masterlist): ditto
295
296         * config/debian-non-US/*: Remove subdir
297
298         * scripts/debian/update-readmenonus: Removed.
299
300
301 2007-12-28  Anthony Towns  <ajt@debian.org>
302
303         * daklib/utils.py (check_signature): add NOTATION_DATA and
304         NOTATION_NAME to known keywords.
305
306         * daklib/queue.py (Upload.check_source_against_db): 
307
308         * dak/make_suite_file_list.py: add -f/--force option.
309
310         * dak/generate_releases.py: add -a/--apt-conf=FILE and
311         -f/--force-touch options.  Pull version info from the database.
312         Make suite description optional.
313
314         * config/debian/dak.conf: update
315         Reject-Proposed-Updates::MoreInfoURL.  Comment out
316         Suite::Stable::Version and ::Description.
317
318         * config/debian/apt.conf: Add hurd-i386 to unstable
319         debian-installer stanza.
320
321 2007-12-28  Joerg Jaspert  <joerg@debian.org>
322
323         * KEYEXPIRED is actually a known keyword. We do check it earlier
324         on and reject in case the sig is bad (or unknown)
325
326 2007-12-24  Joerg Jaspert  <joerg@debian.org>
327
328         * Also run lintian on the .dsc file to check the source itself.
329
330         * Fix the direct usage of ar | tar etc to get the copyright file
331         and use dpkg-deb, which is made for this and makes us able to
332         process data.tar.bz2 (or whatever format it will be in the
333         future).
334
335 2007-12-21  Joerg Jaspert  <joerg@debian.org>
336
337         * Remove the (now useless) check for a pre-depends on dpkg for
338           binaries that contain bzip2 compressed data tarballs.
339
340 2007-08-28  Anthony Towns  <ajt@debian.org>
341
342         * process_unchecked.py: Add support for automatic BYHAND
343         processing.
344         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
345         processing of tag-overrides.
346         * examine_package.py: Summarise duplicate copyright file entries
347         (same md5sum) with a reference to the previous instance, rather
348         than repeating them.
349         * process_new.py: When rejecting from the p-u-new or o-p-u-new
350         holding queues, don't worry if dak has its own reasons for
351         rejecting the package as well as the SRMs.
352
353 2007-06-19  Anthony Towns  <ajt@debian.org>
354
355         * Add nm.debian.org pseudopackage
356
357 2007-06-18  Anthony Towns  <ajt@debian.org>
358
359         * daklib/logging.py: Set umask to not exclude group-writability
360         so we don't get reminded at the start of each month. Thanks to
361         Random J.
362         * dak/override.py: More changes from Herr von Wifflepuck: warn
363         if section of source is different to binary section; restore
364         functionality on source-only overrides; croak if trying to set
365         priority of a source override; never set priority of source
366         overrides; correct typo in logging (s/priority/section/ at
367         one place)
368
369         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
370         * config/debian/cron.daily: auotmatically accept/reject
371         oldstable-proposed-updates based on COMMENTS directory
372
373 2007-06-18  Anthony Towns  <ajt@debian.org>
374
375         * config/debian/apt.conf, config/debian/apt.conf.stable,
376         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
377         (sarge), support for oldstable-proposed-updates, dropping m68k
378         from etch, creating etch-m68k suite, creating lenny.
379
380         * config/debian/vars: update for lenny
381
382         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
383         drop upload limitations, add release postgres user
384         
385         * dak/process_new.py: support for automatically accepting and rejecting
386         packages from proposed-updates holding queues via COMMENTS directory
387         * cron.daily: automatically process COMMENTS-based approvals
388         and rejections for proposed-updates holding queues
389
390         * dak/process_unchecked.py: add support for oldproposedupdates
391         holding queue
392
393         * dak/control_suite.py: allow control-suite to work with etch-m68k
394
395         * dak/generate_releases.py: unlink old Release files before updating
396         them if nlinks > 1 (ie, if two files used to be the same, maybe they
397         shouldn't be when generate-releases is run)
398
399         * dak/generate_releases.py: add a couple of commented lines to make
400         it easier to deal with point releases
401
402         * dak/make_overrides.py: generate overrides for !contrib udebs
403
404         * docs/README.stable-point-release: update docs for doing a
405         point release
406
407 2007-03-05  Anthony Towns  <ajt@debian.org>
408
409         * config/debian/dak.conf: update for 3.1r5.
410         * scripts/debian/ssh-move: add ssh-move script from debbugs
411         * config/debian/cron.unchecked: push version info to debbugs using
412         ssh-move.
413
414 2007-02-14  James Troup  <troup@ries.debian.org>
415
416         * docs/README.config: remove Dinstall::GroupOverrideFilename.
417         * config/debian/dak.conf: likewise.
418         * config/debian-non-US/dak.conf: likewise.
419         * config/debian-security/dak.conf: likewise.
420
421         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
422         experimental differently, just close the bugs and let version
423         tracking sort it out.
424          (nmu_p): remove entire class - now unused.
425          (Upload.__init__): don't use nmu_p.
426
427 2007-02-08  Anthony Towns  <ajt@debian.org>
428
429         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
430         signing key.  Drop maximum index diffs down to 14.
431
432         * config/debian/apt.conf: add udeb support for non-free (testing,
433         unstable) and experimental.
434         * config/debian/dak.conf: likewise.
435
436         * dak/generate_releases.py (main): handle udebs in any component.
437
438         * daklib/queue.py (Upload.build_summaries): handle files without a
439         'type' gracefully.
440
441         * dak/generate_releases.py (print_sha256_files): new function.
442         (main): use it.
443
444         * dak/process_accepted.py (stable_install): fix name of template
445         mail.
446
447         * dak/process_unchecked.py (is_stableupdate): fix invocation of
448         database.get_suite_id().
449
450         * templates/process-new.bxa_notification: Update on request
451         of/after discussion with BIS staff.
452
453         * scripts/debian/mkfilesindices: also handle proposed-updates.
454
455 2007-02-08  Ryan Murray  <rmurray@debian.org>
456
457         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
458         group name for chgrp of mail archives.
459
460         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
461         orig.tar.gz's by picking the first one by file id.
462
463         * dak/override.py (main): limit to binary overrides only for now.
464         (usage): update to match.
465
466         * config/debian/cron.daily: track when we have the accepted lock
467         and clean it up on exit if we have it.  Take/check the
468         cron.unchecked lock just before traping to cleanup on exit.
469         Remove potato override handling.  Remove any dangling symlinks in
470         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
471
472         * config/debian/apt.conf: change default compression scheme for
473         both Sources and Packages to gzip and bzip2 rather than
474         uncompressed and gzip (Packages) and gzip (Sources).  Use old
475         defaults for proposed-updates.
476
477         * dak/control_overrides.py (main): refuse to operate on
478         untouchable suites.
479
480         * config/debian/pseudo-packages.maintainers: drop install,
481         installation, boot-floppy, slink-cd, potato-cd and
482         nonus.debian.org.  Update base.
483         * config/debian/pseudo-packages.description: likewise.
484
485         * daklib/utils.py (re_srchasver): new regex.
486         (parse_changes): use regex to split 'Source (Version)' style
487         Source fields into 'source' and 'source-version'.
488
489         * config/debian/cron.daily: use $base instead of hardcoding path
490         name.
491
492         * scripts/debian/mkfilesindices: source 'vars' file and use it's
493         variables instead of hardcoding path names.
494
495         * config/debian/apt.conf: switch from /org to /srv.
496         * config/debian/apt.conf.buildd: likewise.
497         * config/debian/apt.conf.stable: likewise.
498         * config/debian/cron.daily: likewise.
499         * config/debian/cron.hourly: likewise.
500         * config/debian/cron.monthly: likewise.
501         * config/debian/cron.unchecked: likewise.
502         * config/debian/cron.weekly: likewise.
503         * config/debian/dak.conf: likewise.
504         * config/debian/vars: likewise.
505         * scripts/debian/mkfilesindices: likewise.
506         
507 2007-02-08  James Troup  <james@nocrew.org>
508
509         * dak/process_unchecked.py (check_signed_by_key): new function to
510         ensure .changes files are signed by an authorized uploader.
511         (process_it): use it.
512
513         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
514         to configure per suite/component/architecture binary upload
515         restrictions.
516
517 2006-10-09  James Troup  <james.troup@canonical.com>
518
519         * dak/process_unchecked.py (check_timestamps): change match to
520         search as recent versions of python-apt prefix the string with 'E: '.
521
522 2006-06-26  Ryan Murray  <rmurray@debian.org>
523
524         * dak/process_unchecked.py (check_files): strip optional source version
525         from Source: field in changes file, and ensure what is left is a valid
526         package name.
527
528 2006-06-23  Ryan Murray  <rmurray@debian.org>
529
530         * dak/process_unchecked.py (check_files): also check ProposedUpdates
531         queue for source.
532
533 2006-06-18  Ryan Murray  <rmurray@debian.org>
534
535         * dak/scripts/debian/update-ftpstats: look for dak named processes in
536         the log, too.
537
538         * dak/process_unchecked.py (check_files): only check embargoed and
539         unembargoed queues if the keys are set.
540
541         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
542         and bzip2 for etch.
543
544 2006-06-16  James Troup  <james@nocrew.org>
545
546         * dak/dak.py (init): add new-security-install.
547
548         * dak/new_security_install.py: cleanups and adapt for new naming
549         scheme and other changes.
550
551 2006-06-16  Anthony Towns  <ajt@debian.org>
552
553         * dak/new_security_install.py: initial version imported from
554         klecker.
555
556 2006-06-16  James Troup  <james@nocrew.org>
557
558         [Merged changes from klecker - original author unknown.]
559
560         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
561
562         * dak/security_install.py (do_upload): fix check for oldstable and
563         upload file list handling.
564
565         * dak/process_unchecked.py (check_files): update "check for
566         source" code to also look in Embargoed and Unembargoed queues.
567         (is_unembargo): fix handling of Dir::Queue::Disembargo.
568
569         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
570
571         * config/debian-security/vars (disembargo): add.
572
573         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
574         update.
575         (Process-Unchecked::AcceptedLockFile): add.
576         (Suite::Testing): clean up Version and Description.
577         (SuiteMappings): add silent map from etch-secure to testing.
578
579         * config/debian-security/cron.unchecked: add support for
580         disembargoed queues.
581
582         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
583         files too.
584
585         * config/debian-security/apt.conf: add amd64 to architectures for
586         testing-security.
587
588 2006-06-11  James Troup  <troup@spohr.debian.org>
589
590         * config/debian/cron.daily: invoke process-accepted not
591         process-unchecked.
592
593         * config/debian/vars (scriptsdir): new variable.
594         * config/debian/cron.daily: use it.
595
596         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
597         $base/misc/ instead of versioned $masterdir.  Correct 'dak
598         make-maintainers' invocation to look in $configdir for
599         pseudo-packages.maintainers.
600
601         * daklib/queue.py (Upload.do_reject): use correct name for
602         rejection template.
603
604 2006-06-11  James Troup  <james@nocrew.org>
605
606         * dak/override.py (main): temporarily add content of old X-Katie
607         header back as the PTS apparently filters on it.
608         * dak/process_accepted.py (main): likewise.
609         * dak/process_new.py (main): likewise.
610         * dak/process_unchecked.py (main): likewise.
611         * dak/reject_proposed_updates.py (main): likewise.
612         * dak/rm.py (main): likewise.
613         * daklib/queue.py (Upload.do_reject): likewise.
614
615         * config/debian/cron.unchecked: set -u to error out on undefined
616         variables.  Preset LOCKDAILY to "" accordingly.
617         * config/debian/cron.hourly: likewise.
618         * config/debian/cron.monthly: likewise.
619         * config/debian/cron.weekly: likewise.
620
621         * config/debian/vars (configdir): add new variable pointing to
622         this directory.
623
624         * config/debian/cron.daily: use $configdir inplace of $masterdir
625         when that's what we mean, and don't cd into $masterdir just to run
626         dak scripts as we don't need to do that anymore.
627         * config/debian/cron.hourly: likewise.
628         * config/debian/cron.unchecked: likewise.
629         * config/debian/cron.weekly: likewise.
630
631         * config/debian/dak.conf
632         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
633         user back to list of known users as it's non-trivial to entirely
634         change the owner of a database with postgresql 7.4.
635
636         * daklib/queue.py (Upload.source_exists): use string object
637         methods rather than string module.
638         (Upload.get_anyversion): likewise.
639
640         * daklib/utils.py (validate_changes_file_arg): update filename
641         slicing to cope with new .dak filenames.
642
643         * dak/ls.py (main): add back 'heidi' as a valid argument for
644         -f/--format as people are using it in scripts and breaking that
645         without warning seems rude.
646
647 2006-05-21  James Troup  <james@nocrew.org>
648
649         * dak/rm.py (main): use string .isdigit() rather than
650         utils.str_isnum().
651         * dak/process_new.py (edit_overrides): likewise.
652
653         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
654         string import.
655
656 2006-05-21  James Troup  <james@nocrew.org>
657
658         * dak/check_archive.py (check_indices_files_exist): use list
659         comprehension instead of map().  No longer need to import
660         deprecated string module as a side-effect.
661         * dak/check_overrides.py (process): likewise.
662         (main): likewise.
663         * dak/cruft_report.py (do_obsolete_source): likewise.
664         (main): likewise.
665         * dak/ls.py (main): likewise.
666         * dak/make_suite_file_list.py (write_filelists): likewise.
667         * dak/process_accepted.py (stable_install): likewise.
668         * dak/rm.py (main): likewise.
669         * dak/stats.py (number_of_packages): likewise.
670         * daklib/logging.py (Logger.log): likewise.
671         * daklib/queue.py (Upload.source_exists): likewise.
672         (Upload.cross_suite_version_check): likewise.
673         * daklib/utils.py (parse_args): likewise.
674
675 2006-05-21  James Troup  <james@nocrew.org>
676
677         * daklib/utils.py (process_gpgv_output): new function, split out
678         of check_signature().
679         (check_signature): adapt accordingly.
680         (retrieve_key): new function that will try to retrieve the key
681         that signed a given file from a keyserver.
682         (check_signature): add 'autofetch' argument that if not set
683         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
684         If 'autofetch' is true, invoke retrieve_key().  
685
686         * docs/README.config: document Dinstall::KeyAutoFetch and
687         Dinstall:KeyServer.
688
689 2006-05-20  James Troup  <james@nocrew.org>
690
691         * dak/find_null_maintainers.py (main):
692         s/createtimestamp/createTimestamp/ to make things work with modern
693         slapd.
694
695         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
696         Stable::Version and Stable::Description for 3.1r2.
697
698         * config/debian-non-US/dak.conf: sync with klecker - update
699         version number of 3.0 and MoreInfoURL.
700
701         * docs/README.stable-point-release: Add notes about updating
702         dak.conf and Reject-Proposed-Updates section in particular.
703         s/woody/stable/.  Also need to update README.html.
704
705         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
706
707         * config/debian/apt.conf: Add udeb tree for proposed-updates.
708
709 2006-05-20  Ryan Murray  <rmurray@debian.org>
710
711         * scripts/debian/update-ftpstats: new script to update daily
712         architecture size graph data.
713
714         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
715         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
716         there.
717
718         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
719         before we finish.  Don't push to merkel.
720
721         * dak/process_unchecked.py (check_changes): Also look in
722         ProposedUpdates queue dir.
723         (check_files): likewise.
724
725 2006-05-20  Anthony Towns  <ajt@debian.org>
726
727         * scripts/debian/mkfilesindices: new script to generate file
728         indices used for partial mirroring.
729
730         * config/debian/cron.daily: add progress timestamps.
731
732         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
733         amd64 to testing, unstable and experimental.  Drop sh from
734         experimental.  Move Experimental to dists/experimental.  Add
735         Dir::ProposedUpdates.  Add Architectures::amd64.
736
737         * config/debian/apt.conf: add amd64 to testing, unstable and
738         experimental.  Drop uncompressed Packages files from testing. Drop
739         sh from experimental.  Move experimental to dists/experimental/.
740
741         * config/debian/vars (archs): add amd64.
742
743         * dak/process_unchecked.py (action): Add support for
744         proposed-updates approval queue.
745         (is_stableupdate): new function - checks if the upload is targeted
746         at proposed-updates.
747         (do_stableupdate): likewise - moves upload to proposed-updates
748         holding area.
749
750         * dak/process_new.py (do_new): warn if original or new target
751         suite are invalid.
752
753         * dak/generate_releases.py (print_md5sha_files): less whitespace
754         between the hash and size.
755
756         * dak/generate_index_diffs.py (genchanges): don't say we're not
757         doing anything.  Better formatting of other messages.
758         (main): don't skip experimental and remove some 'doing stuff'
759         prints.
760
761 2006-05-18  James Troup  <james@nocrew.org>
762
763         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
764         query.
765
766         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
767         docstrings, untabify, don't shadow builtins, lowercase non-global
768         variable names, spaces after commas.  Also bail if given any
769         arguments since we don't accept any.
770         * dak/init_db.py: likewise.  Also split large main() into
771         subfunctions and rename get() to sql_get().
772
773         * dak/init_db.py (main): check returned value from
774         database.get_archive_id().
775
776         * dak/dak.py: renamed from shell.py.  Update to support new source
777         layout.  Created init() and usage() functions.  Various
778         pylint-inspired cleanups.  Use daklib utils.warn() and
779         utils.fubar().  Change 'functionality' variable to only have
780         (command, description) and always invoke main() when running the
781         module.  Also support -h.
782
783 2006-05-17  James Troup  <james@nocrew.org>
784
785         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
786         imports of and calls to daklib modules.  Change script name
787         everywhere, i.e. in output, mails, comments and configuration tree
788         + filenames.  Also update references to other renamed scripts,
789         classes and templates.  Use '.dak' instead of '.katie' for the
790         queue info storage files.
791         (Renamed from tea)
792         * dak/check_overrides.py: likewise.  (Renamed from cindy)
793         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
794         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
795         * dak/clean_queues.py: likewise.  (Renamed from shania)
796         * dak/clean_suites.py: likewise.  (Renamed from rhona)
797         * dak/compare_suites.py: likewise.  (Renamed from andrea)
798         * dak/control_overrides.py: likewise.  (Renamed from natalie)
799         * dak/control_suite.py: likewise.  (Renamed from heidi)
800         * dak/cruft_report.py: likewise.  (Renamed from rene)
801         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
802         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
803         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
804         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
805         * dak/import_archive.py: likewise.  (Renamed from neve)
806         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
807         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
808         * dak/init_db.py: likewise. (Renamed from alyson)
809         * dak/init_dirs.py: likewise. (Renamed from rose)
810         * dak/ls.py: likewise. (Renamed from madison)
811         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
812         * dak/make_overrides.py: likewise.  (Renamed from denise)
813         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
814         * dak/mirror_split.py: likewise.  (Renamed from billie)
815         * dak/override.py: likewise.  (Renamed from alicia)
816         * dak/poolize.py: likewise.  (Renamed from catherine)
817         * dak/process_accepted.py: likewise.  (Renamed from kelly)
818         * dak/process_new.py: likewise.  (Renamed from lisa)
819         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
820         * dak/queue_report.py: likewise.  (Renamed from helena)
821         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
822         * dak/rm.py: likewise.  (Renamed from melanie)
823         * dak/security_install.py: likewise.  (Renamed from amber)
824         * dak/split_done.py: likewise.  (Renamed from nina)
825         * dak/stats.py: likewise.  (Renamed from saffron)
826         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
827         * daklib/database.py: likewise.  (Renamed from db_access)
828         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
829         * daklib/utils.py: likewise.
830
831         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
832         doesn't need to notify anyone" string.
833         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
834
835         * dak/process_accepted.py (init): drop -V/--version argument.
836         * dak/process_new.py (init): likewise.
837         * dak/process_unchecked.py (init): likewise.
838         * dak/reject_proposed_updates.py (init): likewise
839
840         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
841
842         * dak/stats.py: in usage() output change STAT to MODE.
843
844 2006-05-15  James Troup  <james@nocrew.org>
845
846         * dak/queue_report.py: remove unused encodings imports.
847
848         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
849         imports.  Initalize 'Cnf' as a global.
850         (BillieDB._internal_recurse): fix 'util.' typo.
851
852         * dak/import_ldap_fingerprints.py (main): drop unused time import and
853         commented out time check for LDAP search.
854
855 2005-12-16  Ryan Murray  <rmurray@debian.org>
856
857         * halle: add support for udebs
858         * kelly: stable_install: add support for binNMU versions
859
860 2005-12-05  Anthony Towns  <aj@erisian.com.au>
861
862         * katie.py: Move accept() autobuilding support into separate function 
863         (queue_build), and generalise to build different queues
864
865         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
866
867         * jennifer: Initial support for enabling embargo handling with the
868         Dinstall::SecurityQueueHandling option.
869         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
870         functions.
871
872         * katie.conf-security: Include embargo options
873         * katie.conf-security: Add Lock dir
874         * init_pool.sql-security: Create disembargo table
875         * init_pool.sql-security: Add constraints for disembargo table
876
877 2005-11-26  Anthony Towns  <aj@erisian.com.au>
878
879         * Merge of changes from klecker, by various people
880
881         * amber: special casing for not passing on amd64 and oldstable updates
882         * amber: security mirror triggering
883         * templates/amber.advisory: updated advisory structure
884         * apt.conf.buildd-security: update for sarge's release
885         * apt.conf-security: update for sarge's release
886         * cron.buildd-security: generalise suite support, update for sarge's release
887         * cron.daily-security: update for sarge's release, add udeb support
888         * vars-security: update for sarge's release
889         * katie.conf-security: update for sarge's release, add amd64 support,
890         update signing key
891
892         * docs/README.names, docs/README.quotes: include the additions
893
894 2005-11-25  Anthony Towns  <aj@erisian.com.au>
895
896         * Changed accepted_autobuild to queue_build everywhere.
897         * Add a queue table.
898         * Add a "queue" field in the queue_build table (currently always 0)
899
900         * jennifer: Restructure to make it easier to support special
901         purpose queues between unchecked and accepted.
902
903 2005-11-25  Anthony Towns  <aj@erisian.com.au>
904
905         * Finishing merge of changes from spohr, by various people still
906
907         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
908         works
909         * jennifer: Re-enable .deb ar format checking
910         * katie.py: Convert to +bX binNMU special casing
911         * rhona: Add some debug output when deleting binaries
912         * cron.daily: Add emilie
913         * cron.unchecked: Add lock files
914
915 2005-11-15  Anthony Towns  <aj@erisian.com.au>
916
917         * Merge of changes from spohr, by various people.
918
919         * tiffani: new script to do patches to Packages, Sources and Contents
920         files for quicker downloads.
921         * ziyi: update to authenticate tiffani generated files
922
923         * dak: new script to provide a single binary with less arbitrary names
924         for access to dak functionality.
925
926         * cindy: script implemented
927
928         * saffron: cope with suites that don't have a Priority specified
929         * heidi: use get_suite_id()
930         * denise: don't hardcode stable and unstable, or limit udebs to unstable
931         * denise: remove override munging for testing (now done by cindy)
932         * helena: expanded help, added new, sort and age options, and fancy headers
933         * jennifer: require description, add a reject for missing dsc file
934         * jennifer: change lock file
935         * kelly: propogation support
936         * lisa: honour accepted lock, use mtime not ctime, add override type_id
937         * madison: don't say "dep-retry"
938         * melanie: bug fix in output (missing %)
939         * natalie: cope with maintainer_override == None; add type_id for overrides
940         * nina: use mtime, not ctime
941
942         * katie.py: propogation bug fixes
943         * logging.py: add debugging support, use | as the logfile separator
944
945         * katie.conf: updated signing key (4F368D5D)
946         * katie.conf: changed lockfile to dinstall.lock
947         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
948         * katie.conf: added tiffani, cindy support
949         * katie.conf: updated to match 3.0r6 release
950         * katie.conf: updated to match sarge's release
951
952         * apt.conf: update for sarge's release
953         * apt.conf.stable: update for sarge's release
954         * apt.conf: bump daily max Contents change to 25MB from 12MB
955
956         * cron.daily: add accepted lock and invoke cindy  
957         * cron.daily: add daily.lock
958         * cron.daily: invoke tiffani
959         * cron.daily: rebuild accepted buildd stuff
960         * cron.daily: save rene-daily output on the web site
961         * cron.daily: disable billie
962         * cron.daily: add stats pr0n
963
964         * cron.hourly: invoke helena
965
966         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
967         * vars: add lockdir, add etch to copyoverrides
968         * Makefile: add -Ipostgresql/server to CXXFLAGS
969
970         * docs/: added README.quotes
971         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
972         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
973
974         * TODO: correct spelling of "conflicts"
975
976 2005-05-28  James Troup  <james@nocrew.org>
977
978         * helena (process_changes_files): use MTIME rather than CTIME (the
979         C's not for 'creation', stupid).
980         * lisa (sort_changes): likewise.
981
982         * jennifer (check_distributions): use has_key rather than an 'in'
983         test which doesn't work with python2.1.  [Probably by AJ]
984
985 2005-03-19  James Troup  <james@nocrew.org>
986
987         * rene (main): use Suite::<suite>::UdebComponents to determine
988         what components have udebs rather than assuming only 'main' does.
989
990 2005-03-18  James Troup  <james@nocrew.org>
991
992         * utils.py (rfc2047_encode): use codecs.lookup() rather than
993         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
994         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
995         <andrew@ubuntu.com>.
996
997 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
998
999         * helena: add -n/--new HTML output option and improved sorting
1000         options.
1001
1002 2005-03-06  Ryan Murray  <rmurray@debian.org>
1003
1004         * shania(main): use Cnf::Dir::Reject instead of REJECT
1005
1006 2005-02-08  James Troup  <james@nocrew.org>
1007
1008         * rene (main): add partial NBS support by checking that binary
1009         packages are built by their real parent and not some random
1010         stranger.
1011         (do_partial_nbs): likewise.
1012
1013 2005-01-18  James Troup  <james@nocrew.org>
1014
1015         * katie.py (Katie.build_summaries): avoid leaking file handle when
1016         extracting package description.
1017         (Katie.force_reject): remember and close each file descriptor we
1018         use.
1019         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1020         s/reason_file/reason_fd/ because it's a file descriptor.
1021         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1022         invoking apt_pkg.md5sum().
1023
1024         * jennifer (check_deb_ar): new function: sanity check the ar
1025         contents of a .deb.
1026         (check_files): use it.
1027         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1028         found.
1029         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1030
1031 2005-01-14  Anthony Towns  <ajt@debian.org>
1032
1033         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1034
1035         * propup stuff (thanks to Andreas Barth)
1036         * katie.conf: add stable MustBeOlderThan testing, add -security
1037           propup
1038         * jennifer: set distribution-version in .katie if propup may be needed
1039         * katie.py: add propogation to cross_suite_version_check
1040
1041 2004-11-27  James Troup  <james@nocrew.org>
1042
1043         * nina: new script to split monolithic queue/done into date-based
1044         hierarchy.
1045
1046         * rene (usage): document -s/--suite.
1047         (add_nbs): use .setdefault().
1048         (do_anais): likewise.
1049         (do_nbs): don't set a string to "" and then += it.
1050         (do_obsolete_source): new function - looks for obsolete source
1051         packages (i.e source packages whose binary packages are ALL a)
1052         claimed by someone else and b) newer when built from the other
1053         source package).
1054         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1055         and 'full' check modes.  Check for obsolete source packages.
1056         linux-wlan-ng has been fixed - remove hideous bodge.
1057
1058         * jennifer (check_distributions): support 'reject' suite map type.
1059
1060         * utils.py (validate_changes_file_arg): s/file/filename/.
1061         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1062         and return the .changes filename regardless.
1063         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1064         (re_no_revision): don't escape '-', it's not a special character.
1065         s/\*/+/ as there must be at least one non-dash character after the
1066         dash in a revision.  Thanks to Christian Reis for noticing both of
1067         these.
1068
1069         * ashley (main): pass require_changes=-1 to
1070         utils.validate_changes_file_arg().
1071
1072         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1073         Team <debian-kernel@lists.debian.org>'.
1074
1075         * katie.py (Katie.in_override_p): fix .startswith() usage.
1076
1077         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1078         (Lauren::MoreInfoURL): update to 3.0r3.
1079         (Suite::Stable::Version): likewise.
1080         (Suite::Stable::Description): likewise.
1081
1082         * cron.daily: disable automatic task override generation.
1083
1084         * cindy (process): restrict "find all packages" queries by
1085         component.  Respect Options["No-Action"].
1086         (main): add -n/--no-action support.  Only run on unstable.  Rename
1087         type to otype (pychecker).
1088
1089 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1090
1091         * katie.conf (Billie::BasicTrees): add all architectures.
1092         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1093         'everything'.
1094
1095         * cron.daily: Update a 'current' symlink when creating the
1096         post-daily-cron-job database backup to aid mirroring to merkel.
1097         Run billie.
1098
1099         * billie (BillieTarget.poolish_match): handle .udeb too.
1100
1101 2004-10-13  Ryan Murray  <rmurray@debian.org>
1102
1103         * amber (do_upload): Sort changes files in "katie" order so that
1104           source always arrives before binary-only rebuilds
1105         
1106 2004-10-05  James Troup  <james@nocrew.org>
1107
1108         * jennifer (check_dsc): correct reject message on invalid
1109         Maintainer field.
1110
1111 2004-09-20  James Troup  <james@nocrew.org>
1112
1113         * alicia: remove unused 'pwd' import.
1114
1115         * tea (check_override): underline suite name in output properly.
1116
1117         * rene (main): read a compressed Packages file.
1118         * tea (validate_packages): likewise.
1119
1120         * katie.py (re_fdnic): add 'r' prefix.
1121         (re_bin_only_nmu_of_mu): likewise.
1122         (re_bin_only_nmu_of_nmu): likewise.
1123
1124         * madison (main): retrieve component information too and display
1125         it if it's not 'main'.
1126         * melanie (reverse_depends_check): likewise.
1127
1128         * utils.py (pp_dep): renamed...
1129         (pp_deps): ... to this.
1130         * jeri (check_dep): update calls to utils.pp_deps().
1131         * melanie (reverse_depends_check): likewise.
1132
1133         * jennifer (check_changes): move initalization of email variables
1134         from here...
1135         (process_it): ...to here as we no longer always run
1136         check_changes().  Don't bother to initialize
1137         changes["architecture"].
1138
1139         * denise (list): renamed to...
1140         (do_list): ...this to avoid name clash with builtin 'list'.
1141         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1142         for dictionaries.
1143         (main): Likewise for name clash avoidance and also
1144         s/override_type/suffix/.  Adjust call to do_list().
1145
1146 2004-09-01  Ryan Murray  <rmurray@debian.org>
1147
1148         * tea (check_files): check the pool/ directory instead of dists/
1149
1150 2004-08-04  James Troup  <james@nocrew.org>
1151
1152         * jenna (cleanup): use .setdefault() for dictionaries.
1153         (write_filelists): likewise.
1154
1155         (write_filelists): Use utils.split_args() not split() to split
1156         command line arguments.
1157         (stable_dislocation_p): likewise.
1158
1159         (write_filelists): Add support for mapping side of suite-based
1160         "Arch: all mapping".
1161         (do_da_do_da): ensure that if we're not doing all suites that we
1162         process enough to be able correct map arch: all packages.
1163
1164         * utils.py (cant_open_exc): correct exception string,
1165         s/read/open/, s/.$//.
1166
1167         * templates/amber.advisory: update to match reality a little
1168         better.
1169
1170         * melanie (reverse_depends_check): read Packages.gz rather than
1171         Packages.
1172
1173         * jennifer (check_files): check for unknown component before
1174         checking for NEWness.
1175
1176         * katie.py (Katie.in_override_p): use .startswith in favour of a
1177         slice.
1178
1179         * docs/melanie.1.sgml: document -R/--rdep-check.
1180
1181 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1182
1183         * billie (main): Make the verbatim lists include all the README
1184           elements.
1185         * docs/README.names: Add billie in (correcting oversight)
1186
1187 2004-07-01  James Troup  <james@nocrew.org>
1188
1189         * emilie (main): handle woody's case-sensitive python-ldap,
1190         s/keyfingerprint/keyFingerPrint/.
1191
1192 2004-06-25  James Troup  <james@nocrew.org>
1193
1194         * debian/control (Depends): add dpkg-dev since jennifer uses
1195         dpkg-source.
1196
1197 2004-06-24  James Troup  <james@nocrew.org>
1198
1199         * melanie (main): s/file/temp_file/ and close file handle before
1200         removing the temporary file.
1201         (main): don't warn about needing a --carbon-copy if in no-action
1202         mode.
1203
1204         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1205         (main): likewise.
1206
1207         * test/006/test.py (main): check bracketed email-only form.
1208
1209         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1210         email-only, strip the brackets so we don't end up with
1211         <<james@nocrew.org>>.
1212
1213 2004-06-20  James Troup  <james@nocrew.org>
1214
1215         * jennifer (process_it): only run check_changes() if
1216         check_signature() returns something.  (Likewise)
1217
1218         * utils.py (changes_compare): if there's no changes["version"] use
1219         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1220
1221 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1222
1223         * jeri (pp_dep): moved from here to ...
1224         * utils.py (pp_dep): here.
1225
1226         * melanie (main): add reverse dependency checking.
1227
1228 2004-06-17  James Troup  <james@nocrew.org>
1229
1230         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1231         * tea (check_dscs): likewise.
1232
1233         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1234         change from boolean to a variable with 3 possible values, 0 and 1
1235         as before, -1 means don't require a signature.  Makes
1236         parse_changes() useful for parsing arbitary RFC822-style files,
1237         e.g. 'Release' files.
1238         (check_signature): add support for detached signatures by passing
1239         the files the signature is for as an optional third argument.
1240         s/filename/sig_filename/g.  Add a fourth optional argument to
1241         choose the keyring(s) to use.  Don't os.path.basename() the
1242         sig_filename before checking it for taint.
1243         (re_taint_free): allow '/'.
1244
1245 2004-06-11  James Troup  <james@nocrew.org>
1246
1247         * tea (check_files): make override.unreadable optional.
1248         (validate_sources): close the Sources file handle.
1249
1250         * docs/README.first: clarify that 'alyson' and running
1251         add_constraints.sql by hand is something you only want to do if
1252         you're not running 'neve'.
1253
1254         * docs/README.config (Location::$LOCATION::Suites): document.
1255
1256         * db_access.py (do_query): also print out the result of the query.
1257
1258 2004-06-10  James Troup  <james@nocrew.org>
1259
1260         * katie.py (Katie.cross_suite_version_check): post-woody versions
1261         of python-apt's apt_pkg.VersionCompare() function apparently
1262         returns variable integers for less than or greater than results -
1263         update our result checking to match.
1264         * jenna (resolve_arch_all_vs_any): likewise.
1265         * charisma (main): likewise.
1266
1267 2004-06-09  James Troup  <james@nocrew.org>
1268
1269         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1270         valid_dsc_p and don't run check_source() if check_dsc() failed.
1271         (check_dsc): on fatal failures return 0 so check_source() isn't
1272         run (since it makes fatal assumptions about the presence of
1273         mandatory .dsc fields).  
1274         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1275
1276 2004-05-07  James Troup  <james@nocrew.org>
1277
1278         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1279         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1280
1281         * katie.conf (Dir::Override): remove duplicate definition.
1282
1283         * neve (get_or_set_files_id): add an always-NULL last_used column
1284         to output.
1285
1286 2004-04-27  James Troup  <james@nocrew.org>
1287
1288         * apt.conf-security (tree "dists/stable/updates"): add
1289         ExtraOverride - noticed by Joey Hess (#246050).
1290         (tree "dists/testing/updates"): likewise.
1291
1292 2004-04-20  James Troup  <james@nocrew.org>
1293
1294         * jennifer (check_files): check for existing .changes or .katie
1295         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1296         directories.
1297
1298 2004-04-19  James Troup  <james@nocrew.org>
1299
1300         * jennifer (check_source): handle failure to remove the temporary
1301          directory (used for source tree extraction) better, specifically:
1302          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1303          and try again and if that works, REJECT the package.
1304
1305 2004-04-17  James Troup  <james@nocrew.org>
1306
1307         * docs/madison.1.sgml: document -b/--binary-type,
1308         -g/--greaterorequal and -G/--greaterthan.
1309
1310         * madison (usage): -b/--binary-type only takes a single argument.
1311         Document -g/--greaterorequal and -G/--greaterthan.
1312         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1313
1314 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1315
1316         * billie: Cleaned up a load of comments, added /README.non-US to
1317           the verbatim matches list.
1318
1319 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1320
1321         * utils.py (size_type): Make it use real binary megabytes and
1322           kilobytes, instead of the marketing terms used before.
1323
1324 2004-04-07  James Troup  <james@nocrew.org>
1325
1326         * katie.py (Katie.check_dsc_against_db): in the case we're
1327         ignoring an identical-to-existing orig.tar.gz remember the path to
1328         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1329         location.path too to be able to do so.
1330
1331 2004-04-03  James Troup  <james@nocrew.org>
1332
1333         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1334         needed for new utils.rfc2047_encode() function.
1335
1336         * utils.py (re_parse_maintainer): allow whitespace inside the
1337         email address.
1338         (Error): new exception base class.
1339         (ParseMaintError): new exception class.
1340         (force_to_utf8): new function.
1341         (rfc2047_encode): likewise.
1342         (fix_maintainer): rework.  use force_to_utf8() to force name and
1343         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1344         return an rfc2047 value.  Validate the address to catch missing
1345         email addresses and (some) broken ones.
1346
1347         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1348         by adopting foo2047 return value.
1349         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1350         mandatory changes fields.  Promote changes and maintainer822 to
1351         mandatory fields.
1352         (Katie.update_subst): default maintainer2047 rather than
1353         maintainer822.  User foo2047 rather than foo822 when setting
1354         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1355
1356         * jennifer (check_changes): set default changes["maintainer2047"]
1357         and changes["changedby2047"] values rather than their 822
1358         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1359         to new utils.fix_maintainer() - reject on exception and adopt
1360         foo2047 return value.
1361         (check_dsc): if a mandatory field is missing don't do any further
1362         checks and as a result reduce paranoia about dsc[var] existence.
1363         Validate the maintainer field by calling new
1364         utils.fix_maintainer().
1365
1366         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1367         changes fields.  Promote maintainer822 to a mandatory changes
1368         field.  add "pool name" to files fields.
1369
1370         * test/006/test.py: new file - tests for new
1371         utils.fix_maintainer().
1372
1373 2004-04-01  James Troup  <james@nocrew.org>
1374
1375         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1376
1377         * jennifer (get_changelog_versions): create a symlink mirror of
1378         the source files in the temporary directory.
1379         (check_source): if check_dsc_against_db() couldn't find the
1380         orig.tar.gz bail out.
1381
1382         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1383         part of the upload store the path to it in pkg.orig_tar_gz and if
1384         it can't be found set pkg.orig_tar_gz to -1.
1385
1386         Explicitly return the second value as None in the (usual) case
1387         where we don't have to reprocess.  Remove obsolete diagnostic
1388         logs.
1389
1390         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1391
1392         * utils.py (temp_filename): new helper function that wraps around
1393         tempfile.mktemp().
1394
1395         * katie.py (Katie.do_reject): use it and don't import tempfile.
1396         * lisa (prod_maintainer): likewise.
1397         (edit_note): likewise.
1398         (edit_new): likewise.
1399         * lauren (reject): likewise.
1400         * melanie (main): likewise.
1401         * neve (do_sources): likewise.
1402         * rene (main): likewise.
1403         * tea (validate_sources): likewise.
1404
1405 2004-03-31  James Troup  <james@nocrew.org>
1406
1407         * tea (validate_sources): remove unused 's' temporary variable.
1408
1409 2004-03-15  James Troup  <james@nocrew.org>
1410
1411         * jennifer (check_dsc): check changes["architecture"] for
1412         source before we do anything else.
1413
1414 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1415
1416         * billie: Added
1417         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1418
1419 2004-03-12  James Troup  <james@nocrew.org>
1420
1421         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1422
1423         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1424
1425         * katie.py (Katie.accept): add support for DebBugs Version
1426         Tracking by writing out .versions (generated in jennifer's
1427         get_changelog_versions()) and .debinfo (mapping of binary ->
1428         source) files.
1429
1430         * ashley (main): add dsc["bts changelog"].
1431
1432         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1433
1434         * jennifer (check_diff): obsoleted by check_source(), removed.
1435         (check_source): new function: create a temporary directory and
1436         move into it and call get_changelog_versions().
1437         (get_changelog_versions): new function: extract the source package
1438         and optionally parse debian/changelog to obtain the version
1439         history for the BTS.
1440         (process_it): call check_source() rather than check_diff().
1441
1442 2004-03-08  James Troup  <james@nocrew.org>
1443
1444         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1445         listbar" rather than "if listbar.count(varfoo)"' change on
1446         2004-02-24.
1447
1448 2004-03-05  James Troup  <james@nocrew.org>
1449
1450         * alicia (main): don't warn about not closing bugs - we don't
1451         manage overrides through the BTS.
1452
1453 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1454
1455         * docs/README.config: lots of updates and corrections.
1456         * docs/README.first: likewise.
1457
1458         * docs/README.config: drop unused Dir::Queue::Root.
1459         * katie.conf-non-US: likewise.
1460         * katie.conf: likewise.
1461         * katie.conf-security: likewise.
1462
1463 2004-02-27  James Troup  <james@nocrew.org>
1464
1465         * rose (process_tree): use 'if var in [ list ]' rather than long
1466         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1467         Michlmayr.
1468
1469         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1470         suggested by Martin Michlmayr.
1471         * catherine (poolize): likewise.
1472         * charisma (main): likewise.
1473         * halle (check_changes): likewise.
1474         * heidi (main): likewise.
1475         (process_file): likewise.
1476         * kelly (install): likewise.
1477         (stable_install): likewise.
1478         * utils.py (fix_maintainer): likewise.
1479
1480         * apt.conf: add support for debian-installer in testing-proposed-updates.
1481         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1482         add - set to main.
1483
1484         * mkmaintainers: add "-T15" option to wget of non-US packages file
1485         so that we don't hang cron.daily if non-US is down.
1486
1487         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1488
1489         * templates/jennifer.bug-close: add Source and Source-Version
1490         pseudo-headers that may be used for BTS Version Tracking someday
1491         [ajt@].
1492
1493         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1494         (main): likewise.
1495
1496         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1497
1498 2004-02-25  James Troup  <james@nocrew.org>
1499
1500         * katie.conf (SuiteMappings): don't map testing-security to
1501         proposed-updates.
1502
1503 2004-02-24  James Troup  <james@nocrew.org>
1504
1505         * katie.py (Katie.__init__): remove unused 'values' field.
1506
1507         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1508         rather than 's.count(c) > 0'.
1509
1510         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1511         rather than "if listbar.count(varfoo)".
1512         * halle (check_joey): likewise.
1513         * jeri (check_joey): likewise.
1514         * lisa (edit_index): likewise.
1515         * jenna (stable_dislocation_p): likewise.
1516
1517         * jennifer (main): remove unused global 'nmu'.
1518
1519 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1520
1521         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1522           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1523           the dak tools close bugs.
1524
1525 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1526
1527         * katie.conf (Alicia): Added an Alicia section with email address
1528         * templates/alicia.bug-close: Added
1529         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1530         * alicia (main): Added a -d/--done argument
1531
1532 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1533
1534         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1535
1536 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1537
1538         * lisa (prod_maintainer): Added function to prod the maintainer without
1539           accepting or rejecting the package
1540         * templates/lisa.prod: Added this template for the prodding mail
1541
1542         * .cvsignore: Added neve-files which turns up in new installations
1543
1544 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1545
1546         * alicia (usage): Fixed usage message to offer section and priority
1547           as seperately optional arguments.
1548         * alicia (main): Added a % (arg) interpolation needed when only
1549           one of section or priority is provided and it cannot be found.
1550
1551 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1552
1553         * alicia: Added
1554         * docs/alicia.1.sgml: Added
1555         * docs/Makefile: Added alicia to the list of manpages to build
1556         * docs/README.names: Noted what alicia does
1557         * docs/README.first: Noted where alicia is useful
1558
1559 2004-01-21  James Troup  <james@nocrew.org>
1560
1561         * madison (main): add -b/--binary-type.
1562         (usage): likewise.
1563
1564         * denise (main): generate debian-installer overrides for testing
1565         too.
1566         * apt.conf: add support for debian-installer in testing.
1567         * katie.conf (Suite::Testing::UdebComponents): set to main.
1568
1569         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1570         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1571         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1572
1573         * utils.py (parse_changes): don't process data not inside the
1574         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1575         pointing this out.
1576         * test/005/test.py (main): new test to test for above.
1577
1578 2004-01-04  James Troup  <james@nocrew.org>
1579
1580         * jenna (write_filelists): correct typo, s/Components/Component/
1581         for Options.
1582
1583 2004-01-04  Ryan Murray  <rmurray@debian.org>
1584
1585         * cron.buildd: move update of overrides and Packages file...
1586         * cron.unchecked: to here.
1587         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1588         * katie.conf-security: likewise
1589
1590 2003-11-20  James Troup  <james@nocrew.org>
1591
1592         * jenna (main): don't use utils.try_with_debug(), it produces way
1593         too much output.
1594
1595         * halle (check_changes): don't error out if a .changes refers to a
1596         non-existent package, just warn and skip the file.
1597
1598         * docs/README.stable-point-release: mention halle and .changes
1599         obsoleted by removal through melanie.  Update for 3.0r2.
1600
1601         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1602         (Suite::Stable::Description): update for 3.0r2.
1603         (Lauren::MoreInfoURL): likewise.
1604         * katie.conf-non-US (Suite::Stable::Version): likewise.
1605         (Suite::Stable::Description): likewise.
1606         (Lauren::MoreInfoURL): likewise.
1607
1608         * apt.conf.stable (Default): don't define MaxContentsChange.
1609         * apt.conf.stable-non-US (Default): likewise.
1610
1611         * lauren (reject): hack to work around partial replacement of an
1612         upload, i.e. one or more binaries superseded by another source
1613         package.
1614
1615 2003-11-17  James Troup  <james@nocrew.org>
1616
1617         * pseudo-packages.maintainers: point installation-reports at
1618         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1619         request.
1620
1621         * utils.py (parse_changes): calculate the number of lines once
1622         with len() rather than max().
1623
1624         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1625         files, since check_dsc_against_db() deletes the .orig.tar.gz
1626         entry.
1627
1628 2003-11-13  Ryan Murray  <rmurray@debian.org>
1629
1630         * apt.conf: specify a src override file for debian-installer
1631
1632 2003-11-10  James Troup  <james@nocrew.org>
1633
1634         * fernanda.py (strip_pgp_signature): new function - strips PGP
1635         signature from a file and returns the modified contents of the
1636         file in a string.
1637         (display_changes): use it.
1638         (read_dsc): likewise.
1639
1640 2003-11-09  Ryan Murray  <rmurray@debian.org>
1641
1642         * cron.buildd: export accepted_autobuild table for unstable, and use
1643         it to generate the incoming Packages/Sources rather than having apt
1644         walk the directory.
1645         * apt.conf.buildd: use exported table from cron.buildd to generate
1646         Packages/Sources
1647
1648 2003-11-07  James Troup  <james@nocrew.org>
1649
1650         * kelly: import errno.
1651
1652         * katie.py (Katie.build_summaries): sort override disparities.
1653
1654         * kelly (install): set dsc_component based on the .dsc's component
1655         not a random binaries.
1656
1657 2003-10-29  James Troup  <james@nocrew.org>
1658
1659         * katie.py (Katie.build_summaries): don't assume changes["source"]
1660         exists since it might not.
1661
1662 2003-10-20  James Troup  <james@nocrew.org>
1663
1664         * pseudo-packages.maintainers: update security.d.o to use
1665         team@s.d.o at joy@'s request.
1666
1667 2003-10-17  James Troup  <james@nocrew.org>
1668
1669         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1670
1671 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1672
1673         * tea (chk_bd_process_dir): use .endswith rather than slice.
1674
1675 2003-10-14  James Troup  <james@nocrew.org>
1676
1677         * tea (check_build_depends): new function.
1678         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1679         in the archive.
1680         (main): update for new function.
1681         (usage): likewise.
1682
1683         * katie.py (Katie.do_reject): sanitize variable names,
1684         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1685         os.close() to outside if clause.
1686
1687         * jennifer (check_dsc): check build-depends and
1688         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1689         Fold the ARRAY check into the same code block and tidy up it's
1690         rejection message.
1691         (check_changes): ensure that the Files field is non-empty.
1692         Suggested by Santiago Vila <sanvila@unex.es>
1693         (check_changes): normalize reject messages.
1694         (check_dsc): instead of doing most of the checks inside a for loop
1695         and an if, find the dsc_filename in a short loop over files first
1696         and then do all the checks.  Add check for more than one .dsc in a
1697         .changes which we can't handle.  Normalize reject messages.
1698
1699 2003-10-13  James Troup  <james@nocrew.org>
1700
1701         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1702         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1703
1704         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1705         variables while iterating over 'files'.  Don't regenerate it when
1706         checking for source if source is mentioned.
1707
1708         Reject source only uploads if the config variable
1709         Dinstall::Reject::NoSourceOnly is set.
1710
1711 2003-10-03  James Troup  <james@nocrew.org>
1712
1713         * rene (main): add nasty hardcoded reference to debian-installer
1714         so we detect NBS .udebs.
1715
1716 2003-09-29  James Troup  <james@nocrew.org>
1717
1718         * apt.conf (old-proposed-updates): remove.
1719         * apt.conf-non-US (old-proposed-updates): likewise.
1720
1721 2003-09-24  James Troup  <james@nocrew.org>
1722
1723         * tea (check_files_not_symlinks): new function, ensure files
1724         mentioned in the database aren't symlinks.  Includes code to
1725         update any files that are like this to their real filenames +
1726         location; commented out by though.
1727         (usage): update for new function.
1728         (main): likewise.
1729
1730 2003-09-24  Anthony Towns  <ajt@debian.org>
1731
1732         * vars: external-overrides variable added
1733         * cron.daily: Update testing/unstable Task: overrides from joeyh
1734         managed external source.
1735
1736 2003-09-22  James Troup  <james@nocrew.org>
1737
1738         * kelly (install): if we can't move the .changes into queue/done,
1739         fail don't warn and carry on.  The old behaviour pre-dates NI and
1740         doesn't make much sense now since jennifer checks both
1741         queue/accepted and queue/done for any .changes files it's
1742         processing.
1743
1744         * utils.py (move): don't throw exceptions on existing files or
1745         can't overwrite, instead just fubar out.
1746
1747         * jennifer (check_dsc): also check Build-Depends-Indep for
1748         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1749
1750 2003-09-18  James Troup  <james@nocrew.org>
1751
1752         * katie.py (Katie.close_bugs): only log the bugs we've closed
1753         once.
1754
1755         * kelly (main): log as 'kelly', not 'katie'.
1756
1757 2003-09-16  James Troup  <james@nocrew.org>
1758
1759         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1760
1761         * jennifer (check_changes): normalize reject message for "changes
1762         file already exists" to be %s: <foo>.
1763         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1764         produced by broken dpkg-source in 1.10.11.  Tone down and
1765         normalize rejection message for incompatible 'Format' version
1766         numbers.
1767         (check_diff): likewise tone down and normalize.
1768
1769 2003-09-07  James Troup  <james@nocrew.org>
1770
1771         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1772         don't bomb out on bogus empty lines.
1773         (build_file_list): check for changes["files"] earlier.  use Dict
1774         to create files[name] dictionary.
1775         (send_mail): don't bother validating arguments.
1776         (check_signature): minor improvements to some of the rejection
1777         messages including listing the key id of the key that wasn't found
1778         in the keyring.
1779         (wrap): new function.
1780
1781         * tea: add new check 'validate-indices' that ensures all files
1782         mentioned in indices (Packages, Sources) files do in fact exist.
1783
1784         * catherine (poolize): use a local re_isadeb which handles legacy
1785         (i.e. no architecture) style .deb filenames.
1786
1787         * rosamund: new script.
1788
1789         * rhona (check_binaries): when checking for binary packages not in
1790         a suite, don't bother selecting files that already have a
1791         last_used date.
1792         (check_sources): likewise.
1793
1794         * rhona: change all SQL EXISTS sub-query clauses to use the
1795         postgres suggested convention of "SELECT 1 FROM".
1796         * andrea (main): likewise.
1797         * tea (check_override): likewise.
1798         * catherine (main): likewise.
1799
1800         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1801         entries and in other suites MustBeNewerThan's.
1802         (SuiteMappings): likewise
1803         * katie.conf-non-US: likewise.
1804         * katie.conf-security: likewise.
1805
1806         * apt.conf-security: remove oldstable.
1807         * apt.conf.stable: likewise.
1808         * apt.conf.stable-non-US: likewise.
1809         * cron.buildd-security: likewise.
1810         * cron.daily-security: likewise.
1811         * vars-security (suites): likewise.
1812         * wanna-build/trigger.daily: likewise.
1813
1814         * claire.py (clean_symlink): move...
1815         * utils.py (clean_symlink): here.
1816
1817         * claire.py (find_dislocated_stable): update accordingly.
1818
1819 2003-08-16  Anthony Towns  <ajt@debian.org>
1820
1821         * katie.py (source_exists): expand the list of distributions
1822         the source may exist in to include any suite that's mapped to
1823         the destination suite (even transitively (a->b->c)). This should
1824         unbreak binary uploads to *-proposed-updates.
1825
1826 2003-08-09  Randall Donald  <rdonald@debian.org>
1827
1828         * lisa (recheck): change changes["distribution"].keys() to
1829         Katie.pkg.changes...
1830
1831 2003-08-08  Randall Donald  <rdonald@debian.org>
1832
1833         * katie.py: only tag bugs as fixed-in-experimental for
1834         experimental uploads
1835
1836 2003-07-26  Anthony Towns  <ajt@debian.org>
1837
1838         * katie.py (source_exists): add an extra parameter to limit the
1839         distribution(s) the source must exist in.
1840         * kelly, lisa, jennifer: update to use the new source_exists
1841
1842 2003-07-15  Anthony Towns  <ajt@debian.org>
1843
1844         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1845         checksums for debian-installer stuff even when it's just a symlink to
1846         another suite
1847
1848         * apt.conf: add the FakeDI line
1849
1850 2003-06-09  James Troup  <james@nocrew.org>
1851
1852         * kelly (check): make sure the 'file' we're looking for in 'files'
1853         hasn't been deleted by katie.check_dsc_against_db().
1854
1855 2003-05-07  James Troup  <james@nocrew.org>
1856
1857         * helena (time_pp): fix s/years/year/ typo.
1858
1859 2003-04-29  James Troup  <james@nocrew.org>
1860
1861         * madison (usage): document -c/--component.
1862
1863         * madison (usage): Fix s/seperated/separated/.
1864         * melanie (usage): likewise.
1865         * jenna (usage): likewise.
1866
1867 2003-04-24  James Troup  <james@nocrew.org>
1868
1869         * cron.daily-non-US: if there's nothing for kelly to install, say
1870         so.
1871
1872         * jennifer (check_timestamps): print sys.exc_value as well as
1873         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1874         failed' with 'deb contents' to make it clearer what timestamp(s)
1875         are being checked.
1876
1877 2003-04-15  James Troup  <james@nocrew.org>
1878
1879         * cron.daily-non-US: only run kelly if there are some .changes
1880         files in accepted.
1881
1882         * rene: add -m/--mode argument which can be either daily (default)
1883         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1884         Various changes to make this possible including a poor attempt at
1885         splitting main() up a little.  De-hardcode suite numbers from SQL
1886         queries and return quietly from do_nviu() if experimental doesn't
1887         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1888         is.
1889
1890         * debian/control (Depends): remove python-zlib as it's obsolete.
1891
1892         * charisma (main): don't slice the \n off strings when we're
1893         strip()-ing it anyway.
1894         * heidi (set_suite): likewise.
1895         (process_file): likewise.
1896         * natalie (process_file): likewise.
1897
1898 2003-04-08  James Troup  <james@nocrew.org>
1899
1900         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1901         slow queries by using one LIKE '%foo%' and then matching against
1902         '%s' or '/%s$' in python.  Also only join location when we need it
1903         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1904         query, so 6s for each sourceful package.
1905
1906         * cron.daily: invoke rene and send the report to ftpmaster.
1907         * cron.daily-non-US: likewise.
1908
1909 2003-03-14  James Troup  <james@nocrew.org>
1910
1911         * utils.py (send_mail): default filename to blank.
1912         * amber (make_advisory): adapt.
1913         * jennifer (acknowledge_new): likewise.
1914         * katie.py (Katie.close_bugs): likewise.
1915         (Katie.announce): likewise.
1916         (Katie.accept): likewise.
1917         (Katie.check_override): likewise.
1918         (Katie.do_reject): likewise.
1919         * kelly (do_reject): likewise.
1920         (stable_install): likewise.
1921         * lisa (do_bxa_notification): likewise.
1922         * lauren (reject): likewise.
1923         * melanie (main): likewise.
1924
1925         * rene (add_nbs): check any NBS packages against unstable to see
1926         if they haven't been removed already.
1927
1928         * templates/katie.rejected: remove paragraph about rejected files
1929         since they're o-rwx due to c-i-m and the uploader can't do
1930         anything about them and shania will take care of them anyway.
1931
1932         * madison (usage): update usage example to use comma seperation.
1933         * melanie (usage): likewise.
1934
1935         * utils.py (split_args): new function; splits command line
1936         arguments either by space or comma (whichever is used).  Also has
1937         optional-but-default DWIM spurious space detection to avoid
1938         'command -a i386, m68k' problems.
1939         (parse_args): use it.
1940         * melanie (main): likewise.
1941
1942         * melanie (main): force the admin to tell someone if we're not
1943         doing a rene-led removal (or closing a bug, which counts as
1944         telling someone).
1945
1946 2003-03-05  James Troup  <james@nocrew.org>
1947
1948         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1949         and python sections.
1950         * katie.conf-security (Section): likewise.
1951
1952         * add_constraints.sql: add uid and uid_id_seq to grants.
1953
1954         * lisa (determine_new): also warn about adding overrides to
1955         oldstable.
1956
1957         * madison (main): make the -S/--source-and-binary query obey
1958         -s/--suite restrictions.
1959
1960 2003-03-03  James Troup  <james@nocrew.org>
1961
1962         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1963         exists, warn the user that our output might seem strange.  (People
1964         get confused by multiple versions in a suite which happens
1965         post-kelly but pre-jenna.)
1966
1967 2003-02-21  James Troup  <james@nocrew.org>
1968
1969         * kelly (main): we don't need to worry about StableRejector.
1970
1971         * melanie (main): sort versions with apt_pkg.VersionCompare()
1972         prior to output.
1973
1974         * lauren: new script to manually reject packages from
1975         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1976
1977 2003-02-20  James Troup  <james@nocrew.org>
1978
1979         * kelly (init): remove unused -m/--manual-reject argument.
1980
1981         * katie.py (Katie.force_reject): renamed from force_move to make
1982         it more explicit what this function does.
1983         (Katie.do_reject): update to match.
1984
1985         * utils.py (prefix_multi_line_string): add an optional argument
1986         include_blank_lines which defaults to 0.  If non-zero, blank lines
1987         will be includes in the output.
1988
1989         * katie.py (Katie.do_reject): don't add leading space to each line
1990         of the reject message.  Include blank lines when showing the
1991         message to the user.
1992
1993 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1994
1995         * utils.py (fix_maintainer): replace pointless re.sub() with
1996         simple string format.
1997
1998 2003-02-11  James Troup  <james@nocrew.org>
1999
2000         * lisa (edit_overrides): only strip-to-one-char and upper-case
2001         non-numeric answers.  Fixes editing of items with indices >= 10;
2002         noticed by Randall.
2003         (edit_overrides): correct order of arguments to "not a valid
2004         index" error message.
2005
2006         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2007         remove_duplicate_versions(); thanks to aj for the initial
2008         diagnosis.
2009         (remove_duplicate_versions): correct how we return
2010         dominant_versions.
2011         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2012         a tuple rather than just a tuple.
2013
2014 2003-02-10  James Troup  <james@nocrew.org>
2015
2016         * emilie: new script - sync fingerprint and uid tables with a
2017         debian.org LDAP DB.
2018
2019         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2020         in 'fingerprint'.
2021
2022         * db_access.py (get_or_set_uid_id): new function.
2023
2024         * jennifer (main): update locking to a) not used FCNTL (deprecated
2025         in python >= 2.2) and b) acknowledge upstream's broken
2026         implementation of lockf (see Debian bug #74777), c) try to acquire
2027         the lock non-blocking.
2028         * kelly (main): likewise.
2029
2030         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2031
2032         * madison (main): only append the package to new_packages if it's
2033         not already in there; fixes -S/--source-and-binary for cases where
2034         the source builds a binary package of the same name.
2035
2036 2003-02-10  Anthony Towns  <ajt@debian.org>
2037
2038         * madison (main): use explicit JOIN syntax for
2039         -S/--source-and-binary queries to reduce the query's runtime from
2040         >10 seconds to negligible.
2041
2042 2003-02-08  James Troup  <james@nocrew.org>
2043
2044         * rene (main): in the NVIU output, append items to lists, not
2045         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2046         should be removed.
2047
2048 2003-02-07  James Troup  <james@nocrew.org>
2049
2050         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2051         Sources [aj].
2052
2053         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2054         O. Benham/Adam Heath/.
2055
2056         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2057         (Suite::Stable::Description): update for 3.0r1a.
2058         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2059
2060         * utils.py (gpgv_get_status_output): rename from
2061         get_status_output().
2062
2063         * neve (check_signature): use gpgv_get_status_output and Dict from
2064         utils().  Add missing newline to error message about duplicate tokens.
2065
2066         * saffron (per_arch_space_use): also print space used by source.
2067         (output_format): correct string.join() invocation.
2068
2069         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2070
2071 2003-02-04  James Troup  <james@nocrew.org>
2072
2073         * cron.buildd: correct generation of Packages/Sources and grep out
2074         non-US/non-free as well as non-free.
2075
2076 2003-02-03  Ryan Murray  <rmurray@debian.org>
2077
2078         * cron.buildd: generate quinn-diff output with full Packages/Sources
2079           files to get out-of-date vs. uncompiled right.
2080         * apt.conf.buildd: no longer generate uncompressed files, as they
2081           are generated in cron.buildd instead
2082         * add -i option to quinn-diff to ignore binary-all packages
2083         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2084           aren't in the packages file, the arch that uploaded them will build
2085           them anyways...
2086
2087 2003-01-30  James Troup  <james@nocrew.org>
2088
2089         * rene (main): only print suggested melanie command when there's
2090         some NBS to remove.
2091
2092 2003-01-30  Ryan Murray  <rmurray@debian.org>
2093
2094         * cron.buildd: fix incorrectly inverted lockfile check
2095
2096 2003-01-29  Ryan Murray  <rmurray@debian.org>
2097
2098         * cron.buildd: generate override.sid.all3.src
2099         * apt.conf.buildd: use generated override.sid.all3.src
2100
2101 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2102
2103         * utils.py (get_status_output): moved from jennifer.
2104         (Dict): likewise.
2105         (check_signature): likewise.
2106
2107         * jennifer (get_status_output): moved to utils.py.
2108         (Dict): likewise.
2109         (check_signature): likewise.
2110
2111         * utils.py (check_signature): add an argument to specifiy which
2112         function to call when an error was found.
2113         (check_signature): document this function better.
2114
2115         * jennifer (check_files): pass the reject function as an argument
2116         to utils.check_signature.
2117         (process_it): likewise.
2118
2119 2003-01-20  James Troup  <james@nocrew.org>
2120
2121         * rene (main): lots of changes to improve the output and make it
2122         more useful.
2123
2124         * katie.py (Katie.check_override): make the override messages
2125         clearer (hopefully).
2126
2127 2002-12-26  James Troup  <james@nocrew.org>
2128
2129         * ziyi (usage): document the ability to pass suite(s) as
2130         argument(s).
2131         (main): read apt.conf after checking for -h/--help.
2132
2133         * tea (main): take the check to run as an argument.
2134
2135         * saffron.R: R script to graph daily install runs.
2136
2137         * saffron: new script; various stats functions.
2138
2139         * rhona (main): connect to the database after checking for -h/--help.
2140
2141         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2142
2143         * melanie (main): sort versions with utils.arch_compare_sw().
2144
2145         * madison (usage): alphabetize order of options.
2146         * melanie (usage): likewise.
2147
2148         * kelly (usage): fix usage short description (we aren't dinstall).
2149
2150         * julia (usage): fix usage description and alphabetize order of
2151         options.
2152
2153         * jeri (usage): fix usage short description.
2154
2155         * jennifer (main): move --help and --version checks from here...
2156         (init): to here so that they work with an empty katie.conf.
2157         * kelly: likewise.
2158
2159         * alyson (usage): new function.
2160         (main): use it.
2161         * andrea: likewise.
2162         * ashley: likewise.
2163         * cindy: likewise.
2164         * denise: likewise.
2165         * helena: likewise.
2166         * neve: likewise.
2167         * rene: likewise.
2168         * rose: likewise.
2169         * tea: likewise.
2170
2171         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2172         entry that caused tasks to be omitted from 3.0r1.
2173
2174 2002-12-10  James Troup  <james@nocrew.org>
2175
2176         * jennifer (check_files): sanity check the Depends field to ensure
2177         it's non-empty if present since apt chokes on an empty one.
2178         Thanks to Ryan Murray for the idea.
2179
2180 2002-12-08  James Troup  <james@nocrew.org>
2181
2182         * katie.conf-security (Helena::Directories): new; include accepted
2183         in addition to byhand and new.
2184
2185         * helena (process_changes_files): use utils.arch_compare_sw().
2186         Justify things based on the longest [package, version,
2187         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2188         the commas in architecture and version lists for the same reason.
2189         (main): make directories we process configurable through
2190         Helena::Directories in the config file; if that doesn't exist
2191         default to the old hardcoded values (byhand & new).
2192
2193         * utils.py (arch_compare_sw): moved here from madison.
2194         * madison (main): adjust to compensate.
2195
2196 2002-12-06  James Troup  <james@nocrew.org>
2197
2198         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2199         right filename.
2200
2201 2002-12-05  James Troup  <james@nocrew.org>
2202
2203         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2204
2205 2002-11-28  Randall Donald  <rdonald@debian.org>
2206
2207         * fernanda.py (read_control): fix typo of 'Architecture'.
2208
2209 2002-11-26  James Troup  <james@nocrew.org>
2210
2211         * lisa (check_pkg): call less with '-R' so we see the colour from
2212         Randall's fernanda changes.
2213
2214         * neve (process_sources): if Directory points to a legacy location
2215         but the .dsc isn't there; assume it's broken and look in the pool.
2216         (update_section): new, borroed from alyson.
2217         (do_da_do_da): use it.
2218         (process_packages): add suite_it to the cache key used for
2219         arch_all_cache since otherwise we only add a package to the first
2220         suite it's in and ignore any subsequent ones.
2221
2222         * katie.conf-non-US (Location): fixed to reflect reality (all
2223         suites, except old-proposed-updates (which is legacy-mixed)) are
2224         pool.
2225
2226         * utils.py (try_with_debug): wrapper for print_exc().
2227         * jenna (main): use it.
2228         * neve (main): likewise.
2229
2230 2002-11-25  Randall Donald  <rdonald@debian.org>
2231
2232         * fernanda.py (main): added -R to less command line for raw control
2233         character support to print colours
2234         (check_deb): Instead of running dpkg -I on deb file, call
2235         output_deb_info, the new colourized control reporter.
2236         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2237         of printing out each .dsc line.
2238         (output_deb_info): new function. Outputs each key/value pair from
2239         read_control except in special cases where we highlight section,
2240         maintainer, architecture, depends and recommends.
2241         (create_depends_string): new function. Takes Depends tree and looks
2242         up it's compontent via projectb db, colourizes and constructs a
2243         depends string in original order.
2244         (read_dsc): new function. reads and parses .dsc info via
2245         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2246         colourized.
2247         (read_control): new function. reads and parses control info via
2248         apt_pkg. Depends and Recommends are split in to list structures,
2249         Section and Architecture are colourized. Maintainer is colourized
2250         if it has a localhost.localdomain address.
2251         (split_depends): new function. Creates a list of lists of
2252         dictionaries of depends (package,version relation). Top list is
2253         colected from comma delimited items. Sub lists are | delimited.
2254         (get_comma_list): new function. splits string input among commas
2255         (get_or_list): new function. splits string input among | delimiters
2256         (get_depends_parts): new function. Creates dictionary of package name
2257         and version relation from dependancy string.
2258         Colours for section and depends are per component. Unfound depends
2259         are in bold. Lookups using version info is not supported yet.
2260
2261 2002-11-22  James Troup  <james@nocrew.org>
2262
2263         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2264         'udmsearch'.
2265
2266         * amber (make_advisory): string.atol() is deprecated and hasn't
2267         been ported to string methods.  Use long() instead.
2268
2269         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2270         creating the database since we'll fail badly if it's created with
2271         e.g. UNICODE encoding.
2272
2273         * rose (main): AptCnf is a global.
2274
2275         * neve (get_location_path): new function determines the location
2276         from the the first (left-most) directory of a Filename/Directory.
2277         (process_sources): don't need 'location' anymore.  Use
2278         utils.warn().  Use the Directory: field for each package to find
2279         the .dsc.  Use get_location_path() to determine the location for
2280         each .dsc.
2281         (process_packages): do't need 'location' anymore.  Use
2282         utils.warn().  Use get_location_path().
2283         (do_sources): don't need 'location', drop 'prefix' in favour of
2284         being told the full path to the Sources file, like
2285         process_packages().
2286         (do_da_do_da): main() renamed, so that main can call us in a
2287         try/except.  Adapt for the changes in do_sources() and
2288         process_packages() above.  Assume Sources and Packages file are in
2289         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2290
2291         * katie.conf-security (Location): fixed to reflect reality (all
2292         suites are pool, not legacy).
2293
2294         * utils.py (print_exc): more useful (i.e. much more verbose)
2295         traceback; a recipe from the Python cookbook.
2296         * jenna (main): use it.
2297         * neve (main): likewise.
2298
2299 2002-11-19  James Troup  <james@nocrew.org>
2300
2301         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2302         handling which was FUBAR for multi-suite uploads.  Now we just
2303         make a dictionary of destinations to copy to and iterate over
2304         those.
2305
2306         * fernanda.py (check_deb): run linda as well as lintian.
2307
2308 2002-10-21  James Troup  <james@nocrew.org>
2309
2310         * melanie (main): change X-Melanie to X-Katie and prefix it with
2311         'melanie '.
2312
2313         * lisa (main): prefix X-Katie with 'lisa '.
2314
2315         * jennifer (clean_holding): fix typo in string method changes;
2316         s/file.find(file/file.find(/.
2317
2318         * cron.daily: invoke helena and send the report to ftpmaster.
2319         * cron.daily-non-US: likewise.
2320
2321 2002-10-16  James Troup  <james@nocrew.org>
2322
2323         * kelly (check): call reject() with a blank prefix when parsing
2324         the return of check_dsc_against_db() since it does its own
2325         prefix-ing.
2326
2327         * rose: new script; only handles directory creation initally.
2328
2329         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2330         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2331
2332 2002-10-06  James Troup  <james@nocrew.org>
2333
2334         * rene (main): remove bogus argument handling.
2335
2336         * kelly: katie, renamed.
2337         * cron.daily: adapt for katie being renamed to kelly.
2338         * cron.daily-non-US: likewise.
2339         * amber (main): likewise.
2340
2341         * Changes for python 2.1.
2342
2343         * kelly: time.strftime no longer requires a second argument of
2344         "time.localtime(time.time())".
2345         * logging.py: likewise.
2346         * rhona: likewise.
2347         * shania (init): likewise.
2348
2349         * amber: use augmented assignment.
2350         * catherine (poolize): likewise.
2351         * claire.py (fix_component_section): likewise.
2352         * halle (check_changes): likewise.
2353         * helena: likewise.
2354         * jenna: likewise.
2355         * jennifer: likewise.
2356         * jeri: likewise.
2357         * katie.py: likewise.
2358         * kelly: likewise.
2359         * lisa: likewise.
2360         * madison (main): likewise.
2361         * melanie: likewise.
2362         * natalie: likewise.
2363         * neve: likewise.
2364         * rhona: likewise.
2365         * tea: likewise.
2366         * utils.py: likewise.
2367         * ziyi: likewise.
2368
2369         * amber: use .endswith.
2370         * fernanda.py: likewise.
2371         * halle (main): likewise.
2372         * jennifer: likewise.
2373         * jeri: likewise.
2374         * katie.py: likewise.
2375         * kelly: likewise.
2376         * lisa: likewise.
2377         * neve: likewise.
2378         * shania (main): likewise.
2379         * utils.py: likewise.
2380
2381         * alyson: use string methods.
2382         * amber: likewise.
2383         * andrea: likewise.
2384         * ashley: likewise.
2385         * catherine: likewise.
2386         * charisma: likewise.
2387         * claire.py: likewise.
2388         * db_access.py: likewise.
2389         * denise: likewise.
2390         * halle: likewise.
2391         * heidi: likewise.
2392         * helena: likewise.
2393         * jenna: likewise.
2394         * jennifer: likewise.
2395         * jeri: likewise.
2396         * julia: likewise.
2397         * katie.py: likewise.
2398         * kelly: likewise.
2399         * lisa: likewise.
2400         * logging.py: likewise.
2401         * madison: likewise.
2402         * melanie: likewise.
2403         * natalie: likewise.
2404         * neve: likewise.
2405         * rene: likewise.
2406         * tea: likewise.
2407         * utils.py: likewise.
2408         * ziyi: likewise.
2409
2410 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2411
2412         * utils.py (parse_changes): use <string>.startswith() rather than
2413         string.find().
2414
2415 2002-08-27  Anthony Towns  <ajt@debian.org>
2416
2417         * katie.py (in_override_p): when searching for a source override,
2418         and the dsc query misses, search for both udeb and deb overrides
2419         as well. Should fix the UNACCEPT issues with udebs.
2420
2421 2002-08-24  James Troup  <james@nocrew.org>
2422
2423         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2424         source+binary package finding code which was causing severe
2425         performance degradation with postgres 7.2.
2426
2427 2002-08-14  James Troup  <james@nocrew.org>
2428
2429         * julia (main): use the pwd.getpwall() to get system user info
2430         rather than trying to read a password file.  Add a -n/--no-action
2431         option.
2432
2433         * cron.hourly: julia no longer takes any arguments.
2434         * cron.hourly-non-US: likewise.
2435
2436 2002-08-07  James Troup  <james@nocrew.org>
2437
2438         * katie (install): handle multi-suite uploads when CopyChanges
2439         and/or CopyKatie are in use, ensuring we only copy stuff once.
2440
2441 2002-08-01  Ryan Murray  <rmurray@debian.org>
2442
2443         * wanna-build/trigger.daily: initial commit, with locking
2444         * cron.buildd: add locking against daily run
2445
2446 2002-07-30  James Troup  <james@nocrew.org>
2447
2448         * melanie (main): readd creation of suite_ids_list so melanie is
2449         remotely useful again.
2450
2451         * katie.conf: adopt for woody release; diable
2452         StableDislocationSupport, add oldstable, adjust other suites and
2453         mappings, fix up location.
2454         * katie.conf-non-US: likewise.
2455         * katie.conf-security: likewise.
2456
2457         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2458         stable.
2459         * apt.conf.stable-non-US: likewise.
2460
2461         * apt.conf-security: adapt for woody release; adding oldstable,
2462         oldstable, adjust stable and testing.
2463         * cron.daily-security: likewise.
2464         * cron.buildd-security: likewise.
2465
2466         * apt.conf: adapt for woody release; rename woody-proposed-updates
2467         to testing-proposed-updates and proposed-updates to
2468         old-proposed-updates.
2469         * apt.conf-non-US: likewise.
2470
2471         * vars-non-US (copyoverrides): add sarge.
2472         * vars (copyoverrides): likewise.
2473
2474         * vars-security (suites): add oldstable.
2475
2476 2002-07-22  Ryan Murray  <rmurray@debian.org>
2477
2478         * apt.conf.security-buildd: use suite codenames instead of
2479           distnames.
2480
2481 2002-07-16  James Troup  <james@nocrew.org>
2482
2483         * denise (main): fix filenames for testing override files.
2484
2485 2002-07-14  James Troup  <james@nocrew.org>
2486
2487         * jennifer (process_it): call check_md5sums later so we can check
2488         files in the .dsc too
2489         (check_md5sums): check files in the .dsc too.  Check both md5sum
2490         and size.
2491
2492         * melanie (main): use parse_args() and join_with_commas_and() from
2493         utils.  If there's nothing to do, say so and exit, don't ask for
2494         confirmation etc.
2495
2496         * amber (join_with_commas_and): moved from here to ...
2497         * utils.py (join_with_commas_and): here.
2498
2499 2002-07-13  James Troup  <james@nocrew.org>
2500
2501         * madison (main): use parse_args() from utils.  Support
2502         -c/--component.
2503
2504         * jenna (parse_args): moved from here to ...
2505         * utils.py (parse_args): here.
2506
2507         * katie.conf (Architectures): minor corrections to the description
2508         for arm, mips and mipsel.
2509         * katie.conf-non-US (Architectures): likewise.
2510         * katie.conf-security (Architectures): likewise.
2511
2512         * cron.daily-security: use natalie's new -a/--add functionality to
2513         flesh out the security overrides.
2514
2515 2002-07-12  James Troup  <james@nocrew.org>
2516
2517         * cron.buildd (ARCHS): add arm.
2518
2519         * katie.conf: 2.2r7 was released.
2520         * katie.conf-non-US: likewise.
2521
2522         * utils.py (parse_changes): handle a multi-line field with no
2523         starting line.
2524
2525 2002-06-25  James Troup  <james@nocrew.org>
2526
2527         * templates/amber.advisory (To): add missing email address since
2528         __WHOAMI__ is only a name.
2529
2530         * katie.conf-security (Melane::LogFile): correct to go somewhere
2531         katie has write access to.
2532         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2533         Testing.
2534
2535         * natalie: add support for -a/-add which adds packages only
2536         (ignoring changes and deletions).
2537
2538         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2539         use FindB, not get.
2540
2541 2002-06-22  James Troup  <james@nocrew.org>
2542
2543         * jennifer (check_files): validate the package name and version
2544         field.  If 'Package', 'Version' or 'Architecture' are missing,
2545         don't try any further checks.
2546         (check_dsc): likewise.
2547
2548         * utils.py (re_taint_free): add '~' as a valid character.
2549
2550 2002-06-20  Anthony Towns  <ajt@debian.org>
2551
2552         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2553
2554 2002-06-09  James Troup  <james@nocrew.org>
2555
2556         * jennifer (check_files): reduce useless code.
2557
2558         * cron.daily-security: run symlinks -dr on $ftpdir.
2559
2560         * vars-security (ftpdir): add.
2561
2562 2002-06-08  James Troup  <james@nocrew.org>
2563
2564         * neve (update_override_type): transaction is handled higher up in
2565         main().
2566         (update_priority): likewise.
2567         (process_sources): remove code that makes testing a duplicate of
2568         stable.
2569         (process_packages): likewise.
2570
2571         * templates/amber.advisory: add missing mail headers.
2572
2573         * cron.daily-security: also call apt-ftparchive clean for
2574         apt.conf.buildd-security.
2575         * cron.weekly: likewise.
2576
2577         * amber (do_upload): write out a list of source packages (and
2578         their version) uploaded for testing.
2579         (make_advisory): add more Subst mappings for the mail headers.
2580         (spawn): check for suspicious characters in the command and abort
2581         if their found.
2582
2583 2002-06-07  James Troup  <james@nocrew.org>
2584
2585         * ziyi (main): remove the 'nonus'/'security' hacks and use
2586         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2587         the lower level Release files, even if they don't exist.  fubar
2588         out if we can't open a lower level Release file for writing.
2589
2590         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2591         ziyi.
2592         * katie.conf-security (Dinstall): likewise.
2593
2594         * amber (do_upload): renamed from get_file_list().  Determine the
2595         upload host from the original component.
2596         (init): Add a -n/--no-action option.  Fix how we get changes_files
2597         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2598         sys.argv).  Add an Options global.
2599         (make_advisory): support -n/--no-action.
2600         (spawn): likewise.
2601         (main): likewise.
2602         (usage): document -n/--no-action.
2603
2604         * cron.buildd-security: fix path to Packages-arch-specific in
2605         quinn-diff invocation.
2606
2607         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2608         to proper suite names (i.e. stable, testing) rather than codenames
2609         (potato, woody).
2610         (Dinstall::DefaultSuite): likewise.
2611         (Suite): likewise.
2612         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2613         * vars-security (suites): likewise.
2614         * apt.conf-security: likewise.
2615
2616         * katie.conf-security (Component): add "updates/" prefix.
2617         (Suite::*::Components): likewise.
2618         (ComponentMappings): new; map all {ftp-master,non-US} components
2619         -> updates/<foo>.
2620
2621         * katie.conf-security (Natalie): removed; the options have
2622         defaults and ComponentPosition is used by alyson which doesn't
2623         work on security.d.o.
2624         (Amber): replace UploadHost and UploadDir with ComponentMappings
2625         which is a mapping of components -> URI.
2626         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2627         (SuiteMappings): use "silent-map" in preference to "map".
2628
2629         * cron.unchecked-security: fix call to cron.buildd-security.
2630
2631         * cron.daily-security: map local suite (stable) -> override suite
2632         (potato) when fixing overrides.  Correct component in natalie call
2633         to take into account "updates/" prefix.  Fix cut'n'waste in
2634         override.$dist.all3 generation, the old files weren't being
2635         removed, so they were endlessly growing.
2636
2637         * neve (main): don't use .Find for the CodeName since we require
2638         it.  Location::*::Suites is a ValueList.
2639         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2640         out on expired keys, just warn.
2641         (update_override_type): new function; lifted from alyson.
2642         (update_priority): likewise.
2643         (main): use update_{override_type,priority}().
2644
2645         * jennifer (check_distributions): remove redunant test for
2646         SuiteMappings; ValueList("does-not-exist") returns [] which is
2647         fine.  Add support for a "silent-map" type which doesn't warn
2648         about the mapping to the user.
2649         (check_files): add support for ComponentMappings, similar to
2650         SuiteMappings, but there's no type, just a source and a
2651         destination and the original component is stored in "original
2652         component".
2653         * katie.py (Katie.dump_vars): add "original component" as an
2654         optionsal files[file] dump variable.
2655
2656         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2657         query.  Add support for section-less legacy locations like current
2658         security.debian.org through YetAnotherConfigBoolean
2659         'LegacyStableHasNoSections'.
2660         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2661
2662         * utils.py (real_arch): moved here from ziyi.
2663         * ziyi (real_arch): moved to utils.py.
2664         * ziyi (main): likewise.
2665
2666         * claire.py (find_dislocated_stable): use real_arch() with
2667         filter() to strip out source and all.
2668         * neve (main): likewise.
2669         * rene (main): likewise.
2670         * jeri (parse_packages): likewise.
2671
2672 2002-06-06  James Troup  <james@nocrew.org>
2673
2674         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2675         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2676         doing.
2677
2678 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2679
2680         * jeri (check_joey): check if the line contains two elements
2681         before accessing the second.  Also, strip trailing spaces as well
2682         as the newline.
2683         * halle (check_joey): likewise.
2684
2685 2002-06-05  James Troup  <james@nocrew.org>
2686
2687         * cron.unchecked-security: new file; like cron.unchecked but if
2688         there's nothing to do exit so we don't call cron.buildd-security.
2689
2690         * apt.conf.buildd-security: new file.
2691
2692         * vars (archs): alphabetize.
2693         * vars-non-US (archs): likewise.
2694
2695         * vars-security: add unchecked.
2696
2697         * madison (main): reduce rather bizarrely verbose and purposeless
2698         code to print arches to a simple string.join.
2699
2700         * katie.conf (Suites::Unstable): add UdebComponents, a new
2701         valuelist of suites, used by jenna to flesh out the list of
2702         <suite>_main-debian-installer-binary-<arch>.list files generated.
2703         (Dinstall): add StableDislocationSupport, a new boolean used by
2704         jenna to enable or disable stable dislocation support
2705         (i.e. claire), as true.
2706
2707         * katie.conf (Dinstall): add StableDislocationSupport, a new
2708         boolean used by jenna to enable or disable stable dislocation
2709         support (i.e. claire), as true.
2710         * katie.conf-non-US: likewise.
2711         * katie.conf-security: likewise.
2712
2713         * cron.daily-security: generate .all3 overrides for the buildd
2714         support.  Freshen a local copy of Packages-arch-specific from
2715         buildd.debian.org.
2716
2717         * claire.py (find_dislocated_stable): disable the support for
2718         files in legacy-mixed locations since none of the Debian archives
2719         have any anymore.
2720
2721         * helena: new script; produces a report on NEW and BYHAND
2722         packages.
2723
2724         * jenna: rewritten from scratch to fix speed problems.  Run time
2725         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2726         minutes, 105 seconds are the monster query and 70 odd seconds is
2727         claire.
2728
2729         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2730         irrelevant.
2731
2732 2002-06-05  Ryan Murray  <rmurray@debian.org>
2733
2734         * cron.buildd-security: new file.
2735
2736 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2737
2738         * denise (list): take a file argument and use it.
2739         (main): don't abuse sys.stdout, just write to the file.
2740
2741         * claire.py (usage): Fix misspelling.
2742         (clean_symlink): Simplify.
2743         (find_dislocated_stable): Avoid unnecessary work.
2744
2745 2002-05-29  James Troup  <james@nocrew.org>
2746
2747         * cameron: removed; apt-ftparchive can simply walk the directory.
2748
2749 2002-05-26  Anthony Towns  <ajt@debian.org>
2750
2751         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2752         for the autobuilders.
2753
2754 2002-05-24  Ryan Murray  <rmurray@debian.org>
2755
2756         * cron.buildd: update override files before running apt-ftparchive
2757
2758 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2759
2760         * amber (main): remove extra space in prompt.
2761
2762         * utils.py (validate_changes_file_arg): use original filename in
2763         error messages.
2764
2765         * jeri (check_joey): close file after use.
2766         (parse_packages): likewise.
2767         (main): setup debug option properly.
2768
2769         * melanie (main): remove unused packages variable and simplify the
2770         code to build up con_packages by using repr().
2771
2772 2002-05-23  James Troup  <james@nocrew.org>
2773
2774         * lisa (recheck): when we reject, also return 0 so the package is
2775         skipped.
2776         (sg_compare): fix note sorting.
2777         (recheck): remove the .katie file after rejection.
2778
2779         * katie.py (Katie.accept): accepted auto-build support take 3;
2780         this time adding support for security.  Security needs a) non-pool
2781         files copied rather than symlinked since accepted is readable only
2782         by katie/security and www-data needs to be able to see the files,
2783         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2784         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2785         SecurityAcceptedAutoBuild is a new boolean which controls whether
2786         or not normal or security style is used.  The unstable_accepted
2787         table was renamed to accepted_autobuild and a suite column added.
2788         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2789         didn't have it's last_used/in_accepted flags correctly updated.
2790         * katie (install): likewise.
2791         * rhona (clean_accepted_autobuild): likewise.
2792
2793 2002-05-22  James Troup  <james@nocrew.org>
2794
2795         * lisa (sort_changes): new function; sorts changes properly.
2796         Finally.
2797         (sg_compare): new function; helper for sort_changes().  Sorts by
2798         have note and time of oldest upload.
2799         (indiv_sg_compare): new function; helper for sort_changes().
2800         Sorts by source version, have source and filename.
2801         (main): use sort_changes().
2802         (changes_compare): obsoleted; removed.
2803
2804 2002-05-20  James Troup  <james@nocrew.org>
2805
2806         * rhona (clean_accepted_autobuild): don't die if a file we're
2807         trying to remove doesn't exist.  Makes rhona more friendly to
2808         katie/katie.py crashes/bugs without any undue cost.
2809
2810 2002-05-19  James Troup  <james@nocrew.org>
2811
2812         * lisa (main): if sorting a large number of changes give some
2813         feedback.
2814         (recheck): new function, run the same checks (modulo NEW,
2815         obviously) as katie does, if they fail do the standard
2816         reject/skip/quit dance.
2817         (do_pkg): use it.
2818
2819         * katie (install): don't try to unlink the symlink in the
2820         AcceptedAutoBuild support if the destination is not a symlink (or
2821         doesn't exist).  Avoids unnecessary bombs on previous partial
2822         accepts and will still bomb hard if the file exists and isn't a
2823         symlink.
2824
2825         * utils.py: blah, commands _is_ used when the mail stuff isn't
2826         commented out like it is in my test environment.
2827
2828         * lisa (changes_compare): "has note" overrides everything else.
2829         Use .katie files rather than running parse_changes, faster and
2830         allows "has note" to work.  Correct version compare, it was
2831         reversed.  Ctime check should only kick in if the source packages
2832         are not the same.
2833         (print_new): print out and return any note.  Rename 'ret_code' to
2834         'broken'.
2835         (edit_new): renamed from spawn_editor.  Don't leak file
2836         descriptors.  Clean up error message if editor fails.
2837         (edit_note): new function, allows one to edit notes.
2838         (do_new): add note support, editing and removing.
2839         (init): kill -s/--sort; with notes we always want to use our
2840         sorting method.
2841         (usage): likewise.
2842
2843         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2844         changes field.
2845
2846         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2847         it default to 0.  Adapt tests to assume it's boolean.
2848         * fernanda.py (check_changes): adjust call appropriately.
2849         * halle (check_changes): likewise.
2850         * jennifer (check_changes): likewise.
2851         * jeri (check_changes): likewise.
2852         * shania (flush_orphans): likewise.
2853
2854         * jennifer (check_dsc): pass is_a_dsc by name when calling
2855         build_file_list() for clarity.
2856         * shania (flush_orphans): likewise.
2857         * tea (check_missing_tar_gz_in_dsc): likewise.
2858
2859         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2860         calling parse_changes() for clarity.
2861         * tea (check_dscs): likewise.
2862
2863         * utils.py (parse_changes): make dsc_whitespace_rules default to
2864         not true.
2865         * halle (check_changes): adjust call appropriately.
2866         * jennifer (check_changes): likewise.
2867         * jeri (check_changes): likewise.
2868         * lisa (changes_compare): likewise.
2869         * utils.py (changes_compare): likewise.
2870         * melanie (main): likewise.
2871         * shania (flush_orphans): likewise.
2872         * fernanda.py (check_changes): likewise.
2873
2874 2002-05-18  James Troup  <james@nocrew.org>
2875
2876         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2877         it's not useful and by and large a duplication of information
2878         available in readable format in other files.
2879
2880 2002-05-16  Ryan Murray  <rmurray@debian.org>
2881
2882         * melanie: Dir::TemplatesDir -> Dir::Templates
2883
2884 2002-05-15  Ryan Murray  <rmurray@debian.org>
2885
2886         * cameron: correct the use of os.path.join
2887
2888 2002-05-15  Anthony Towns  <ajt@debian.org>
2889
2890         * ziyi: Update to match the new format for Architectures/Components
2891         in katie.conf.
2892
2893 2002-05-14  James Troup  <james@nocrew.org>
2894
2895         * amber: new script; 'installer' wrapper script for the security
2896         team.
2897
2898         * katie.py (Katie.announce): remove unused 'dsc' local
2899         variable. (pychecker)
2900
2901         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2902
2903         * neve: don't import sys, we don't use it. (pychecker)
2904         (check_signature): fix return type mismatch. (pychecker)
2905
2906         * utils.py: don't import commands, we don't use it.  (pychecker)
2907
2908         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2909
2910         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2911         obsoleted by the change to "othercomponents" handling in jennifer
2912         detailed below.
2913         (Katie.cross_suite_version_check): new function; implements
2914         cross-suite version checking rules specified in the conf file
2915         while also enforcing the standard "must be newer than target
2916         suite" rule.
2917         (Katie.check_binary_against_db): renamed, since it's invoked once
2918         per-binary, "binaries" was inaccurate.  Use
2919         cross_suite_version_check() and don't bother with the "oldfiles"
2920         rubbish as jennifer works out "othercomponents" herself now.
2921         (Katie.check_source_against_db): use cross_suite_version_check().
2922
2923         * katie (check): the version and file overwrite checks
2924         (check_{binary,source,dsc}_against_db) are not per-suite.
2925
2926         * jennifer (check_files): less duplication of
2927         'control.Find("Architecture", "")' by putting it in a local
2928         variable.
2929         (check_files): call check_binary_against_db higher up since it's
2930         not a per-suite check.
2931         (check_files): get "othercomponents" directly rather than having
2932         check_binary_against_db do it for us.
2933
2934         * heidi (main): 'if x:', not 'if x != []:'.
2935         * katie.py (Katie.in_override_p): likewise.
2936         (Katie.check_dsc_against_db): likewise.
2937         * natalie (main): likewise.
2938         * rene (main): likewise.
2939         * ziyi (real_arch): likewise.
2940
2941         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2942         and OverrideType are now value lists, not lists.
2943         * andrea (main): likewise.
2944         * cindy (main): likewise.
2945         * claire.py (find_dislocated_stable): likewise.
2946         * denise (main): likewise.
2947         * jenna (main): likewise.
2948         * jennifer (check_distributions): likewise.
2949         (check_files): likewise.
2950         (check_urgency): likewise (Urgency::Valid).
2951         * jeri (parse_packages): likewise.
2952         * neve (main): likewise (and Location::%s::Suites).
2953         * rene (main): likewise.
2954
2955 2002-05-13  James Troup  <james@nocrew.org>
2956
2957         * katie.py (Katie.check_source_against_db): correct case of reject
2958         message to be consistent with binary checks.
2959
2960         * jennifer (get_status_output): don't leak 2 file descriptors per
2961         invocation.
2962         (check_signature): add missing '\n' to "duplicate status token"
2963         error message.
2964
2965 2002-05-09  James Troup  <james@nocrew.org>
2966
2967         * utils.py (validate_changes_file_arg): new function; validates an
2968         argument which should be a .changes file.
2969         * ashley (main): use it.
2970         * lisa (main): likewise.
2971
2972         * katie.py (Katie.check_dsc_against_db): since there can be more
2973         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2974         entry still exists in files.
2975
2976         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2977         files, since check_dsc_against_db() deletes the .orig.tar.gz
2978         entry.
2979
2980         * cameron: cleanups.
2981
2982         * utils.py (changes_compare): change sort order so that source
2983         name and source version trump 'have source'; this should fix
2984         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2985         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2986         by Ryan.
2987
2988         * lisa (main): allow the arguments to be .katie files too.
2989
2990 2002-05-07  Ryan Murray  <rmurray@debian.org>
2991
2992         * cron.buildd: add s390 to arch list again
2993
2994 2002-05-05  Ryan Murray  <rmurray@debian.org>
2995
2996         * cron.buildd: new script, update w-b database from unstable_accepted
2997         table
2998         * cameron: new script, take list in unstable_accepted and write out
2999         a file list for apt-ftparchive
3000         * apt.conf.buildd: new apt configuration for Packages/Sources for
3001         unstable_accepted
3002         * vars: add s390 to arch list.
3003
3004 2002-05-03  James Troup  <james@nocrew.org>
3005
3006         * neve (main): don't hard code the calling user as that doesn't
3007         work with modern postgres installs.  Fix psql invocation for
3008         init_pool.sql (database name required).  Dont' hard code the
3009         database name.
3010         (process_sources): add support for fingerprint and install_date.
3011         (process_packages): add support for fingerprint.
3012         (do_sources): pass in the directory, fingerprint support needs it.
3013         (get_status_output): borrowed from jennifer.
3014         (reject): likewise.
3015         (check_signature): likewise.
3016
3017         * katie (install): only try to log urgencies if Urgency_Logger is
3018         defined.
3019         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3020         defined; only close Urgency_Logger if it's defined.
3021
3022         * catherine (poolize): adapt for Dir rationalization.
3023         * claire.py (find_dislocated_stable): likewise.
3024         * denise (main): likewise.
3025         * halle (check_joey): likewise.
3026         * jenna: likewise.
3027         * jennifer: likewise.
3028         * jeri: likewise.
3029         * katie.py: likewise.
3030         * katie: likewise.
3031         * lisa (do_bxa_notification): likewise.
3032         * logging.py (Logger.__init__): likewise
3033         * rene (main): likewise.
3034         * rhona (clean): likewise.
3035         * shania (init): likewise.
3036         * tea: likewise.
3037         * ziyi: likewise.
3038
3039         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3040         FindB, not FindI.
3041
3042         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3043         boolean, use FindB, not get.
3044
3045         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3046         .orig.tar.gz's which are an exact (size/md5sum) match.
3047
3048         * ashley (main): really allow *.katie files as arguments too;
3049         noticed by aj.
3050
3051         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3052
3053 2002-05-03  Anthony Towns  <ajt@debian.org>
3054
3055         * ziyi: support for security.
3056
3057 2002-05-02  James Troup  <james@nocrew.org>
3058
3059         * jennifer (accept): call Katie.check_override() unconditional as
3060         no-mail check moved into that function.
3061         (do_byhand): likewise.
3062
3063         * katie.py (Katie.check_override): don't do anything if we're a)
3064         not sending mail or b) the override disparity checks have been
3065         disbled via Dinstall::OverrideDisparityCheck.
3066
3067         * jennifer (check_files): don't hard code Unstable as the suite
3068         used to check for architecture validity; use
3069         Dinstall::DefaultSuite instead, if it exists.
3070         (accept): conditionalize
3071
3072         * katie.py (Katie.update_subst): support global maintainer
3073         override with Dinstall::OverrideMaintainer.
3074
3075         * jennifer (check_distributions): new function, Distribution
3076         validation and mapping.  Uses new SuiteMappings variable from
3077         config file to abstract suite mappings.
3078         (check_changes): call it.
3079
3080         * natalie: renamed; nothing imports or likely will for some time.
3081
3082         * denise (main): remove unused natalie import and init().
3083
3084         * natalie.py (init): removed.
3085         (main): initalize here instead and don't hardcode the database
3086         name.
3087
3088 2002-04-30  James Troup  <james@nocrew.org>
3089
3090         * katie.py (Katie.close_bugs): new function, split out from
3091         announce().
3092         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3093         true.
3094         (Katie.close_bugs): new function, split out
3095         (Katie.close_bugs): return immediately if there are no bugs to
3096         close.
3097
3098         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3099         * katie (do_reject): likewise.
3100         (stable_install): likewise.
3101         * katie.py (Katie.announce): likewise.
3102         (Katie.accept): likewise.
3103         (Katie.check_override): likewise.
3104         (Katie.do_reject): likewise.
3105         * lisa (do_bxa_notification): likewise.
3106         * melanie (main): likewise.
3107
3108         * utils.py (TemplateSubst): change second argument to be a
3109         filename rather than a template since every caller opened a file
3110         on the fly which was ugly and leaked file descriptor.
3111
3112 2002-04-29  James Troup  <james@nocrew.org>
3113
3114         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3115         <hertzog@debian.org> to send 'accepted' announce mails to the
3116         PTS. [#128140]
3117
3118 2002-04-24  James Troup  <james@nocrew.org>
3119
3120         * init_pool.sql (unstable_accepted): add two new fields to
3121         unstable_accepted; in_accepted is a boolean indicating whether or
3122         not the file is in accepted and last_used is a timestamp used by
3123         rhona to determine when to remove symlinks for installed packages.
3124
3125         * katie.py (Katie.accept): auto-build support take 2.  Create
3126         symlinks for all files into a seperate directory.  Add files to
3127         unstable_accepted as paths to the new directory; mark them as
3128         being in accepted for cameron.  Properly conditionalize it on a
3129         configuration variable.
3130
3131         * katie (install): likewise.  Update symlinks to point into the
3132         pool; mark the files for later deletion by rhona and mark them as
3133         not being in accepted for cameron.
3134
3135         * rhona (clean_accepted_autobuild): new function.
3136
3137 2002-04-22  James Troup  <james@nocrew.org>
3138
3139         * jennifer (check_files): handle db_access.get_location_id()
3140         returning -1 properly/better.
3141
3142         * rhona (clean_fingerprints): new function.
3143
3144 2002-04-21  James Troup  <james@nocrew.org>
3145
3146         * utils.py (touch_file): unused; remove.
3147         (plural): likewise.
3148
3149         * jennifer (check_files): close file descriptor used to get the
3150         control file.
3151         (check_md5sums): likewise.
3152         (callback): likewise.
3153
3154         * katie.py (Katie.do_reject): handle manual rejects much better;
3155         call the editor first and get confirmation from the user before
3156         proceeding.
3157
3158         * jennifer (check_signature): prefix_multi_line_string() moved to
3159         utils.
3160
3161         * utils.py (prefix_multi_line_string): moved here from jennifer.
3162
3163 2002-04-20  James Troup  <james@nocrew.org>
3164
3165         * lisa (main): handle non-existent files.
3166
3167         * ashley (main): allow *.katie files as arguments too.
3168
3169 2002-04-19  James Troup  <james@nocrew.org>
3170
3171         * katie.py (Katie.accept): add stuff to help auto-building from
3172         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3173         in the pool), create a symlink to it in the accepted directory and
3174         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3175
3176         * katie (install): undo the "auto-building from accepted" stuff
3177         (i.e. remove the .orig.tar.gz symlink and remove the files from
3178         unstable_accepted table).
3179
3180 2002-04-16  James Troup  <james@nocrew.org>
3181
3182         * jennifer (upload_too_new): fix typo which was causing all
3183         timestamp comparisons to be against the .changes file.  Also move
3184         back to the original directory so we do the comparisons against
3185         accurate timestamps.
3186
3187         * tea (check_missing_tar_gz_in_dsc): new function.
3188
3189         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3190         file mentioned in the .dsc.
3191
3192         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3193         way mails reach debian-{devel-,}changes@l.d.o.
3194
3195 2002-04-02  Ryan Murray  <rmurray@debian.org>
3196
3197         * cron.daily: run shania after rhona
3198         * cron.daily-non-US: likewise.
3199
3200 2002-04-01  James Troup  <james@nocrew.org>
3201
3202         * katie: re-add proposed-updates/stable install support.
3203
3204         * katie.py (Katie.dump_vars): add changes["changes"] as an
3205         optional field; should be mandatory later.
3206
3207 2002-03-31  James Troup  <james@nocrew.org>
3208
3209         * katie (install): support a Suite::<foo>::CopyKatie similar to
3210         CopyChanges.  Done seperately because .katie files don't need to
3211         be mirrored and will probably be copied to another directory as a
3212         result.
3213
3214         * halle (main): add missing debug to options.
3215
3216 2002-03-29  James Troup  <james@nocrew.org>
3217
3218         * madison (main): add a -r/--regex option.
3219
3220 2002-03-26  James Troup  <james@nocrew.org>
3221
3222         * lisa: don't trample on changes["distribution"]; make a copy of
3223         it as changes["suite"] instead and use that.
3224
3225 2002-03-16  Anthony Towns  <ajt@debian.org>
3226
3227         * templates/lisa.bxa_notification: Fix some grammatical errors.
3228         Encourage contact via bxa@ftp-master email address.
3229
3230 2002-03-15  James Troup  <james@nocrew.org>
3231
3232         * jennifer (check_timestamps): remove bogus raise in except.
3233
3234 2002-03-15  Anthony Towns  <ajt@debian.org>
3235
3236         * cron.monthly: rotate mail/archive/bxamail as well as
3237         mail/archive/mail. This is for a complete archive of
3238         correspondence with the BXA.
3239
3240 2002-03-14  Anthony Towns  <ajt@debian.org>
3241
3242         * crypto-in-main changes.
3243
3244         * utils.py (move, copy): add an optional perms= parameter to let you
3245         set the resulting permissions of the moved/copied file
3246         * katie.py (force_move): rejected/morgued files should be unreadable
3247         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3248         should be unreadable.
3249
3250 2002-03-07  Ryan Murray  <rmurray@debian.org>
3251
3252         * katie (install): check for existance of "files id" key as well as
3253         it being set to a valid value.
3254         * katie (install): check for existense and valid value for location
3255         id as well
3256
3257 2002-03-05  Ryan Murray  <rmurray@debian.org>
3258
3259         * katie.py (do_reject): reread the reason file after editing it.
3260
3261 2002-02-25  James Troup  <james@nocrew.org>
3262
3263         * jennifer (check_changes): don't enforce sanity in .changes file
3264         names since it doesn't seem to be possible; pcmica-cs and similar
3265         freak show packages in particular cause real problems.
3266
3267         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3268         each dsc_file since the .orig.tar.gz checking code now uses it as
3269         a boolean.  Fixes bizarro rejections which bogusly claimed
3270         .diff.gz md5sum/size was incorrect.
3271
3272 2002-02-24  James Troup  <james@nocrew.org>
3273
3274         * katie (process_it): reset reject_message.
3275
3276 2002-02-22  James Troup  <james@nocrew.org>
3277
3278         * db_access.py(set_files_id): disable use of
3279         currval('files_id_seq') because it was taking 3 seconds on auric
3280         which is insane (most calls take < 0.01) and simply call
3281         get_files_id() for the return value instead.
3282
3283         * katie.py (Katie.do_query): convenience function; unused by
3284         default, useful for profiling.
3285         * db_access.py (do_query): likewise.
3286
3287         * katie (install): fix insert SQL call when binary has no source.
3288
3289         * lisa (determine_new): auto-correct non-US/main to non-US.
3290         (determine_new): add a warning when adding things to stable.
3291         (edit_index): use our_raw_input().
3292         (edit_overrides): likewise.
3293         (do_new): likewise.  Use re.search() not re.match() since the
3294         default answer may not be the first one.
3295         (do_byhand): likewise.
3296         (do_new): Default to 'S'kip and never 'A'dd.
3297
3298         * jennifer (action): pass prompt to our_raw_input().
3299         * melanie (game_over): likewise.
3300         * katie (action): likewise.
3301
3302         * utils.py (our_raw_input): add an optional prompt argument to
3303         make the function more usable as a drop in replacement for
3304         raw_input().
3305
3306         * jennifer (check_files): correct reject() to not double prefix
3307         when using katie.py based functions.
3308         (check_dsc): likewise.
3309
3310         * katie.py (Katie.reject): prepend a new line if appropriate
3311         rathen than appending one to avoid double new lines when caller
3312         adds one of his own.
3313
3314         * lisa (determine_new): warn if the package is also in other
3315         components.
3316
3317 2002-02-20  James Troup  <james@nocrew.org>
3318
3319         * jennifer (check_files): if .changes file lists "source" in
3320         Architecture field, there must be a .dsc.
3321
3322 2002-02-15  James Troup  <james@nocrew.org>
3323
3324         * ashley (main): add some missing fields.
3325
3326         * katie.py (Katie.check_dsc_against_db): fix to take into account
3327         the fact that the .orig.tar.gz might be in byhand, accepted or
3328         new.  Also fix calling of reject().
3329         (Katie.check_binaries_against_db): fix calling of reject().
3330         (Katie.check_source_against_db): likewise.
3331         (Katie.dump_vars): add missing variables used for bug closures.
3332
3333         * lisa (changes_compare_by_time): sort by reverse time.
3334
3335         * katie.py (Katie.accept): log.
3336         (Katie.dump_vars): missing has_key test for optional changes fields.
3337
3338         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3339         (process_it): traceback goes to stderr, not stdout.
3340         (acknowledge_new): log.
3341         (do_byhand): likewise.
3342
3343         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3344
3345         * add_constraints.sql: add grants for the new fingerprint table.
3346
3347 2002-02-13  James Troup  <james@nocrew.org>
3348
3349         * katie (do_reject): basename the .changes filename before trying
3350         to use it to construct the .reason filename.
3351         (process_it): call Katie.update_subst() so do_reject() DTRT with
3352         the mail template.
3353         (do_reject): setup the mail template correctly.
3354
3355 2002-02-12  James Troup  <james@nocrew.org>
3356
3357         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3358         (check_files): don't abuse global dictionaries.
3359         (Ent): use all variables.
3360         (check_timestamps): don't abuse global dictionaries.
3361
3362         * fernanda.py: renamed to .py so lisa can import it.
3363         (check_dsc): remove unused local variables (pychecker).
3364         (display_changes): split off from check_changes.
3365
3366         * katie: rewritten; most of the functionality moves to jennifer;
3367         what's left is the code to install packages once a day from the
3368         'accepted' directory.
3369
3370         * jennifer: new program, processes packages in 'unchecked'
3371         (i.e. most of the non-install functionality of old katie).
3372
3373         * katie.py: common functions shared between the clique of
3374         jennifer, lisa and katie.
3375
3376         * lisa: new program; handles NEW and BYHAND packages.
3377
3378         * jeri (usage): new function.
3379         (main): use it.
3380         (check_package): remove unused local variable (pychecker).
3381
3382         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3383         binaries and source.  Add install_date to source.
3384
3385         * halle (usage): new function.
3386         (main): use it.  Remove unused options.
3387         (check_changes): remove unused local variable (pychecker).
3388
3389         * add_constraints.sql: add fingerprint references.
3390
3391         * db_access.py (get_or_set_fingerprint_id): new function.
3392
3393         * ashley (main): new program; dumps the contents of a .katie file
3394         to stdout.
3395
3396         * alyson (main): remove option handling since we don't actually
3397         support any.
3398         * cindy (main): likewise.
3399
3400         * remove unnecessary imports and pre-define globals (pychecker).
3401
3402 2002-02-11  Anthony Towns  <ajt@debian.org>
3403
3404         * added installation-report and upgrade-report pseudo-packages
3405
3406 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3407
3408         * katie (update_subst): use Dinstall::TrackingServer.
3409         * melanie (main): likewise.
3410
3411 2002-01-27  James Troup  <james@nocrew.org>
3412
3413         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3414         noticing, jgg@ for fix.
3415
3416 2002-01-19  James Troup  <james@nocrew.org>
3417
3418         * utils.py (extract_component_from_section): handle non-US
3419         non-main properly.
3420
3421 2002-01-12  James Troup  <james@nocrew.org>
3422
3423         * madison: add support for -S/--source-and-binary which displays
3424         information for the source package and all it's binary children.
3425
3426 2002-01-13  Anthony Towns  <ajt@debian.org>
3427
3428         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3429         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3430           and 2002 key ids.
3431         * katie.conf-non-US: Likewise.
3432         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3433           multiple keys automatically. This is probably only useful for
3434           transitioning from an expired (or revoked?) key.
3435
3436 2002-01-08  Ryan Murray  <rmurray@debian.org>
3437
3438         * debian/python-dep: new file that prints out python:Depends for
3439           substvars
3440         * debian/control: use python:Depends, build-depend on python
3441           lower Depends: on postgresql to Suggests:
3442         * debian/rules: determine python version, install to the correct
3443           versioned dir
3444
3445 2001-12-18  Anthony Towns  <ajt@debian.org>
3446
3447         * ziyi: unlink Release files before overwriting them (in case they've
3448           been merged)
3449         * ziyi: always include checksums/sizes for the uncompressed versions
3450           of Sources and Packages, even if they're not present on disk
3451
3452 2001-11-26  Ryan Murray  <rmurray@debian.org>
3453
3454         * ziyi (main): add SigningPubKey config option
3455         * katie.conf: use SigningPubKey config option
3456         * katie.conf-non-US: likewise
3457
3458 2001-11-24  James Troup  <james@nocrew.org>
3459
3460         * katie (acknowledge_new): log newness.
3461
3462 2001-11-24  Anthony Towns  <ajt@debian.org>
3463
3464         * ziyi (real_arch): bail out if some moron forgot to reset
3465         untouchable on stable.
3466         (real_arch): source Release files.
3467
3468 2001-11-19  James Troup  <james@nocrew.org>
3469
3470         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3471         utils.get_conf().
3472         * shania (main): likewise.
3473
3474         * rhona (main): add default options.
3475
3476         * db_access.py (get_archive_id): case independent.
3477
3478         * katie (action): sort files so that ordering is consistent
3479         between mails; noticed/requested by Joey.
3480
3481 2001-11-17  Ryan Murray  <rmurray@debian.org>
3482
3483         * utils.py: add get_conf function, change startup code to read all
3484           config files to the Cnf that get_conf returns
3485           use the component list from the katie conf rather than the hardcoded
3486           list.
3487         * all scripts: use new get_conf function
3488         * shania: fix try/except around changes files
3489         * jenna: only do debian-installer if it is a section in Cnf
3490
3491 2001-11-16  Ryan Murray  <rmurray@debian.org>
3492
3493         * shania (main): Initialize days to a string of a number.
3494                  (main): Initialize Cnf vars before reading in Cnf
3495
3496 2001-11-14  Ryan Murray  <rmurray@debian.org>
3497
3498         * shania (main): Initialize days to a number.
3499
3500 2001-11-04  James Troup  <james@nocrew.org>
3501
3502         * docs/Makefile: use docbook-utils' docbook2man binary.
3503
3504         * Change all "if foo == []" constructs into "if not foo".
3505
3506         * katie (check_changes): when installing into stable from
3507         proposed-updates, remove all non-stable target distributions.
3508         (check_override): don't check for override disparities on stable
3509         installs.
3510         (stable_install): update install_bytes appropriately.
3511         (reject): stable rejection support; i.e. don't remove files when
3512         rejecting files in the pool, rather remove them from the
3513         proposed-update suite instead, rhona will do the rest.
3514         (manual_reject): support for a stable specific template.
3515         (main): setup up stable rejector in subst.
3516
3517 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3518
3519         * debian/control (Build-Depends): docbook2man has been superseded
3520         by docbook-utils.
3521
3522         * neve (main): exit with a more useful error message.
3523         (update_suites): Suite::<suite>::Version, Origin and Description
3524         are not required, so don't fail if they don't exist.
3525
3526         * db_access.py (get_archive_id): return -1 on error rather than
3527         raise an exception.
3528         (get_location_id): likewise.
3529
3530         * madison (main): don't exit on the first not-found package,
3531         rather exit with an appropriate return code after processing all
3532         packages.
3533
3534 2001-11-03  James Troup  <james@nocrew.org>
3535
3536         * claire.py (find_dislocated_stable): add per-architecture
3537         symlinks for dislocated architecture: all debs.
3538
3539 2001-10-19  Anthony Towns  <ajt@debian.org>
3540
3541         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3542
3543 2001-10-10  Anthony Towns  <ajt@debian.org>
3544
3545         * claire.py (fix_component_section): do _not_ assign to None under
3546         any circumstances
3547
3548 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3549
3550         * melanie (main): don't duplicate architectures when removing from
3551         more than one suite.
3552
3553         * heidi (main, process_file, get_list): report suite name not ID.
3554
3555         * naima (nmu_p): be case insensitive.
3556
3557         * naima (action): more list handling clean ups.
3558
3559         * melanie (main): clean up lists handling to use string.join and
3560         IN's.
3561
3562         * madison (main): clean up suite and architecture argument parsing
3563         to use slices less and string.join more.
3564
3565         * utils.py (parse_changes): Use string.find() instead of slices for
3566         string comparisons thereby avoid hardcoding the length of strings.
3567         * ziyi (main): likewise.
3568
3569 2001-10-07  James Troup  <james@nocrew.org>
3570
3571         * Remove mode argument from utils.open_files() calls if it's the
3572         default, i.e. 'r'.
3573
3574 2001-09-27  James Troup  <james@nocrew.org>
3575
3576         * katie (init): new function; options clean up.
3577         (usage): add missing options, remove obsolete ones.
3578         (main): adapt for the two changes above.  If the lock file or
3579         new-ack log file don't exist, create them.  Don't try to open the
3580         new-ack log file except running in new-ack mode.
3581
3582         * alyson (main): initialize all the tables that are based on the
3583         conf file.
3584
3585         * utils.py (touch_file): like touch(1).
3586         (where_am_i): typo.
3587
3588         * catherine (usage): new.
3589         (main): use it.  options cleanup.
3590         * claire.py: likewise.
3591         * fernanda: likewise.
3592         * heidi: likewise.
3593         * jenna: likewise.
3594         * shania: likewise.
3595         * ziyi: likewise.
3596
3597         * andrea: options cleanup.
3598         * charisma: likewise.
3599         * julia: likewise.
3600         * madison: likewise.
3601         * melanie: likewise.
3602         * natalie: likewise.
3603         * rhona: likewise.
3604         * tea: likewise.
3605
3606 2001-09-26  James Troup  <james@nocrew.org>
3607
3608         * utils.py: default to sane config file locations
3609         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3610         or they can point to the real ones through use of a new Config
3611         section.  Based on an old patch by Adam Heath.
3612         (where_am_i): use the new default config stuff.
3613         (which_conf_file): likewise.
3614         (which_apt_conf_file): likewise.
3615
3616         * charisma (main): output defaults to
3617         `Package~Version\tMaintainer'; input can be of either form.  When
3618         parsing the new format do version comparisons, when parsing the
3619         old format assume anything in the extra file wins.  This fixes the
3620         problem of newer non-US packages being overwhelmed by older
3621         versions still in stable on main.
3622
3623 2001-09-17  James Troup  <james@nocrew.org>
3624
3625         * natalie.py (list): use result_join().
3626
3627         * denise (main): result_join() moved to utils.
3628
3629         * utils.py (result_join): move to utils; add an optional seperator
3630         argument.
3631
3632 2001-09-14  James Troup  <james@nocrew.org>
3633
3634         * heidi (set_suite): new function; does --set like natalie does,
3635         i.e. turns it into a sequence of --add's and --remove's
3636         internally.  This is a major win (~20 minute run time > ~20
3637         seconds) in the common, everday (i.e. testing) case.
3638         (get_id): common code used by set_suite() and process_file().
3639         (process_file): call set_suite() and get_id().
3640         (main): add logging support.
3641
3642         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3643         files.
3644
3645         * utils.py (parse_changes): use slices or simple string comparison
3646         in favour of regexes where possible.
3647
3648         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3649         fact that the string VARDATA() points to are not null terminated.
3650
3651         * denise (result_join): new function; like string.join() but
3652         handles None's.
3653         (list): use it.
3654         (main): likewise.
3655
3656         * charisma (main): python-pygresql 7.1 returns None not "".
3657
3658 2001-09-14  Ryan Murray  <rmurray@debian.org>
3659
3660         * natalie.py (list): handle python-pygresql 7.1 returning None.
3661
3662 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3663
3664         * madison (main): return 1 if no package is found.
3665
3666 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3667
3668         * madison (main): better error handling for incorrect
3669         -a/--architecture or -s/--suite arguments.
3670         (usage): new.
3671         (main): use it.
3672
3673 2001-09-05  Ryan Murray  <rmurray@debian.org>
3674
3675         * charisma, madison, katie: remove use of ROUser
3676         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3677
3678 2001-08-26  James Troup  <james@nocrew.org>
3679
3680         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3681         maintained packages at cjwatson@'s request.
3682
3683 2001-08-21  James Troup  <james@nocrew.org>
3684
3685         * madison (main): add -a/--architecture support.
3686
3687         * jenna: use logging instead of being overly verbose on stdout.
3688
3689 2001-08-11  Ryan Murray  <rmurray@debian.org>
3690
3691         * melanie: add functional help option
3692
3693 2001-08-07  Anthony Towns  <ajt@debian.org>
3694
3695         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3696
3697 2001-07-28  James Troup  <james@nocrew.org>
3698
3699         * katie (check_dsc): ensure source version is >> than existing
3700         source in target suite.
3701
3702 2001-07-25  James Troup  <james@nocrew.org>
3703
3704         * natalie.py: add logging support.
3705
3706         * utils.py (open_file): make the second argument optional and
3707         default to read-only.
3708
3709         * rene (main): work around broken source packages that duplicate
3710         arch: all packages with arch: !all packages (no longer allowed
3711         into the archive by katie).
3712
3713 2001-07-13  James Troup  <james@nocrew.org>
3714
3715         * katie (action): don't assume distribution is a dictionary.
3716         (update_subst): don't assume architecture is a dictionary and that
3717         maintainer822 is defined.
3718         (check_changes): recognise nk_format exceptions.
3719         (check_changes): reject on 'testing' only uploads.
3720         (check_files): when checking to ensure all packages are newer
3721         versions check against arch-all packages too.
3722         (check_dsc): enforce the existent of a sane set of mandatory
3723         fields.  Ensure the version number in the .dsc (modulo epoch)
3724         matches the version number in the .changes file.
3725
3726         * utils.py (changes_compare): ignore all exceptions when parsing
3727         the changes files.
3728         (build_file_list): don't UNDEF on a changes file with no format
3729         field.
3730
3731 2001-07-07  James Troup  <james@nocrew.org>
3732
3733         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3734         rather than 'changedbyname' to avoid false negatives on uploads
3735         with an email-address-only Changed-By field.
3736         (check_dsc): don't overwrite reject_message; append to it.
3737         (check_signature): likewise.
3738         (check_changes): likewise.
3739         (announce): condition logging on 'action'.
3740
3741         * logging.py: new logging module.
3742
3743         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3744         sub-tree into a separate (global) variable.
3745         (check_dsc): ensure format is 1.0 to retain backwards
3746         compatability with dpkg-source in potato.
3747         (main): only try to obtain the lock when not running in no-action
3748         mode.
3749         Use the new logging module.
3750
3751         * christina: initial version; only partially usable.
3752
3753 2001-06-28  Anthony Towns  <ajt@debian.org>
3754
3755         * apt.conf: Add ExtraOverrides to auric.
3756
3757 2001-06-25  James Troup  <james@nocrew.org>
3758
3759         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3760         they preferred the name 'Uploaders'.
3761
3762 2001-06-23  James Troup  <james@nocrew.org>
3763
3764         * katie (check_files): fix typo in uncommon rejection message,
3765         s/sourceversion/source version/.
3766
3767         * denise (main): we can't use print because stdout has been
3768         redirected.
3769
3770         * katie (source_exists): new function; moved out of check_files()
3771         and added support for binary-only NMUs of earlier sourceful NMUs.
3772
3773         * rhona (clean): find_next_free has moved.
3774
3775         * utils.py (find_next_free): new function; moved here from rhona.
3776         Change too_many to be an argument with a default value, rather
3777         than a hardcoded variable.
3778
3779         * shania: rewritten to work better; REJECTion reminder mail
3780         handling got lost though.
3781
3782 2001-06-22  James Troup  <james@nocrew.org>
3783
3784         * rhona (main): remove unused override code.
3785
3786         * fernanda (main): remove extraneous \n's from utils.warn calls.
3787         * natalie.py (list): likewise.
3788
3789         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3790         use utils.{warn,fubar} where appropriate.
3791
3792 2001-06-21  James Troup  <james@nocrew.org>
3793
3794         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3795         functionality.
3796         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3797         by the "Maintainers" field in the .dsc file and maintainer groups.
3798         (nmu_p.__init__): read in the list of group maintainer names.
3799         (announce): use nmu_p.
3800
3801 2001-06-20  James Troup  <james@nocrew.org>
3802
3803         * rene (main): hardcode the suite experimental is compared to by
3804         name rather than number.
3805
3806         * katie (check_files): differentiate between doesn't-exist and
3807         permission-denied in "can not read" rejections; requested by edd@.
3808         (check_dsc): use os.path.exists rather than os.access to allow the
3809         above check to kick in.
3810
3811         * heidi (process_file): read all input before doing anything and
3812         use transactions.
3813
3814 2001-06-15  James Troup  <james@nocrew.org>
3815
3816         * fernanda: new script; replaces old 'check' shell script
3817         nastiness.
3818
3819 2001-06-14  James Troup  <james@nocrew.org>
3820
3821         * katie: actually import traceback module to avoid amusing
3822         infinite loop.
3823
3824 2001-06-10  James Troup  <james@nocrew.org>
3825
3826         * utils.py (extract_component_from_section): fix to handle just
3827         'non-free' and 'contrib'.  Also fix to handle non-US in a
3828         completely case insensitive manner as a component.
3829
3830 2001-06-08  James Troup  <james@nocrew.org>
3831
3832         * madison (arch_compare): sort function that sorts 'source' first
3833         then alphabetically.
3834         (main): use it.
3835
3836 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3837
3838         * catherine (poolize): explicitly make poolized_size a long so it
3839         doesn't overflow when poolizing e.g. entire archives.
3840
3841 2001-06-01  James Troup  <james@nocrew.org>
3842
3843         * utils.py (send_mail): throw exceptions rather than exiting.
3844
3845         * katie (process_it): catch exceptions and ignore them.
3846
3847 2001-06-01  Michael Beattie  <mjb@debian.org>
3848
3849         * added update-mailingliststxt and update-readmenonus to update
3850         those files, respectively. modified cron.daily{,-non-US} to
3851         use them.
3852
3853 2001-05-31  Anthony Towns  <ajt@debian.org>
3854
3855         * rhona: make StayOfExecution work.
3856
3857 2001-05-31  James Troup  <james@nocrew.org>
3858
3859         * rhona (find_next_free): fixes to not overwrite files but rename
3860         them by appending .<n> instead.
3861         (clean): use find_next_free and use dated sub-directories in the
3862         morgue.
3863
3864         * utils.py (move): don't overwrite files unless forced to.
3865         (copy): likewise.
3866
3867 2001-05-24  James Troup  <james@nocrew.org>
3868
3869         * katie (check_files): determine the source version here instead
3870         of during install().
3871         (check_files): check for existent source with bin-only NMU
3872         support.
3873         (main): sort the list of changes so that the source-must-exist
3874         check Does The Right Thing(tm).
3875
3876         * utils.py (changes_compare): new function; sorts a list of
3877         changes files by 'have-source', source, version.
3878         (cc_fix_changes): helper function.
3879         (parse_changes): use compiled regexes.
3880         (fix_maintainer): likewise.
3881
3882         * rene (main): warn about packages in experimental that are
3883         superseded by newer versions in unstable.
3884
3885 2001-05-21  James Troup  <james@nocrew.org>
3886
3887         * rene (main): add support for checking for ANAIS (Architecture
3888         Not Allowed In Source) packages.
3889
3890 2001-05-17  James Troup  <james@nocrew.org>
3891
3892         * katie (check_changes): initalize `architecture' dictionary in
3893         changes global so that if we can't parse the changes file for
3894         whatever reason we don't undef later on.
3895
3896         * utils.py (parse_changes): fix handling of multi-line fields
3897         where the first line did have data.
3898
3899 2001-05-05  Anthony Towns  <ajt@debian.org>
3900
3901         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3902         (It should always have been there. Ooopsy.)
3903
3904 2001-05-03  Anthony Towns  <ajt@debian.org>
3905
3906         * jenna: Cleanup packages that move from arch:any to arch:all or
3907         vice-versa.
3908
3909 2001-04-24  Anthony Towns  <ajt@debian.org>
3910
3911         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3912         cope with debian-installer and boot-floppies' md5sum.txt.
3913
3914 2001-04-16  James Troup  <james@nocrew.org>
3915
3916         * katie (check_changes): add missing %s format string argument.
3917         (stable_install): temporary work around for morgue location to
3918         move installed changes files into.
3919         (stable_install): helps if you actually read in the template.
3920         (manual_reject): fix for editing of reject messages which was
3921         using the wrong variable name.
3922
3923         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3924
3925 2001-04-13  James Troup  <james@nocrew.org>
3926
3927         * katie (manual_reject): Cc the installer.
3928         (reject): don't.
3929         (check_changes): remove unused maintainer-determination code.
3930         (update_subst): add support for Changed-By when setting the
3931         *MAINTAINER* variables.
3932
3933         * rene (bar): new function to check for packages on architectures
3934         when they shouldn't be.
3935
3936         * natalie.py (main): use fubar() and warn() from utils.
3937
3938         * utils.py (whoami): new mini-function().
3939         * melanie (main): use it.
3940         * katie (manual_reject): likewise.
3941
3942 2001-04-03  James Troup  <james@nocrew.org>
3943
3944         * katie (action): ignore exceptions from os.path.getmtime() so we
3945         don't crash on non-existent changes files (e.g. when they are
3946         moved between the start of the install run in cron.daily and the
3947         time we get round to processing them).
3948
3949         * madison (main): also list source and accept -s/--suite.
3950
3951         * jenna (generate_src_list): missing \n in error message.
3952
3953         * katie (update_subst): add sane defaults for when changes is
3954         skeletal.
3955
3956 2001-03-29  James Troup  <james@nocrew.org>
3957
3958         * melanie (main): use fubar() and warn() from utils.  Remember who
3959         the maintainer for the removed packages are and display that info
3960         to the user.  Readd support for melanie-specific Bcc-ing that got
3961         lost in the TemplateSubst transition.
3962
3963         * utils.py (fubar): new function.
3964         (warn): like wise.
3965
3966         * db_access.py (get_maintainer): as below.
3967
3968         * charisma (get_maintainer): moved the bulk of this function to
3969         db_access so that melanie can use it too.
3970
3971         * claire.py (find_dislocated_stable): restrict the override join
3972         to those entries where the suite is stable; this avoids problems
3973         with packages which have moved to new sections (e.g. science)
3974         between stable and unstable.
3975
3976 2001-03-24  James Troup  <james@nocrew.org>
3977
3978         * catherine (poolize): new function; not really independent of
3979         main() fully, yet.
3980         (main): use it.
3981
3982         * katie (stable_install): __SUITE__ needs to be space prefixed
3983         because buildd's check for 'INSTALLED$'.
3984
3985 2001-03-22  James Troup  <james@nocrew.org>
3986
3987         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3988
3989         * jenna: rewritten; now does deletions on a per-suite level
3990         instead of a per-suite-component-architecture-type level.  This
3991         allows mutli-component packages to be auto-cleaned (and as a
3992         bonus, reduces the code size and duplication).
3993
3994 2001-03-22  Anthony Towns  <ajt@debian.org>
3995
3996         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3997         instead of just giving a gpg error.
3998
3999 2001-03-21  James Troup  <james@nocrew.org>
4000
4001         * madison (main): use apt_pkg.VersionCompare to sort versions so
4002         that output is correctly sorted for packages like debhlper.
4003         Noticed by ajt@.
4004
4005         * tea (check_source_in_one_dir): actually find problematic source
4006         packages.
4007
4008         * katie (check_dsc): remember the orig.tar.gz's location ID if
4009         it's not in a legacy suite.
4010         (check_diff): we don't use orig_tar_id.
4011         (install): add code to handle sourceful diff-only upload of
4012         packages which change components by copying the .orig.tar.gz into
4013         the new component, if it doesn't already exist there.
4014         (process_it): reset orig_tar_location (as above).
4015
4016         * melanie (main): use template substiution for the bug closing
4017         emails.
4018         (main): don't hardcode bugs.debian.org or packages.debian.org
4019         either; use configuration items.
4020
4021         * katie: likewise.
4022
4023         * natalie.py (init): use None rather than 'localhost' for the
4024         hostname given to pg.connect.
4025
4026         * utils.py (TemplateSubst): new function; lifted from
4027         userdir-ldap.
4028
4029 2001-03-21  Ryan Murray  <rmurray@debian.org>
4030
4031         * katie (announce): fix the case of non-existent
4032         Suite::$SUITE::Announce.
4033
4034 2001-03-20  Ryan Murray  <rmurray@debian.org>
4035
4036         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4037         /usr/.
4038
4039         * alyson (main): use config variable for database name.
4040         * andrea (main): likewise.
4041         * catherine (main): likewise.
4042         * charisma (main): likewise.
4043         * cindy (main): likewise.
4044         * claire.py (main): likewise.
4045         * denise (main): likewise.
4046         * heidi (main): likewise.
4047         * jenna (main): likewise.
4048         * katie (main): likewise.
4049         * madison (main): likewise.
4050         * melanie (main): likewise.
4051         * neve (main): likewise.
4052         * rhona (main): likewise.
4053         * tea (main): likewise.
4054
4055 2001-03-15  James Troup  <james@nocrew.org>
4056
4057         * rhona (check_sources): fixed evil off by one (letter) error
4058         which was causing only .dsc files to be deleted when cleaning
4059         source packages.
4060
4061         * charisma (get_maintainer_from_source): remove really stupid and
4062         gratuitous IN sub-query and replace with normal inner join.
4063         (main): connect as read-only user nobody.
4064
4065         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4066         with EXISTS.
4067         (check_files): likewise; still disabled by default though.
4068         (clean_binaries): add ' seconds' to the mysterious number in the
4069         output.
4070         (clean): likewise.
4071
4072         * tea (check_files): add missing global declaration on db_files.
4073
4074 2001-03-14  James Troup  <james@nocrew.org>
4075
4076         * rhona: rewritten large chunks. Removed a lot of the silly
4077         selecting into dictionaries and replaced it with 'where exists'
4078         based sub queries.  Added support for StayOfExecution.  Fix the
4079         problem with deleting dsc_files too early and disable cleaning of
4080         unattached files.
4081
4082 2001-03-14  Anthony Towns  <ajt@debian.org>
4083
4084         * katie (announce): also check Changed-By when trying to detect
4085         NMUs.
4086
4087 2001-03-06  Anthony Towns  <ajt@debian.org>
4088
4089         * ziyi (main): Generate Release.gpg files as well, using the key from
4090         Dinstall::SigningKey in katie.conf, if present. That key has to be
4091         passwordless, and hence kept fairly secretly.
4092
4093 2001-03-02  James Troup  <james@nocrew.org>
4094
4095         * utils.py (str_isnum): new function; checks to see if the string
4096         is a number.
4097
4098         * shania (main): fix _hideous_ bug which was causing all files > 2
4099         weeks old to be deleted from incoming, even if they were part of a
4100         valid upload.
4101
4102 2001-02-27  James Troup  <james@nocrew.org>
4103
4104         * melanie (main): accept new argument -C/--carbon-copy which
4105         allows arbitarty carbon-copying of the bug closure messages.
4106         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4107         separate variable.
4108
4109 2001-02-27  Anthony Towns  <ajt@debian.org>
4110
4111         * ziyi: new program; generates Release files.
4112
4113 2001-02-25  James Troup  <james@nocrew.org>
4114
4115         * katie (reject): add missing '\n' to error message.
4116         (manual_reject): likewise.
4117         (install): catch exceptions from moving the changes file into DONE
4118         and ignore them.
4119
4120         * tea (check_md5sums): new function.
4121
4122 2001-02-25  Michael Beattie  <mjb@debian.org>
4123
4124         * melanie: use $EDITOR if available.
4125
4126 2001-02-15  James Troup  <james@nocrew.org>
4127
4128         * utils.py (parse_changes): don't crash and burn on empty .changes
4129         files.  Symptoms noticed by mjb@.
4130
4131 2001-02-15  Adam Heath  <doogie@debian.org>
4132
4133         * denise (main): use an absolute path for the output filename.
4134
4135         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4136         compile errors with postgresql-dev >= 7.0.
4137
4138 2001-02-12  James Troup  <james@nocrew.org>
4139
4140         * rene: initial version.
4141
4142         * andrea: initial version.
4143
4144         * catherine (main): remove obsolete assignment of arguments.
4145
4146 2001-02-09  James Troup  <james@nocrew.org>
4147
4148         * catherine: first working version.
4149
4150 2001-02-06  James Troup  <james@nocrew.org>
4151
4152         * katie (check_files): validate the priority field; i.e. ensure it
4153         doesn't contain a '/' (to catch people prepending the priority
4154         with the component rather than the section).
4155         (check_override): don't warn about source packages; the only check
4156         is on section and we have no GUI tools that would use the Section
4157         field for a Sources file.
4158         (announce): use tags rather than severities for NMUs.  Requested
4159         by Josip Rodin <joy@>. [#78035]
4160
4161 2001-02-04  James Troup  <james@nocrew.org>
4162
4163         * tea (check_override): new function; ensures packages in suites
4164         are also in the override file.  Thanks to bod@ for noticing that
4165         such packages existed.
4166
4167         * katie: move file type compiled regular expressions to utils as
4168         catherine uses them too.
4169         (check_changes): always default maintainer822 to the installer
4170         address so that any bail out won't cause undefs later.
4171         (check_files): update file type re's to match above.
4172         (stable_install): likewise.
4173         (reject): handle any except from moving the changes files.  Fixes
4174         crashes on unreadable changes files.
4175
4176         * melanie (main): add an explanation of why things are not removed
4177         from testing.
4178
4179 2001-01-31  James Troup  <james@nocrew.org>
4180
4181         * melanie (main): ignore a) no message, b) removing from stable or
4182         testing when invoked with -n/--no-action.
4183
4184         * katie (check_override): lower section before checking to see if
4185         we're whining about 'non-US' versus 'non-US/main'.
4186
4187         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4188         function so that we can use inside of PostgreSQL.
4189
4190 2001-01-28  James Troup  <james@nocrew.org>
4191
4192         * katie: updated to pass new flag to parse_changes() and deal with
4193         the exception raised on invalid .dsc's if appropriate.
4194         * shania (main): likewise.
4195         * melanie (main): likewise.
4196
4197         * tea (check_dscs): new function to validate all .dsc files in
4198         unstable.
4199
4200         * utils.py (parse_changes): if passed an additional flag, validate
4201         the .dsc file to ensure it's extractable by dpkg-source.
4202         Requested by Ben Collins <bcollins@>.
4203
4204 2001-01-27  James Troup  <james@nocrew.org>
4205
4206         * madison (main): connect to the DB as nobody.
4207
4208         * katie (check_files): remove support for -r/--no-version-check
4209         since it makes no sense under katie (jenna will automatically
4210         remove the (new) older version) and was evil in any event.
4211         (check_changes): add missing new line to rejection message.
4212         (check_dsc): likewise.
4213         (process_it): reset reject_message here.
4214         (main): not here.  Also remove support for -r.
4215
4216 2001-01-26  James Troup  <james@nocrew.org>
4217
4218         * katie (check_override): don't whine about 'non-US/main' versus
4219         'non-US'.
4220
4221 2001-01-26  Michael Beattie  <mjb@debian.org>
4222
4223         * natalie.py (usage): new function.
4224         (main): use it.
4225
4226 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4227
4228         * update-mirrorlists: Update README.non-US too (request from Joy).
4229
4230 2001-01-25  James Troup  <james@nocrew.org>
4231
4232         * katie (reject): catch any exception from utils.move() and just
4233         pass, we previously only caught can't-overwrite errors and not
4234         can't-read ones.
4235
4236         * jenna (generate_src_list): use ORDER BY in selects to avoid
4237         unnecessary changes to Packages files.
4238         (generate_bin_list): likewise.
4239
4240         * utils.py (extract_component_from_section): separated out from
4241         build_file_list() as it's now used by claire too.
4242
4243         * claire.py (find_dislocated_stable): rewrite the query to extract
4244         section information and handle component-less locations properly.
4245         Thanks to ajt@ for the improved queries.
4246         (fix_component_section): new function to fix components and
4247         sections.
4248
4249 2001-01-23  James Troup  <james@nocrew.org>
4250
4251         * katie (check_files): set file type for (u?)debs first thing, so
4252         that if we continue, other functions which rely on file type
4253         existing don't bomb out.  If apt_pkg or apt_inst raise an
4254         exception when parsing the control file, don't try any other
4255         checks, just drop out.
4256         (check_changes): new test to ensure there is actually a target
4257         distribution.
4258
4259 2001-01-22  James Troup  <james@nocrew.org>
4260
4261         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4262         <grin@>.
4263         (check_changes): when mapping to unstable, remember to actually
4264         add unstable to the suite list and not just remove the invalid
4265         suite.
4266
4267 2001-01-21  James Troup  <james@nocrew.org>
4268
4269         * katie (check_files): catch exceptions from debExtractControl()
4270         and reject packages which raise any.
4271
4272 2001-01-19  James Troup  <james@nocrew.org>
4273
4274         * katie (check_signature): basename() file name in rejection
4275         message.
4276
4277 2001-01-18  James Troup  <james@nocrew.org>
4278
4279         * katie (in_override_p): remember the section and priority from
4280         the override file so we can check them against the package later.
4281         (check_override): new function; checks section and priority (for
4282         binaries) from the package against the override file and mails the
4283         maintainer about any disparities.
4284         (install): call check_override after announcing the upload.
4285
4286 2001-01-16  James Troup  <james@nocrew.org>
4287
4288         * utils.py (build_file_list): catch ValueError's from splitting up
4289         the files field and translate it into a parse error.
4290
4291         * tea: add support for finding unreferenced files.
4292
4293         * katie (in_override_p): add support for suite-aliasing so that
4294         proposed-updates uploads work again.
4295         (check_changes): catch parses errors from utils.build_file_list().
4296         (check_dsc): likewise.
4297         (check_diff): yet more dpkg breakage so we require even newer a
4298         version.
4299
4300         * jenna (generate_bin_list): don't do nasty path munging that's no
4301         longer needed.
4302
4303         * denise (main): support for non-US; and rename testing's override
4304         files so they're based on testing's codename.
4305
4306 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4307
4308         * melanie: add to the bug closing message explaining what happens
4309         (or rather doesn't) with bugs against packages that have been
4310         removed.
4311
4312 2001-01-14  James Troup  <james@nocrew.org>
4313
4314         * charisma (main): fix silly off-by-one error; suite priority
4315         checking was done using "less than" rather than "less than or
4316         equal to" which was causing weird hesienbugs with wrong Maintainer
4317         fields.
4318
4319 2001-01-10  James Troup  <james@nocrew.org>
4320
4321         * katie (in_override_p): adapted to use SQL-based overrides.
4322         read_override_file function disappears.
4323
4324         * db_access.py: add new functions get_section_id, get_priority_id
4325         and get_override_type_id.
4326         (get_architecture_id): return -1 if the architecture is not found.
4327
4328         * heidi: switch %d -> %d in all SQL queries.
4329         (get_list): Use string.join where appropriate.
4330
4331         * rhona (in_override_p): don't die if the override file doesn't
4332         exist.
4333         (main): warn if the override file doesn't exist.
4334
4335         * alyson: new script; will eventually sync the config file and the
4336         SQL database.
4337
4338         * natalie.py: new script; manipulates overrides.
4339
4340         * melanie: new script; removes packages from suites.
4341
4342 2001-01-08  James Troup  <james@nocrew.org>
4343
4344         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4345         anything it just changed the symptom.  Recognise the new breakage
4346         and reject them too.
4347
4348 2001-01-07  James Troup  <james@nocrew.org>
4349
4350         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4351         to the .changes file, be sure to set up files[filename]["type"]
4352         too.
4353
4354 2001-01-06  James Troup  <james@nocrew.org>
4355
4356         * katie (check_diff): new function; detects bad diff files
4357         produced by dpkg 1.8.1 and rejects thems.
4358         (process_it): call check_diff().
4359         (check_dsc): gar.  Add support for multiple versions of the
4360         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4361         and size against all versions and use one which matches if
4362         possible and exclude any that don't from being poolized to avoid
4363         file overwrites.  Thanks to broonie@ for providing the example.
4364         (install): skip any files marked as excluded as above.
4365
4366 2001-01-05  James Troup  <james@nocrew.org>
4367
4368         * heidi (process_file): add missing argument to error message.
4369
4370 2001-01-04  James Troup  <james@nocrew.org>
4371
4372         * heidi (main): fix handling of multiple files by reading all
4373         files not just the first file n times (where n = the number of
4374         files passed as arguments).
4375
4376 2001-01-04  Anthony Towns  <ajt@debian.org>
4377
4378         * katie (check_dsc): proper fix for the code which locates the
4379         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4380
4381 2000-12-20  James Troup  <james@nocrew.org>
4382
4383         * rhona: replace IN's with EXISTS's to make DELETE time for
4384         binaries and source sane on auric.  Add a -n/--no-action flag and
4385         make it stop actions if used.  Fixed a bug in binaries deletion
4386         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4387         -V/--version.  Giving timing info on deletion till I'm sure it's
4388         sane.
4389
4390         * katie (check_changes): map testing to unstable.
4391
4392         * madison: new script; shows versions in different architectures.
4393
4394         * katie (check_dsc): ensure size matches as well as md5sum;
4395         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4396         #69702.
4397
4398 2000-12-19  James Troup  <james@nocrew.org>
4399
4400         * katie (reject): ignore the "can't overwrite file" exception from
4401         utils.move() and leave the files where they are.
4402         (reject): doh! os.access() test was reversed so we only tried to
4403         move files which didn't exist... replaced with os.path.exists()
4404         test the right way round.
4405
4406         * utils.py (move): raise an exception if we can't overwrite the
4407         destination file.
4408         (copy): likewise.
4409
4410 2000-12-18  James Troup  <james@nocrew.org>
4411
4412         * rhona: first working version.
4413
4414         * db_access.py (get_files_id): force both sizes to be integers.
4415
4416         * katie (main): use size_type().
4417
4418         * utils.py (size_type): new function; pretty prints a file size.
4419
4420 2000-12-17  James Troup  <james@nocrew.org>
4421
4422         * charisma (main): do version compares so that older packages do
4423         not override newer ones and process source first as source wins
4424         over binaries in terms of who we think of as the Maintainer.
4425
4426 2000-12-15  James Troup  <james@nocrew.org>
4427
4428         * katie (install): use the files id for the .orig.tar.gz from
4429         check_dsc().
4430         (install): limit select for legacy source to a) source in legacy
4431         or legacy-mixed type locations and b) distinct on files.id.
4432         (install): rather than the bizarre insert new, delete old method
4433         for moving legacy source into the pool, use a simple update of
4434         files.
4435         (process_it): initalize some globals before each process.
4436
4437 2000-12-14  James Troup  <james@nocrew.org>
4438
4439         * katie (in_override_p): index on binary_type too since .udeb
4440         overrides are in a different file.
4441         (read_override_file): likewise.
4442         (check_files): correct filename passed to get_files_id().
4443         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4444         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4445         (check_dsc): remember the files id of the .orig.tar.gz, not the
4446         location id.
4447
4448 2000-12-13  James Troup  <james@nocrew.org>
4449
4450         * utils.py (poolify): force the component to lower case except for
4451         non-US.
4452
4453         * katie (in_override_p): handle .udeb-specific override files.
4454         (check_files): pass the binary type to in_override_p().
4455         (check_dsc): remember the location id of the old .orig.tar.gz in
4456         case it's not in the pool.
4457         (install): use location id from dsc_files; which is where
4458         check_dsc() puts it for old .orig.tar.gz files.
4459         (install): install files after all DB work is complete.
4460         (reject): basename() the changes filename.
4461         (manual_reject): likewise.
4462
4463         * shania: new progam; replaces incomingcleaner.
4464
4465 2000-12-05  James Troup  <james@nocrew.org>
4466
4467         * katie (check_changes): if inside stable and can't find files
4468         from the .changes; assume it's installed in the pool and chdir()
4469         to there.
4470         (check_files): we are not installing for stable installs, so don't
4471         check for overwriting existing files.
4472         (check_dsc): likewise.
4473         (check_dsc): reorder .orig.tar.gz handling so that we search in
4474         the pool first and only then fall back on any .orig.tar.gz in the
4475         cwd; this avoids false positives on the overwrite check when
4476         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4477         (install): if this is a stable install, bail out to
4478         stable_install() immediately.
4479         (install): dsc_files handling was horribly broken. a) we need to
4480         add files from the .dsc and not the .changes (duh), b) we need to
4481         add the .dsc file itself to dsc_files (to be consistent with neve
4482         if for no other reason).
4483         (stable_install): new function; handles installs from inside
4484         proposed-updates to stable.
4485         (acknowledge_new): basename changes_filename before doing
4486         anything.
4487         (process_it): absolutize the changes filename to avoid the
4488         requirement of being in the same directory as the .changes file.
4489         (process_it): save and restore the cwd as stable installs can
4490         potentially jump into the pool to find files.
4491
4492         * jenna: dislocated_files support using claire.
4493
4494         * heidi (process_file): select package field from binaries
4495         explicitly.
4496
4497         * db_access.py (get_files_id): fix cache key used.
4498
4499         * utils.py (build_file_list): fix 'non-US/non-free' case in
4500         section/component splitting.
4501         (move): use os.path.isdir() rather than stat.
4502         (copy): likewise.
4503
4504         * claire.py: new file; stable in non-stable munger.
4505
4506         * tea: new file; simply ensures all files in the DB exist.
4507
4508 2000-12-01  James Troup  <james@nocrew.org>
4509
4510         * katie (check_dsc): use regex_safe().
4511         (check_changes): typo in changes{} key:
4512         s/distributions/distribution/.
4513         (install): use changes["source"], not files[file]["source"] as the
4514         latter may not exist and the former is used elsewhere.  Commit the
4515         SQL transaction earlier.
4516
4517         * utils.py (regex_safe): new function; escapes characters which
4518         have meaning to SQL's regex comparison operator ('~').
4519
4520 2000-11-30  James Troup  <james@nocrew.org>
4521
4522         * katie (install): pool_location is based on source package name,
4523         not binary package.
4524
4525         * utils.py (move): if dest is a directory, append the filename
4526         before chmod-ing.
4527         (copy): ditto.
4528
4529         * katie (check_files): don't allow overwriting of existing .debs.
4530         (check_dsc): don't allow overwriting of existing source files.
4531
4532 2000-11-27  James Troup  <james@nocrew.org>
4533
4534         * katie (check_signature): don't try to load rsaref; it's
4535         obsolete.
4536         (in_override_p): don't try to lookup override entries for packages
4537         with an invalid suite name.
4538         (announce): don't assume the suite name is valid; use Find() to
4539         lookup the mailing list name for announcements.
4540
4541         * utils.py (where_am_i): typo; hostname is in the first element,
4542         not second.
4543
4544         * db_access.py (get_suite_id): return -1 on an unknown suite.
4545
4546 2000-11-26  James Troup  <james@nocrew.org>
4547
4548         * katie (install): fix CopyChanges handling; typo in in checking
4549         Cnf for CopyChanges flag and was calling non-existent function
4550         copy_file.
4551
4552         * utils.py (copy): new function; clone of move without the
4553         unlink().
4554
4555 2000-11-25  James Troup  <james@nocrew.org>
4556
4557         * utils.py (build_file_list): handle non-US prefixes properly
4558         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4559         + 'libs' not 'non-US/libs').
4560         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4561         delays.  This is possibly(/probably) exim speicifc and (like other
4562         sendmail options) needs to be in the config file.
4563
4564 2000-11-24  James Troup  <james@nocrew.org>
4565
4566         * rhona (check_sources): we need file id from dsc_files; not id.
4567         Handle non .dsc source files being re-referenced in dsc_files.
4568
4569         * katie (in_override_p): strip out any 'non-US' prefix.
4570         (check_files): use utils.where_am_i() rather than hardcoding.
4571         (check_files): validate the component.
4572         (install): use utils.where_am_i() rather than hardcoding.
4573         (install): fix mail to go to actual recepient.
4574         (reject): likewise.
4575         (manual_reject): likewise.
4576         (acknowledge_new): likewise.
4577         (announce): likewise.
4578
4579         * db_access.py (get_component_id): ignore case when searching for
4580         the component and don't crash if the component can't be found, but
4581         return -1.
4582         (get_location_id): handle -1 from get_component_id().
4583
4584         * jenna (generate_src_list): don't bring 'suite' into our big
4585         multi-table-joining select as we already know the 'suite_id'.
4586         (generate_bin_list): likewise.
4587
4588         * neve (main): don't quit if not on ftp-master.
4589         (process_packages): remove unused variable 'suite_codename'.
4590
4591         * utils.py (move): actually move the file.
4592         (build_file_list): handle non-US prefixes in the section.
4593
4594         * catherine (main): use which_conf_file().
4595         * charisma (main): likewise.
4596         * heidi (main): likewise.
4597         * jenna (main): likewise.
4598         * katie (main): likewise.
4599         * neve (main): likewise.
4600         * rhona (main): likewise.
4601
4602         * utils.py (where_am_i): new routine; determines the archive as
4603         understood by other 'dak' programs.
4604         (which_conf_file): new routine; determines the conf file to read.
4605
4606 2000-11-17  James Troup  <james@nocrew.org>
4607
4608         * katie (install): fix where .changes files for proposed-updates
4609         go.
4610
4611 2000-11-04  James Troup  <james@nocrew.org>
4612
4613         * jenna (main): handle architecture properly if no
4614         -a/--architecture argument is given, i.e. reset architecture with
4615         the values for the suite for each suite.
4616
4617         * Add apt_pkg.init() to the start of all scripts as it's now
4618         required by python-apt.
4619
4620 2000-10-29  James Troup  <james@nocrew.org>
4621
4622         * jenna (generate_bin_list): take an additional argument 'type'
4623         and use it in the SELECT.
4624         (main): if processing component 'main', process udebs and debs.
4625
4626         * neve (process_packages): set up 'type' in 'binaries' (by
4627         assuming .deb).
4628
4629         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4630         (check_files): set up files[file]["dbtype"].
4631         (install): use files[file]["dbtype"] to set up the 'type' field in
4632         the 'binaries' table.
4633
4634         * init_pool.sql: add a 'type' field to the 'binaries' table to
4635         distinguisgh between ".udeb" and ".deb" files.
4636
4637         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4638         dest ? dirname(dest)" type check instead.
4639
4640         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4641         in the pool without crashing.  Also handle the case of being asked
4642         to look for something other than an .orig.tar.gz in the pool.
4643
4644 2000-10-26  James Troup  <james@nocrew.org>
4645
4646         * katie (install): fix filenames put into files table during
4647         poolification of legacy source.
4648
4649         * utils.py (move): work around a bug in os.path.basename() which
4650         cunningly returns '' if there is a trailing slash on the path
4651         passed to it.
4652
4653         * katie (check_dsc): Remove more cruft.  If we find the
4654         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4655         location, make a note of that so we can fix things in install().
4656         (install): as above.  Move any old source out of legacy locations
4657         so that 'apt-get source' will work.
4658         (process_it): reset the flag that indicates to install that the
4659         source needs moved.
4660
4661         * cron.daily: more.  Nowhere near complete yet though.
4662
4663         * katie (install): don't run os.makedirs, a) utils.move() does
4664         this now, b) we weren't removing the user's umask and were
4665         creating dirs with SNAFU permissions.
4666         (check_dsc): rewrite the .orig.tar.gz handling to take into
4667         account, err, package pools.  i.e. look anywhere in the pool
4668         rather than faffing around with two simple paths.
4669
4670         * neve (process_sources): add the .dsc to dsc_files too.
4671
4672 2000-10-25  James Troup  <james@nocrew.org>
4673
4674         * neve (process_sources): don't duplicate .orig.tar.gz's.
4675
4676 2000-10-23  James Troup  <james@nocrew.org>
4677
4678         * utils.py (re_extract_src_version): moved here.
4679
4680         * neve: move re_extract_src_version to utils.
4681         (process_packages): reflect change.
4682
4683         * katie (install): reflect change.
4684
4685 2000-10-19  James Troup  <james@nocrew.org>
4686
4687         * jenna (generate_src_list): handle locations with null
4688         components.
4689         (generate_bin_list): likewise.
4690