]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Use "import daklib.foo as foo" style
[dak.git] / ChangeLog
1 2008-05-04  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/import_keyring.py: Remove unused daklib.logging and Logger
4         and add the actually used daklib/utils
5
6         * dak/examine_package.py: remove daklib.queue import, never used
7
8         * dak/check_proposed_updates.py: Import stuff from daklib as
9         "import daklib.foo as foo"
10         * dak/clean_proposed_updates.py: likewise
11         * dak/clean_queues.py: likewise
12         * dak/clean_suites.py: likewise
13         * dak/compare_suites.py: likewise
14         * dak/cruft_report.py: likewise
15         * dak/examine_package.py: likewise
16         * dak/find_null_maintainers.py: likewise
17         * dak/generate_index_diffs.py: likewise
18         * dak/generate_releases.py: likewise
19         * dak/import_archive.py: likewise
20         * dak/import_ldap_fingerprints.py: likewise
21         * dak/import_users_from_passwd.py: likewise
22         * dak/init_db.py: likewise
23         * dak/init_dirs.py: likewise
24         * dak/ls.py: likewise
25         * dak/make_maintainers.py: likewise
26         * dak/make_overrides.py: likewise
27         * dak/make_suite_file_list.py: likewise
28         * dak/new_security_install.py: likewise
29         * dak/override.py: likewise
30         * dak/process_accepted.py: likewise
31         * dak/process_new.py: likewise
32
33         * dak/check_archive.py (check_files_not_symlinks): Remove
34         long-time unused and commented code. Import stuff from daklib as
35         "import daklib.foo as foo"
36
37 2008-05-03  Joerg Jaspert  <joerg@debian.org>
38
39         * dak/examine_package.py: clean up pychecker warnings (merged with
40         Thomas changes to the NEW display)
41
42 2008-05-03  Mark Hymers <mhy@debian.org>
43
44         * dak/check_archive.py: clean up pychecker warnings
45         * dak/check_overrides.py: likewise
46         * dak/check_proposed_updates.py: likewise
47         * dak/clean_proposed_updates.py: likewise
48         * dak/clean_queues.py: likewise
49         * dak/control_overrides.py: likewise
50         * dak/control_suite.py: likewise
51         * dak/decode_dot_dak.py: likewise
52         * dak/examine_package.py: likewise
53         * dak/process_new.py: likewise
54         * dak/process_unchecked.py: likewise
55         * dak/queue_report.py: likewise
56         * dak/reject_proposed_updates.py: likewise
57         * dak/security_install.py: likewise
58         * dak/show_new.py: likewise
59         * dak/stats.py: likewise
60         * dak/symlink_dists.py: likewise
61         * dak/transitions.py: likewise
62
63 2008-05-03  Joerg Jaspert  <joerg@debian.org>
64
65         * config/debian/cron.daily: Rename to
66         * config/debian/cron.dinstall: this, as its not really something run
67         daily for some time now. And while dinstall is an OLD name, its
68         recognized pretty well within Debian
69         Also add some more timing information
70         Do not allow automated [o-]p-u-new processing to break dinstall
71
72 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
73
74         * web/,web/style.css: add web dir and current style.css
75
76         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
77         based on mock-up by M. Ferrari.
78         remove Checksums-* from examine-package output
79
80 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
81
82         * dak/process_unchecked.py (check_hashes): Reject on error while
83         parsing Checksums-*.
84
85 2008-05-02  Joerg Jaspert  <joerg@debian.org>
86
87         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
88         added wiki.debian.org (currently pointing to debian-www), closes #194206
89         added security-tracker, closes #436152
90         added release.debian.org, closes #451005
91
92         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
93         still wants it - its in revision control...)
94
95         * config/debian/cron.daily: Modify call to update-ftpstats to only
96         use files log/2*, instead of log/*, so it ignores the new cron/
97         subdir. Makes sure it can't get confused, and is also safe for
98         nearly thousand years. If this code is really in use in year 3000,
99         im sure people can adjust it! :)
100
101         * config/debian/vars: Add logdir as a place for cronjob log output
102
103         * config/debian/cron.daily: Use a logfile and be more verbose of
104         whats going on.
105           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
106         cron.weekly, ...
107         * config/debian/cron.weekly: likewise,
108           ... and activate those calls again. Once a week, as an
109         additional safety bet to be sure the stuff does get run is ok,
110         even if we have autovacuum by default.
111
112 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
113
114         * dak/process_unchecked.py (check_hashes): fix typo in
115           checksum reject message.
116
117 2008-05-02  Joerg Jaspert  <joerg@debian.org>
118
119         * config/debian/extensions.py: used reindent.py from the python
120         2.x source examples to get all dak code use the same indentation
121         style, no longer a mix of 4 spaces / 1 tab.
122         * dak/check_archive.py: likewise
123         * dak/check_overrides.py: likewise
124         * dak/check_proposed_updates.py: likewise
125         * dak/clean_proposed_updates.py: likewise
126         * dak/clean_queues.py: likewise
127         * dak/clean_suites.py: likewise
128         * dak/compare_suites.py: likewise
129         * dak/control_overrides.py: likewise
130         * dak/control_suite.py: likewise
131         * dak/cruft_report.py: likewise
132         * dak/dak.py: likewise
133         * dak/decode_dot_dak.py: likewise
134         * dak/examine_package.py: likewise
135         * dak/find_null_maintainers.py: likewise
136         * dak/generate_index_diffs.py: likewise
137         * dak/generate_releases.py: likewise
138         * dak/import_archive.py: likewise
139         * dak/import_keyring.py: likewise
140         * dak/import_ldap_fingerprints.py: likewise
141         * dak/import_users_from_passwd.py: likewise
142         * dak/init_db.py: likewise
143         * dak/init_dirs.py: likewise
144         * dak/ls.py: likewise
145         * dak/make_maintainers.py: likewise
146         * dak/make_overrides.py: likewise
147         * dak/make_suite_file_list.py: likewise
148         * dak/mirror_split.py: likewise
149         * dak/new_security_install.py: likewise
150         * dak/override.py: likewise
151         * dak/poolize.py: likewise
152         * dak/process_accepted.py: likewise
153         * dak/process_new.py: likewise
154         * dak/process_unchecked.py: likewise
155         * dak/queue_report.py: likewise
156         * dak/reject_proposed_updates.py: likewise
157         * dak/rm.py: likewise
158         * dak/security_install.py: likewise
159         * dak/show_new.py: likewise
160         * dak/split_done.py: likewise
161         * dak/stats.py: likewise
162         * dak/symlink_dists.py: likewise
163         * dak/test/001/test.py: likewise
164         * dak/test/002/test.py: likewise
165         * dak/transitions.py: likewise
166         * daklib/extensions.py: likewise
167         * daklib/logging.py: likewise
168         * daklib/queue.py: likewise
169         * daklib/utils.py: likewise
170         * scripts/debian/insert_missing_changedby.py: likewise
171
172         * dak/process_new.py (recheck): Make the path check more robust,
173         so we no longer have to keep process_new seperate trees between
174         security and normal archive.
175
176 2008-04-27  Joerg Jaspert  <joerg@debian.org>
177
178         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
179         configured path does not exist or is not writeable by us. Use a
180         tmp path if so, so we do not lose the urgencies in such cases.
181
182         * config/debian/dak.conf: Changed path for UrgencyLog
183         Same for the ReleaseTransitions file
184
185         * config/debian/cron.daily: Notify qa user on merkel of dinstall
186         start, Remove the britney call
187
188 2008-04-26  Joerg Jaspert  <joerg@debian.org>
189
190         * dak/process_new.py: Call end() whenever we try to leave by
191         pressing Q
192
193         * config/debian/cron.daily: Also report NBS in experimental
194
195 2008-04-25  Joerg Jaspert  <joerg@debian.org>
196
197         * dak/cruft_report.py (main): Make it possible to look at
198         experimental too, especially NBS
199
200         * dak/split_done.py (main): Only move files into their subdirs if
201         they are older than 30 days. That enables us to run this script as
202         part of a cronjob.
203
204         * config/debian/cron.weekly: Run dak split-done
205
206 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
207
208         * dak/process_unchecked.py: add changes["sponsoremail"]
209           for sponsored uploads if desired
210         * daklib/queue.py: add changes["sponsoremail"] to
211           Subst["__MAINTAINER_TO__"] if present
212         * daklib/utils.py: add functions
213           is_email_alias to check which accounts allow email forwarding,
214           which_alias_file to find the alias file, and
215           gpg_get_key_addresses to find uid addresses for a given
216             fingerprint
217
218 2008-04-22  Joerg Jaspert  <joerg@debian.org>
219
220         * setup/init_pool.sql: added a function/aggregate for the release
221         team to base some script on it.
222
223         * config/debian/cron.daily: push katie@merkel to immediately start
224         the sync of projectb there.
225
226 2008-04-21  Joerg Jaspert  <joerg@debian.org>
227
228         * scripts/debian/expire_dumps: New script, expires old database
229         dumps, using a scheme to keep more of the recent dumps.
230
231         * config/debian/cron.daily: Use the new script. Also - compress
232         all files older than 7 days, instead of 30.
233
234         * dak/process_accepted.py (install): Do not break if a
235         source/maintainer combination is already in src_uploaders, "just"
236         warn us.
237
238 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
239
240         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
241         Format lines (ie. those having extra text appended).
242
243 2008-04-19  Joerg Jaspert  <joerg@debian.org>
244
245         * dak/process_unchecked.py (check_files): Sanity check the
246         provides field, which closes #472783
247
248 2008-04-18  Joerg Jaspert  <joerg@debian.org>
249
250         * config/debian/dak.conf: Add mapping stable-proposed-updates
251           -> proposed-updates.
252
253         * dak/transitions.py (load_transitions): Additionally check for
254         invalid package list indentation
255
256 2008-04-17  Joerg Jaspert  <joerg@debian.org>
257
258         * config/debian/dak.conf: Add TempPath statement for the Release
259         Transitions script
260
261         * dak/transitions.py (temp_transitions_file): Use the TempPath
262         (write_transitions_from_file): Check if the file we should get our
263         transitions from is in our TempPath, error out if it isnt
264         (main): Check for TempPath existance
265
266 2008-04-12  James Troup  <troup@debian.org>
267
268         * dak/clean_proposed_updates.py: add support for -s/--suite and
269         -n/--no-action.
270
271 2008-04-11  Anthony Towns  <ajt@debian.org>
272
273         * dak/utils.py: build_file_list() extra parameters so it can
274         build a file list for checksums-foo fields. Don't use float() to
275         compare formats, because Format: 1.10 should compare greater than
276         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
277
278         * dak/process_unchecked.py: check_md5sum becomes check_hashes
279         and check_hash. If changes format is 1.8 or later, also check
280         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
281         and reject on presence/absence of un/expected checksums-* fields.
282
283 2008-04-07  Joerg Jaspert  <joerg@debian.org>
284
285         * daklib/utils.py (build_file_list): Check for dpkg .changes
286         adjusted to reject newer (and right now broken) 1.8 version, until
287         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
288
289 2008-03-22  Joerg Jaspert  <joerg@debian.org>
290
291         * dak/transitions.py (load_transitions): Check if all our keys are
292         defined, if there are only keys defined we want and also the types
293         of the various keys.
294
295 2008-03-22  Anthony Towns  <ajt@debian.org>
296
297         * dak/edit_transitions.py: Add --import option.
298         Add --use-sudo option. Use fcntl locking for writing.
299         Move writing into a function (write_transitions).
300         Reinvoke self using sudo and --import if necessary.
301         Move temporary file creation into a function, use mkstemp.
302         Rename to "dak transitions".
303
304 2008-03-21  Joerg Jaspert  <joerg@debian.org>
305
306         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
307         edited file back in place
308         (check_transitions): Use proper locking and also use sudo to copy
309         the new file in place
310
311 2008-03-21  Anthony Towns <ajt@debian.org>
312
313         * config/debian/extensions.py: Add infrastructure for replacing
314         functions in dak modules; add upload blocking for dpkg.
315
316 2008-03-12  Joerg Jaspert  <joerg@debian.org>
317
318         * dak/edit_transitions.py: Done a number of cleanups to make code
319         working. Also changed the way prompting/answering goes, to not
320         have to import daklib/queue.
321         (edit_transitions): When done with a successful edit - also print
322         a final overview about defined transitions
323
324 2008-03-11  Joerg Jaspert  <joerg@debian.org>
325
326         * dak/process_unchecked.py: Import syck module directly, not "from
327         syck import *"
328         (check_transition): Do the check for sourceful upload in here
329         Also adjust the syck loading commands, rename new_vers to
330         expected, curvers to current, to make it more clear what they mean.
331
332         * daklib/database.py (get_suite_version): Renamed from
333         get_testing_version. Also changed the cache variables name
334
335         * The above changes are based on modifications from Anthony.
336
337         * dak/dak.py (init): Renamed check -> edit transitions
338
339         * dak/edit_transitions.py: Renamed from check_transitions.py
340         (main): Also rename new_vers/curvers to expected/current
341         Basically a nice rewrite, so it now does checks and edit,
342         depending on how you call it. Check also removes old transitions,
343         if user wants it.
344
345 2008-03-02  Joerg Jaspert  <joerg@debian.org>
346
347         * debian/control (Suggests): Add python-syck to Depends:
348
349         * dak/dak.py (init): Tell it about check_transitions
350
351         * dak/check_transitions.py (usage): Added, checks the transitions
352         file (if any)
353
354         * daklib/database.py (get_testing_version): Added. Returns the
355         version for the source in testing, if any
356
357         * dak/process_unchecked.py (check_transition): Added. Checks if a
358         release team member defined a transition, and rejects based on
359         that data.
360         (process_it): Use it.
361         (check_transition): Warn on broken transitions file and return,
362         not doing anything.
363         (check_transition): Moved out of here, into daklib/queue
364         (process_it): Call check_transitions only if
365         changes[architecture] has source included.
366         (check_transition): Now call the database.get_testing_version
367
368 2008-02-09  Christoph Berg <myon@debian.org>
369
370         * daklib/queue.py (get_type): fubar does not exist in global
371         namespace.
372
373         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
374         to source table, and move src_uploaders after source so the REFERNCES
375         clause works.
376         * dak/process_accepted.py (install): Fill the changedby column from
377         the information found in the .changes. This will allow to identify
378         NMUs and sponsored uploads more precisely in tools querying projectb.
379         * scripts/debian/insert_missing_changedby.py: Script to import yet
380         missing fields from filippo's uploads-history DB.
381
382 2008-02-06  Joerg Jaspert  <joerg@debian.org>
383
384         * daklib/utils.py (check_signature): Make variable key available,
385         so we can access it.
386
387 2008-01-07  Joerg Jaspert  <joerg@debian.org>
388
389         * dak/examine_package.py (check_deb): Remove linda call. It
390         provides no added benefit to lintian anymore.
391
392 2008-01-07  Joerg Jaspert  <joerg@debian.org>
393
394         * dak/examine_package.py (check_deb): Remove linda call. It
395         provides no added benefit to lintian anymore.
396
397 2008-01-06  Joerg Jaspert  <joerg@debian.org>
398
399         * dak/examine_package.py (do_lintian): lintian now supports html
400         coloring, so use it.
401         (do_command): Dont escape html chars if param escaped = 1
402
403 2008-01-06  Joerg Jaspert  <joerg@debian.org>
404
405         * dak/examine_package.py (do_lintian): lintian now supports html
406         coloring, so use it.
407         (do_command): Dont escape html chars if param escaped = 1
408
409 2007-12-31  Anthony Towns  <ajt@debian.org>
410
411         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
412         when processing result of check_dsc_against_db so we don't promote
413         warnings to rejections.
414
415 2007-12-31  Anthony Towns  <ajt@debian.org>
416
417         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
418         when processing result of check_dsc_against_db so we don't promote
419         warnings to rejections.
420
421 2007-12-30  Joerg Jaspert  <joerg@debian.org>
422
423         * dak/dak.py (init): add show-new. This is based on a patch
424         submitted by Thomas Viehmann in Bug #408318, but large parts of
425         handling it are rewritten and show-new is done by me.
426
427         * dak/queue_report.py (table_row): Add link to generated html page
428         for NEW package.
429
430         * dak/show_new.py: new file, generates html overview for NEW
431         packages, similar to what we see with examine-package.
432
433         * config/debian/cron.hourly: Add show-new call
434
435         * config/debian/dak.conf: Add HTMLPath for Show-New
436
437         * dak/examine_package.py (print_copyright): ignore stderr when
438         finding copyright file.
439         (main): add html option
440         (html_escape): new function
441         (escape_if_needed): ditto
442         (headline): ditto
443         (colour_output): ditto
444         (print_escaped_text): ditto
445         (print_formatted_text): ditto
446         - use those functions everywhere where we generate output, as they
447         easily know if we want html or not and just DTRT
448         (do_lintian): new function
449         (check_deb): use it
450         (output_deb_info): Use print_escaped_text, not print_formatted_text.
451         Also import daklib.queue, determine_new now lives there
452
453         Also add a variable to see if we want html output. Default is
454         disabled, show_new enables it for its use.
455         Most of html, besides header/footer are in examine_package instead
456         of show_new, as it makes it a whole lot easier to deal with it at
457         the point the info is generated.
458
459
460         * dak/process_new.py (determine_new): Moved out of here.
461         (check_valid): Moved out of here.
462         (get_type): Moved out of here.
463
464         * daklib/queue.py (determine_new): Moved here.
465         (check_valid): Moved here.
466         (get_type): Moved here.
467
468         * dak/init_db.py (do_section): Remove non-US code
469
470         * dak/make_overrides.py (main): ditto
471
472         * dak/process_new.py (determine_new): ditto
473
474         * daklib/queue.py (Upload.in_override_p),
475         (Upload.check_override): ditto
476
477         * daklib/utils.py (extract_component_from_section):,
478         (poolify): ditto
479
480         * dak/import_archive.py (update_section): ditto
481
482         * dak/symlink_dists.py (fix_component_section): ditto
483
484         * scripts/debian/mkmaintainers: ditto
485
486         * scripts/debian/update-mirrorlists (masterlist): ditto
487
488         * config/debian-non-US/*: Remove subdir
489
490         * scripts/debian/update-readmenonus: Removed.
491
492
493 2007-12-30  Joerg Jaspert  <joerg@debian.org>
494
495         * dak/dak.py (init): add show-new. This is based on a patch
496         submitted by Thomas Viehmann in Bug #408318, but large parts of
497         handling it are rewritten and show-new is done by me.
498
499         * dak/queue_report.py (table_row): Add link to generated html page
500         for NEW package.
501
502         * dak/show_new.py: new file, generates html overview for NEW
503         packages, similar to what we see with examine-package.
504
505         * config/debian/cron.hourly: Add show-new call
506
507         * config/debian/dak.conf: Add HTMLPath for Show-New
508
509         * dak/examine_package.py (print_copyright): ignore stderr when
510         finding copyright file.
511         (main): add html option
512         (html_escape): new function
513         (escape_if_needed): ditto
514         (headline): ditto
515         (colour_output): ditto
516         (print_escaped_text): ditto
517         (print_formatted_text): ditto
518         - use those functions everywhere where we generate output, as they
519         easily know if we want html or not and just DTRT
520         (do_lintian): new function
521         (check_deb): use it
522         (output_deb_info): Use print_escaped_text, not print_formatted_text.
523         Also import daklib.queue, determine_new now lives there
524
525         Also add a variable to see if we want html output. Default is
526         disabled, show_new enables it for its use.
527         Most of html, besides header/footer are in examine_package instead
528         of show_new, as it makes it a whole lot easier to deal with it at
529         the point the info is generated.
530
531
532         * dak/process_new.py (determine_new): Moved out of here.
533         (check_valid): Moved out of here.
534         (get_type): Moved out of here.
535
536         * daklib/queue.py (determine_new): Moved here.
537         (check_valid): Moved here.
538         (get_type): Moved here.
539
540         * dak/init_db.py (do_section): Remove non-US code
541
542         * dak/make_overrides.py (main): ditto
543
544         * dak/process_new.py (determine_new): ditto
545
546         * daklib/queue.py (Upload.in_override_p),
547         (Upload.check_override): ditto
548
549         * daklib/utils.py (extract_component_from_section):,
550         (poolify): ditto
551
552         * dak/import_archive.py (update_section): ditto
553
554         * dak/symlink_dists.py (fix_component_section): ditto
555
556         * scripts/debian/mkmaintainers: ditto
557
558         * scripts/debian/update-mirrorlists (masterlist): ditto
559
560         * config/debian-non-US/*: Remove subdir
561
562         * scripts/debian/update-readmenonus: Removed.
563
564
565 2007-12-28  Anthony Towns  <ajt@debian.org>
566
567         * daklib/utils.py (check_signature): add NOTATION_DATA and
568         NOTATION_NAME to known keywords.
569
570         * daklib/queue.py (Upload.check_source_against_db):
571
572         * dak/make_suite_file_list.py: add -f/--force option.
573
574         * dak/generate_releases.py: add -a/--apt-conf=FILE and
575         -f/--force-touch options.  Pull version info from the database.
576         Make suite description optional.
577
578         * config/debian/dak.conf: update
579         Reject-Proposed-Updates::MoreInfoURL.  Comment out
580         Suite::Stable::Version and ::Description.
581
582         * config/debian/apt.conf: Add hurd-i386 to unstable
583         debian-installer stanza.
584
585 2007-12-28  Joerg Jaspert  <joerg@debian.org>
586
587         * KEYEXPIRED is actually a known keyword. We do check it earlier
588         on and reject in case the sig is bad (or unknown)
589
590 2007-12-28  Anthony Towns  <ajt@debian.org>
591
592         * daklib/utils.py (check_signature): add NOTATION_DATA and
593         NOTATION_NAME to known keywords.
594
595         * daklib/queue.py (Upload.check_source_against_db):
596
597         * dak/make_suite_file_list.py: add -f/--force option.
598
599         * dak/generate_releases.py: add -a/--apt-conf=FILE and
600         -f/--force-touch options.  Pull version info from the database.
601         Make suite description optional.
602
603         * config/debian/dak.conf: update
604         Reject-Proposed-Updates::MoreInfoURL.  Comment out
605         Suite::Stable::Version and ::Description.
606
607         * config/debian/apt.conf: Add hurd-i386 to unstable
608         debian-installer stanza.
609
610 2007-12-28  Joerg Jaspert  <joerg@debian.org>
611
612         * KEYEXPIRED is actually a known keyword. We do check it earlier
613         on and reject in case the sig is bad (or unknown)
614
615 2007-12-24  Joerg Jaspert  <joerg@debian.org>
616
617         * Also run lintian on the .dsc file to check the source itself.
618
619         * Fix the direct usage of ar | tar etc to get the copyright file
620         and use dpkg-deb, which is made for this and makes us able to
621         process data.tar.bz2 (or whatever format it will be in the
622         future).
623
624 2007-12-24  Joerg Jaspert  <joerg@debian.org>
625
626         * Also run lintian on the .dsc file to check the source itself.
627
628         * Fix the direct usage of ar | tar etc to get the copyright file
629         and use dpkg-deb, which is made for this and makes us able to
630         process data.tar.bz2 (or whatever format it will be in the
631         future).
632
633 2007-12-21  Joerg Jaspert  <joerg@debian.org>
634
635         * Remove the (now useless) check for a pre-depends on dpkg for
636           binaries that contain bzip2 compressed data tarballs.
637
638 2007-12-21  Joerg Jaspert  <joerg@debian.org>
639
640         * Remove the (now useless) check for a pre-depends on dpkg for
641           binaries that contain bzip2 compressed data tarballs.
642
643 2007-08-28  Anthony Towns  <ajt@debian.org>
644
645         * process_unchecked.py: Add support for automatic BYHAND
646         processing.
647         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
648         processing of tag-overrides.
649         * examine_package.py: Summarise duplicate copyright file entries
650         (same md5sum) with a reference to the previous instance, rather
651         than repeating them.
652         * process_new.py: When rejecting from the p-u-new or o-p-u-new
653         holding queues, don't worry if dak has its own reasons for
654         rejecting the package as well as the SRMs.
655
656 2007-08-28  Anthony Towns  <ajt@debian.org>
657
658         * process_unchecked.py: Add support for automatic BYHAND
659         processing.
660         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
661         processing of tag-overrides.
662         * examine_package.py: Summarise duplicate copyright file entries
663         (same md5sum) with a reference to the previous instance, rather
664         than repeating them.
665         * process_new.py: When rejecting from the p-u-new or o-p-u-new
666         holding queues, don't worry if dak has its own reasons for
667         rejecting the package as well as the SRMs.
668
669 2007-06-19  Anthony Towns  <ajt@debian.org>
670
671         * Add nm.debian.org pseudopackage
672
673 2007-06-19  Anthony Towns  <ajt@debian.org>
674
675         * Add nm.debian.org pseudopackage
676
677 2007-06-18  Anthony Towns  <ajt@debian.org>
678
679         * daklib/logging.py: Set umask to not exclude group-writability
680         so we don't get reminded at the start of each month. Thanks to
681         Random J.
682         * dak/override.py: More changes from Herr von Wifflepuck: warn
683         if section of source is different to binary section; restore
684         functionality on source-only overrides; croak if trying to set
685         priority of a source override; never set priority of source
686         overrides; correct typo in logging (s/priority/section/ at
687         one place)
688
689         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
690         * config/debian/cron.daily: auotmatically accept/reject
691         oldstable-proposed-updates based on COMMENTS directory
692
693 2007-06-18  Anthony Towns  <ajt@debian.org>
694
695         * config/debian/apt.conf, config/debian/apt.conf.stable,
696         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
697         (sarge), support for oldstable-proposed-updates, dropping m68k
698         from etch, creating etch-m68k suite, creating lenny.
699
700         * config/debian/vars: update for lenny
701
702         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
703         drop upload limitations, add release postgres user
704
705         * dak/process_new.py: support for automatically accepting and rejecting
706         packages from proposed-updates holding queues via COMMENTS directory
707         * cron.daily: automatically process COMMENTS-based approvals
708         and rejections for proposed-updates holding queues
709
710         * dak/process_unchecked.py: add support for oldproposedupdates
711         holding queue
712
713         * dak/control_suite.py: allow control-suite to work with etch-m68k
714
715         * dak/generate_releases.py: unlink old Release files before updating
716         them if nlinks > 1 (ie, if two files used to be the same, maybe they
717         shouldn't be when generate-releases is run)
718
719         * dak/generate_releases.py: add a couple of commented lines to make
720         it easier to deal with point releases
721
722         * dak/make_overrides.py: generate overrides for !contrib udebs
723
724         * docs/README.stable-point-release: update docs for doing a
725         point release
726
727 2007-06-18  Anthony Towns  <ajt@debian.org>
728
729         * daklib/logging.py: Set umask to not exclude group-writability
730         so we don't get reminded at the start of each month. Thanks to
731         Random J.
732         * dak/override.py: More changes from Herr von Wifflepuck: warn
733         if section of source is different to binary section; restore
734         functionality on source-only overrides; croak if trying to set
735         priority of a source override; never set priority of source
736         overrides; correct typo in logging (s/priority/section/ at
737         one place)
738
739         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
740         * config/debian/cron.daily: auotmatically accept/reject
741         oldstable-proposed-updates based on COMMENTS directory
742
743 2007-06-18  Anthony Towns  <ajt@debian.org>
744
745         * config/debian/apt.conf, config/debian/apt.conf.stable,
746         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
747         (sarge), support for oldstable-proposed-updates, dropping m68k
748         from etch, creating etch-m68k suite, creating lenny.
749
750         * config/debian/vars: update for lenny
751
752         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
753         drop upload limitations, add release postgres user
754
755         * dak/process_new.py: support for automatically accepting and rejecting
756         packages from proposed-updates holding queues via COMMENTS directory
757         * cron.daily: automatically process COMMENTS-based approvals
758         and rejections for proposed-updates holding queues
759
760         * dak/process_unchecked.py: add support for oldproposedupdates
761         holding queue
762
763         * dak/control_suite.py: allow control-suite to work with etch-m68k
764
765         * dak/generate_releases.py: unlink old Release files before updating
766         them if nlinks > 1 (ie, if two files used to be the same, maybe they
767         shouldn't be when generate-releases is run)
768
769         * dak/generate_releases.py: add a couple of commented lines to make
770         it easier to deal with point releases
771
772         * dak/make_overrides.py: generate overrides for !contrib udebs
773
774         * docs/README.stable-point-release: update docs for doing a
775         point release
776
777 2007-03-05  Anthony Towns  <ajt@debian.org>
778
779         * config/debian/dak.conf: update for 3.1r5.
780         * scripts/debian/ssh-move: add ssh-move script from debbugs
781         * config/debian/cron.unchecked: push version info to debbugs using
782         ssh-move.
783
784 2007-03-05  Anthony Towns  <ajt@debian.org>
785
786         * config/debian/dak.conf: update for 3.1r5.
787         * scripts/debian/ssh-move: add ssh-move script from debbugs
788         * config/debian/cron.unchecked: push version info to debbugs using
789         ssh-move.
790
791 2007-02-14  James Troup  <troup@ries.debian.org>
792
793         * docs/README.config: remove Dinstall::GroupOverrideFilename.
794         * config/debian/dak.conf: likewise.
795         * config/debian-non-US/dak.conf: likewise.
796         * config/debian-security/dak.conf: likewise.
797
798         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
799         experimental differently, just close the bugs and let version
800         tracking sort it out.
801          (nmu_p): remove entire class - now unused.
802          (Upload.__init__): don't use nmu_p.
803
804 2007-02-14  James Troup  <troup@ries.debian.org>
805
806         * docs/README.config: remove Dinstall::GroupOverrideFilename.
807         * config/debian/dak.conf: likewise.
808         * config/debian-non-US/dak.conf: likewise.
809         * config/debian-security/dak.conf: likewise.
810
811         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
812         experimental differently, just close the bugs and let version
813         tracking sort it out.
814          (nmu_p): remove entire class - now unused.
815          (Upload.__init__): don't use nmu_p.
816
817 2007-02-08  Anthony Towns  <ajt@debian.org>
818
819         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
820         signing key.  Drop maximum index diffs down to 14.
821
822         * config/debian/apt.conf: add udeb support for non-free (testing,
823         unstable) and experimental.
824         * config/debian/dak.conf: likewise.
825
826         * dak/generate_releases.py (main): handle udebs in any component.
827
828         * daklib/queue.py (Upload.build_summaries): handle files without a
829         'type' gracefully.
830
831         * dak/generate_releases.py (print_sha256_files): new function.
832         (main): use it.
833
834         * dak/process_accepted.py (stable_install): fix name of template
835         mail.
836
837         * dak/process_unchecked.py (is_stableupdate): fix invocation of
838         database.get_suite_id().
839
840         * templates/process-new.bxa_notification: Update on request
841         of/after discussion with BIS staff.
842
843         * scripts/debian/mkfilesindices: also handle proposed-updates.
844
845 2007-02-08  Ryan Murray  <rmurray@debian.org>
846
847         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
848         group name for chgrp of mail archives.
849
850         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
851         orig.tar.gz's by picking the first one by file id.
852
853         * dak/override.py (main): limit to binary overrides only for now.
854         (usage): update to match.
855
856         * config/debian/cron.daily: track when we have the accepted lock
857         and clean it up on exit if we have it.  Take/check the
858         cron.unchecked lock just before traping to cleanup on exit.
859         Remove potato override handling.  Remove any dangling symlinks in
860         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
861
862         * config/debian/apt.conf: change default compression scheme for
863         both Sources and Packages to gzip and bzip2 rather than
864         uncompressed and gzip (Packages) and gzip (Sources).  Use old
865         defaults for proposed-updates.
866
867         * dak/control_overrides.py (main): refuse to operate on
868         untouchable suites.
869
870         * config/debian/pseudo-packages.maintainers: drop install,
871         installation, boot-floppy, slink-cd, potato-cd and
872         nonus.debian.org.  Update base.
873         * config/debian/pseudo-packages.description: likewise.
874
875         * daklib/utils.py (re_srchasver): new regex.
876         (parse_changes): use regex to split 'Source (Version)' style
877         Source fields into 'source' and 'source-version'.
878
879         * config/debian/cron.daily: use $base instead of hardcoding path
880         name.
881
882         * scripts/debian/mkfilesindices: source 'vars' file and use it's
883         variables instead of hardcoding path names.
884
885         * config/debian/apt.conf: switch from /org to /srv.
886         * config/debian/apt.conf.buildd: likewise.
887         * config/debian/apt.conf.stable: likewise.
888         * config/debian/cron.daily: likewise.
889         * config/debian/cron.hourly: likewise.
890         * config/debian/cron.monthly: likewise.
891         * config/debian/cron.unchecked: likewise.
892         * config/debian/cron.weekly: likewise.
893         * config/debian/dak.conf: likewise.
894         * config/debian/vars: likewise.
895         * scripts/debian/mkfilesindices: likewise.
896
897 2007-02-08  James Troup  <james@nocrew.org>
898
899         * dak/process_unchecked.py (check_signed_by_key): new function to
900         ensure .changes files are signed by an authorized uploader.
901         (process_it): use it.
902
903         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
904         to configure per suite/component/architecture binary upload
905         restrictions.
906
907 2007-02-08  Anthony Towns  <ajt@debian.org>
908
909         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
910         signing key.  Drop maximum index diffs down to 14.
911
912         * config/debian/apt.conf: add udeb support for non-free (testing,
913         unstable) and experimental.
914         * config/debian/dak.conf: likewise.
915
916         * dak/generate_releases.py (main): handle udebs in any component.
917
918         * daklib/queue.py (Upload.build_summaries): handle files without a
919         'type' gracefully.
920
921         * dak/generate_releases.py (print_sha256_files): new function.
922         (main): use it.
923
924         * dak/process_accepted.py (stable_install): fix name of template
925         mail.
926
927         * dak/process_unchecked.py (is_stableupdate): fix invocation of
928         database.get_suite_id().
929
930         * templates/process-new.bxa_notification: Update on request
931         of/after discussion with BIS staff.
932
933         * scripts/debian/mkfilesindices: also handle proposed-updates.
934
935 2007-02-08  Ryan Murray  <rmurray@debian.org>
936
937         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
938         group name for chgrp of mail archives.
939
940         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
941         orig.tar.gz's by picking the first one by file id.
942
943         * dak/override.py (main): limit to binary overrides only for now.
944         (usage): update to match.
945
946         * config/debian/cron.daily: track when we have the accepted lock
947         and clean it up on exit if we have it.  Take/check the
948         cron.unchecked lock just before traping to cleanup on exit.
949         Remove potato override handling.  Remove any dangling symlinks in
950         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
951
952         * config/debian/apt.conf: change default compression scheme for
953         both Sources and Packages to gzip and bzip2 rather than
954         uncompressed and gzip (Packages) and gzip (Sources).  Use old
955         defaults for proposed-updates.
956
957         * dak/control_overrides.py (main): refuse to operate on
958         untouchable suites.
959
960         * config/debian/pseudo-packages.maintainers: drop install,
961         installation, boot-floppy, slink-cd, potato-cd and
962         nonus.debian.org.  Update base.
963         * config/debian/pseudo-packages.description: likewise.
964
965         * daklib/utils.py (re_srchasver): new regex.
966         (parse_changes): use regex to split 'Source (Version)' style
967         Source fields into 'source' and 'source-version'.
968
969         * config/debian/cron.daily: use $base instead of hardcoding path
970         name.
971
972         * scripts/debian/mkfilesindices: source 'vars' file and use it's
973         variables instead of hardcoding path names.
974
975         * config/debian/apt.conf: switch from /org to /srv.
976         * config/debian/apt.conf.buildd: likewise.
977         * config/debian/apt.conf.stable: likewise.
978         * config/debian/cron.daily: likewise.
979         * config/debian/cron.hourly: likewise.
980         * config/debian/cron.monthly: likewise.
981         * config/debian/cron.unchecked: likewise.
982         * config/debian/cron.weekly: likewise.
983         * config/debian/dak.conf: likewise.
984         * config/debian/vars: likewise.
985         * scripts/debian/mkfilesindices: likewise.
986
987 2007-02-08  James Troup  <james@nocrew.org>
988
989         * dak/process_unchecked.py (check_signed_by_key): new function to
990         ensure .changes files are signed by an authorized uploader.
991         (process_it): use it.
992
993         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
994         to configure per suite/component/architecture binary upload
995         restrictions.
996
997 2006-10-09  James Troup  <james.troup@canonical.com>
998
999         * dak/process_unchecked.py (check_timestamps): change match to
1000         search as recent versions of python-apt prefix the string with 'E: '.
1001
1002 2006-10-09  James Troup  <james.troup@canonical.com>
1003
1004         * dak/process_unchecked.py (check_timestamps): change match to
1005         search as recent versions of python-apt prefix the string with 'E: '.
1006
1007 2006-06-26  Ryan Murray  <rmurray@debian.org>
1008
1009         * dak/process_unchecked.py (check_files): strip optional source version
1010         from Source: field in changes file, and ensure what is left is a valid
1011         package name.
1012
1013 2006-06-26  Ryan Murray  <rmurray@debian.org>
1014
1015         * dak/process_unchecked.py (check_files): strip optional source version
1016         from Source: field in changes file, and ensure what is left is a valid
1017         package name.
1018
1019 2006-06-23  Ryan Murray  <rmurray@debian.org>
1020
1021         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1022         queue for source.
1023
1024 2006-06-23  Ryan Murray  <rmurray@debian.org>
1025
1026         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1027         queue for source.
1028
1029 2006-06-18  Ryan Murray  <rmurray@debian.org>
1030
1031         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1032         the log, too.
1033
1034         * dak/process_unchecked.py (check_files): only check embargoed and
1035         unembargoed queues if the keys are set.
1036
1037         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1038         and bzip2 for etch.
1039
1040 2006-06-18  Ryan Murray  <rmurray@debian.org>
1041
1042         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1043         the log, too.
1044
1045         * dak/process_unchecked.py (check_files): only check embargoed and
1046         unembargoed queues if the keys are set.
1047
1048         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1049         and bzip2 for etch.
1050
1051 2006-06-16  James Troup  <james@nocrew.org>
1052
1053         * dak/dak.py (init): add new-security-install.
1054
1055         * dak/new_security_install.py: cleanups and adapt for new naming
1056         scheme and other changes.
1057
1058 2006-06-16  Anthony Towns  <ajt@debian.org>
1059
1060         * dak/new_security_install.py: initial version imported from
1061         klecker.
1062
1063 2006-06-16  James Troup  <james@nocrew.org>
1064
1065         [Merged changes from klecker - original author unknown.]
1066
1067         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1068
1069         * dak/security_install.py (do_upload): fix check for oldstable and
1070         upload file list handling.
1071
1072         * dak/process_unchecked.py (check_files): update "check for
1073         source" code to also look in Embargoed and Unembargoed queues.
1074         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1075
1076         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1077
1078         * config/debian-security/vars (disembargo): add.
1079
1080         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1081         update.
1082         (Process-Unchecked::AcceptedLockFile): add.
1083         (Suite::Testing): clean up Version and Description.
1084         (SuiteMappings): add silent map from etch-secure to testing.
1085
1086         * config/debian-security/cron.unchecked: add support for
1087         disembargoed queues.
1088
1089         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1090         files too.
1091
1092         * config/debian-security/apt.conf: add amd64 to architectures for
1093         testing-security.
1094
1095 2006-06-11  James Troup  <troup@spohr.debian.org>
1096
1097         * config/debian/cron.daily: invoke process-accepted not
1098         process-unchecked.
1099
1100         * config/debian/vars (scriptsdir): new variable.
1101         * config/debian/cron.daily: use it.
1102
1103         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1104         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1105         make-maintainers' invocation to look in $configdir for
1106         pseudo-packages.maintainers.
1107
1108         * daklib/queue.py (Upload.do_reject): use correct name for
1109         rejection template.
1110
1111 2006-06-11  James Troup  <james@nocrew.org>
1112
1113         * dak/override.py (main): temporarily add content of old X-Katie
1114         header back as the PTS apparently filters on it.
1115         * dak/process_accepted.py (main): likewise.
1116         * dak/process_new.py (main): likewise.
1117         * dak/process_unchecked.py (main): likewise.
1118         * dak/reject_proposed_updates.py (main): likewise.
1119         * dak/rm.py (main): likewise.
1120         * daklib/queue.py (Upload.do_reject): likewise.
1121
1122         * config/debian/cron.unchecked: set -u to error out on undefined
1123         variables.  Preset LOCKDAILY to "" accordingly.
1124         * config/debian/cron.hourly: likewise.
1125         * config/debian/cron.monthly: likewise.
1126         * config/debian/cron.weekly: likewise.
1127
1128         * config/debian/vars (configdir): add new variable pointing to
1129         this directory.
1130
1131         * config/debian/cron.daily: use $configdir inplace of $masterdir
1132         when that's what we mean, and don't cd into $masterdir just to run
1133         dak scripts as we don't need to do that anymore.
1134         * config/debian/cron.hourly: likewise.
1135         * config/debian/cron.unchecked: likewise.
1136         * config/debian/cron.weekly: likewise.
1137
1138         * config/debian/dak.conf
1139         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1140         user back to list of known users as it's non-trivial to entirely
1141         change the owner of a database with postgresql 7.4.
1142
1143         * daklib/queue.py (Upload.source_exists): use string object
1144         methods rather than string module.
1145         (Upload.get_anyversion): likewise.
1146
1147         * daklib/utils.py (validate_changes_file_arg): update filename
1148         slicing to cope with new .dak filenames.
1149
1150         * dak/ls.py (main): add back 'heidi' as a valid argument for
1151         -f/--format as people are using it in scripts and breaking that
1152         without warning seems rude.
1153
1154 2006-05-21  James Troup  <james@nocrew.org>
1155
1156         * dak/rm.py (main): use string .isdigit() rather than
1157         utils.str_isnum().
1158         * dak/process_new.py (edit_overrides): likewise.
1159
1160         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1161         string import.
1162
1163 2006-05-21  James Troup  <james@nocrew.org>
1164
1165         * dak/check_archive.py (check_indices_files_exist): use list
1166         comprehension instead of map().  No longer need to import
1167         deprecated string module as a side-effect.
1168         * dak/check_overrides.py (process): likewise.
1169         (main): likewise.
1170         * dak/cruft_report.py (do_obsolete_source): likewise.
1171         (main): likewise.
1172         * dak/ls.py (main): likewise.
1173         * dak/make_suite_file_list.py (write_filelists): likewise.
1174         * dak/process_accepted.py (stable_install): likewise.
1175         * dak/rm.py (main): likewise.
1176         * dak/stats.py (number_of_packages): likewise.
1177         * daklib/logging.py (Logger.log): likewise.
1178         * daklib/queue.py (Upload.source_exists): likewise.
1179         (Upload.cross_suite_version_check): likewise.
1180         * daklib/utils.py (parse_args): likewise.
1181
1182 2006-05-21  James Troup  <james@nocrew.org>
1183
1184         * daklib/utils.py (process_gpgv_output): new function, split out
1185         of check_signature().
1186         (check_signature): adapt accordingly.
1187         (retrieve_key): new function that will try to retrieve the key
1188         that signed a given file from a keyserver.
1189         (check_signature): add 'autofetch' argument that if not set
1190         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1191         If 'autofetch' is true, invoke retrieve_key().
1192
1193         * docs/README.config: document Dinstall::KeyAutoFetch and
1194         Dinstall:KeyServer.
1195
1196 2006-05-20  James Troup  <james@nocrew.org>
1197
1198         * dak/find_null_maintainers.py (main):
1199         s/createtimestamp/createTimestamp/ to make things work with modern
1200         slapd.
1201
1202         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1203         Stable::Version and Stable::Description for 3.1r2.
1204
1205         * config/debian-non-US/dak.conf: sync with klecker - update
1206         version number of 3.0 and MoreInfoURL.
1207
1208         * docs/README.stable-point-release: Add notes about updating
1209         dak.conf and Reject-Proposed-Updates section in particular.
1210         s/woody/stable/.  Also need to update README.html.
1211
1212         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1213
1214         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1215
1216 2006-05-20  Ryan Murray  <rmurray@debian.org>
1217
1218         * scripts/debian/update-ftpstats: new script to update daily
1219         architecture size graph data.
1220
1221         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1222         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1223         there.
1224
1225         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1226         before we finish.  Don't push to merkel.
1227
1228         * dak/process_unchecked.py (check_changes): Also look in
1229         ProposedUpdates queue dir.
1230         (check_files): likewise.
1231
1232 2006-05-20  Anthony Towns  <ajt@debian.org>
1233
1234         * scripts/debian/mkfilesindices: new script to generate file
1235         indices used for partial mirroring.
1236
1237         * config/debian/cron.daily: add progress timestamps.
1238
1239         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1240         amd64 to testing, unstable and experimental.  Drop sh from
1241         experimental.  Move Experimental to dists/experimental.  Add
1242         Dir::ProposedUpdates.  Add Architectures::amd64.
1243
1244         * config/debian/apt.conf: add amd64 to testing, unstable and
1245         experimental.  Drop uncompressed Packages files from testing. Drop
1246         sh from experimental.  Move experimental to dists/experimental/.
1247
1248         * config/debian/vars (archs): add amd64.
1249
1250         * dak/process_unchecked.py (action): Add support for
1251         proposed-updates approval queue.
1252         (is_stableupdate): new function - checks if the upload is targeted
1253         at proposed-updates.
1254         (do_stableupdate): likewise - moves upload to proposed-updates
1255         holding area.
1256
1257         * dak/process_new.py (do_new): warn if original or new target
1258         suite are invalid.
1259
1260         * dak/generate_releases.py (print_md5sha_files): less whitespace
1261         between the hash and size.
1262
1263         * dak/generate_index_diffs.py (genchanges): don't say we're not
1264         doing anything.  Better formatting of other messages.
1265         (main): don't skip experimental and remove some 'doing stuff'
1266         prints.
1267
1268 2006-05-18  James Troup  <james@nocrew.org>
1269
1270         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1271         query.
1272
1273         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1274         docstrings, untabify, don't shadow builtins, lowercase non-global
1275         variable names, spaces after commas.  Also bail if given any
1276         arguments since we don't accept any.
1277         * dak/init_db.py: likewise.  Also split large main() into
1278         subfunctions and rename get() to sql_get().
1279
1280         * dak/init_db.py (main): check returned value from
1281         database.get_archive_id().
1282
1283         * dak/dak.py: renamed from shell.py.  Update to support new source
1284         layout.  Created init() and usage() functions.  Various
1285         pylint-inspired cleanups.  Use daklib utils.warn() and
1286         utils.fubar().  Change 'functionality' variable to only have
1287         (command, description) and always invoke main() when running the
1288         module.  Also support -h.
1289
1290 2006-05-17  James Troup  <james@nocrew.org>
1291
1292         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1293         imports of and calls to daklib modules.  Change script name
1294         everywhere, i.e. in output, mails, comments and configuration tree
1295         + filenames.  Also update references to other renamed scripts,
1296         classes and templates.  Use '.dak' instead of '.katie' for the
1297         queue info storage files.
1298         (Renamed from tea)
1299         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1300         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1301         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1302         * dak/clean_queues.py: likewise.  (Renamed from shania)
1303         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1304         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1305         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1306         * dak/control_suite.py: likewise.  (Renamed from heidi)
1307         * dak/cruft_report.py: likewise.  (Renamed from rene)
1308         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1309         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1310         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1311         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1312         * dak/import_archive.py: likewise.  (Renamed from neve)
1313         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1314         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1315         * dak/init_db.py: likewise. (Renamed from alyson)
1316         * dak/init_dirs.py: likewise. (Renamed from rose)
1317         * dak/ls.py: likewise. (Renamed from madison)
1318         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1319         * dak/make_overrides.py: likewise.  (Renamed from denise)
1320         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1321         * dak/mirror_split.py: likewise.  (Renamed from billie)
1322         * dak/override.py: likewise.  (Renamed from alicia)
1323         * dak/poolize.py: likewise.  (Renamed from catherine)
1324         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1325         * dak/process_new.py: likewise.  (Renamed from lisa)
1326         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1327         * dak/queue_report.py: likewise.  (Renamed from helena)
1328         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1329         * dak/rm.py: likewise.  (Renamed from melanie)
1330         * dak/security_install.py: likewise.  (Renamed from amber)
1331         * dak/split_done.py: likewise.  (Renamed from nina)
1332         * dak/stats.py: likewise.  (Renamed from saffron)
1333         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1334         * daklib/database.py: likewise.  (Renamed from db_access)
1335         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1336         * daklib/utils.py: likewise.
1337
1338         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1339         doesn't need to notify anyone" string.
1340         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1341
1342         * dak/process_accepted.py (init): drop -V/--version argument.
1343         * dak/process_new.py (init): likewise.
1344         * dak/process_unchecked.py (init): likewise.
1345         * dak/reject_proposed_updates.py (init): likewise
1346
1347         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1348
1349         * dak/stats.py: in usage() output change STAT to MODE.
1350
1351 2006-05-15  James Troup  <james@nocrew.org>
1352
1353         * dak/queue_report.py: remove unused encodings imports.
1354
1355         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1356         imports.  Initalize 'Cnf' as a global.
1357         (BillieDB._internal_recurse): fix 'util.' typo.
1358
1359         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1360         commented out time check for LDAP search.
1361
1362 2005-12-16  Ryan Murray  <rmurray@debian.org>
1363
1364         * halle: add support for udebs
1365         * kelly: stable_install: add support for binNMU versions
1366
1367 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1368
1369         * katie.py: Move accept() autobuilding support into separate function 
1370         (queue_build), and generalise to build different queues
1371
1372         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1373
1374         * jennifer: Initial support for enabling embargo handling with the
1375         Dinstall::SecurityQueueHandling option.
1376         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1377         functions.
1378
1379         * katie.conf-security: Include embargo options
1380         * katie.conf-security: Add Lock dir
1381         * init_pool.sql-security: Create disembargo table
1382         * init_pool.sql-security: Add constraints for disembargo table
1383
1384 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1385
1386         * Merge of changes from klecker, by various people
1387
1388         * amber: special casing for not passing on amd64 and oldstable updates
1389         * amber: security mirror triggering
1390         * templates/amber.advisory: updated advisory structure
1391         * apt.conf.buildd-security: update for sarge's release
1392         * apt.conf-security: update for sarge's release
1393         * cron.buildd-security: generalise suite support, update for sarge's release
1394         * cron.daily-security: update for sarge's release, add udeb support
1395         * vars-security: update for sarge's release
1396         * katie.conf-security: update for sarge's release, add amd64 support,
1397         update signing key
1398
1399         * docs/README.names, docs/README.quotes: include the additions
1400
1401 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1402
1403         * Changed accepted_autobuild to queue_build everywhere.
1404         * Add a queue table.
1405         * Add a "queue" field in the queue_build table (currently always 0)
1406
1407         * jennifer: Restructure to make it easier to support special
1408         purpose queues between unchecked and accepted.
1409
1410 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1411
1412         * Finishing merge of changes from spohr, by various people still
1413
1414         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1415         works
1416         * jennifer: Re-enable .deb ar format checking
1417         * katie.py: Convert to +bX binNMU special casing
1418         * rhona: Add some debug output when deleting binaries
1419         * cron.daily: Add emilie
1420         * cron.unchecked: Add lock files
1421
1422 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1423
1424         * Merge of changes from spohr, by various people.
1425
1426         * tiffani: new script to do patches to Packages, Sources and Contents
1427         files for quicker downloads.
1428         * ziyi: update to authenticate tiffani generated files
1429
1430         * dak: new script to provide a single binary with less arbitrary names
1431         for access to dak functionality.
1432
1433         * cindy: script implemented
1434
1435         * saffron: cope with suites that don't have a Priority specified
1436         * heidi: use get_suite_id()
1437         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1438         * denise: remove override munging for testing (now done by cindy)
1439         * helena: expanded help, added new, sort and age options, and fancy headers
1440         * jennifer: require description, add a reject for missing dsc file
1441         * jennifer: change lock file
1442         * kelly: propogation support
1443         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1444         * madison: don't say "dep-retry"
1445         * melanie: bug fix in output (missing %)
1446         * natalie: cope with maintainer_override == None; add type_id for overrides
1447         * nina: use mtime, not ctime
1448
1449         * katie.py: propogation bug fixes
1450         * logging.py: add debugging support, use | as the logfile separator
1451
1452         * katie.conf: updated signing key (4F368D5D)
1453         * katie.conf: changed lockfile to dinstall.lock
1454         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1455         * katie.conf: added tiffani, cindy support
1456         * katie.conf: updated to match 3.0r6 release
1457         * katie.conf: updated to match sarge's release
1458
1459         * apt.conf: update for sarge's release
1460         * apt.conf.stable: update for sarge's release
1461         * apt.conf: bump daily max Contents change to 25MB from 12MB
1462
1463         * cron.daily: add accepted lock and invoke cindy
1464         * cron.daily: add daily.lock
1465         * cron.daily: invoke tiffani
1466         * cron.daily: rebuild accepted buildd stuff
1467         * cron.daily: save rene-daily output on the web site
1468         * cron.daily: disable billie
1469         * cron.daily: add stats pr0n
1470
1471         * cron.hourly: invoke helena
1472
1473         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1474         * vars: add lockdir, add etch to copyoverrides
1475         * Makefile: add -Ipostgresql/server to CXXFLAGS
1476
1477         * docs/: added README.quotes
1478         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1479         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1480
1481         * TODO: correct spelling of "conflicts"
1482
1483 2005-05-28  James Troup  <james@nocrew.org>
1484
1485         * helena (process_changes_files): use MTIME rather than CTIME (the
1486         C's not for 'creation', stupid).
1487         * lisa (sort_changes): likewise.
1488
1489         * jennifer (check_distributions): use has_key rather than an 'in'
1490         test which doesn't work with python2.1.  [Probably by AJ]
1491
1492 2005-03-19  James Troup  <james@nocrew.org>
1493
1494         * rene (main): use Suite::<suite>::UdebComponents to determine
1495         what components have udebs rather than assuming only 'main' does.
1496
1497 2005-03-18  James Troup  <james@nocrew.org>
1498
1499         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1500         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1501         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1502         <andrew@ubuntu.com>.
1503
1504 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1505
1506         * helena: add -n/--new HTML output option and improved sorting
1507         options.
1508
1509 2005-03-06  Ryan Murray  <rmurray@debian.org>
1510
1511         * shania(main): use Cnf::Dir::Reject instead of REJECT
1512
1513 2005-02-08  James Troup  <james@nocrew.org>
1514
1515         * rene (main): add partial NBS support by checking that binary
1516         packages are built by their real parent and not some random
1517         stranger.
1518         (do_partial_nbs): likewise.
1519
1520 2005-01-18  James Troup  <james@nocrew.org>
1521
1522         * katie.py (Katie.build_summaries): avoid leaking file handle when
1523         extracting package description.
1524         (Katie.force_reject): remember and close each file descriptor we
1525         use.
1526         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1527         s/reason_file/reason_fd/ because it's a file descriptor.
1528         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1529         invoking apt_pkg.md5sum().
1530
1531         * jennifer (check_deb_ar): new function: sanity check the ar
1532         contents of a .deb.
1533         (check_files): use it.
1534         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1535         found.
1536         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1537
1538 2005-01-14  Anthony Towns  <ajt@debian.org>
1539
1540         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1541
1542         * propup stuff (thanks to Andreas Barth)
1543         * katie.conf: add stable MustBeOlderThan testing, add -security
1544           propup
1545         * jennifer: set distribution-version in .katie if propup may be needed
1546         * katie.py: add propogation to cross_suite_version_check
1547
1548 2004-11-27  James Troup  <james@nocrew.org>
1549
1550         * nina: new script to split monolithic queue/done into date-based
1551         hierarchy.
1552
1553         * rene (usage): document -s/--suite.
1554         (add_nbs): use .setdefault().
1555         (do_anais): likewise.
1556         (do_nbs): don't set a string to "" and then += it.
1557         (do_obsolete_source): new function - looks for obsolete source
1558         packages (i.e source packages whose binary packages are ALL a)
1559         claimed by someone else and b) newer when built from the other
1560         source package).
1561         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1562         and 'full' check modes.  Check for obsolete source packages.
1563         linux-wlan-ng has been fixed - remove hideous bodge.
1564
1565         * jennifer (check_distributions): support 'reject' suite map type.
1566
1567         * utils.py (validate_changes_file_arg): s/file/filename/.
1568         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1569         and return the .changes filename regardless.
1570         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1571         (re_no_revision): don't escape '-', it's not a special character.
1572         s/\*/+/ as there must be at least one non-dash character after the
1573         dash in a revision.  Thanks to Christian Reis for noticing both of
1574         these.
1575
1576         * ashley (main): pass require_changes=-1 to
1577         utils.validate_changes_file_arg().
1578
1579         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1580         Team <debian-kernel@lists.debian.org>'.
1581
1582         * katie.py (Katie.in_override_p): fix .startswith() usage.
1583
1584         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1585         (Lauren::MoreInfoURL): update to 3.0r3.
1586         (Suite::Stable::Version): likewise.
1587         (Suite::Stable::Description): likewise.
1588
1589         * cron.daily: disable automatic task override generation.
1590
1591         * cindy (process): restrict "find all packages" queries by
1592         component.  Respect Options["No-Action"].
1593         (main): add -n/--no-action support.  Only run on unstable.  Rename
1594         type to otype (pychecker).
1595
1596 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1597
1598         * katie.conf (Billie::BasicTrees): add all architectures.
1599         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1600         'everything'.
1601
1602         * cron.daily: Update a 'current' symlink when creating the
1603         post-daily-cron-job database backup to aid mirroring to merkel.
1604         Run billie.
1605
1606         * billie (BillieTarget.poolish_match): handle .udeb too.
1607
1608 2004-10-13  Ryan Murray  <rmurray@debian.org>
1609
1610         * amber (do_upload): Sort changes files in "katie" order so that
1611           source always arrives before binary-only rebuilds
1612
1613 2004-10-05  James Troup  <james@nocrew.org>
1614
1615         * jennifer (check_dsc): correct reject message on invalid
1616         Maintainer field.
1617
1618 2004-09-20  James Troup  <james@nocrew.org>
1619
1620         * alicia: remove unused 'pwd' import.
1621
1622         * tea (check_override): underline suite name in output properly.
1623
1624         * rene (main): read a compressed Packages file.
1625         * tea (validate_packages): likewise.
1626
1627         * katie.py (re_fdnic): add 'r' prefix.
1628         (re_bin_only_nmu_of_mu): likewise.
1629         (re_bin_only_nmu_of_nmu): likewise.
1630
1631         * madison (main): retrieve component information too and display
1632         it if it's not 'main'.
1633         * melanie (reverse_depends_check): likewise.
1634
1635         * utils.py (pp_dep): renamed...
1636         (pp_deps): ... to this.
1637         * jeri (check_dep): update calls to utils.pp_deps().
1638         * melanie (reverse_depends_check): likewise.
1639
1640         * jennifer (check_changes): move initalization of email variables
1641         from here...
1642         (process_it): ...to here as we no longer always run
1643         check_changes().  Don't bother to initialize
1644         changes["architecture"].
1645
1646         * denise (list): renamed to...
1647         (do_list): ...this to avoid name clash with builtin 'list'.
1648         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1649         for dictionaries.
1650         (main): Likewise for name clash avoidance and also
1651         s/override_type/suffix/.  Adjust call to do_list().
1652
1653 2004-09-01  Ryan Murray  <rmurray@debian.org>
1654
1655         * tea (check_files): check the pool/ directory instead of dists/
1656
1657 2004-08-04  James Troup  <james@nocrew.org>
1658
1659         * jenna (cleanup): use .setdefault() for dictionaries.
1660         (write_filelists): likewise.
1661
1662         (write_filelists): Use utils.split_args() not split() to split
1663         command line arguments.
1664         (stable_dislocation_p): likewise.
1665
1666         (write_filelists): Add support for mapping side of suite-based
1667         "Arch: all mapping".
1668         (do_da_do_da): ensure that if we're not doing all suites that we
1669         process enough to be able correct map arch: all packages.
1670
1671         * utils.py (cant_open_exc): correct exception string,
1672         s/read/open/, s/.$//.
1673
1674         * templates/amber.advisory: update to match reality a little
1675         better.
1676
1677         * melanie (reverse_depends_check): read Packages.gz rather than
1678         Packages.
1679
1680         * jennifer (check_files): check for unknown component before
1681         checking for NEWness.
1682
1683         * katie.py (Katie.in_override_p): use .startswith in favour of a
1684         slice.
1685
1686         * docs/melanie.1.sgml: document -R/--rdep-check.
1687
1688 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1689
1690         * billie (main): Make the verbatim lists include all the README
1691           elements.
1692         * docs/README.names: Add billie in (correcting oversight)
1693
1694 2004-07-01  James Troup  <james@nocrew.org>
1695
1696         * emilie (main): handle woody's case-sensitive python-ldap,
1697         s/keyfingerprint/keyFingerPrint/.
1698
1699 2004-06-25  James Troup  <james@nocrew.org>
1700
1701         * debian/control (Depends): add dpkg-dev since jennifer uses
1702         dpkg-source.
1703
1704 2004-06-24  James Troup  <james@nocrew.org>
1705
1706         * melanie (main): s/file/temp_file/ and close file handle before
1707         removing the temporary file.
1708         (main): don't warn about needing a --carbon-copy if in no-action
1709         mode.
1710
1711         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1712         (main): likewise.
1713
1714         * test/006/test.py (main): check bracketed email-only form.
1715
1716         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1717         email-only, strip the brackets so we don't end up with
1718         <<james@nocrew.org>>.
1719
1720 2004-06-20  James Troup  <james@nocrew.org>
1721
1722         * jennifer (process_it): only run check_changes() if
1723         check_signature() returns something.  (Likewise)
1724
1725         * utils.py (changes_compare): if there's no changes["version"] use
1726         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1727
1728 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1729
1730         * jeri (pp_dep): moved from here to ...
1731         * utils.py (pp_dep): here.
1732
1733         * melanie (main): add reverse dependency checking.
1734
1735 2004-06-17  James Troup  <james@nocrew.org>
1736
1737         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1738         * tea (check_dscs): likewise.
1739
1740         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1741         change from boolean to a variable with 3 possible values, 0 and 1
1742         as before, -1 means don't require a signature.  Makes
1743         parse_changes() useful for parsing arbitary RFC822-style files,
1744         e.g. 'Release' files.
1745         (check_signature): add support for detached signatures by passing
1746         the files the signature is for as an optional third argument.
1747         s/filename/sig_filename/g.  Add a fourth optional argument to
1748         choose the keyring(s) to use.  Don't os.path.basename() the
1749         sig_filename before checking it for taint.
1750         (re_taint_free): allow '/'.
1751
1752 2004-06-11  James Troup  <james@nocrew.org>
1753
1754         * tea (check_files): make override.unreadable optional.
1755         (validate_sources): close the Sources file handle.
1756
1757         * docs/README.first: clarify that 'alyson' and running
1758         add_constraints.sql by hand is something you only want to do if
1759         you're not running 'neve'.
1760
1761         * docs/README.config (Location::$LOCATION::Suites): document.
1762
1763         * db_access.py (do_query): also print out the result of the query.
1764
1765 2004-06-10  James Troup  <james@nocrew.org>
1766
1767         * katie.py (Katie.cross_suite_version_check): post-woody versions
1768         of python-apt's apt_pkg.VersionCompare() function apparently
1769         returns variable integers for less than or greater than results -
1770         update our result checking to match.
1771         * jenna (resolve_arch_all_vs_any): likewise.
1772         * charisma (main): likewise.
1773
1774 2004-06-09  James Troup  <james@nocrew.org>
1775
1776         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1777         valid_dsc_p and don't run check_source() if check_dsc() failed.
1778         (check_dsc): on fatal failures return 0 so check_source() isn't
1779         run (since it makes fatal assumptions about the presence of
1780         mandatory .dsc fields).
1781         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1782
1783 2004-05-07  James Troup  <james@nocrew.org>
1784
1785         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1786         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1787
1788         * katie.conf (Dir::Override): remove duplicate definition.
1789
1790         * neve (get_or_set_files_id): add an always-NULL last_used column
1791         to output.
1792
1793 2004-04-27  James Troup  <james@nocrew.org>
1794
1795         * apt.conf-security (tree "dists/stable/updates"): add
1796         ExtraOverride - noticed by Joey Hess (#246050).
1797         (tree "dists/testing/updates"): likewise.
1798
1799 2004-04-20  James Troup  <james@nocrew.org>
1800
1801         * jennifer (check_files): check for existing .changes or .katie
1802         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1803         directories.
1804
1805 2004-04-19  James Troup  <james@nocrew.org>
1806
1807         * jennifer (check_source): handle failure to remove the temporary
1808          directory (used for source tree extraction) better, specifically:
1809          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1810          and try again and if that works, REJECT the package.
1811
1812 2004-04-17  James Troup  <james@nocrew.org>
1813
1814         * docs/madison.1.sgml: document -b/--binary-type,
1815         -g/--greaterorequal and -G/--greaterthan.
1816
1817         * madison (usage): -b/--binary-type only takes a single argument.
1818         Document -g/--greaterorequal and -G/--greaterthan.
1819         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1820
1821 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1822
1823         * billie: Cleaned up a load of comments, added /README.non-US to
1824           the verbatim matches list.
1825
1826 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1827
1828         * utils.py (size_type): Make it use real binary megabytes and
1829           kilobytes, instead of the marketing terms used before.
1830
1831 2004-04-07  James Troup  <james@nocrew.org>
1832
1833         * katie.py (Katie.check_dsc_against_db): in the case we're
1834         ignoring an identical-to-existing orig.tar.gz remember the path to
1835         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1836         location.path too to be able to do so.
1837
1838 2004-04-03  James Troup  <james@nocrew.org>
1839
1840         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1841         needed for new utils.rfc2047_encode() function.
1842
1843         * utils.py (re_parse_maintainer): allow whitespace inside the
1844         email address.
1845         (Error): new exception base class.
1846         (ParseMaintError): new exception class.
1847         (force_to_utf8): new function.
1848         (rfc2047_encode): likewise.
1849         (fix_maintainer): rework.  use force_to_utf8() to force name and
1850         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1851         return an rfc2047 value.  Validate the address to catch missing
1852         email addresses and (some) broken ones.
1853
1854         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1855         by adopting foo2047 return value.
1856         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1857         mandatory changes fields.  Promote changes and maintainer822 to
1858         mandatory fields.
1859         (Katie.update_subst): default maintainer2047 rather than
1860         maintainer822.  User foo2047 rather than foo822 when setting
1861         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1862
1863         * jennifer (check_changes): set default changes["maintainer2047"]
1864         and changes["changedby2047"] values rather than their 822
1865         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1866         to new utils.fix_maintainer() - reject on exception and adopt
1867         foo2047 return value.
1868         (check_dsc): if a mandatory field is missing don't do any further
1869         checks and as a result reduce paranoia about dsc[var] existence.
1870         Validate the maintainer field by calling new
1871         utils.fix_maintainer().
1872
1873         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1874         changes fields.  Promote maintainer822 to a mandatory changes
1875         field.  add "pool name" to files fields.
1876
1877         * test/006/test.py: new file - tests for new
1878         utils.fix_maintainer().
1879
1880 2004-04-01  James Troup  <james@nocrew.org>
1881
1882         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1883
1884         * jennifer (get_changelog_versions): create a symlink mirror of
1885         the source files in the temporary directory.
1886         (check_source): if check_dsc_against_db() couldn't find the
1887         orig.tar.gz bail out.
1888
1889         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1890         part of the upload store the path to it in pkg.orig_tar_gz and if
1891         it can't be found set pkg.orig_tar_gz to -1.
1892
1893         Explicitly return the second value as None in the (usual) case
1894         where we don't have to reprocess.  Remove obsolete diagnostic
1895         logs.
1896
1897         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1898
1899         * utils.py (temp_filename): new helper function that wraps around
1900         tempfile.mktemp().
1901
1902         * katie.py (Katie.do_reject): use it and don't import tempfile.
1903         * lisa (prod_maintainer): likewise.
1904         (edit_note): likewise.
1905         (edit_new): likewise.
1906         * lauren (reject): likewise.
1907         * melanie (main): likewise.
1908         * neve (do_sources): likewise.
1909         * rene (main): likewise.
1910         * tea (validate_sources): likewise.
1911
1912 2004-03-31  James Troup  <james@nocrew.org>
1913
1914         * tea (validate_sources): remove unused 's' temporary variable.
1915
1916 2004-03-15  James Troup  <james@nocrew.org>
1917
1918         * jennifer (check_dsc): check changes["architecture"] for
1919         source before we do anything else.
1920
1921 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1922
1923         * billie: Added
1924         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1925
1926 2004-03-12  James Troup  <james@nocrew.org>
1927
1928         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1929
1930         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1931
1932         * katie.py (Katie.accept): add support for DebBugs Version
1933         Tracking by writing out .versions (generated in jennifer's
1934         get_changelog_versions()) and .debinfo (mapping of binary ->
1935         source) files.
1936
1937         * ashley (main): add dsc["bts changelog"].
1938
1939         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1940
1941         * jennifer (check_diff): obsoleted by check_source(), removed.
1942         (check_source): new function: create a temporary directory and
1943         move into it and call get_changelog_versions().
1944         (get_changelog_versions): new function: extract the source package
1945         and optionally parse debian/changelog to obtain the version
1946         history for the BTS.
1947         (process_it): call check_source() rather than check_diff().
1948
1949 2004-03-08  James Troup  <james@nocrew.org>
1950
1951         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1952         listbar" rather than "if listbar.count(varfoo)"' change on
1953         2004-02-24.
1954
1955 2004-03-05  James Troup  <james@nocrew.org>
1956
1957         * alicia (main): don't warn about not closing bugs - we don't
1958         manage overrides through the BTS.
1959
1960 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1961
1962         * docs/README.config: lots of updates and corrections.
1963         * docs/README.first: likewise.
1964
1965         * docs/README.config: drop unused Dir::Queue::Root.
1966         * katie.conf-non-US: likewise.
1967         * katie.conf: likewise.
1968         * katie.conf-security: likewise.
1969
1970 2004-02-27  James Troup  <james@nocrew.org>
1971
1972         * rose (process_tree): use 'if var in [ list ]' rather than long
1973         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1974         Michlmayr.
1975
1976         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1977         suggested by Martin Michlmayr.
1978         * catherine (poolize): likewise.
1979         * charisma (main): likewise.
1980         * halle (check_changes): likewise.
1981         * heidi (main): likewise.
1982         (process_file): likewise.
1983         * kelly (install): likewise.
1984         (stable_install): likewise.
1985         * utils.py (fix_maintainer): likewise.
1986
1987         * apt.conf: add support for debian-installer in testing-proposed-updates.
1988         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1989         add - set to main.
1990
1991         * mkmaintainers: add "-T15" option to wget of non-US packages file
1992         so that we don't hang cron.daily if non-US is down.
1993
1994         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1995
1996         * templates/jennifer.bug-close: add Source and Source-Version
1997         pseudo-headers that may be used for BTS Version Tracking someday
1998         [ajt@].
1999
2000         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2001         (main): likewise.
2002
2003         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2004
2005 2004-02-25  James Troup  <james@nocrew.org>
2006
2007         * katie.conf (SuiteMappings): don't map testing-security to
2008         proposed-updates.
2009
2010 2004-02-24  James Troup  <james@nocrew.org>
2011
2012         * katie.py (Katie.__init__): remove unused 'values' field.
2013
2014         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2015         rather than 's.count(c) > 0'.
2016
2017         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2018         rather than "if listbar.count(varfoo)".
2019         * halle (check_joey): likewise.
2020         * jeri (check_joey): likewise.
2021         * lisa (edit_index): likewise.
2022         * jenna (stable_dislocation_p): likewise.
2023
2024         * jennifer (main): remove unused global 'nmu'.
2025
2026 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2027
2028         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2029           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2030           the dak tools close bugs.
2031
2032 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2033
2034         * katie.conf (Alicia): Added an Alicia section with email address
2035         * templates/alicia.bug-close: Added
2036         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2037         * alicia (main): Added a -d/--done argument
2038
2039 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2040
2041         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2042
2043 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2044
2045         * lisa (prod_maintainer): Added function to prod the maintainer without
2046           accepting or rejecting the package
2047         * templates/lisa.prod: Added this template for the prodding mail
2048
2049         * .cvsignore: Added neve-files which turns up in new installations
2050
2051 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2052
2053         * alicia (usage): Fixed usage message to offer section and priority
2054           as seperately optional arguments.
2055         * alicia (main): Added a % (arg) interpolation needed when only
2056           one of section or priority is provided and it cannot be found.
2057
2058 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2059
2060         * alicia: Added
2061         * docs/alicia.1.sgml: Added
2062         * docs/Makefile: Added alicia to the list of manpages to build
2063         * docs/README.names: Noted what alicia does
2064         * docs/README.first: Noted where alicia is useful
2065
2066 2004-01-21  James Troup  <james@nocrew.org>
2067
2068         * madison (main): add -b/--binary-type.
2069         (usage): likewise.
2070
2071         * denise (main): generate debian-installer overrides for testing
2072         too.
2073         * apt.conf: add support for debian-installer in testing.
2074         * katie.conf (Suite::Testing::UdebComponents): set to main.
2075
2076         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2077         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2078         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2079
2080         * utils.py (parse_changes): don't process data not inside the
2081         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2082         pointing this out.
2083         * test/005/test.py (main): new test to test for above.
2084
2085 2004-01-04  James Troup  <james@nocrew.org>
2086
2087         * jenna (write_filelists): correct typo, s/Components/Component/
2088         for Options.
2089
2090 2004-01-04  Ryan Murray  <rmurray@debian.org>
2091
2092         * cron.buildd: move update of overrides and Packages file...
2093         * cron.unchecked: to here.
2094         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2095         * katie.conf-security: likewise
2096
2097 2003-11-20  James Troup  <james@nocrew.org>
2098
2099         * jenna (main): don't use utils.try_with_debug(), it produces way
2100         too much output.
2101
2102         * halle (check_changes): don't error out if a .changes refers to a
2103         non-existent package, just warn and skip the file.
2104
2105         * docs/README.stable-point-release: mention halle and .changes
2106         obsoleted by removal through melanie.  Update for 3.0r2.
2107
2108         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2109         (Suite::Stable::Description): update for 3.0r2.
2110         (Lauren::MoreInfoURL): likewise.
2111         * katie.conf-non-US (Suite::Stable::Version): likewise.
2112         (Suite::Stable::Description): likewise.
2113         (Lauren::MoreInfoURL): likewise.
2114
2115         * apt.conf.stable (Default): don't define MaxContentsChange.
2116         * apt.conf.stable-non-US (Default): likewise.
2117
2118         * lauren (reject): hack to work around partial replacement of an
2119         upload, i.e. one or more binaries superseded by another source
2120         package.
2121
2122 2003-11-17  James Troup  <james@nocrew.org>
2123
2124         * pseudo-packages.maintainers: point installation-reports at
2125         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2126         request.
2127
2128         * utils.py (parse_changes): calculate the number of lines once
2129         with len() rather than max().
2130
2131         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2132         files, since check_dsc_against_db() deletes the .orig.tar.gz
2133         entry.
2134
2135 2003-11-13  Ryan Murray  <rmurray@debian.org>
2136
2137         * apt.conf: specify a src override file for debian-installer
2138
2139 2003-11-10  James Troup  <james@nocrew.org>
2140
2141         * fernanda.py (strip_pgp_signature): new function - strips PGP
2142         signature from a file and returns the modified contents of the
2143         file in a string.
2144         (display_changes): use it.
2145         (read_dsc): likewise.
2146
2147 2003-11-09  Ryan Murray  <rmurray@debian.org>
2148
2149         * cron.buildd: export accepted_autobuild table for unstable, and use
2150         it to generate the incoming Packages/Sources rather than having apt
2151         walk the directory.
2152         * apt.conf.buildd: use exported table from cron.buildd to generate
2153         Packages/Sources
2154
2155 2003-11-07  James Troup  <james@nocrew.org>
2156
2157         * kelly: import errno.
2158
2159         * katie.py (Katie.build_summaries): sort override disparities.
2160
2161         * kelly (install): set dsc_component based on the .dsc's component
2162         not a random binaries.
2163
2164 2003-10-29  James Troup  <james@nocrew.org>
2165
2166         * katie.py (Katie.build_summaries): don't assume changes["source"]
2167         exists since it might not.
2168
2169 2003-10-20  James Troup  <james@nocrew.org>
2170
2171         * pseudo-packages.maintainers: update security.d.o to use
2172         team@s.d.o at joy@'s request.
2173
2174 2003-10-17  James Troup  <james@nocrew.org>
2175
2176         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2177
2178 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2179
2180         * tea (chk_bd_process_dir): use .endswith rather than slice.
2181
2182 2003-10-14  James Troup  <james@nocrew.org>
2183
2184         * tea (check_build_depends): new function.
2185         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2186         in the archive.
2187         (main): update for new function.
2188         (usage): likewise.
2189
2190         * katie.py (Katie.do_reject): sanitize variable names,
2191         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2192         os.close() to outside if clause.
2193
2194         * jennifer (check_dsc): check build-depends and
2195         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2196         Fold the ARRAY check into the same code block and tidy up it's
2197         rejection message.
2198         (check_changes): ensure that the Files field is non-empty.
2199         Suggested by Santiago Vila <sanvila@unex.es>
2200         (check_changes): normalize reject messages.
2201         (check_dsc): instead of doing most of the checks inside a for loop
2202         and an if, find the dsc_filename in a short loop over files first
2203         and then do all the checks.  Add check for more than one .dsc in a
2204         .changes which we can't handle.  Normalize reject messages.
2205
2206 2003-10-13  James Troup  <james@nocrew.org>
2207
2208         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2209         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2210
2211         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2212         variables while iterating over 'files'.  Don't regenerate it when
2213         checking for source if source is mentioned.
2214
2215         Reject source only uploads if the config variable
2216         Dinstall::Reject::NoSourceOnly is set.
2217
2218 2003-10-03  James Troup  <james@nocrew.org>
2219
2220         * rene (main): add nasty hardcoded reference to debian-installer
2221         so we detect NBS .udebs.
2222
2223 2003-09-29  James Troup  <james@nocrew.org>
2224
2225         * apt.conf (old-proposed-updates): remove.
2226         * apt.conf-non-US (old-proposed-updates): likewise.
2227
2228 2003-09-24  James Troup  <james@nocrew.org>
2229
2230         * tea (check_files_not_symlinks): new function, ensure files
2231         mentioned in the database aren't symlinks.  Includes code to
2232         update any files that are like this to their real filenames +
2233         location; commented out by though.
2234         (usage): update for new function.
2235         (main): likewise.
2236
2237 2003-09-24  Anthony Towns  <ajt@debian.org>
2238
2239         * vars: external-overrides variable added
2240         * cron.daily: Update testing/unstable Task: overrides from joeyh
2241         managed external source.
2242
2243 2003-09-22  James Troup  <james@nocrew.org>
2244
2245         * kelly (install): if we can't move the .changes into queue/done,
2246         fail don't warn and carry on.  The old behaviour pre-dates NI and
2247         doesn't make much sense now since jennifer checks both
2248         queue/accepted and queue/done for any .changes files it's
2249         processing.
2250
2251         * utils.py (move): don't throw exceptions on existing files or
2252         can't overwrite, instead just fubar out.
2253
2254         * jennifer (check_dsc): also check Build-Depends-Indep for
2255         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2256
2257 2003-09-18  James Troup  <james@nocrew.org>
2258
2259         * katie.py (Katie.close_bugs): only log the bugs we've closed
2260         once.
2261
2262         * kelly (main): log as 'kelly', not 'katie'.
2263
2264 2003-09-16  James Troup  <james@nocrew.org>
2265
2266         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2267
2268         * jennifer (check_changes): normalize reject message for "changes
2269         file already exists" to be %s: <foo>.
2270         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2271         produced by broken dpkg-source in 1.10.11.  Tone down and
2272         normalize rejection message for incompatible 'Format' version
2273         numbers.
2274         (check_diff): likewise tone down and normalize.
2275
2276 2003-09-07  James Troup  <james@nocrew.org>
2277
2278         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2279         don't bomb out on bogus empty lines.
2280         (build_file_list): check for changes["files"] earlier.  use Dict
2281         to create files[name] dictionary.
2282         (send_mail): don't bother validating arguments.
2283         (check_signature): minor improvements to some of the rejection
2284         messages including listing the key id of the key that wasn't found
2285         in the keyring.
2286         (wrap): new function.
2287
2288         * tea: add new check 'validate-indices' that ensures all files
2289         mentioned in indices (Packages, Sources) files do in fact exist.
2290
2291         * catherine (poolize): use a local re_isadeb which handles legacy
2292         (i.e. no architecture) style .deb filenames.
2293
2294         * rosamund: new script.
2295
2296         * rhona (check_binaries): when checking for binary packages not in
2297         a suite, don't bother selecting files that already have a
2298         last_used date.
2299         (check_sources): likewise.
2300
2301         * rhona: change all SQL EXISTS sub-query clauses to use the
2302         postgres suggested convention of "SELECT 1 FROM".
2303         * andrea (main): likewise.
2304         * tea (check_override): likewise.
2305         * catherine (main): likewise.
2306
2307         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2308         entries and in other suites MustBeNewerThan's.
2309         (SuiteMappings): likewise
2310         * katie.conf-non-US: likewise.
2311         * katie.conf-security: likewise.
2312
2313         * apt.conf-security: remove oldstable.
2314         * apt.conf.stable: likewise.
2315         * apt.conf.stable-non-US: likewise.
2316         * cron.buildd-security: likewise.
2317         * cron.daily-security: likewise.
2318         * vars-security (suites): likewise.
2319         * wanna-build/trigger.daily: likewise.
2320
2321         * claire.py (clean_symlink): move...
2322         * utils.py (clean_symlink): here.
2323
2324         * claire.py (find_dislocated_stable): update accordingly.
2325
2326 2003-08-16  Anthony Towns  <ajt@debian.org>
2327
2328         * katie.py (source_exists): expand the list of distributions
2329         the source may exist in to include any suite that's mapped to
2330         the destination suite (even transitively (a->b->c)). This should
2331         unbreak binary uploads to *-proposed-updates.
2332
2333 2003-08-09  Randall Donald  <rdonald@debian.org>
2334
2335         * lisa (recheck): change changes["distribution"].keys() to
2336         Katie.pkg.changes...
2337
2338 2003-08-08  Randall Donald  <rdonald@debian.org>
2339
2340         * katie.py: only tag bugs as fixed-in-experimental for
2341         experimental uploads
2342
2343 2003-07-26  Anthony Towns  <ajt@debian.org>
2344
2345         * katie.py (source_exists): add an extra parameter to limit the
2346         distribution(s) the source must exist in.
2347         * kelly, lisa, jennifer: update to use the new source_exists
2348
2349 2003-07-15  Anthony Towns  <ajt@debian.org>
2350
2351         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2352         checksums for debian-installer stuff even when it's just a symlink to
2353         another suite
2354
2355         * apt.conf: add the FakeDI line
2356
2357 2003-06-09  James Troup  <james@nocrew.org>
2358
2359         * kelly (check): make sure the 'file' we're looking for in 'files'
2360         hasn't been deleted by katie.check_dsc_against_db().
2361
2362 2003-05-07  James Troup  <james@nocrew.org>
2363
2364         * helena (time_pp): fix s/years/year/ typo.
2365
2366 2003-04-29  James Troup  <james@nocrew.org>
2367
2368         * madison (usage): document -c/--component.
2369
2370         * madison (usage): Fix s/seperated/separated/.
2371         * melanie (usage): likewise.
2372         * jenna (usage): likewise.
2373
2374 2003-04-24  James Troup  <james@nocrew.org>
2375
2376         * cron.daily-non-US: if there's nothing for kelly to install, say
2377         so.
2378
2379         * jennifer (check_timestamps): print sys.exc_value as well as
2380         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2381         failed' with 'deb contents' to make it clearer what timestamp(s)
2382         are being checked.
2383
2384 2003-04-15  James Troup  <james@nocrew.org>
2385
2386         * cron.daily-non-US: only run kelly if there are some .changes
2387         files in accepted.
2388
2389         * rene: add -m/--mode argument which can be either daily (default)
2390         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2391         Various changes to make this possible including a poor attempt at
2392         splitting main() up a little.  De-hardcode suite numbers from SQL
2393         queries and return quietly from do_nviu() if experimental doesn't
2394         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2395         is.
2396
2397         * debian/control (Depends): remove python-zlib as it's obsolete.
2398
2399         * charisma (main): don't slice the \n off strings when we're
2400         strip()-ing it anyway.
2401         * heidi (set_suite): likewise.
2402         (process_file): likewise.
2403         * natalie (process_file): likewise.
2404
2405 2003-04-08  James Troup  <james@nocrew.org>
2406
2407         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2408         slow queries by using one LIKE '%foo%' and then matching against
2409         '%s' or '/%s$' in python.  Also only join location when we need it
2410         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2411         query, so 6s for each sourceful package.
2412
2413         * cron.daily: invoke rene and send the report to ftpmaster.
2414         * cron.daily-non-US: likewise.
2415
2416 2003-03-14  James Troup  <james@nocrew.org>
2417
2418         * utils.py (send_mail): default filename to blank.
2419         * amber (make_advisory): adapt.
2420         * jennifer (acknowledge_new): likewise.
2421         * katie.py (Katie.close_bugs): likewise.
2422         (Katie.announce): likewise.
2423         (Katie.accept): likewise.
2424         (Katie.check_override): likewise.
2425         (Katie.do_reject): likewise.
2426         * kelly (do_reject): likewise.
2427         (stable_install): likewise.
2428         * lisa (do_bxa_notification): likewise.
2429         * lauren (reject): likewise.
2430         * melanie (main): likewise.
2431
2432         * rene (add_nbs): check any NBS packages against unstable to see
2433         if they haven't been removed already.
2434
2435         * templates/katie.rejected: remove paragraph about rejected files
2436         since they're o-rwx due to c-i-m and the uploader can't do
2437         anything about them and shania will take care of them anyway.
2438
2439         * madison (usage): update usage example to use comma seperation.
2440         * melanie (usage): likewise.
2441
2442         * utils.py (split_args): new function; splits command line
2443         arguments either by space or comma (whichever is used).  Also has
2444         optional-but-default DWIM spurious space detection to avoid
2445         'command -a i386, m68k' problems.
2446         (parse_args): use it.
2447         * melanie (main): likewise.
2448
2449         * melanie (main): force the admin to tell someone if we're not
2450         doing a rene-led removal (or closing a bug, which counts as
2451         telling someone).
2452
2453 2003-03-05  James Troup  <james@nocrew.org>
2454
2455         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2456         and python sections.
2457         * katie.conf-security (Section): likewise.
2458
2459         * add_constraints.sql: add uid and uid_id_seq to grants.
2460
2461         * lisa (determine_new): also warn about adding overrides to
2462         oldstable.
2463
2464         * madison (main): make the -S/--source-and-binary query obey
2465         -s/--suite restrictions.
2466
2467 2003-03-03  James Troup  <james@nocrew.org>
2468
2469         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2470         exists, warn the user that our output might seem strange.  (People
2471         get confused by multiple versions in a suite which happens
2472         post-kelly but pre-jenna.)
2473
2474 2003-02-21  James Troup  <james@nocrew.org>
2475
2476         * kelly (main): we don't need to worry about StableRejector.
2477
2478         * melanie (main): sort versions with apt_pkg.VersionCompare()
2479         prior to output.
2480
2481         * lauren: new script to manually reject packages from
2482         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2483
2484 2003-02-20  James Troup  <james@nocrew.org>
2485
2486         * kelly (init): remove unused -m/--manual-reject argument.
2487
2488         * katie.py (Katie.force_reject): renamed from force_move to make
2489         it more explicit what this function does.
2490         (Katie.do_reject): update to match.
2491
2492         * utils.py (prefix_multi_line_string): add an optional argument
2493         include_blank_lines which defaults to 0.  If non-zero, blank lines
2494         will be includes in the output.
2495
2496         * katie.py (Katie.do_reject): don't add leading space to each line
2497         of the reject message.  Include blank lines when showing the
2498         message to the user.
2499
2500 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2501
2502         * utils.py (fix_maintainer): replace pointless re.sub() with
2503         simple string format.
2504
2505 2003-02-11  James Troup  <james@nocrew.org>
2506
2507         * lisa (edit_overrides): only strip-to-one-char and upper-case
2508         non-numeric answers.  Fixes editing of items with indices >= 10;
2509         noticed by Randall.
2510         (edit_overrides): correct order of arguments to "not a valid
2511         index" error message.
2512
2513         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2514         remove_duplicate_versions(); thanks to aj for the initial
2515         diagnosis.
2516         (remove_duplicate_versions): correct how we return
2517         dominant_versions.
2518         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2519         a tuple rather than just a tuple.
2520
2521 2003-02-10  James Troup  <james@nocrew.org>
2522
2523         * emilie: new script - sync fingerprint and uid tables with a
2524         debian.org LDAP DB.
2525
2526         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2527         in 'fingerprint'.
2528
2529         * db_access.py (get_or_set_uid_id): new function.
2530
2531         * jennifer (main): update locking to a) not used FCNTL (deprecated
2532         in python >= 2.2) and b) acknowledge upstream's broken
2533         implementation of lockf (see Debian bug #74777), c) try to acquire
2534         the lock non-blocking.
2535         * kelly (main): likewise.
2536
2537         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2538
2539         * madison (main): only append the package to new_packages if it's
2540         not already in there; fixes -S/--source-and-binary for cases where
2541         the source builds a binary package of the same name.
2542
2543 2003-02-10  Anthony Towns  <ajt@debian.org>
2544
2545         * madison (main): use explicit JOIN syntax for
2546         -S/--source-and-binary queries to reduce the query's runtime from
2547         >10 seconds to negligible.
2548
2549 2003-02-08  James Troup  <james@nocrew.org>
2550
2551         * rene (main): in the NVIU output, append items to lists, not
2552         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2553         should be removed.
2554
2555 2003-02-07  James Troup  <james@nocrew.org>
2556
2557         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2558         Sources [aj].
2559
2560         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2561         O. Benham/Adam Heath/.
2562
2563         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2564         (Suite::Stable::Description): update for 3.0r1a.
2565         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2566
2567         * utils.py (gpgv_get_status_output): rename from
2568         get_status_output().
2569
2570         * neve (check_signature): use gpgv_get_status_output and Dict from
2571         utils().  Add missing newline to error message about duplicate tokens.
2572
2573         * saffron (per_arch_space_use): also print space used by source.
2574         (output_format): correct string.join() invocation.
2575
2576         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2577
2578 2003-02-04  James Troup  <james@nocrew.org>
2579
2580         * cron.buildd: correct generation of Packages/Sources and grep out
2581         non-US/non-free as well as non-free.
2582
2583 2003-02-03  Ryan Murray  <rmurray@debian.org>
2584
2585         * cron.buildd: generate quinn-diff output with full Packages/Sources
2586           files to get out-of-date vs. uncompiled right.
2587         * apt.conf.buildd: no longer generate uncompressed files, as they
2588           are generated in cron.buildd instead
2589         * add -i option to quinn-diff to ignore binary-all packages
2590         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2591           aren't in the packages file, the arch that uploaded them will build
2592           them anyways...
2593
2594 2003-01-30  James Troup  <james@nocrew.org>
2595
2596         * rene (main): only print suggested melanie command when there's
2597         some NBS to remove.
2598
2599 2003-01-30  Ryan Murray  <rmurray@debian.org>
2600
2601         * cron.buildd: fix incorrectly inverted lockfile check
2602
2603 2003-01-29  Ryan Murray  <rmurray@debian.org>
2604
2605         * cron.buildd: generate override.sid.all3.src
2606         * apt.conf.buildd: use generated override.sid.all3.src
2607
2608 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2609
2610         * utils.py (get_status_output): moved from jennifer.
2611         (Dict): likewise.
2612         (check_signature): likewise.
2613
2614         * jennifer (get_status_output): moved to utils.py.
2615         (Dict): likewise.
2616         (check_signature): likewise.
2617
2618         * utils.py (check_signature): add an argument to specifiy which
2619         function to call when an error was found.
2620         (check_signature): document this function better.
2621
2622         * jennifer (check_files): pass the reject function as an argument
2623         to utils.check_signature.
2624         (process_it): likewise.
2625
2626 2003-01-20  James Troup  <james@nocrew.org>
2627
2628         * rene (main): lots of changes to improve the output and make it
2629         more useful.
2630
2631         * katie.py (Katie.check_override): make the override messages
2632         clearer (hopefully).
2633
2634 2002-12-26  James Troup  <james@nocrew.org>
2635
2636         * ziyi (usage): document the ability to pass suite(s) as
2637         argument(s).
2638         (main): read apt.conf after checking for -h/--help.
2639
2640         * tea (main): take the check to run as an argument.
2641
2642         * saffron.R: R script to graph daily install runs.
2643
2644         * saffron: new script; various stats functions.
2645
2646         * rhona (main): connect to the database after checking for -h/--help.
2647
2648         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2649
2650         * melanie (main): sort versions with utils.arch_compare_sw().
2651
2652         * madison (usage): alphabetize order of options.
2653         * melanie (usage): likewise.
2654
2655         * kelly (usage): fix usage short description (we aren't dinstall).
2656
2657         * julia (usage): fix usage description and alphabetize order of
2658         options.
2659
2660         * jeri (usage): fix usage short description.
2661
2662         * jennifer (main): move --help and --version checks from here...
2663         (init): to here so that they work with an empty katie.conf.
2664         * kelly: likewise.
2665
2666         * alyson (usage): new function.
2667         (main): use it.
2668         * andrea: likewise.
2669         * ashley: likewise.
2670         * cindy: likewise.
2671         * denise: likewise.
2672         * helena: likewise.
2673         * neve: likewise.
2674         * rene: likewise.
2675         * rose: likewise.
2676         * tea: likewise.
2677
2678         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2679         entry that caused tasks to be omitted from 3.0r1.
2680
2681 2002-12-10  James Troup  <james@nocrew.org>
2682
2683         * jennifer (check_files): sanity check the Depends field to ensure
2684         it's non-empty if present since apt chokes on an empty one.
2685         Thanks to Ryan Murray for the idea.
2686
2687 2002-12-08  James Troup  <james@nocrew.org>
2688
2689         * katie.conf-security (Helena::Directories): new; include accepted
2690         in addition to byhand and new.
2691
2692         * helena (process_changes_files): use utils.arch_compare_sw().
2693         Justify things based on the longest [package, version,
2694         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2695         the commas in architecture and version lists for the same reason.
2696         (main): make directories we process configurable through
2697         Helena::Directories in the config file; if that doesn't exist
2698         default to the old hardcoded values (byhand & new).
2699
2700         * utils.py (arch_compare_sw): moved here from madison.
2701         * madison (main): adjust to compensate.
2702
2703 2002-12-06  James Troup  <james@nocrew.org>
2704
2705         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2706         right filename.
2707
2708 2002-12-05  James Troup  <james@nocrew.org>
2709
2710         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2711
2712 2002-11-28  Randall Donald  <rdonald@debian.org>
2713
2714         * fernanda.py (read_control): fix typo of 'Architecture'.
2715
2716 2002-11-26  James Troup  <james@nocrew.org>
2717
2718         * lisa (check_pkg): call less with '-R' so we see the colour from
2719         Randall's fernanda changes.
2720
2721         * neve (process_sources): if Directory points to a legacy location
2722         but the .dsc isn't there; assume it's broken and look in the pool.
2723         (update_section): new, borroed from alyson.
2724         (do_da_do_da): use it.
2725         (process_packages): add suite_it to the cache key used for
2726         arch_all_cache since otherwise we only add a package to the first
2727         suite it's in and ignore any subsequent ones.
2728
2729         * katie.conf-non-US (Location): fixed to reflect reality (all
2730         suites, except old-proposed-updates (which is legacy-mixed)) are
2731         pool.
2732
2733         * utils.py (try_with_debug): wrapper for print_exc().
2734         * jenna (main): use it.
2735         * neve (main): likewise.
2736
2737 2002-11-25  Randall Donald  <rdonald@debian.org>
2738
2739         * fernanda.py (main): added -R to less command line for raw control
2740         character support to print colours
2741         (check_deb): Instead of running dpkg -I on deb file, call
2742         output_deb_info, the new colourized control reporter.
2743         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2744         of printing out each .dsc line.
2745         (output_deb_info): new function. Outputs each key/value pair from
2746         read_control except in special cases where we highlight section,
2747         maintainer, architecture, depends and recommends.
2748         (create_depends_string): new function. Takes Depends tree and looks
2749         up it's compontent via projectb db, colourizes and constructs a
2750         depends string in original order.
2751         (read_dsc): new function. reads and parses .dsc info via
2752         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2753         colourized.
2754         (read_control): new function. reads and parses control info via
2755         apt_pkg. Depends and Recommends are split in to list structures,
2756         Section and Architecture are colourized. Maintainer is colourized
2757         if it has a localhost.localdomain address.
2758         (split_depends): new function. Creates a list of lists of
2759         dictionaries of depends (package,version relation). Top list is
2760         colected from comma delimited items. Sub lists are | delimited.
2761         (get_comma_list): new function. splits string input among commas
2762         (get_or_list): new function. splits string input among | delimiters
2763         (get_depends_parts): new function. Creates dictionary of package name
2764         and version relation from dependancy string.
2765         Colours for section and depends are per component. Unfound depends
2766         are in bold. Lookups using version info is not supported yet.
2767
2768 2002-11-22  James Troup  <james@nocrew.org>
2769
2770         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2771         'udmsearch'.
2772
2773         * amber (make_advisory): string.atol() is deprecated and hasn't
2774         been ported to string methods.  Use long() instead.
2775
2776         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2777         creating the database since we'll fail badly if it's created with
2778         e.g. UNICODE encoding.
2779
2780         * rose (main): AptCnf is a global.
2781
2782         * neve (get_location_path): new function determines the location
2783         from the the first (left-most) directory of a Filename/Directory.
2784         (process_sources): don't need 'location' anymore.  Use
2785         utils.warn().  Use the Directory: field for each package to find
2786         the .dsc.  Use get_location_path() to determine the location for
2787         each .dsc.
2788         (process_packages): do't need 'location' anymore.  Use
2789         utils.warn().  Use get_location_path().
2790         (do_sources): don't need 'location', drop 'prefix' in favour of
2791         being told the full path to the Sources file, like
2792         process_packages().
2793         (do_da_do_da): main() renamed, so that main can call us in a
2794         try/except.  Adapt for the changes in do_sources() and
2795         process_packages() above.  Assume Sources and Packages file are in
2796         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2797
2798         * katie.conf-security (Location): fixed to reflect reality (all
2799         suites are pool, not legacy).
2800
2801         * utils.py (print_exc): more useful (i.e. much more verbose)
2802         traceback; a recipe from the Python cookbook.
2803         * jenna (main): use it.
2804         * neve (main): likewise.
2805
2806 2002-11-19  James Troup  <james@nocrew.org>
2807
2808         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2809         handling which was FUBAR for multi-suite uploads.  Now we just
2810         make a dictionary of destinations to copy to and iterate over
2811         those.
2812
2813         * fernanda.py (check_deb): run linda as well as lintian.
2814
2815 2002-10-21  James Troup  <james@nocrew.org>
2816
2817         * melanie (main): change X-Melanie to X-Katie and prefix it with
2818         'melanie '.
2819
2820         * lisa (main): prefix X-Katie with 'lisa '.
2821
2822         * jennifer (clean_holding): fix typo in string method changes;
2823         s/file.find(file/file.find(/.
2824
2825         * cron.daily: invoke helena and send the report to ftpmaster.
2826         * cron.daily-non-US: likewise.
2827
2828 2002-10-16  James Troup  <james@nocrew.org>
2829
2830         * kelly (check): call reject() with a blank prefix when parsing
2831         the return of check_dsc_against_db() since it does its own
2832         prefix-ing.
2833
2834         * rose: new script; only handles directory creation initally.
2835
2836         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2837         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2838
2839 2002-10-06  James Troup  <james@nocrew.org>
2840
2841         * rene (main): remove bogus argument handling.
2842
2843         * kelly: katie, renamed.
2844         * cron.daily: adapt for katie being renamed to kelly.
2845         * cron.daily-non-US: likewise.
2846         * amber (main): likewise.
2847
2848         * Changes for python 2.1.
2849
2850         * kelly: time.strftime no longer requires a second argument of
2851         "time.localtime(time.time())".
2852         * logging.py: likewise.
2853         * rhona: likewise.
2854         * shania (init): likewise.
2855
2856         * amber: use augmented assignment.
2857         * catherine (poolize): likewise.
2858         * claire.py (fix_component_section): likewise.
2859         * halle (check_changes): likewise.
2860         * helena: likewise.
2861         * jenna: likewise.
2862         * jennifer: likewise.
2863         * jeri: likewise.
2864         * katie.py: likewise.
2865         * kelly: likewise.
2866         * lisa: likewise.
2867         * madison (main): likewise.
2868         * melanie: likewise.
2869         * natalie: likewise.
2870         * neve: likewise.
2871         * rhona: likewise.
2872         * tea: likewise.
2873         * utils.py: likewise.
2874         * ziyi: likewise.
2875
2876         * amber: use .endswith.
2877         * fernanda.py: likewise.
2878         * halle (main): likewise.
2879         * jennifer: likewise.
2880         * jeri: likewise.
2881         * katie.py: likewise.
2882         * kelly: likewise.
2883         * lisa: likewise.
2884         * neve: likewise.
2885         * shania (main): likewise.
2886         * utils.py: likewise.
2887
2888         * alyson: use string methods.
2889         * amber: likewise.
2890         * andrea: likewise.
2891         * ashley: likewise.
2892         * catherine: likewise.
2893         * charisma: likewise.
2894         * claire.py: likewise.
2895         * db_access.py: likewise.
2896         * denise: likewise.
2897         * halle: likewise.
2898         * heidi: likewise.
2899         * helena: likewise.
2900         * jenna: likewise.
2901         * jennifer: likewise.
2902         * jeri: likewise.
2903         * julia: likewise.
2904         * katie.py: likewise.
2905         * kelly: likewise.
2906         * lisa: likewise.
2907         * logging.py: likewise.
2908         * madison: likewise.
2909         * melanie: likewise.
2910         * natalie: likewise.
2911         * neve: likewise.
2912         * rene: likewise.
2913         * tea: likewise.
2914         * utils.py: likewise.
2915         * ziyi: likewise.
2916
2917 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2918
2919         * utils.py (parse_changes): use <string>.startswith() rather than
2920         string.find().
2921
2922 2002-08-27  Anthony Towns  <ajt@debian.org>
2923
2924         * katie.py (in_override_p): when searching for a source override,
2925         and the dsc query misses, search for both udeb and deb overrides
2926         as well. Should fix the UNACCEPT issues with udebs.
2927
2928 2002-08-24  James Troup  <james@nocrew.org>
2929
2930         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2931         source+binary package finding code which was causing severe
2932         performance degradation with postgres 7.2.
2933
2934 2002-08-14  James Troup  <james@nocrew.org>
2935
2936         * julia (main): use the pwd.getpwall() to get system user info
2937         rather than trying to read a password file.  Add a -n/--no-action
2938         option.
2939
2940         * cron.hourly: julia no longer takes any arguments.
2941         * cron.hourly-non-US: likewise.
2942
2943 2002-08-07  James Troup  <james@nocrew.org>
2944
2945         * katie (install): handle multi-suite uploads when CopyChanges
2946         and/or CopyKatie are in use, ensuring we only copy stuff once.
2947
2948 2002-08-01  Ryan Murray  <rmurray@debian.org>
2949
2950         * wanna-build/trigger.daily: initial commit, with locking
2951         * cron.buildd: add locking against daily run
2952
2953 2002-07-30  James Troup  <james@nocrew.org>
2954
2955         * melanie (main): readd creation of suite_ids_list so melanie is
2956         remotely useful again.
2957
2958         * katie.conf: adopt for woody release; diable
2959         StableDislocationSupport, add oldstable, adjust other suites and
2960         mappings, fix up location.
2961         * katie.conf-non-US: likewise.
2962         * katie.conf-security: likewise.
2963
2964         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2965         stable.
2966         * apt.conf.stable-non-US: likewise.
2967
2968         * apt.conf-security: adapt for woody release; adding oldstable,
2969         oldstable, adjust stable and testing.
2970         * cron.daily-security: likewise.
2971         * cron.buildd-security: likewise.
2972
2973         * apt.conf: adapt for woody release; rename woody-proposed-updates
2974         to testing-proposed-updates and proposed-updates to
2975         old-proposed-updates.
2976         * apt.conf-non-US: likewise.
2977
2978         * vars-non-US (copyoverrides): add sarge.
2979         * vars (copyoverrides): likewise.
2980
2981         * vars-security (suites): add oldstable.
2982
2983 2002-07-22  Ryan Murray  <rmurray@debian.org>
2984
2985         * apt.conf.security-buildd: use suite codenames instead of
2986           distnames.
2987
2988 2002-07-16  James Troup  <james@nocrew.org>
2989
2990         * denise (main): fix filenames for testing override files.
2991
2992 2002-07-14  James Troup  <james@nocrew.org>
2993
2994         * jennifer (process_it): call check_md5sums later so we can check
2995         files in the .dsc too
2996         (check_md5sums): check files in the .dsc too.  Check both md5sum
2997         and size.
2998
2999         * melanie (main): use parse_args() and join_with_commas_and() from
3000         utils.  If there's nothing to do, say so and exit, don't ask for
3001         confirmation etc.
3002
3003         * amber (join_with_commas_and): moved from here to ...
3004         * utils.py (join_with_commas_and): here.
3005
3006 2002-07-13  James Troup  <james@nocrew.org>
3007
3008         * madison (main): use parse_args() from utils.  Support
3009         -c/--component.
3010
3011         * jenna (parse_args): moved from here to ...
3012         * utils.py (parse_args): here.
3013
3014         * katie.conf (Architectures): minor corrections to the description
3015         for arm, mips and mipsel.
3016         * katie.conf-non-US (Architectures): likewise.
3017         * katie.conf-security (Architectures): likewise.
3018
3019         * cron.daily-security: use natalie's new -a/--add functionality to
3020         flesh out the security overrides.
3021
3022 2002-07-12  James Troup  <james@nocrew.org>
3023
3024         * cron.buildd (ARCHS): add arm.
3025
3026         * katie.conf: 2.2r7 was released.
3027         * katie.conf-non-US: likewise.
3028
3029         * utils.py (parse_changes): handle a multi-line field with no
3030         starting line.
3031
3032 2002-06-25  James Troup  <james@nocrew.org>
3033
3034         * templates/amber.advisory (To): add missing email address since
3035         __WHOAMI__ is only a name.
3036
3037         * katie.conf-security (Melane::LogFile): correct to go somewhere
3038         katie has write access to.
3039         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3040         Testing.
3041
3042         * natalie: add support for -a/-add which adds packages only
3043         (ignoring changes and deletions).
3044
3045         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3046         use FindB, not get.
3047
3048 2002-06-22  James Troup  <james@nocrew.org>
3049
3050         * jennifer (check_files): validate the package name and version
3051         field.  If 'Package', 'Version' or 'Architecture' are missing,
3052         don't try any further checks.
3053         (check_dsc): likewise.
3054
3055         * utils.py (re_taint_free): add '~' as a valid character.
3056
3057 2002-06-20  Anthony Towns  <ajt@debian.org>
3058
3059         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3060
3061 2002-06-09  James Troup  <james@nocrew.org>
3062
3063         * jennifer (check_files): reduce useless code.
3064
3065         * cron.daily-security: run symlinks -dr on $ftpdir.
3066
3067         * vars-security (ftpdir): add.
3068
3069 2002-06-08  James Troup  <james@nocrew.org>
3070
3071         * neve (update_override_type): transaction is handled higher up in
3072         main().
3073         (update_priority): likewise.
3074         (process_sources): remove code that makes testing a duplicate of
3075         stable.
3076         (process_packages): likewise.
3077
3078         * templates/amber.advisory: add missing mail headers.
3079
3080         * cron.daily-security: also call apt-ftparchive clean for
3081         apt.conf.buildd-security.
3082         * cron.weekly: likewise.
3083
3084         * amber (do_upload): write out a list of source packages (and
3085         their version) uploaded for testing.
3086         (make_advisory): add more Subst mappings for the mail headers.
3087         (spawn): check for suspicious characters in the command and abort
3088         if their found.
3089
3090 2002-06-07  James Troup  <james@nocrew.org>
3091
3092         * ziyi (main): remove the 'nonus'/'security' hacks and use
3093         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3094         the lower level Release files, even if they don't exist.  fubar
3095         out if we can't open a lower level Release file for writing.
3096
3097         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3098         ziyi.
3099         * katie.conf-security (Dinstall): likewise.
3100
3101         * amber (do_upload): renamed from get_file_list().  Determine the
3102         upload host from the original component.
3103         (init): Add a -n/--no-action option.  Fix how we get changes_files
3104         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3105         sys.argv).  Add an Options global.
3106         (make_advisory): support -n/--no-action.
3107         (spawn): likewise.
3108         (main): likewise.
3109         (usage): document -n/--no-action.
3110
3111         * cron.buildd-security: fix path to Packages-arch-specific in
3112         quinn-diff invocation.
3113
3114         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3115         to proper suite names (i.e. stable, testing) rather than codenames
3116         (potato, woody).
3117         (Dinstall::DefaultSuite): likewise.
3118         (Suite): likewise.
3119         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3120         * vars-security (suites): likewise.
3121         * apt.conf-security: likewise.
3122
3123         * katie.conf-security (Component): add "updates/" prefix.
3124         (Suite::*::Components): likewise.
3125         (ComponentMappings): new; map all {ftp-master,non-US} components
3126         -> updates/<foo>.
3127
3128         * katie.conf-security (Natalie): removed; the options have
3129         defaults and ComponentPosition is used by alyson which doesn't
3130         work on security.d.o.
3131         (Amber): replace UploadHost and UploadDir with ComponentMappings
3132         which is a mapping of components -> URI.
3133         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3134         (SuiteMappings): use "silent-map" in preference to "map".
3135
3136         * cron.unchecked-security: fix call to cron.buildd-security.
3137
3138         * cron.daily-security: map local suite (stable) -> override suite
3139         (potato) when fixing overrides.  Correct component in natalie call
3140         to take into account "updates/" prefix.  Fix cut'n'waste in
3141         override.$dist.all3 generation, the old files weren't being
3142         removed, so they were endlessly growing.
3143
3144         * neve (main): don't use .Find for the CodeName since we require
3145         it.  Location::*::Suites is a ValueList.
3146         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3147         out on expired keys, just warn.
3148         (update_override_type): new function; lifted from alyson.
3149         (update_priority): likewise.
3150         (main): use update_{override_type,priority}().
3151
3152         * jennifer (check_distributions): remove redunant test for
3153         SuiteMappings; ValueList("does-not-exist") returns [] which is
3154         fine.  Add support for a "silent-map" type which doesn't warn
3155         about the mapping to the user.
3156         (check_files): add support for ComponentMappings, similar to
3157         SuiteMappings, but there's no type, just a source and a
3158         destination and the original component is stored in "original
3159         component".
3160         * katie.py (Katie.dump_vars): add "original component" as an
3161         optionsal files[file] dump variable.
3162
3163         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3164         query.  Add support for section-less legacy locations like current
3165         security.debian.org through YetAnotherConfigBoolean
3166         'LegacyStableHasNoSections'.
3167         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3168
3169         * utils.py (real_arch): moved here from ziyi.
3170         * ziyi (real_arch): moved to utils.py.
3171         * ziyi (main): likewise.
3172
3173         * claire.py (find_dislocated_stable): use real_arch() with
3174         filter() to strip out source and all.
3175         * neve (main): likewise.
3176         * rene (main): likewise.
3177         * jeri (parse_packages): likewise.
3178
3179 2002-06-06  James Troup  <james@nocrew.org>
3180
3181         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3182         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3183         doing.
3184
3185 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3186
3187         * jeri (check_joey): check if the line contains two elements
3188         before accessing the second.  Also, strip trailing spaces as well
3189         as the newline.
3190         * halle (check_joey): likewise.
3191
3192 2002-06-05  James Troup  <james@nocrew.org>
3193
3194         * cron.unchecked-security: new file; like cron.unchecked but if
3195         there's nothing to do exit so we don't call cron.buildd-security.
3196
3197         * apt.conf.buildd-security: new file.
3198
3199         * vars (archs): alphabetize.
3200         * vars-non-US (archs): likewise.
3201
3202         * vars-security: add unchecked.
3203
3204         * madison (main): reduce rather bizarrely verbose and purposeless
3205         code to print arches to a simple string.join.
3206
3207         * katie.conf (Suites::Unstable): add UdebComponents, a new
3208         valuelist of suites, used by jenna to flesh out the list of
3209         <suite>_main-debian-installer-binary-<arch>.list files generated.
3210         (Dinstall): add StableDislocationSupport, a new boolean used by
3211         jenna to enable or disable stable dislocation support
3212         (i.e. claire), as true.
3213
3214         * katie.conf (Dinstall): add StableDislocationSupport, a new
3215         boolean used by jenna to enable or disable stable dislocation
3216         support (i.e. claire), as true.
3217         * katie.conf-non-US: likewise.
3218         * katie.conf-security: likewise.
3219
3220         * cron.daily-security: generate .all3 overrides for the buildd
3221         support.  Freshen a local copy of Packages-arch-specific from
3222         buildd.debian.org.
3223
3224         * claire.py (find_dislocated_stable): disable the support for
3225         files in legacy-mixed locations since none of the Debian archives
3226         have any anymore.
3227
3228         * helena: new script; produces a report on NEW and BYHAND
3229         packages.
3230
3231         * jenna: rewritten from scratch to fix speed problems.  Run time
3232         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3233         minutes, 105 seconds are the monster query and 70 odd seconds is
3234         claire.
3235
3236         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3237         irrelevant.
3238
3239 2002-06-05  Ryan Murray  <rmurray@debian.org>
3240
3241         * cron.buildd-security: new file.
3242
3243 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3244
3245         * denise (list): take a file argument and use it.
3246         (main): don't abuse sys.stdout, just write to the file.
3247
3248         * claire.py (usage): Fix misspelling.
3249         (clean_symlink): Simplify.
3250         (find_dislocated_stable): Avoid unnecessary work.
3251
3252 2002-05-29  James Troup  <james@nocrew.org>
3253
3254         * cameron: removed; apt-ftparchive can simply walk the directory.
3255
3256 2002-05-26  Anthony Towns  <ajt@debian.org>
3257
3258         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3259         for the autobuilders.
3260
3261 2002-05-24  Ryan Murray  <rmurray@debian.org>
3262
3263         * cron.buildd: update override files before running apt-ftparchive
3264
3265 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3266
3267         * amber (main): remove extra space in prompt.
3268
3269         * utils.py (validate_changes_file_arg): use original filename in
3270         error messages.
3271
3272         * jeri (check_joey): close file after use.
3273         (parse_packages): likewise.
3274         (main): setup debug option properly.
3275
3276         * melanie (main): remove unused packages variable and simplify the
3277         code to build up con_packages by using repr().
3278
3279 2002-05-23  James Troup  <james@nocrew.org>
3280
3281         * lisa (recheck): when we reject, also return 0 so the package is
3282         skipped.
3283         (sg_compare): fix note sorting.
3284         (recheck): remove the .katie file after rejection.
3285
3286         * katie.py (Katie.accept): accepted auto-build support take 3;
3287         this time adding support for security.  Security needs a) non-pool
3288         files copied rather than symlinked since accepted is readable only
3289         by katie/security and www-data needs to be able to see the files,
3290         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3291         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3292         SecurityAcceptedAutoBuild is a new boolean which controls whether
3293         or not normal or security style is used.  The unstable_accepted
3294         table was renamed to accepted_autobuild and a suite column added.
3295         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3296         didn't have it's last_used/in_accepted flags correctly updated.
3297         * katie (install): likewise.
3298         * rhona (clean_accepted_autobuild): likewise.
3299
3300 2002-05-22  James Troup  <james@nocrew.org>
3301
3302         * lisa (sort_changes): new function; sorts changes properly.
3303         Finally.
3304         (sg_compare): new function; helper for sort_changes().  Sorts by
3305         have note and time of oldest upload.
3306         (indiv_sg_compare): new function; helper for sort_changes().
3307         Sorts by source version, have source and filename.
3308         (main): use sort_changes().
3309         (changes_compare): obsoleted; removed.
3310
3311 2002-05-20  James Troup  <james@nocrew.org>
3312
3313         * rhona (clean_accepted_autobuild): don't die if a file we're
3314         trying to remove doesn't exist.  Makes rhona more friendly to
3315         katie/katie.py crashes/bugs without any undue cost.
3316
3317 2002-05-19  James Troup  <james@nocrew.org>
3318
3319         * lisa (main): if sorting a large number of changes give some
3320         feedback.
3321         (recheck): new function, run the same checks (modulo NEW,
3322         obviously) as katie does, if they fail do the standard
3323         reject/skip/quit dance.
3324         (do_pkg): use it.
3325
3326         * katie (install): don't try to unlink the symlink in the
3327         AcceptedAutoBuild support if the destination is not a symlink (or
3328         doesn't exist).  Avoids unnecessary bombs on previous partial
3329         accepts and will still bomb hard if the file exists and isn't a
3330         symlink.
3331
3332         * utils.py: blah, commands _is_ used when the mail stuff isn't
3333         commented out like it is in my test environment.
3334
3335         * lisa (changes_compare): "has note" overrides everything else.
3336         Use .katie files rather than running parse_changes, faster and
3337         allows "has note" to work.  Correct version compare, it was
3338         reversed.  Ctime check should only kick in if the source packages
3339         are not the same.
3340         (print_new): print out and return any note.  Rename 'ret_code' to
3341         'broken'.
3342         (edit_new): renamed from spawn_editor.  Don't leak file
3343         descriptors.  Clean up error message if editor fails.
3344         (edit_note): new function, allows one to edit notes.
3345         (do_new): add note support, editing and removing.
3346         (init): kill -s/--sort; with notes we always want to use our
3347         sorting method.
3348         (usage): likewise.
3349
3350         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3351         changes field.
3352
3353         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3354         it default to 0.  Adapt tests to assume it's boolean.
3355         * fernanda.py (check_changes): adjust call appropriately.
3356         * halle (check_changes): likewise.
3357         * jennifer (check_changes): likewise.
3358         * jeri (check_changes): likewise.
3359         * shania (flush_orphans): likewise.
3360
3361         * jennifer (check_dsc): pass is_a_dsc by name when calling
3362         build_file_list() for clarity.
3363         * shania (flush_orphans): likewise.
3364         * tea (check_missing_tar_gz_in_dsc): likewise.
3365
3366         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3367         calling parse_changes() for clarity.
3368         * tea (check_dscs): likewise.
3369
3370         * utils.py (parse_changes): make dsc_whitespace_rules default to
3371         not true.
3372         * halle (check_changes): adjust call appropriately.
3373         * jennifer (check_changes): likewise.
3374         * jeri (check_changes): likewise.
3375         * lisa (changes_compare): likewise.
3376         * utils.py (changes_compare): likewise.
3377         * melanie (main): likewise.
3378         * shania (flush_orphans): likewise.
3379         * fernanda.py (check_changes): likewise.
3380
3381 2002-05-18  James Troup  <james@nocrew.org>
3382
3383         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3384         it's not useful and by and large a duplication of information
3385         available in readable format in other files.
3386
3387 2002-05-16  Ryan Murray  <rmurray@debian.org>
3388
3389         * melanie: Dir::TemplatesDir -> Dir::Templates
3390
3391 2002-05-15  Ryan Murray  <rmurray@debian.org>
3392
3393         * cameron: correct the use of os.path.join
3394
3395 2002-05-15  Anthony Towns  <ajt@debian.org>
3396
3397         * ziyi: Update to match the new format for Architectures/Components
3398         in katie.conf.
3399
3400 2002-05-14  James Troup  <james@nocrew.org>
3401
3402         * amber: new script; 'installer' wrapper script for the security
3403         team.
3404
3405         * katie.py (Katie.announce): remove unused 'dsc' local
3406         variable. (pychecker)
3407
3408         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3409
3410         * neve: don't import sys, we don't use it. (pychecker)
3411         (check_signature): fix return type mismatch. (pychecker)
3412
3413         * utils.py: don't import commands, we don't use it.  (pychecker)
3414
3415         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3416
3417         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3418         obsoleted by the change to "othercomponents" handling in jennifer
3419         detailed below.
3420         (Katie.cross_suite_version_check): new function; implements
3421         cross-suite version checking rules specified in the conf file
3422         while also enforcing the standard "must be newer than target
3423         suite" rule.
3424         (Katie.check_binary_against_db): renamed, since it's invoked once
3425         per-binary, "binaries" was inaccurate.  Use
3426         cross_suite_version_check() and don't bother with the "oldfiles"
3427         rubbish as jennifer works out "othercomponents" herself now.
3428         (Katie.check_source_against_db): use cross_suite_version_check().
3429
3430         * katie (check): the version and file overwrite checks
3431         (check_{binary,source,dsc}_against_db) are not per-suite.
3432
3433         * jennifer (check_files): less duplication of
3434         'control.Find("Architecture", "")' by putting it in a local
3435         variable.
3436         (check_files): call check_binary_against_db higher up since it's
3437         not a per-suite check.
3438         (check_files): get "othercomponents" directly rather than having
3439         check_binary_against_db do it for us.
3440
3441         * heidi (main): 'if x:', not 'if x != []:'.
3442         * katie.py (Katie.in_override_p): likewise.
3443         (Katie.check_dsc_against_db): likewise.
3444         * natalie (main): likewise.
3445         * rene (main): likewise.
3446         * ziyi (real_arch): likewise.
3447
3448         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3449         and OverrideType are now value lists, not lists.
3450         * andrea (main): likewise.
3451         * cindy (main): likewise.
3452         * claire.py (find_dislocated_stable): likewise.
3453         * denise (main): likewise.
3454         * jenna (main): likewise.
3455         * jennifer (check_distributions): likewise.
3456         (check_files): likewise.
3457         (check_urgency): likewise (Urgency::Valid).
3458         * jeri (parse_packages): likewise.
3459         * neve (main): likewise (and Location::%s::Suites).
3460         * rene (main): likewise.
3461
3462 2002-05-13  James Troup  <james@nocrew.org>
3463
3464         * katie.py (Katie.check_source_against_db): correct case of reject
3465         message to be consistent with binary checks.
3466
3467         * jennifer (get_status_output): don't leak 2 file descriptors per
3468         invocation.
3469         (check_signature): add missing '\n' to "duplicate status token"
3470         error message.
3471
3472 2002-05-09  James Troup  <james@nocrew.org>
3473
3474         * utils.py (validate_changes_file_arg): new function; validates an
3475         argument which should be a .changes file.
3476         * ashley (main): use it.
3477         * lisa (main): likewise.
3478
3479         * katie.py (Katie.check_dsc_against_db): since there can be more
3480         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3481         entry still exists in files.
3482
3483         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3484         files, since check_dsc_against_db() deletes the .orig.tar.gz
3485         entry.
3486
3487         * cameron: cleanups.
3488
3489         * utils.py (changes_compare): change sort order so that source
3490         name and source version trump 'have source'; this should fix
3491         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3492         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3493         by Ryan.
3494
3495         * lisa (main): allow the arguments to be .katie files too.
3496
3497 2002-05-07  Ryan Murray  <rmurray@debian.org>
3498
3499         * cron.buildd: add s390 to arch list again
3500
3501 2002-05-05  Ryan Murray  <rmurray@debian.org>
3502
3503         * cron.buildd: new script, update w-b database from unstable_accepted
3504         table
3505         * cameron: new script, take list in unstable_accepted and write out
3506         a file list for apt-ftparchive
3507         * apt.conf.buildd: new apt configuration for Packages/Sources for
3508         unstable_accepted
3509         * vars: add s390 to arch list.
3510
3511 2002-05-03  James Troup  <james@nocrew.org>
3512
3513         * neve (main): don't hard code the calling user as that doesn't
3514         work with modern postgres installs.  Fix psql invocation for
3515         init_pool.sql (database name required).  Dont' hard code the
3516         database name.
3517         (process_sources): add support for fingerprint and install_date.
3518         (process_packages): add support for fingerprint.
3519         (do_sources): pass in the directory, fingerprint support needs it.
3520         (get_status_output): borrowed from jennifer.
3521         (reject): likewise.
3522         (check_signature): likewise.
3523
3524         * katie (install): only try to log urgencies if Urgency_Logger is
3525         defined.
3526         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3527         defined; only close Urgency_Logger if it's defined.
3528
3529         * catherine (poolize): adapt for Dir rationalization.
3530         * claire.py (find_dislocated_stable): likewise.
3531         * denise (main): likewise.
3532         * halle (check_joey): likewise.
3533         * jenna: likewise.
3534         * jennifer: likewise.
3535         * jeri: likewise.
3536         * katie.py: likewise.
3537         * katie: likewise.
3538         * lisa (do_bxa_notification): likewise.
3539         * logging.py (Logger.__init__): likewise
3540         * rene (main): likewise.
3541         * rhona (clean): likewise.
3542         * shania (init): likewise.
3543         * tea: likewise.
3544         * ziyi: likewise.
3545
3546         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3547         FindB, not FindI.
3548
3549         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3550         boolean, use FindB, not get.
3551
3552         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3553         .orig.tar.gz's which are an exact (size/md5sum) match.
3554
3555         * ashley (main): really allow *.katie files as arguments too;
3556         noticed by aj.
3557
3558         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3559
3560 2002-05-03  Anthony Towns  <ajt@debian.org>
3561
3562         * ziyi: support for security.
3563
3564 2002-05-02  James Troup  <james@nocrew.org>
3565
3566         * jennifer (accept): call Katie.check_override() unconditional as
3567         no-mail check moved into that function.
3568         (do_byhand): likewise.
3569
3570         * katie.py (Katie.check_override): don't do anything if we're a)
3571         not sending mail or b) the override disparity checks have been
3572         disbled via Dinstall::OverrideDisparityCheck.
3573
3574         * jennifer (check_files): don't hard code Unstable as the suite
3575         used to check for architecture validity; use
3576         Dinstall::DefaultSuite instead, if it exists.
3577         (accept): conditionalize
3578
3579         * katie.py (Katie.update_subst): support global maintainer
3580         override with Dinstall::OverrideMaintainer.
3581
3582         * jennifer (check_distributions): new function, Distribution
3583         validation and mapping.  Uses new SuiteMappings variable from
3584         config file to abstract suite mappings.
3585         (check_changes): call it.
3586
3587         * natalie: renamed; nothing imports or likely will for some time.
3588
3589         * denise (main): remove unused natalie import and init().
3590
3591         * natalie.py (init): removed.
3592         (main): initalize here instead and don't hardcode the database
3593         name.
3594
3595 2002-04-30  James Troup  <james@nocrew.org>
3596
3597         * katie.py (Katie.close_bugs): new function, split out from
3598         announce().
3599         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3600         true.
3601         (Katie.close_bugs): new function, split out
3602         (Katie.close_bugs): return immediately if there are no bugs to
3603         close.
3604
3605         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3606         * katie (do_reject): likewise.
3607         (stable_install): likewise.
3608         * katie.py (Katie.announce): likewise.
3609         (Katie.accept): likewise.
3610         (Katie.check_override): likewise.
3611         (Katie.do_reject): likewise.
3612         * lisa (do_bxa_notification): likewise.
3613         * melanie (main): likewise.
3614
3615         * utils.py (TemplateSubst): change second argument to be a
3616         filename rather than a template since every caller opened a file
3617         on the fly which was ugly and leaked file descriptor.
3618
3619 2002-04-29  James Troup  <james@nocrew.org>
3620
3621         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3622         <hertzog@debian.org> to send 'accepted' announce mails to the
3623         PTS. [#128140]
3624
3625 2002-04-24  James Troup  <james@nocrew.org>
3626
3627         * init_pool.sql (unstable_accepted): add two new fields to
3628         unstable_accepted; in_accepted is a boolean indicating whether or
3629         not the file is in accepted and last_used is a timestamp used by
3630         rhona to determine when to remove symlinks for installed packages.
3631
3632         * katie.py (Katie.accept): auto-build support take 2.  Create
3633         symlinks for all files into a seperate directory.  Add files to
3634         unstable_accepted as paths to the new directory; mark them as
3635         being in accepted for cameron.  Properly conditionalize it on a
3636         configuration variable.
3637
3638         * katie (install): likewise.  Update symlinks to point into the
3639         pool; mark the files for later deletion by rhona and mark them as
3640         not being in accepted for cameron.
3641
3642         * rhona (clean_accepted_autobuild): new function.
3643
3644 2002-04-22  James Troup  <james@nocrew.org>
3645
3646         * jennifer (check_files): handle db_access.get_location_id()
3647         returning -1 properly/better.
3648
3649         * rhona (clean_fingerprints): new function.
3650
3651 2002-04-21  James Troup  <james@nocrew.org>
3652
3653         * utils.py (touch_file): unused; remove.
3654         (plural): likewise.
3655
3656         * jennifer (check_files): close file descriptor used to get the
3657         control file.
3658         (check_md5sums): likewise.
3659         (callback): likewise.
3660
3661         * katie.py (Katie.do_reject): handle manual rejects much better;
3662         call the editor first and get confirmation from the user before
3663         proceeding.
3664
3665         * jennifer (check_signature): prefix_multi_line_string() moved to
3666         utils.
3667
3668         * utils.py (prefix_multi_line_string): moved here from jennifer.
3669
3670 2002-04-20  James Troup  <james@nocrew.org>
3671
3672         * lisa (main): handle non-existent files.
3673
3674         * ashley (main): allow *.katie files as arguments too.
3675
3676 2002-04-19  James Troup  <james@nocrew.org>
3677
3678         * katie.py (Katie.accept): add stuff to help auto-building from
3679         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3680         in the pool), create a symlink to it in the accepted directory and
3681         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3682
3683         * katie (install): undo the "auto-building from accepted" stuff
3684         (i.e. remove the .orig.tar.gz symlink and remove the files from
3685         unstable_accepted table).
3686
3687 2002-04-16  James Troup  <james@nocrew.org>
3688
3689         * jennifer (upload_too_new): fix typo which was causing all
3690         timestamp comparisons to be against the .changes file.  Also move
3691         back to the original directory so we do the comparisons against
3692         accurate timestamps.
3693
3694         * tea (check_missing_tar_gz_in_dsc): new function.
3695
3696         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3697         file mentioned in the .dsc.
3698
3699         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3700         way mails reach debian-{devel-,}changes@l.d.o.
3701
3702 2002-04-02  Ryan Murray  <rmurray@debian.org>
3703
3704         * cron.daily: run shania after rhona
3705         * cron.daily-non-US: likewise.
3706
3707 2002-04-01  James Troup  <james@nocrew.org>
3708
3709         * katie: re-add proposed-updates/stable install support.
3710
3711         * katie.py (Katie.dump_vars): add changes["changes"] as an
3712         optional field; should be mandatory later.
3713
3714 2002-03-31  James Troup  <james@nocrew.org>
3715
3716         * katie (install): support a Suite::<foo>::CopyKatie similar to
3717         CopyChanges.  Done seperately because .katie files don't need to
3718         be mirrored and will probably be copied to another directory as a
3719         result.
3720
3721         * halle (main): add missing debug to options.
3722
3723 2002-03-29  James Troup  <james@nocrew.org>
3724
3725         * madison (main): add a -r/--regex option.
3726
3727 2002-03-26  James Troup  <james@nocrew.org>
3728
3729         * lisa: don't trample on changes["distribution"]; make a copy of
3730         it as changes["suite"] instead and use that.
3731
3732 2002-03-16  Anthony Towns  <ajt@debian.org>
3733
3734         * templates/lisa.bxa_notification: Fix some grammatical errors.
3735         Encourage contact via bxa@ftp-master email address.
3736
3737 2002-03-15  James Troup  <james@nocrew.org>
3738
3739         * jennifer (check_timestamps): remove bogus raise in except.
3740
3741 2002-03-15  Anthony Towns  <ajt@debian.org>
3742
3743         * cron.monthly: rotate mail/archive/bxamail as well as
3744         mail/archive/mail. This is for a complete archive of
3745         correspondence with the BXA.
3746
3747 2002-03-14  Anthony Towns  <ajt@debian.org>
3748
3749         * crypto-in-main changes.
3750
3751         * utils.py (move, copy): add an optional perms= parameter to let you
3752         set the resulting permissions of the moved/copied file
3753         * katie.py (force_move): rejected/morgued files should be unreadable
3754         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3755         should be unreadable.
3756
3757 2002-03-07  Ryan Murray  <rmurray@debian.org>
3758
3759         * katie (install): check for existance of "files id" key as well as
3760         it being set to a valid value.
3761         * katie (install): check for existense and valid value for location
3762         id as well
3763
3764 2002-03-05  Ryan Murray  <rmurray@debian.org>
3765
3766         * katie.py (do_reject): reread the reason file after editing it.
3767
3768 2002-02-25  James Troup  <james@nocrew.org>
3769
3770         * jennifer (check_changes): don't enforce sanity in .changes file
3771         names since it doesn't seem to be possible; pcmica-cs and similar
3772         freak show packages in particular cause real problems.
3773
3774         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3775         each dsc_file since the .orig.tar.gz checking code now uses it as
3776         a boolean.  Fixes bizarro rejections which bogusly claimed
3777         .diff.gz md5sum/size was incorrect.
3778
3779 2002-02-24  James Troup  <james@nocrew.org>
3780
3781         * katie (process_it): reset reject_message.
3782
3783 2002-02-22  James Troup  <james@nocrew.org>
3784
3785         * db_access.py(set_files_id): disable use of
3786         currval('files_id_seq') because it was taking 3 seconds on auric
3787         which is insane (most calls take < 0.01) and simply call
3788         get_files_id() for the return value instead.
3789
3790         * katie.py (Katie.do_query): convenience function; unused by
3791         default, useful for profiling.
3792         * db_access.py (do_query): likewise.
3793
3794         * katie (install): fix insert SQL call when binary has no source.
3795
3796         * lisa (determine_new): auto-correct non-US/main to non-US.
3797         (determine_new): add a warning when adding things to stable.
3798         (edit_index): use our_raw_input().
3799         (edit_overrides): likewise.
3800         (do_new): likewise.  Use re.search() not re.match() since the
3801         default answer may not be the first one.
3802         (do_byhand): likewise.
3803         (do_new): Default to 'S'kip and never 'A'dd.
3804
3805         * jennifer (action): pass prompt to our_raw_input().
3806         * melanie (game_over): likewise.
3807         * katie (action): likewise.
3808
3809         * utils.py (our_raw_input): add an optional prompt argument to
3810         make the function more usable as a drop in replacement for
3811         raw_input().
3812
3813         * jennifer (check_files): correct reject() to not double prefix
3814         when using katie.py based functions.
3815         (check_dsc): likewise.
3816
3817         * katie.py (Katie.reject): prepend a new line if appropriate
3818         rathen than appending one to avoid double new lines when caller
3819         adds one of his own.
3820
3821         * lisa (determine_new): warn if the package is also in other
3822         components.
3823
3824 2002-02-20  James Troup  <james@nocrew.org>
3825
3826         * jennifer (check_files): if .changes file lists "source" in
3827         Architecture field, there must be a .dsc.
3828
3829 2002-02-15  James Troup  <james@nocrew.org>
3830
3831         * ashley (main): add some missing fields.
3832
3833         * katie.py (Katie.check_dsc_against_db): fix to take into account
3834         the fact that the .orig.tar.gz might be in byhand, accepted or
3835         new.  Also fix calling of reject().
3836         (Katie.check_binaries_against_db): fix calling of reject().
3837         (Katie.check_source_against_db): likewise.
3838         (Katie.dump_vars): add missing variables used for bug closures.
3839
3840         * lisa (changes_compare_by_time): sort by reverse time.
3841
3842         * katie.py (Katie.accept): log.
3843         (Katie.dump_vars): missing has_key test for optional changes fields.
3844
3845         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3846         (process_it): traceback goes to stderr, not stdout.
3847         (acknowledge_new): log.
3848         (do_byhand): likewise.
3849
3850         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3851
3852         * add_constraints.sql: add grants for the new fingerprint table.
3853
3854 2002-02-13  James Troup  <james@nocrew.org>
3855
3856         * katie (do_reject): basename the .changes filename before trying
3857         to use it to construct the .reason filename.
3858         (process_it): call Katie.update_subst() so do_reject() DTRT with
3859         the mail template.
3860         (do_reject): setup the mail template correctly.
3861
3862 2002-02-12  James Troup  <james@nocrew.org>
3863
3864         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3865         (check_files): don't abuse global dictionaries.
3866         (Ent): use all variables.
3867         (check_timestamps): don't abuse global dictionaries.
3868
3869         * fernanda.py: renamed to .py so lisa can import it.
3870         (check_dsc): remove unused local variables (pychecker).
3871         (display_changes): split off from check_changes.
3872
3873         * katie: rewritten; most of the functionality moves to jennifer;
3874         what's left is the code to install packages once a day from the
3875         'accepted' directory.
3876
3877         * jennifer: new program, processes packages in 'unchecked'
3878         (i.e. most of the non-install functionality of old katie).
3879
3880         * katie.py: common functions shared between the clique of
3881         jennifer, lisa and katie.
3882
3883         * lisa: new program; handles NEW and BYHAND packages.
3884
3885         * jeri (usage): new function.
3886         (main): use it.
3887         (check_package): remove unused local variable (pychecker).
3888
3889         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3890         binaries and source.  Add install_date to source.
3891
3892         * halle (usage): new function.
3893         (main): use it.  Remove unused options.
3894         (check_changes): remove unused local variable (pychecker).
3895
3896         * add_constraints.sql: add fingerprint references.
3897
3898         * db_access.py (get_or_set_fingerprint_id): new function.
3899
3900         * ashley (main): new program; dumps the contents of a .katie file
3901         to stdout.
3902
3903         * alyson (main): remove option handling since we don't actually
3904         support any.
3905         * cindy (main): likewise.
3906
3907         * remove unnecessary imports and pre-define globals (pychecker).
3908
3909 2002-02-11  Anthony Towns  <ajt@debian.org>
3910
3911         * added installation-report and upgrade-report pseudo-packages
3912
3913 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3914
3915         * katie (update_subst): use Dinstall::TrackingServer.
3916         * melanie (main): likewise.
3917
3918 2002-01-27  James Troup  <james@nocrew.org>
3919
3920         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3921         noticing, jgg@ for fix.
3922
3923 2002-01-19  James Troup  <james@nocrew.org>
3924
3925         * utils.py (extract_component_from_section): handle non-US
3926         non-main properly.
3927
3928 2002-01-12  James Troup  <james@nocrew.org>
3929
3930         * madison: add support for -S/--source-and-binary which displays
3931         information for the source package and all it's binary children.
3932
3933 2002-01-13  Anthony Towns  <ajt@debian.org>
3934
3935         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3936         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3937           and 2002 key ids.
3938         * katie.conf-non-US: Likewise.
3939         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3940           multiple keys automatically. This is probably only useful for
3941           transitioning from an expired (or revoked?) key.
3942
3943 2002-01-08  Ryan Murray  <rmurray@debian.org>
3944
3945         * debian/python-dep: new file that prints out python:Depends for
3946           substvars
3947         * debian/control: use python:Depends, build-depend on python
3948           lower Depends: on postgresql to Suggests:
3949         * debian/rules: determine python version, install to the correct
3950           versioned dir
3951
3952 2001-12-18  Anthony Towns  <ajt@debian.org>
3953
3954         * ziyi: unlink Release files before overwriting them (in case they've
3955           been merged)
3956         * ziyi: always include checksums/sizes for the uncompressed versions
3957           of Sources and Packages, even if they're not present on disk
3958
3959 2001-11-26  Ryan Murray  <rmurray@debian.org>
3960
3961         * ziyi (main): add SigningPubKey config option
3962         * katie.conf: use SigningPubKey config option
3963         * katie.conf-non-US: likewise
3964
3965 2001-11-24  James Troup  <james@nocrew.org>
3966
3967         * katie (acknowledge_new): log newness.
3968
3969 2001-11-24  Anthony Towns  <ajt@debian.org>
3970
3971         * ziyi (real_arch): bail out if some moron forgot to reset
3972         untouchable on stable.
3973         (real_arch): source Release files.
3974
3975 2001-11-19  James Troup  <james@nocrew.org>
3976
3977         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3978         utils.get_conf().
3979         * shania (main): likewise.
3980
3981         * rhona (main): add default options.
3982
3983         * db_access.py (get_archive_id): case independent.
3984
3985         * katie (action): sort files so that ordering is consistent
3986         between mails; noticed/requested by Joey.
3987
3988 2001-11-17  Ryan Murray  <rmurray@debian.org>
3989
3990         * utils.py: add get_conf function, change startup code to read all
3991           config files to the Cnf that get_conf returns
3992           use the component list from the katie conf rather than the hardcoded
3993           list.
3994         * all scripts: use new get_conf function
3995         * shania: fix try/except around changes files
3996         * jenna: only do debian-installer if it is a section in Cnf
3997
3998 2001-11-16  Ryan Murray  <rmurray@debian.org>
3999
4000         * shania (main): Initialize days to a string of a number.
4001                  (main): Initialize Cnf vars before reading in Cnf
4002
4003 2001-11-14  Ryan Murray  <rmurray@debian.org>
4004
4005         * shania (main): Initialize days to a number.
4006
4007 2001-11-04  James Troup  <james@nocrew.org>
4008
4009         * docs/Makefile: use docbook-utils' docbook2man binary.
4010
4011         * Change all "if foo == []" constructs into "if not foo".
4012
4013         * katie (check_changes): when installing into stable from
4014         proposed-updates, remove all non-stable target distributions.
4015         (check_override): don't check for override disparities on stable
4016         installs.
4017         (stable_install): update install_bytes appropriately.
4018         (reject): stable rejection support; i.e. don't remove files when
4019         rejecting files in the pool, rather remove them from the
4020         proposed-update suite instead, rhona will do the rest.
4021         (manual_reject): support for a stable specific template.
4022         (main): setup up stable rejector in subst.
4023
4024 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4025
4026         * debian/control (Build-Depends): docbook2man has been superseded
4027         by docbook-utils.
4028
4029         * neve (main): exit with a more useful error message.
4030         (update_suites): Suite::<suite>::Version, Origin and Description
4031         are not required, so don't fail if they don't exist.
4032
4033         * db_access.py (get_archive_id): return -1 on error rather than
4034         raise an exception.
4035         (get_location_id): likewise.
4036
4037         * madison (main): don't exit on the first not-found package,
4038         rather exit with an appropriate return code after processing all
4039         packages.
4040
4041 2001-11-03  James Troup  <james@nocrew.org>
4042
4043         * claire.py (find_dislocated_stable): add per-architecture
4044         symlinks for dislocated architecture: all debs.
4045
4046 2001-10-19  Anthony Towns  <ajt@debian.org>
4047
4048         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4049
4050 2001-10-10  Anthony Towns  <ajt@debian.org>
4051
4052         * claire.py (fix_component_section): do _not_ assign to None under
4053         any circumstances
4054
4055 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4056
4057         * melanie (main): don't duplicate architectures when removing from
4058         more than one suite.
4059
4060         * heidi (main, process_file, get_list): report suite name not ID.
4061
4062         * naima (nmu_p): be case insensitive.
4063
4064         * naima (action): more list handling clean ups.
4065
4066         * melanie (main): clean up lists handling to use string.join and
4067         IN's.
4068
4069         * madison (main): clean up suite and architecture argument parsing
4070         to use slices less and string.join more.
4071
4072         * utils.py (parse_changes): Use string.find() instead of slices for
4073         string comparisons thereby avoid hardcoding the length of strings.
4074         * ziyi (main): likewise.
4075
4076 2001-10-07  James Troup  <james@nocrew.org>
4077
4078         * Remove mode argument from utils.open_files() calls if it's the
4079         default, i.e. 'r'.
4080
4081 2001-09-27  James Troup  <james@nocrew.org>
4082
4083         * katie (init): new function; options clean up.
4084         (usage): add missing options, remove obsolete ones.
4085         (main): adapt for the two changes above.  If the lock file or
4086         new-ack log file don't exist, create them.  Don't try to open the
4087         new-ack log file except running in new-ack mode.
4088
4089         * alyson (main): initialize all the tables that are based on the
4090         conf file.
4091
4092         * utils.py (touch_file): like touch(1).
4093         (where_am_i): typo.
4094
4095         * catherine (usage): new.
4096         (main): use it.  options cleanup.
4097         * claire.py: likewise.
4098         * fernanda: likewise.
4099         * heidi: likewise.
4100         * jenna: likewise.
4101         * shania: likewise.
4102         * ziyi: likewise.
4103
4104         * andrea: options cleanup.
4105         * charisma: likewise.
4106         * julia: likewise.
4107         * madison: likewise.
4108         * melanie: likewise.
4109         * natalie: likewise.
4110         * rhona: likewise.
4111         * tea: likewise.
4112
4113 2001-09-26  James Troup  <james@nocrew.org>
4114
4115         * utils.py: default to sane config file locations
4116         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4117         or they can point to the real ones through use of a new Config
4118         section.  Based on an old patch by Adam Heath.
4119         (where_am_i): use the new default config stuff.
4120         (which_conf_file): likewise.
4121         (which_apt_conf_file): likewise.
4122
4123         * charisma (main): output defaults to
4124         `Package~Version\tMaintainer'; input can be of either form.  When
4125         parsing the new format do version comparisons, when parsing the
4126         old format assume anything in the extra file wins.  This fixes the
4127         problem of newer non-US packages being overwhelmed by older
4128         versions still in stable on main.
4129
4130 2001-09-17  James Troup  <james@nocrew.org>
4131
4132         * natalie.py (list): use result_join().
4133
4134         * denise (main): result_join() moved to utils.
4135
4136         * utils.py (result_join): move to utils; add an optional seperator
4137         argument.
4138
4139 2001-09-14  James Troup  <james@nocrew.org>
4140
4141         * heidi (set_suite): new function; does --set like natalie does,
4142         i.e. turns it into a sequence of --add's and --remove's
4143         internally.  This is a major win (~20 minute run time > ~20
4144         seconds) in the common, everday (i.e. testing) case.
4145         (get_id): common code used by set_suite() and process_file().
4146         (process_file): call set_suite() and get_id().
4147         (main): add logging support.
4148
4149         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4150         files.
4151
4152         * utils.py (parse_changes): use slices or simple string comparison
4153         in favour of regexes where possible.
4154
4155         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4156         fact that the string VARDATA() points to are not null terminated.
4157
4158         * denise (result_join): new function; like string.join() but
4159         handles None's.
4160         (list): use it.
4161         (main): likewise.
4162
4163         * charisma (main): python-pygresql 7.1 returns None not "".
4164
4165 2001-09-14  Ryan Murray  <rmurray@debian.org>
4166
4167         * natalie.py (list): handle python-pygresql 7.1 returning None.
4168
4169 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4170
4171         * madison (main): return 1 if no package is found.
4172
4173 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4174
4175         * madison (main): better error handling for incorrect
4176         -a/--architecture or -s/--suite arguments.
4177         (usage): new.
4178         (main): use it.
4179
4180 2001-09-05  Ryan Murray  <rmurray@debian.org>
4181
4182         * charisma, madison, katie: remove use of ROUser
4183         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4184
4185 2001-08-26  James Troup  <james@nocrew.org>
4186
4187         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4188         maintained packages at cjwatson@'s request.
4189
4190 2001-08-21  James Troup  <james@nocrew.org>
4191
4192         * madison (main): add -a/--architecture support.
4193
4194         * jenna: use logging instead of being overly verbose on stdout.
4195
4196 2001-08-11  Ryan Murray  <rmurray@debian.org>
4197
4198         * melanie: add functional help option
4199
4200 2001-08-07  Anthony Towns  <ajt@debian.org>
4201
4202         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4203
4204 2001-07-28  James Troup  <james@nocrew.org>
4205
4206         * katie (check_dsc): ensure source version is >> than existing
4207         source in target suite.
4208
4209 2001-07-25  James Troup  <james@nocrew.org>
4210
4211         * natalie.py: add logging support.
4212
4213         * utils.py (open_file): make the second argument optional and
4214         default to read-only.
4215
4216         * rene (main): work around broken source packages that duplicate
4217         arch: all packages with arch: !all packages (no longer allowed
4218         into the archive by katie).
4219
4220 2001-07-13  James Troup  <james@nocrew.org>
4221
4222         * katie (action): don't assume distribution is a dictionary.
4223         (update_subst): don't assume architecture is a dictionary and that
4224         maintainer822 is defined.
4225         (check_changes): recognise nk_format exceptions.
4226         (check_changes): reject on 'testing' only uploads.
4227         (check_files): when checking to ensure all packages are newer
4228         versions check against arch-all packages too.
4229         (check_dsc): enforce the existent of a sane set of mandatory
4230         fields.  Ensure the version number in the .dsc (modulo epoch)
4231         matches the version number in the .changes file.
4232
4233         * utils.py (changes_compare): ignore all exceptions when parsing
4234         the changes files.
4235         (build_file_list): don't UNDEF on a changes file with no format
4236         field.
4237
4238 2001-07-07  James Troup  <james@nocrew.org>
4239
4240         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4241         rather than 'changedbyname' to avoid false negatives on uploads
4242         with an email-address-only Changed-By field.
4243         (check_dsc): don't overwrite reject_message; append to it.
4244         (check_signature): likewise.
4245         (check_changes): likewise.
4246         (announce): condition logging on 'action'.
4247
4248         * logging.py: new logging module.
4249
4250         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4251         sub-tree into a separate (global) variable.
4252         (check_dsc): ensure format is 1.0 to retain backwards
4253         compatability with dpkg-source in potato.
4254         (main): only try to obtain the lock when not running in no-action
4255         mode.
4256         Use the new logging module.
4257
4258         * christina: initial version; only partially usable.
4259
4260 2001-06-28  Anthony Towns  <ajt@debian.org>
4261
4262         * apt.conf: Add ExtraOverrides to auric.
4263
4264 2001-06-25  James Troup  <james@nocrew.org>
4265
4266         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4267         they preferred the name 'Uploaders'.
4268
4269 2001-06-23  James Troup  <james@nocrew.org>
4270
4271         * katie (check_files): fix typo in uncommon rejection message,
4272         s/sourceversion/source version/.
4273
4274         * denise (main): we can't use print because stdout has been
4275         redirected.
4276
4277         * katie (source_exists): new function; moved out of check_files()
4278         and added support for binary-only NMUs of earlier sourceful NMUs.
4279
4280         * rhona (clean): find_next_free has moved.
4281
4282         * utils.py (find_next_free): new function; moved here from rhona.
4283         Change too_many to be an argument with a default value, rather
4284         than a hardcoded variable.
4285
4286         * shania: rewritten to work better; REJECTion reminder mail
4287         handling got lost though.
4288
4289 2001-06-22  James Troup  <james@nocrew.org>
4290
4291         * rhona (main): remove unused override code.
4292
4293         * fernanda (main): remove extraneous \n's from utils.warn calls.
4294         * natalie.py (list): likewise.
4295
4296         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4297         use utils.{warn,fubar} where appropriate.
4298
4299 2001-06-21  James Troup  <james@nocrew.org>
4300
4301         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4302         functionality.
4303         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4304         by the "Maintainers" field in the .dsc file and maintainer groups.
4305         (nmu_p.__init__): read in the list of group maintainer names.
4306         (announce): use nmu_p.
4307
4308 2001-06-20  James Troup  <james@nocrew.org>
4309
4310         * rene (main): hardcode the suite experimental is compared to by
4311         name rather than number.
4312
4313         * katie (check_files): differentiate between doesn't-exist and
4314         permission-denied in "can not read" rejections; requested by edd@.
4315         (check_dsc): use os.path.exists rather than os.access to allow the
4316         above check to kick in.
4317
4318         * heidi (process_file): read all input before doing anything and
4319         use transactions.
4320
4321 2001-06-15  James Troup  <james@nocrew.org>
4322
4323         * fernanda: new script; replaces old 'check' shell script
4324         nastiness.
4325
4326 2001-06-14  James Troup  <james@nocrew.org>
4327
4328         * katie: actually import traceback module to avoid amusing
4329         infinite loop.
4330
4331 2001-06-10  James Troup  <james@nocrew.org>
4332
4333         * utils.py (extract_component_from_section): fix to handle just
4334         'non-free' and 'contrib'.  Also fix to handle non-US in a
4335         completely case insensitive manner as a component.
4336
4337 2001-06-08  James Troup  <james@nocrew.org>
4338
4339         * madison (arch_compare): sort function that sorts 'source' first
4340         then alphabetically.
4341         (main): use it.
4342
4343 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4344
4345         * catherine (poolize): explicitly make poolized_size a long so it
4346         doesn't overflow when poolizing e.g. entire archives.
4347
4348 2001-06-01  James Troup  <james@nocrew.org>
4349
4350         * utils.py (send_mail): throw exceptions rather than exiting.
4351
4352         * katie (process_it): catch exceptions and ignore them.
4353
4354 2001-06-01  Michael Beattie  <mjb@debian.org>
4355
4356         * added update-mailingliststxt and update-readmenonus to update
4357         those files, respectively. modified cron.daily{,-non-US} to
4358         use them.
4359
4360 2001-05-31  Anthony Towns  <ajt@debian.org>
4361
4362         * rhona: make StayOfExecution work.
4363
4364 2001-05-31  James Troup  <james@nocrew.org>
4365
4366         * rhona (find_next_free): fixes to not overwrite files but rename
4367         them by appending .<n> instead.
4368         (clean): use find_next_free and use dated sub-directories in the
4369         morgue.
4370
4371         * utils.py (move): don't overwrite files unless forced to.
4372         (copy): likewise.
4373
4374 2001-05-24  James Troup  <james@nocrew.org>
4375
4376         * katie (check_files): determine the source version here instead
4377         of during install().
4378         (check_files): check for existent source with bin-only NMU
4379         support.
4380         (main): sort the list of changes so that the source-must-exist
4381         check Does The Right Thing(tm).
4382
4383         * utils.py (changes_compare): new function; sorts a list of
4384         changes files by 'have-source', source, version.
4385         (cc_fix_changes): helper function.
4386         (parse_changes): use compiled regexes.
4387         (fix_maintainer): likewise.
4388
4389         * rene (main): warn about packages in experimental that are
4390         superseded by newer versions in unstable.
4391
4392 2001-05-21  James Troup  <james@nocrew.org>
4393
4394         * rene (main): add support for checking for ANAIS (Architecture
4395         Not Allowed In Source) packages.
4396
4397 2001-05-17  James Troup  <james@nocrew.org>
4398
4399         * katie (check_changes): initalize `architecture' dictionary in
4400         changes global so that if we can't parse the changes file for
4401         whatever reason we don't undef later on.
4402
4403         * utils.py (parse_changes): fix handling of multi-line fields
4404         where the first line did have data.
4405
4406 2001-05-05  Anthony Towns  <ajt@debian.org>
4407
4408         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4409         (It should always have been there. Ooopsy.)
4410
4411 2001-05-03  Anthony Towns  <ajt@debian.org>
4412
4413         * jenna: Cleanup packages that move from arch:any to arch:all or
4414         vice-versa.
4415
4416 2001-04-24  Anthony Towns  <ajt@debian.org>
4417
4418         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4419         cope with debian-installer and boot-floppies' md5sum.txt.
4420
4421 2001-04-16  James Troup  <james@nocrew.org>
4422
4423         * katie (check_changes): add missing %s format string argument.
4424         (stable_install): temporary work around for morgue location to
4425         move installed changes files into.
4426         (stable_install): helps if you actually read in the template.
4427         (manual_reject): fix for editing of reject messages which was
4428         using the wrong variable name.
4429
4430         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4431
4432 2001-04-13  James Troup  <james@nocrew.org>
4433
4434         * katie (manual_reject): Cc the installer.
4435         (reject): don't.
4436         (check_changes): remove unused maintainer-determination code.
4437         (update_subst): add support for Changed-By when setting the
4438         *MAINTAINER* variables.
4439
4440         * rene (bar): new function to check for packages on architectures
4441         when they shouldn't be.
4442
4443         * natalie.py (main): use fubar() and warn() from utils.
4444
4445         * utils.py (whoami): new mini-function().
4446         * melanie (main): use it.
4447         * katie (manual_reject): likewise.
4448
4449 2001-04-03  James Troup  <james@nocrew.org>
4450
4451         * katie (action): ignore exceptions from os.path.getmtime() so we
4452         don't crash on non-existent changes files (e.g. when they are
4453         moved between the start of the install run in cron.daily and the
4454         time we get round to processing them).
4455
4456         * madison (main): also list source and accept -s/--suite.
4457
4458         * jenna (generate_src_list): missing \n in error message.
4459
4460         * katie (update_subst): add sane defaults for when changes is
4461         skeletal.
4462
4463 2001-03-29  James Troup  <james@nocrew.org>
4464
4465         * melanie (main): use fubar() and warn() from utils.  Remember who
4466         the maintainer for the removed packages are and display that info
4467         to the user.  Readd support for melanie-specific Bcc-ing that got
4468         lost in the TemplateSubst transition.
4469
4470         * utils.py (fubar): new function.
4471         (warn): like wise.
4472
4473         * db_access.py (get_maintainer): as below.
4474
4475         * charisma (get_maintainer): moved the bulk of this function to
4476         db_access so that melanie can use it too.
4477
4478         * claire.py (find_dislocated_stable): restrict the override join
4479         to those entries where the suite is stable; this avoids problems
4480         with packages which have moved to new sections (e.g. science)
4481         between stable and unstable.
4482
4483 2001-03-24  James Troup  <james@nocrew.org>
4484
4485         * catherine (poolize): new function; not really independent of
4486         main() fully, yet.
4487         (main): use it.
4488
4489         * katie (stable_install): __SUITE__ needs to be space prefixed
4490         because buildd's check for 'INSTALLED$'.
4491
4492 2001-03-22  James Troup  <james@nocrew.org>
4493
4494         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4495
4496         * jenna: rewritten; now does deletions on a per-suite level
4497         instead of a per-suite-component-architecture-type level.  This
4498         allows mutli-component packages to be auto-cleaned (and as a
4499         bonus, reduces the code size and duplication).
4500
4501 2001-03-22  Anthony Towns  <ajt@debian.org>
4502
4503         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4504         instead of just giving a gpg error.
4505
4506 2001-03-21  James Troup  <james@nocrew.org>
4507
4508         * madison (main): use apt_pkg.VersionCompare to sort versions so
4509         that output is correctly sorted for packages like debhlper.
4510         Noticed by ajt@.
4511
4512         * tea (check_source_in_one_dir): actually find problematic source
4513         packages.
4514
4515         * katie (check_dsc): remember the orig.tar.gz's location ID if
4516         it's not in a legacy suite.
4517         (check_diff): we don't use orig_tar_id.
4518         (install): add code to handle sourceful diff-only upload of
4519         packages which change components by copying the .orig.tar.gz into
4520         the new component, if it doesn't already exist there.
4521         (process_it): reset orig_tar_location (as above).
4522
4523         * melanie (main): use template substiution for the bug closing
4524         emails.
4525         (main): don't hardcode bugs.debian.org or packages.debian.org
4526         either; use configuration items.
4527
4528         * katie: likewise.
4529
4530         * natalie.py (init): use None rather than 'localhost' for the
4531         hostname given to pg.connect.
4532
4533         * utils.py (TemplateSubst): new function; lifted from
4534         userdir-ldap.
4535
4536 2001-03-21  Ryan Murray  <rmurray@debian.org>
4537
4538         * katie (announce): fix the case of non-existent
4539         Suite::$SUITE::Announce.
4540
4541 2001-03-20  Ryan Murray  <rmurray@debian.org>
4542
4543         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4544         /usr/.
4545
4546         * alyson (main): use config variable for database name.
4547         * andrea (main): likewise.
4548         * catherine (main): likewise.
4549         * charisma (main): likewise.
4550         * cindy (main): likewise.
4551         * claire.py (main): likewise.
4552         * denise (main): likewise.
4553         * heidi (main): likewise.
4554         * jenna (main): likewise.
4555         * katie (main): likewise.
4556         * madison (main): likewise.
4557         * melanie (main): likewise.
4558         * neve (main): likewise.
4559         * rhona (main): likewise.
4560         * tea (main): likewise.
4561
4562 2001-03-15  James Troup  <james@nocrew.org>
4563
4564         * rhona (check_sources): fixed evil off by one (letter) error
4565         which was causing only .dsc files to be deleted when cleaning
4566         source packages.
4567
4568         * charisma (get_maintainer_from_source): remove really stupid and
4569         gratuitous IN sub-query and replace with normal inner join.
4570         (main): connect as read-only user nobody.
4571
4572         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4573         with EXISTS.
4574         (check_files): likewise; still disabled by default though.
4575         (clean_binaries): add ' seconds' to the mysterious number in the
4576         output.
4577         (clean): likewise.
4578
4579         * tea (check_files): add missing global declaration on db_files.
4580
4581 2001-03-14  James Troup  <james@nocrew.org>
4582
4583         * rhona: rewritten large chunks. Removed a lot of the silly
4584         selecting into dictionaries and replaced it with 'where exists'
4585         based sub queries.  Added support for StayOfExecution.  Fix the
4586         problem with deleting dsc_files too early and disable cleaning of
4587         unattached files.
4588
4589 2001-03-14  Anthony Towns  <ajt@debian.org>
4590
4591         * katie (announce): also check Changed-By when trying to detect
4592         NMUs.
4593
4594 2001-03-06  Anthony Towns  <ajt@debian.org>
4595
4596         * ziyi (main): Generate Release.gpg files as well, using the key from
4597         Dinstall::SigningKey in katie.conf, if present. That key has to be
4598         passwordless, and hence kept fairly secretly.
4599
4600 2001-03-02  James Troup  <james@nocrew.org>
4601
4602         * utils.py (str_isnum): new function; checks to see if the string
4603         is a number.
4604
4605         * shania (main): fix _hideous_ bug which was causing all files > 2
4606         weeks old to be deleted from incoming, even if they were part of a
4607         valid upload.
4608
4609 2001-02-27  James Troup  <james@nocrew.org>
4610
4611         * melanie (main): accept new argument -C/--carbon-copy which
4612         allows arbitarty carbon-copying of the bug closure messages.
4613         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4614         separate variable.
4615
4616 2001-02-27  Anthony Towns  <ajt@debian.org>
4617
4618         * ziyi: new program; generates Release files.
4619
4620 2001-02-25  James Troup  <james@nocrew.org>
4621
4622         * katie (reject): add missing '\n' to error message.
4623         (manual_reject): likewise.
4624         (install): catch exceptions from moving the changes file into DONE
4625         and ignore them.
4626
4627         * tea (check_md5sums): new function.
4628
4629 2001-02-25  Michael Beattie  <mjb@debian.org>
4630
4631         * melanie: use $EDITOR if available.
4632
4633 2001-02-15  James Troup  <james@nocrew.org>
4634
4635         * utils.py (parse_changes): don't crash and burn on empty .changes
4636         files.  Symptoms noticed by mjb@.
4637
4638 2001-02-15  Adam Heath  <doogie@debian.org>
4639
4640         * denise (main): use an absolute path for the output filename.
4641
4642         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4643         compile errors with postgresql-dev >= 7.0.
4644
4645 2001-02-12  James Troup  <james@nocrew.org>
4646
4647         * rene: initial version.
4648
4649         * andrea: initial version.
4650
4651         * catherine (main): remove obsolete assignment of arguments.
4652
4653 2001-02-09  James Troup  <james@nocrew.org>
4654
4655         * catherine: first working version.
4656
4657 2001-02-06  James Troup  <james@nocrew.org>
4658
4659         * katie (check_files): validate the priority field; i.e. ensure it
4660         doesn't contain a '/' (to catch people prepending the priority
4661         with the component rather than the section).
4662         (check_override): don't warn about source packages; the only check
4663         is on section and we have no GUI tools that would use the Section
4664         field for a Sources file.
4665         (announce): use tags rather than severities for NMUs.  Requested
4666         by Josip Rodin <joy@>. [#78035]
4667
4668 2001-02-04  James Troup  <james@nocrew.org>
4669
4670         * tea (check_override): new function; ensures packages in suites
4671         are also in the override file.  Thanks to bod@ for noticing that
4672         such packages existed.
4673
4674         * katie: move file type compiled regular expressions to utils as
4675         catherine uses them too.
4676         (check_changes): always default maintainer822 to the installer
4677         address so that any bail out won't cause undefs later.
4678         (check_files): update file type re's to match above.
4679         (stable_install): likewise.
4680         (reject): handle any except from moving the changes files.  Fixes
4681         crashes on unreadable changes files.
4682
4683         * melanie (main): add an explanation of why things are not removed
4684         from testing.
4685
4686 2001-01-31  James Troup  <james@nocrew.org>
4687
4688         * melanie (main): ignore a) no message, b) removing from stable or
4689         testing when invoked with -n/--no-action.
4690
4691         * katie (check_override): lower section before checking to see if
4692         we're whining about 'non-US' versus 'non-US/main'.
4693
4694         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4695         function so that we can use inside of PostgreSQL.
4696
4697 2001-01-28  James Troup  <james@nocrew.org>
4698
4699         * katie: updated to pass new flag to parse_changes() and deal with
4700         the exception raised on invalid .dsc's if appropriate.
4701         * shania (main): likewise.
4702         * melanie (main): likewise.
4703
4704         * tea (check_dscs): new function to validate all .dsc files in
4705         unstable.
4706
4707         * utils.py (parse_changes): if passed an additional flag, validate
4708         the .dsc file to ensure it's extractable by dpkg-source.
4709         Requested by Ben Collins <bcollins@>.
4710
4711 2001-01-27  James Troup  <james@nocrew.org>
4712
4713         * madison (main): connect to the DB as nobody.
4714
4715         * katie (check_files): remove support for -r/--no-version-check
4716         since it makes no sense under katie (jenna will automatically
4717         remove the (new) older version) and was evil in any event.
4718         (check_changes): add missing new line to rejection message.
4719         (check_dsc): likewise.
4720         (process_it): reset reject_message here.
4721         (main): not here.  Also remove support for -r.
4722
4723 2001-01-26  James Troup  <james@nocrew.org>
4724
4725         * katie (check_override): don't whine about 'non-US/main' versus
4726         'non-US'.
4727
4728 2001-01-26  Michael Beattie  <mjb@debian.org>
4729
4730         * natalie.py (usage): new function.
4731         (main): use it.
4732
4733 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4734
4735         * update-mirrorlists: Update README.non-US too (request from Joy).
4736
4737 2001-01-25  James Troup  <james@nocrew.org>
4738
4739         * katie (reject): catch any exception from utils.move() and just
4740         pass, we previously only caught can't-overwrite errors and not
4741         can't-read ones.
4742
4743         * jenna (generate_src_list): use ORDER BY in selects to avoid
4744         unnecessary changes to Packages files.
4745         (generate_bin_list): likewise.
4746
4747         * utils.py (extract_component_from_section): separated out from
4748         build_file_list() as it's now used by claire too.
4749
4750         * claire.py (find_dislocated_stable): rewrite the query to extract
4751         section information and handle component-less locations properly.
4752         Thanks to ajt@ for the improved queries.
4753         (fix_component_section): new function to fix components and
4754         sections.
4755
4756 2001-01-23  James Troup  <james@nocrew.org>
4757
4758         * katie (check_files): set file type for (u?)debs first thing, so
4759         that if we continue, other functions which rely on file type
4760         existing don't bomb out.  If apt_pkg or apt_inst raise an
4761         exception when parsing the control file, don't try any other
4762         checks, just drop out.
4763         (check_changes): new test to ensure there is actually a target
4764         distribution.
4765
4766 2001-01-22  James Troup  <james@nocrew.org>
4767
4768         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4769         <grin@>.
4770         (check_changes): when mapping to unstable, remember to actually
4771         add unstable to the suite list and not just remove the invalid
4772         suite.
4773
4774 2001-01-21  James Troup  <james@nocrew.org>
4775
4776         * katie (check_files): catch exceptions from debExtractControl()
4777         and reject packages which raise any.
4778
4779 2001-01-19  James Troup  <james@nocrew.org>
4780
4781         * katie (check_signature): basename() file name in rejection
4782         message.
4783
4784 2001-01-18  James Troup  <james@nocrew.org>
4785
4786         * katie (in_override_p): remember the section and priority from
4787         the override file so we can check them against the package later.
4788         (check_override): new function; checks section and priority (for
4789         binaries) from the package against the override file and mails the
4790         maintainer about any disparities.
4791         (install): call check_override after announcing the upload.
4792
4793 2001-01-16  James Troup  <james@nocrew.org>
4794
4795         * utils.py (build_file_list): catch ValueError's from splitting up
4796         the files field and translate it into a parse error.
4797
4798         * tea: add support for finding unreferenced files.
4799
4800         * katie (in_override_p): add support for suite-aliasing so that
4801         proposed-updates uploads work again.
4802         (check_changes): catch parses errors from utils.build_file_list().
4803         (check_dsc): likewise.
4804         (check_diff): yet more dpkg breakage so we require even newer a
4805         version.
4806
4807         * jenna (generate_bin_list): don't do nasty path munging that's no
4808         longer needed.
4809
4810         * denise (main): support for non-US; and rename testing's override
4811         files so they're based on testing's codename.
4812
4813 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4814
4815         * melanie: add to the bug closing message explaining what happens
4816         (or rather doesn't) with bugs against packages that have been
4817         removed.
4818
4819 2001-01-14  James Troup  <james@nocrew.org>
4820
4821         * charisma (main): fix silly off-by-one error; suite priority
4822         checking was done using "less than" rather than "less than or
4823         equal to" which was causing weird hesienbugs with wrong Maintainer
4824         fields.
4825
4826 2001-01-10  James Troup  <james@nocrew.org>
4827
4828         * katie (in_override_p): adapted to use SQL-based overrides.
4829         read_override_file function disappears.
4830
4831         * db_access.py: add new functions get_section_id, get_priority_id
4832         and get_override_type_id.
4833         (get_architecture_id): return -1 if the architecture is not found.
4834
4835         * heidi: switch %d -> %d in all SQL queries.
4836         (get_list): Use string.join where appropriate.
4837
4838         * rhona (in_override_p): don't die if the override file doesn't
4839         exist.
4840         (main): warn if the override file doesn't exist.
4841
4842         * alyson: new script; will eventually sync the config file and the
4843         SQL database.
4844
4845         * natalie.py: new script; manipulates overrides.
4846
4847         * melanie: new script; removes packages from suites.
4848
4849 2001-01-08  James Troup  <james@nocrew.org>
4850
4851         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4852         anything it just changed the symptom.  Recognise the new breakage
4853         and reject them too.
4854
4855 2001-01-07  James Troup  <james@nocrew.org>
4856
4857         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4858         to the .changes file, be sure to set up files[filename]["type"]
4859         too.
4860
4861 2001-01-06  James Troup  <james@nocrew.org>
4862
4863         * katie (check_diff): new function; detects bad diff files
4864         produced by dpkg 1.8.1 and rejects thems.
4865         (process_it): call check_diff().
4866         (check_dsc): gar.  Add support for multiple versions of the
4867         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4868         and size against all versions and use one which matches if
4869         possible and exclude any that don't from being poolized to avoid
4870         file overwrites.  Thanks to broonie@ for providing the example.
4871         (install): skip any files marked as excluded as above.
4872
4873 2001-01-05  James Troup  <james@nocrew.org>
4874
4875         * heidi (process_file): add missing argument to error message.
4876
4877 2001-01-04  James Troup  <james@nocrew.org>
4878
4879         * heidi (main): fix handling of multiple files by reading all
4880         files not just the first file n times (where n = the number of
4881         files passed as arguments).
4882
4883 2001-01-04  Anthony Towns  <ajt@debian.org>
4884
4885         * katie (check_dsc): proper fix for the code which locates the
4886         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4887
4888 2000-12-20  James Troup  <james@nocrew.org>
4889
4890         * rhona: replace IN's with EXISTS's to make DELETE time for
4891         binaries and source sane on auric.  Add a -n/--no-action flag and
4892         make it stop actions if used.  Fixed a bug in binaries deletion
4893         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4894         -V/--version.  Giving timing info on deletion till I'm sure it's
4895         sane.
4896
4897         * katie (check_changes): map testing to unstable.
4898
4899         * madison: new script; shows versions in different architectures.
4900
4901         * katie (check_dsc): ensure size matches as well as md5sum;
4902         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4903         #69702.
4904
4905 2000-12-19  James Troup  <james@nocrew.org>
4906
4907         * katie (reject): ignore the "can't overwrite file" exception from
4908         utils.move() and leave the files where they are.
4909         (reject): doh! os.access() test was reversed so we only tried to
4910         move files which didn't exist... replaced with os.path.exists()
4911         test the right way round.
4912
4913         * utils.py (move): raise an exception if we can't overwrite the
4914         destination file.
4915         (copy): likewise.
4916
4917 2000-12-18  James Troup  <james@nocrew.org>
4918
4919         * rhona: first working version.
4920
4921         * db_access.py (get_files_id): force both sizes to be integers.
4922
4923         * katie (main): use size_type().
4924
4925         * utils.py (size_type): new function; pretty prints a file size.
4926
4927 2000-12-17  James Troup  <james@nocrew.org>
4928
4929         * charisma (main): do version compares so that older packages do
4930         not override newer ones and process source first as source wins
4931         over binaries in terms of who we think of as the Maintainer.
4932
4933 2000-12-15  James Troup  <james@nocrew.org>
4934
4935         * katie (install): use the files id for the .orig.tar.gz from
4936         check_dsc().
4937         (install): limit select for legacy source to a) source in legacy
4938         or legacy-mixed type locations and b) distinct on files.id.
4939         (install): rather than the bizarre insert new, delete old method
4940         for moving legacy source into the pool, use a simple update of
4941         files.
4942         (process_it): initalize some globals before each process.
4943
4944 2000-12-14  James Troup  <james@nocrew.org>
4945
4946         * katie (in_override_p): index on binary_type too since .udeb
4947         overrides are in a different file.
4948         (read_override_file): likewise.
4949         (check_files): correct filename passed to get_files_id().
4950         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4951         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4952         (check_dsc): remember the files id of the .orig.tar.gz, not the
4953         location id.
4954
4955 2000-12-13  James Troup  <james@nocrew.org>
4956
4957         * utils.py (poolify): force the component to lower case except for
4958         non-US.
4959
4960         * katie (in_override_p): handle .udeb-specific override files.
4961         (check_files): pass the binary type to in_override_p().
4962         (check_dsc): remember the location id of the old .orig.tar.gz in
4963         case it's not in the pool.
4964         (install): use location id from dsc_files; which is where
4965         check_dsc() puts it for old .orig.tar.gz files.
4966         (install): install files after all DB work is complete.
4967         (reject): basename() the changes filename.
4968         (manual_reject): likewise.
4969
4970         * shania: new progam; replaces incomingcleaner.
4971
4972 2000-12-05  James Troup  <james@nocrew.org>
4973
4974         * katie (check_changes): if inside stable and can't find files
4975         from the .changes; assume it's installed in the pool and chdir()
4976         to there.
4977         (check_files): we are not installing for stable installs, so don't
4978         check for overwriting existing files.
4979         (check_dsc): likewise.
4980         (check_dsc): reorder .orig.tar.gz handling so that we search in
4981         the pool first and only then fall back on any .orig.tar.gz in the
4982         cwd; this avoids false positives on the overwrite check when
4983         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4984         (install): if this is a stable install, bail out to
4985         stable_install() immediately.
4986         (install): dsc_files handling was horribly broken. a) we need to
4987         add files from the .dsc and not the .changes (duh), b) we need to
4988         add the .dsc file itself to dsc_files (to be consistent with neve
4989         if for no other reason).
4990         (stable_install): new function; handles installs from inside
4991         proposed-updates to stable.
4992         (acknowledge_new): basename changes_filename before doing
4993         anything.
4994         (process_it): absolutize the changes filename to avoid the
4995         requirement of being in the same directory as the .changes file.
4996         (process_it): save and restore the cwd as stable installs can
4997         potentially jump into the pool to find files.
4998
4999         * jenna: dislocated_files support using claire.
5000
5001         * heidi (process_file): select package field from binaries
5002         explicitly.
5003
5004         * db_access.py (get_files_id): fix cache key used.
5005
5006         * utils.py (build_file_list): fix 'non-US/non-free' case in
5007         section/component splitting.
5008         (move): use os.path.isdir() rather than stat.
5009         (copy): likewise.
5010
5011         * claire.py: new file; stable in non-stable munger.
5012
5013         * tea: new file; simply ensures all files in the DB exist.
5014
5015 2000-12-01  James Troup  <james@nocrew.org>
5016
5017         * katie (check_dsc): use regex_safe().
5018         (check_changes): typo in changes{} key:
5019         s/distributions/distribution/.
5020         (install): use changes["source"], not files[file]["source"] as the
5021         latter may not exist and the former is used elsewhere.  Commit the
5022         SQL transaction earlier.
5023
5024         * utils.py (regex_safe): new function; escapes characters which
5025         have meaning to SQL's regex comparison operator ('~').
5026
5027 2000-11-30  James Troup  <james@nocrew.org>
5028
5029         * katie (install): pool_location is based on source package name,
5030         not binary package.
5031
5032         * utils.py (move): if dest is a directory, append the filename
5033         before chmod-ing.
5034         (copy): ditto.
5035
5036         * katie (check_files): don't allow overwriting of existing .debs.
5037         (check_dsc): don't allow overwriting of existing source files.
5038
5039 2000-11-27  James Troup  <james@nocrew.org>
5040
5041         * katie (check_signature): don't try to load rsaref; it's
5042         obsolete.
5043         (in_override_p): don't try to lookup override entries for packages
5044         with an invalid suite name.
5045         (announce): don't assume the suite name is valid; use Find() to
5046         lookup the mailing list name for announcements.
5047
5048         * utils.py (where_am_i): typo; hostname is in the first element,
5049         not second.
5050
5051         * db_access.py (get_suite_id): return -1 on an unknown suite.
5052
5053 2000-11-26  James Troup  <james@nocrew.org>
5054
5055         * katie (install): fix CopyChanges handling; typo in in checking
5056         Cnf for CopyChanges flag and was calling non-existent function
5057         copy_file.
5058
5059         * utils.py (copy): new function; clone of move without the
5060         unlink().
5061
5062 2000-11-25  James Troup  <james@nocrew.org>
5063
5064         * utils.py (build_file_list): handle non-US prefixes properly
5065         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5066         + 'libs' not 'non-US/libs').
5067         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5068         delays.  This is possibly(/probably) exim speicifc and (like other
5069         sendmail options) needs to be in the config file.
5070
5071 2000-11-24  James Troup  <james@nocrew.org>
5072
5073         * rhona (check_sources): we need file id from dsc_files; not id.
5074         Handle non .dsc source files being re-referenced in dsc_files.
5075
5076         * katie (in_override_p): strip out any 'non-US' prefix.
5077         (check_files): use utils.where_am_i() rather than hardcoding.
5078         (check_files): validate the component.
5079         (install): use utils.where_am_i() rather than hardcoding.
5080         (install): fix mail to go to actual recepient.
5081         (reject): likewise.
5082         (manual_reject): likewise.
5083         (acknowledge_new): likewise.
5084         (announce): likewise.
5085
5086         * db_access.py (get_component_id): ignore case when searching for
5087         the component and don't crash if the component can't be found, but
5088         return -1.
5089         (get_location_id): handle -1 from get_component_id().
5090
5091         * jenna (generate_src_list): don't bring 'suite' into our big
5092         multi-table-joining select as we already know the 'suite_id'.
5093         (generate_bin_list): likewise.
5094
5095         * neve (main): don't quit if not on ftp-master.
5096         (process_packages): remove unused variable 'suite_codename'.
5097
5098         * utils.py (move): actually move the file.
5099         (build_file_list): handle non-US prefixes in the section.
5100
5101         * catherine (main): use which_conf_file().
5102         * charisma (main): likewise.
5103         * heidi (main): likewise.
5104         * jenna (main): likewise.
5105         * katie (main): likewise.
5106         * neve (main): likewise.
5107         * rhona (main): likewise.
5108
5109         * utils.py (where_am_i): new routine; determines the archive as
5110         understood by other 'dak' programs.
5111         (which_conf_file): new routine; determines the conf file to read.
5112
5113 2000-11-17  James Troup  <james@nocrew.org>
5114
5115         * katie (install): fix where .changes files for proposed-updates
5116         go.
5117
5118 2000-11-04  James Troup  <james@nocrew.org>
5119
5120         * jenna (main): handle architecture properly if no
5121         -a/--architecture argument is given, i.e. reset architecture with
5122         the values for the suite for each suite.
5123
5124         * Add apt_pkg.init() to the start of all scripts as it's now
5125         required by python-apt.
5126
5127 2000-10-29  James Troup  <james@nocrew.org>
5128
5129         * jenna (generate_bin_list): take an additional argument 'type'
5130         and use it in the SELECT.
5131         (main): if processing component 'main', process udebs and debs.
5132
5133         * neve (process_packages): set up 'type' in 'binaries' (by
5134         assuming .deb).
5135
5136         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5137         (check_files): set up files[file]["dbtype"].
5138         (install): use files[file]["dbtype"] to set up the 'type' field in
5139         the 'binaries' table.
5140
5141         * init_pool.sql: add a 'type' field to the 'binaries' table to
5142         distinguisgh between ".udeb" and ".deb" files.
5143
5144         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5145         dest ? dirname(dest)" type check instead.
5146
5147         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5148         in the pool without crashing.  Also handle the case of being asked
5149         to look for something other than an .orig.tar.gz in the pool.
5150
5151 2000-10-26  James Troup  <james@nocrew.org>
5152
5153         * katie (install): fix filenames put into files table during
5154         poolification of legacy source.
5155
5156         * utils.py (move): work around a bug in os.path.basename() which
5157         cunningly returns '' if there is a trailing slash on the path
5158         passed to it.
5159
5160         * katie (check_dsc): Remove more cruft.  If we find the
5161         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5162         location, make a note of that so we can fix things in install().
5163         (install): as above.  Move any old source out of legacy locations
5164         so that 'apt-get source' will work.
5165         (process_it): reset the flag that indicates to install that the
5166         source needs moved.
5167
5168         * cron.daily: more.  Nowhere near complete yet though.
5169
5170         * katie (install): don't run os.makedirs, a) utils.move() does
5171         this now, b) we weren't removing the user's umask and were
5172         creating dirs with SNAFU permissions.
5173         (check_dsc): rewrite the .orig.tar.gz handling to take into
5174         account, err, package pools.  i.e. look anywhere in the pool
5175         rather than faffing around with two simple paths.
5176
5177         * neve (process_sources): add the .dsc to dsc_files too.
5178
5179 2000-10-25  James Troup  <james@nocrew.org>
5180
5181         * neve (process_sources): don't duplicate .orig.tar.gz's.
5182
5183 2000-10-23  James Troup  <james@nocrew.org>
5184
5185         * utils.py (re_extract_src_version): moved here.
5186
5187         * neve: move re_extract_src_version to utils.
5188         (process_packages): reflect change.
5189
5190         * katie (install): reflect change.
5191
5192 2000-10-19  James Troup  <james@nocrew.org>
5193
5194         * jenna (generate_src_list): handle locations with null
5195         components.
5196         (generate_bin_list): likewise.
5197