]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Use "import daklib.foo as foo" style
[dak.git] / ChangeLog
1 2008-05-04  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/import_keyring.py: Remove unused daklib.logging and Logger
4         and add the actually used daklib/utils
5
6         * dak/examine_package.py: remove daklib.queue import, never used
7
8         * dak/check_proposed_updates.py: Import stuff from daklib as
9         "import daklib.foo as foo"
10         * dak/clean_proposed_updates.py: likewise
11         * dak/clean_queues.py: likewise
12         * dak/clean_suites.py: likewise
13         * dak/compare_suites.py: likewise
14         * dak/cruft_report.py: likewise
15         * dak/examine_package.py: likewise
16         * dak/find_null_maintainers.py: likewise
17         * dak/generate_index_diffs.py: likewise
18         * dak/generate_releases.py: likewise
19         * dak/import_archive.py: likewise
20         * dak/import_ldap_fingerprints.py: likewise
21         * dak/import_users_from_passwd.py: likewise
22         * dak/init_db.py: likewise
23         * dak/init_dirs.py: likewise
24         * dak/ls.py: likewise
25         * dak/make_maintainers.py: likewise
26         * dak/make_overrides.py: likewise
27         * dak/make_suite_file_list.py: likewise
28         * dak/new_security_install.py: likewise
29         * dak/override.py: likewise
30         * dak/process_accepted.py: likewise
31         * dak/process_new.py: likewise
32         * dak/process_unchecked.py: likewise
33         * dak/rm.py: likewise
34
35         * dak/check_archive.py (check_files_not_symlinks): Remove
36         long-time unused and commented code. Import stuff from daklib as
37         "import daklib.foo as foo"
38
39 2008-05-03  Joerg Jaspert  <joerg@debian.org>
40
41         * dak/examine_package.py: clean up pychecker warnings (merged with
42         Thomas changes to the NEW display)
43
44 2008-05-03  Mark Hymers <mhy@debian.org>
45
46         * dak/check_archive.py: clean up pychecker warnings
47         * dak/check_overrides.py: likewise
48         * dak/check_proposed_updates.py: likewise
49         * dak/clean_proposed_updates.py: likewise
50         * dak/clean_queues.py: likewise
51         * dak/control_overrides.py: likewise
52         * dak/control_suite.py: likewise
53         * dak/decode_dot_dak.py: likewise
54         * dak/examine_package.py: likewise
55         * dak/process_new.py: likewise
56         * dak/process_unchecked.py: likewise
57         * dak/queue_report.py: likewise
58         * dak/reject_proposed_updates.py: likewise
59         * dak/security_install.py: likewise
60         * dak/show_new.py: likewise
61         * dak/stats.py: likewise
62         * dak/symlink_dists.py: likewise
63         * dak/transitions.py: likewise
64
65 2008-05-03  Joerg Jaspert  <joerg@debian.org>
66
67         * config/debian/cron.daily: Rename to
68         * config/debian/cron.dinstall: this, as its not really something run
69         daily for some time now. And while dinstall is an OLD name, its
70         recognized pretty well within Debian
71         Also add some more timing information
72         Do not allow automated [o-]p-u-new processing to break dinstall
73
74 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
75
76         * web/,web/style.css: add web dir and current style.css
77
78         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
79         based on mock-up by M. Ferrari.
80         remove Checksums-* from examine-package output
81
82 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
83
84         * dak/process_unchecked.py (check_hashes): Reject on error while
85         parsing Checksums-*.
86
87 2008-05-02  Joerg Jaspert  <joerg@debian.org>
88
89         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
90         added wiki.debian.org (currently pointing to debian-www), closes #194206
91         added security-tracker, closes #436152
92         added release.debian.org, closes #451005
93
94         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
95         still wants it - its in revision control...)
96
97         * config/debian/cron.daily: Modify call to update-ftpstats to only
98         use files log/2*, instead of log/*, so it ignores the new cron/
99         subdir. Makes sure it can't get confused, and is also safe for
100         nearly thousand years. If this code is really in use in year 3000,
101         im sure people can adjust it! :)
102
103         * config/debian/vars: Add logdir as a place for cronjob log output
104
105         * config/debian/cron.daily: Use a logfile and be more verbose of
106         whats going on.
107           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
108         cron.weekly, ...
109         * config/debian/cron.weekly: likewise,
110           ... and activate those calls again. Once a week, as an
111         additional safety bet to be sure the stuff does get run is ok,
112         even if we have autovacuum by default.
113
114 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
115
116         * dak/process_unchecked.py (check_hashes): fix typo in
117           checksum reject message.
118
119 2008-05-02  Joerg Jaspert  <joerg@debian.org>
120
121         * config/debian/extensions.py: used reindent.py from the python
122         2.x source examples to get all dak code use the same indentation
123         style, no longer a mix of 4 spaces / 1 tab.
124         * dak/check_archive.py: likewise
125         * dak/check_overrides.py: likewise
126         * dak/check_proposed_updates.py: likewise
127         * dak/clean_proposed_updates.py: likewise
128         * dak/clean_queues.py: likewise
129         * dak/clean_suites.py: likewise
130         * dak/compare_suites.py: likewise
131         * dak/control_overrides.py: likewise
132         * dak/control_suite.py: likewise
133         * dak/cruft_report.py: likewise
134         * dak/dak.py: likewise
135         * dak/decode_dot_dak.py: likewise
136         * dak/examine_package.py: likewise
137         * dak/find_null_maintainers.py: likewise
138         * dak/generate_index_diffs.py: likewise
139         * dak/generate_releases.py: likewise
140         * dak/import_archive.py: likewise
141         * dak/import_keyring.py: likewise
142         * dak/import_ldap_fingerprints.py: likewise
143         * dak/import_users_from_passwd.py: likewise
144         * dak/init_db.py: likewise
145         * dak/init_dirs.py: likewise
146         * dak/ls.py: likewise
147         * dak/make_maintainers.py: likewise
148         * dak/make_overrides.py: likewise
149         * dak/make_suite_file_list.py: likewise
150         * dak/mirror_split.py: likewise
151         * dak/new_security_install.py: likewise
152         * dak/override.py: likewise
153         * dak/poolize.py: likewise
154         * dak/process_accepted.py: likewise
155         * dak/process_new.py: likewise
156         * dak/process_unchecked.py: likewise
157         * dak/queue_report.py: likewise
158         * dak/reject_proposed_updates.py: likewise
159         * dak/rm.py: likewise
160         * dak/security_install.py: likewise
161         * dak/show_new.py: likewise
162         * dak/split_done.py: likewise
163         * dak/stats.py: likewise
164         * dak/symlink_dists.py: likewise
165         * dak/test/001/test.py: likewise
166         * dak/test/002/test.py: likewise
167         * dak/transitions.py: likewise
168         * daklib/extensions.py: likewise
169         * daklib/logging.py: likewise
170         * daklib/queue.py: likewise
171         * daklib/utils.py: likewise
172         * scripts/debian/insert_missing_changedby.py: likewise
173
174         * dak/process_new.py (recheck): Make the path check more robust,
175         so we no longer have to keep process_new seperate trees between
176         security and normal archive.
177
178 2008-04-27  Joerg Jaspert  <joerg@debian.org>
179
180         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
181         configured path does not exist or is not writeable by us. Use a
182         tmp path if so, so we do not lose the urgencies in such cases.
183
184         * config/debian/dak.conf: Changed path for UrgencyLog
185         Same for the ReleaseTransitions file
186
187         * config/debian/cron.daily: Notify qa user on merkel of dinstall
188         start, Remove the britney call
189
190 2008-04-26  Joerg Jaspert  <joerg@debian.org>
191
192         * dak/process_new.py: Call end() whenever we try to leave by
193         pressing Q
194
195         * config/debian/cron.daily: Also report NBS in experimental
196
197 2008-04-25  Joerg Jaspert  <joerg@debian.org>
198
199         * dak/cruft_report.py (main): Make it possible to look at
200         experimental too, especially NBS
201
202         * dak/split_done.py (main): Only move files into their subdirs if
203         they are older than 30 days. That enables us to run this script as
204         part of a cronjob.
205
206         * config/debian/cron.weekly: Run dak split-done
207
208 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
209
210         * dak/process_unchecked.py: add changes["sponsoremail"]
211           for sponsored uploads if desired
212         * daklib/queue.py: add changes["sponsoremail"] to
213           Subst["__MAINTAINER_TO__"] if present
214         * daklib/utils.py: add functions
215           is_email_alias to check which accounts allow email forwarding,
216           which_alias_file to find the alias file, and
217           gpg_get_key_addresses to find uid addresses for a given
218             fingerprint
219
220 2008-04-22  Joerg Jaspert  <joerg@debian.org>
221
222         * setup/init_pool.sql: added a function/aggregate for the release
223         team to base some script on it.
224
225         * config/debian/cron.daily: push katie@merkel to immediately start
226         the sync of projectb there.
227
228 2008-04-21  Joerg Jaspert  <joerg@debian.org>
229
230         * scripts/debian/expire_dumps: New script, expires old database
231         dumps, using a scheme to keep more of the recent dumps.
232
233         * config/debian/cron.daily: Use the new script. Also - compress
234         all files older than 7 days, instead of 30.
235
236         * dak/process_accepted.py (install): Do not break if a
237         source/maintainer combination is already in src_uploaders, "just"
238         warn us.
239
240 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
241
242         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
243         Format lines (ie. those having extra text appended).
244
245 2008-04-19  Joerg Jaspert  <joerg@debian.org>
246
247         * dak/process_unchecked.py (check_files): Sanity check the
248         provides field, which closes #472783
249
250 2008-04-18  Joerg Jaspert  <joerg@debian.org>
251
252         * config/debian/dak.conf: Add mapping stable-proposed-updates
253           -> proposed-updates.
254
255         * dak/transitions.py (load_transitions): Additionally check for
256         invalid package list indentation
257
258 2008-04-17  Joerg Jaspert  <joerg@debian.org>
259
260         * config/debian/dak.conf: Add TempPath statement for the Release
261         Transitions script
262
263         * dak/transitions.py (temp_transitions_file): Use the TempPath
264         (write_transitions_from_file): Check if the file we should get our
265         transitions from is in our TempPath, error out if it isnt
266         (main): Check for TempPath existance
267
268 2008-04-12  James Troup  <troup@debian.org>
269
270         * dak/clean_proposed_updates.py: add support for -s/--suite and
271         -n/--no-action.
272
273 2008-04-11  Anthony Towns  <ajt@debian.org>
274
275         * dak/utils.py: build_file_list() extra parameters so it can
276         build a file list for checksums-foo fields. Don't use float() to
277         compare formats, because Format: 1.10 should compare greater than
278         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
279
280         * dak/process_unchecked.py: check_md5sum becomes check_hashes
281         and check_hash. If changes format is 1.8 or later, also check
282         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
283         and reject on presence/absence of un/expected checksums-* fields.
284
285 2008-04-07  Joerg Jaspert  <joerg@debian.org>
286
287         * daklib/utils.py (build_file_list): Check for dpkg .changes
288         adjusted to reject newer (and right now broken) 1.8 version, until
289         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
290
291 2008-03-22  Joerg Jaspert  <joerg@debian.org>
292
293         * dak/transitions.py (load_transitions): Check if all our keys are
294         defined, if there are only keys defined we want and also the types
295         of the various keys.
296
297 2008-03-22  Anthony Towns  <ajt@debian.org>
298
299         * dak/edit_transitions.py: Add --import option.
300         Add --use-sudo option. Use fcntl locking for writing.
301         Move writing into a function (write_transitions).
302         Reinvoke self using sudo and --import if necessary.
303         Move temporary file creation into a function, use mkstemp.
304         Rename to "dak transitions".
305
306 2008-03-21  Joerg Jaspert  <joerg@debian.org>
307
308         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
309         edited file back in place
310         (check_transitions): Use proper locking and also use sudo to copy
311         the new file in place
312
313 2008-03-21  Anthony Towns <ajt@debian.org>
314
315         * config/debian/extensions.py: Add infrastructure for replacing
316         functions in dak modules; add upload blocking for dpkg.
317
318 2008-03-12  Joerg Jaspert  <joerg@debian.org>
319
320         * dak/edit_transitions.py: Done a number of cleanups to make code
321         working. Also changed the way prompting/answering goes, to not
322         have to import daklib/queue.
323         (edit_transitions): When done with a successful edit - also print
324         a final overview about defined transitions
325
326 2008-03-11  Joerg Jaspert  <joerg@debian.org>
327
328         * dak/process_unchecked.py: Import syck module directly, not "from
329         syck import *"
330         (check_transition): Do the check for sourceful upload in here
331         Also adjust the syck loading commands, rename new_vers to
332         expected, curvers to current, to make it more clear what they mean.
333
334         * daklib/database.py (get_suite_version): Renamed from
335         get_testing_version. Also changed the cache variables name
336
337         * The above changes are based on modifications from Anthony.
338
339         * dak/dak.py (init): Renamed check -> edit transitions
340
341         * dak/edit_transitions.py: Renamed from check_transitions.py
342         (main): Also rename new_vers/curvers to expected/current
343         Basically a nice rewrite, so it now does checks and edit,
344         depending on how you call it. Check also removes old transitions,
345         if user wants it.
346
347 2008-03-02  Joerg Jaspert  <joerg@debian.org>
348
349         * debian/control (Suggests): Add python-syck to Depends:
350
351         * dak/dak.py (init): Tell it about check_transitions
352
353         * dak/check_transitions.py (usage): Added, checks the transitions
354         file (if any)
355
356         * daklib/database.py (get_testing_version): Added. Returns the
357         version for the source in testing, if any
358
359         * dak/process_unchecked.py (check_transition): Added. Checks if a
360         release team member defined a transition, and rejects based on
361         that data.
362         (process_it): Use it.
363         (check_transition): Warn on broken transitions file and return,
364         not doing anything.
365         (check_transition): Moved out of here, into daklib/queue
366         (process_it): Call check_transitions only if
367         changes[architecture] has source included.
368         (check_transition): Now call the database.get_testing_version
369
370 2008-02-09  Christoph Berg <myon@debian.org>
371
372         * daklib/queue.py (get_type): fubar does not exist in global
373         namespace.
374
375         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
376         to source table, and move src_uploaders after source so the REFERNCES
377         clause works.
378         * dak/process_accepted.py (install): Fill the changedby column from
379         the information found in the .changes. This will allow to identify
380         NMUs and sponsored uploads more precisely in tools querying projectb.
381         * scripts/debian/insert_missing_changedby.py: Script to import yet
382         missing fields from filippo's uploads-history DB.
383
384 2008-02-06  Joerg Jaspert  <joerg@debian.org>
385
386         * daklib/utils.py (check_signature): Make variable key available,
387         so we can access it.
388
389 2008-01-07  Joerg Jaspert  <joerg@debian.org>
390
391         * dak/examine_package.py (check_deb): Remove linda call. It
392         provides no added benefit to lintian anymore.
393
394 2008-01-07  Joerg Jaspert  <joerg@debian.org>
395
396         * dak/examine_package.py (check_deb): Remove linda call. It
397         provides no added benefit to lintian anymore.
398
399 2008-01-06  Joerg Jaspert  <joerg@debian.org>
400
401         * dak/examine_package.py (do_lintian): lintian now supports html
402         coloring, so use it.
403         (do_command): Dont escape html chars if param escaped = 1
404
405 2008-01-06  Joerg Jaspert  <joerg@debian.org>
406
407         * dak/examine_package.py (do_lintian): lintian now supports html
408         coloring, so use it.
409         (do_command): Dont escape html chars if param escaped = 1
410
411 2007-12-31  Anthony Towns  <ajt@debian.org>
412
413         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
414         when processing result of check_dsc_against_db so we don't promote
415         warnings to rejections.
416
417 2007-12-31  Anthony Towns  <ajt@debian.org>
418
419         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
420         when processing result of check_dsc_against_db so we don't promote
421         warnings to rejections.
422
423 2007-12-30  Joerg Jaspert  <joerg@debian.org>
424
425         * dak/dak.py (init): add show-new. This is based on a patch
426         submitted by Thomas Viehmann in Bug #408318, but large parts of
427         handling it are rewritten and show-new is done by me.
428
429         * dak/queue_report.py (table_row): Add link to generated html page
430         for NEW package.
431
432         * dak/show_new.py: new file, generates html overview for NEW
433         packages, similar to what we see with examine-package.
434
435         * config/debian/cron.hourly: Add show-new call
436
437         * config/debian/dak.conf: Add HTMLPath for Show-New
438
439         * dak/examine_package.py (print_copyright): ignore stderr when
440         finding copyright file.
441         (main): add html option
442         (html_escape): new function
443         (escape_if_needed): ditto
444         (headline): ditto
445         (colour_output): ditto
446         (print_escaped_text): ditto
447         (print_formatted_text): ditto
448         - use those functions everywhere where we generate output, as they
449         easily know if we want html or not and just DTRT
450         (do_lintian): new function
451         (check_deb): use it
452         (output_deb_info): Use print_escaped_text, not print_formatted_text.
453         Also import daklib.queue, determine_new now lives there
454
455         Also add a variable to see if we want html output. Default is
456         disabled, show_new enables it for its use.
457         Most of html, besides header/footer are in examine_package instead
458         of show_new, as it makes it a whole lot easier to deal with it at
459         the point the info is generated.
460
461
462         * dak/process_new.py (determine_new): Moved out of here.
463         (check_valid): Moved out of here.
464         (get_type): Moved out of here.
465
466         * daklib/queue.py (determine_new): Moved here.
467         (check_valid): Moved here.
468         (get_type): Moved here.
469
470         * dak/init_db.py (do_section): Remove non-US code
471
472         * dak/make_overrides.py (main): ditto
473
474         * dak/process_new.py (determine_new): ditto
475
476         * daklib/queue.py (Upload.in_override_p),
477         (Upload.check_override): ditto
478
479         * daklib/utils.py (extract_component_from_section):,
480         (poolify): ditto
481
482         * dak/import_archive.py (update_section): ditto
483
484         * dak/symlink_dists.py (fix_component_section): ditto
485
486         * scripts/debian/mkmaintainers: ditto
487
488         * scripts/debian/update-mirrorlists (masterlist): ditto
489
490         * config/debian-non-US/*: Remove subdir
491
492         * scripts/debian/update-readmenonus: Removed.
493
494
495 2007-12-30  Joerg Jaspert  <joerg@debian.org>
496
497         * dak/dak.py (init): add show-new. This is based on a patch
498         submitted by Thomas Viehmann in Bug #408318, but large parts of
499         handling it are rewritten and show-new is done by me.
500
501         * dak/queue_report.py (table_row): Add link to generated html page
502         for NEW package.
503
504         * dak/show_new.py: new file, generates html overview for NEW
505         packages, similar to what we see with examine-package.
506
507         * config/debian/cron.hourly: Add show-new call
508
509         * config/debian/dak.conf: Add HTMLPath for Show-New
510
511         * dak/examine_package.py (print_copyright): ignore stderr when
512         finding copyright file.
513         (main): add html option
514         (html_escape): new function
515         (escape_if_needed): ditto
516         (headline): ditto
517         (colour_output): ditto
518         (print_escaped_text): ditto
519         (print_formatted_text): ditto
520         - use those functions everywhere where we generate output, as they
521         easily know if we want html or not and just DTRT
522         (do_lintian): new function
523         (check_deb): use it
524         (output_deb_info): Use print_escaped_text, not print_formatted_text.
525         Also import daklib.queue, determine_new now lives there
526
527         Also add a variable to see if we want html output. Default is
528         disabled, show_new enables it for its use.
529         Most of html, besides header/footer are in examine_package instead
530         of show_new, as it makes it a whole lot easier to deal with it at
531         the point the info is generated.
532
533
534         * dak/process_new.py (determine_new): Moved out of here.
535         (check_valid): Moved out of here.
536         (get_type): Moved out of here.
537
538         * daklib/queue.py (determine_new): Moved here.
539         (check_valid): Moved here.
540         (get_type): Moved here.
541
542         * dak/init_db.py (do_section): Remove non-US code
543
544         * dak/make_overrides.py (main): ditto
545
546         * dak/process_new.py (determine_new): ditto
547
548         * daklib/queue.py (Upload.in_override_p),
549         (Upload.check_override): ditto
550
551         * daklib/utils.py (extract_component_from_section):,
552         (poolify): ditto
553
554         * dak/import_archive.py (update_section): ditto
555
556         * dak/symlink_dists.py (fix_component_section): ditto
557
558         * scripts/debian/mkmaintainers: ditto
559
560         * scripts/debian/update-mirrorlists (masterlist): ditto
561
562         * config/debian-non-US/*: Remove subdir
563
564         * scripts/debian/update-readmenonus: Removed.
565
566
567 2007-12-28  Anthony Towns  <ajt@debian.org>
568
569         * daklib/utils.py (check_signature): add NOTATION_DATA and
570         NOTATION_NAME to known keywords.
571
572         * daklib/queue.py (Upload.check_source_against_db):
573
574         * dak/make_suite_file_list.py: add -f/--force option.
575
576         * dak/generate_releases.py: add -a/--apt-conf=FILE and
577         -f/--force-touch options.  Pull version info from the database.
578         Make suite description optional.
579
580         * config/debian/dak.conf: update
581         Reject-Proposed-Updates::MoreInfoURL.  Comment out
582         Suite::Stable::Version and ::Description.
583
584         * config/debian/apt.conf: Add hurd-i386 to unstable
585         debian-installer stanza.
586
587 2007-12-28  Joerg Jaspert  <joerg@debian.org>
588
589         * KEYEXPIRED is actually a known keyword. We do check it earlier
590         on and reject in case the sig is bad (or unknown)
591
592 2007-12-28  Anthony Towns  <ajt@debian.org>
593
594         * daklib/utils.py (check_signature): add NOTATION_DATA and
595         NOTATION_NAME to known keywords.
596
597         * daklib/queue.py (Upload.check_source_against_db):
598
599         * dak/make_suite_file_list.py: add -f/--force option.
600
601         * dak/generate_releases.py: add -a/--apt-conf=FILE and
602         -f/--force-touch options.  Pull version info from the database.
603         Make suite description optional.
604
605         * config/debian/dak.conf: update
606         Reject-Proposed-Updates::MoreInfoURL.  Comment out
607         Suite::Stable::Version and ::Description.
608
609         * config/debian/apt.conf: Add hurd-i386 to unstable
610         debian-installer stanza.
611
612 2007-12-28  Joerg Jaspert  <joerg@debian.org>
613
614         * KEYEXPIRED is actually a known keyword. We do check it earlier
615         on and reject in case the sig is bad (or unknown)
616
617 2007-12-24  Joerg Jaspert  <joerg@debian.org>
618
619         * Also run lintian on the .dsc file to check the source itself.
620
621         * Fix the direct usage of ar | tar etc to get the copyright file
622         and use dpkg-deb, which is made for this and makes us able to
623         process data.tar.bz2 (or whatever format it will be in the
624         future).
625
626 2007-12-24  Joerg Jaspert  <joerg@debian.org>
627
628         * Also run lintian on the .dsc file to check the source itself.
629
630         * Fix the direct usage of ar | tar etc to get the copyright file
631         and use dpkg-deb, which is made for this and makes us able to
632         process data.tar.bz2 (or whatever format it will be in the
633         future).
634
635 2007-12-21  Joerg Jaspert  <joerg@debian.org>
636
637         * Remove the (now useless) check for a pre-depends on dpkg for
638           binaries that contain bzip2 compressed data tarballs.
639
640 2007-12-21  Joerg Jaspert  <joerg@debian.org>
641
642         * Remove the (now useless) check for a pre-depends on dpkg for
643           binaries that contain bzip2 compressed data tarballs.
644
645 2007-08-28  Anthony Towns  <ajt@debian.org>
646
647         * process_unchecked.py: Add support for automatic BYHAND
648         processing.
649         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
650         processing of tag-overrides.
651         * examine_package.py: Summarise duplicate copyright file entries
652         (same md5sum) with a reference to the previous instance, rather
653         than repeating them.
654         * process_new.py: When rejecting from the p-u-new or o-p-u-new
655         holding queues, don't worry if dak has its own reasons for
656         rejecting the package as well as the SRMs.
657
658 2007-08-28  Anthony Towns  <ajt@debian.org>
659
660         * process_unchecked.py: Add support for automatic BYHAND
661         processing.
662         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
663         processing of tag-overrides.
664         * examine_package.py: Summarise duplicate copyright file entries
665         (same md5sum) with a reference to the previous instance, rather
666         than repeating them.
667         * process_new.py: When rejecting from the p-u-new or o-p-u-new
668         holding queues, don't worry if dak has its own reasons for
669         rejecting the package as well as the SRMs.
670
671 2007-06-19  Anthony Towns  <ajt@debian.org>
672
673         * Add nm.debian.org pseudopackage
674
675 2007-06-19  Anthony Towns  <ajt@debian.org>
676
677         * Add nm.debian.org pseudopackage
678
679 2007-06-18  Anthony Towns  <ajt@debian.org>
680
681         * daklib/logging.py: Set umask to not exclude group-writability
682         so we don't get reminded at the start of each month. Thanks to
683         Random J.
684         * dak/override.py: More changes from Herr von Wifflepuck: warn
685         if section of source is different to binary section; restore
686         functionality on source-only overrides; croak if trying to set
687         priority of a source override; never set priority of source
688         overrides; correct typo in logging (s/priority/section/ at
689         one place)
690
691         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
692         * config/debian/cron.daily: auotmatically accept/reject
693         oldstable-proposed-updates based on COMMENTS directory
694
695 2007-06-18  Anthony Towns  <ajt@debian.org>
696
697         * config/debian/apt.conf, config/debian/apt.conf.stable,
698         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
699         (sarge), support for oldstable-proposed-updates, dropping m68k
700         from etch, creating etch-m68k suite, creating lenny.
701
702         * config/debian/vars: update for lenny
703
704         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
705         drop upload limitations, add release postgres user
706
707         * dak/process_new.py: support for automatically accepting and rejecting
708         packages from proposed-updates holding queues via COMMENTS directory
709         * cron.daily: automatically process COMMENTS-based approvals
710         and rejections for proposed-updates holding queues
711
712         * dak/process_unchecked.py: add support for oldproposedupdates
713         holding queue
714
715         * dak/control_suite.py: allow control-suite to work with etch-m68k
716
717         * dak/generate_releases.py: unlink old Release files before updating
718         them if nlinks > 1 (ie, if two files used to be the same, maybe they
719         shouldn't be when generate-releases is run)
720
721         * dak/generate_releases.py: add a couple of commented lines to make
722         it easier to deal with point releases
723
724         * dak/make_overrides.py: generate overrides for !contrib udebs
725
726         * docs/README.stable-point-release: update docs for doing a
727         point release
728
729 2007-06-18  Anthony Towns  <ajt@debian.org>
730
731         * daklib/logging.py: Set umask to not exclude group-writability
732         so we don't get reminded at the start of each month. Thanks to
733         Random J.
734         * dak/override.py: More changes from Herr von Wifflepuck: warn
735         if section of source is different to binary section; restore
736         functionality on source-only overrides; croak if trying to set
737         priority of a source override; never set priority of source
738         overrides; correct typo in logging (s/priority/section/ at
739         one place)
740
741         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
742         * config/debian/cron.daily: auotmatically accept/reject
743         oldstable-proposed-updates based on COMMENTS directory
744
745 2007-06-18  Anthony Towns  <ajt@debian.org>
746
747         * config/debian/apt.conf, config/debian/apt.conf.stable,
748         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
749         (sarge), support for oldstable-proposed-updates, dropping m68k
750         from etch, creating etch-m68k suite, creating lenny.
751
752         * config/debian/vars: update for lenny
753
754         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
755         drop upload limitations, add release postgres user
756
757         * dak/process_new.py: support for automatically accepting and rejecting
758         packages from proposed-updates holding queues via COMMENTS directory
759         * cron.daily: automatically process COMMENTS-based approvals
760         and rejections for proposed-updates holding queues
761
762         * dak/process_unchecked.py: add support for oldproposedupdates
763         holding queue
764
765         * dak/control_suite.py: allow control-suite to work with etch-m68k
766
767         * dak/generate_releases.py: unlink old Release files before updating
768         them if nlinks > 1 (ie, if two files used to be the same, maybe they
769         shouldn't be when generate-releases is run)
770
771         * dak/generate_releases.py: add a couple of commented lines to make
772         it easier to deal with point releases
773
774         * dak/make_overrides.py: generate overrides for !contrib udebs
775
776         * docs/README.stable-point-release: update docs for doing a
777         point release
778
779 2007-03-05  Anthony Towns  <ajt@debian.org>
780
781         * config/debian/dak.conf: update for 3.1r5.
782         * scripts/debian/ssh-move: add ssh-move script from debbugs
783         * config/debian/cron.unchecked: push version info to debbugs using
784         ssh-move.
785
786 2007-03-05  Anthony Towns  <ajt@debian.org>
787
788         * config/debian/dak.conf: update for 3.1r5.
789         * scripts/debian/ssh-move: add ssh-move script from debbugs
790         * config/debian/cron.unchecked: push version info to debbugs using
791         ssh-move.
792
793 2007-02-14  James Troup  <troup@ries.debian.org>
794
795         * docs/README.config: remove Dinstall::GroupOverrideFilename.
796         * config/debian/dak.conf: likewise.
797         * config/debian-non-US/dak.conf: likewise.
798         * config/debian-security/dak.conf: likewise.
799
800         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
801         experimental differently, just close the bugs and let version
802         tracking sort it out.
803          (nmu_p): remove entire class - now unused.
804          (Upload.__init__): don't use nmu_p.
805
806 2007-02-14  James Troup  <troup@ries.debian.org>
807
808         * docs/README.config: remove Dinstall::GroupOverrideFilename.
809         * config/debian/dak.conf: likewise.
810         * config/debian-non-US/dak.conf: likewise.
811         * config/debian-security/dak.conf: likewise.
812
813         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
814         experimental differently, just close the bugs and let version
815         tracking sort it out.
816          (nmu_p): remove entire class - now unused.
817          (Upload.__init__): don't use nmu_p.
818
819 2007-02-08  Anthony Towns  <ajt@debian.org>
820
821         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
822         signing key.  Drop maximum index diffs down to 14.
823
824         * config/debian/apt.conf: add udeb support for non-free (testing,
825         unstable) and experimental.
826         * config/debian/dak.conf: likewise.
827
828         * dak/generate_releases.py (main): handle udebs in any component.
829
830         * daklib/queue.py (Upload.build_summaries): handle files without a
831         'type' gracefully.
832
833         * dak/generate_releases.py (print_sha256_files): new function.
834         (main): use it.
835
836         * dak/process_accepted.py (stable_install): fix name of template
837         mail.
838
839         * dak/process_unchecked.py (is_stableupdate): fix invocation of
840         database.get_suite_id().
841
842         * templates/process-new.bxa_notification: Update on request
843         of/after discussion with BIS staff.
844
845         * scripts/debian/mkfilesindices: also handle proposed-updates.
846
847 2007-02-08  Ryan Murray  <rmurray@debian.org>
848
849         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
850         group name for chgrp of mail archives.
851
852         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
853         orig.tar.gz's by picking the first one by file id.
854
855         * dak/override.py (main): limit to binary overrides only for now.
856         (usage): update to match.
857
858         * config/debian/cron.daily: track when we have the accepted lock
859         and clean it up on exit if we have it.  Take/check the
860         cron.unchecked lock just before traping to cleanup on exit.
861         Remove potato override handling.  Remove any dangling symlinks in
862         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
863
864         * config/debian/apt.conf: change default compression scheme for
865         both Sources and Packages to gzip and bzip2 rather than
866         uncompressed and gzip (Packages) and gzip (Sources).  Use old
867         defaults for proposed-updates.
868
869         * dak/control_overrides.py (main): refuse to operate on
870         untouchable suites.
871
872         * config/debian/pseudo-packages.maintainers: drop install,
873         installation, boot-floppy, slink-cd, potato-cd and
874         nonus.debian.org.  Update base.
875         * config/debian/pseudo-packages.description: likewise.
876
877         * daklib/utils.py (re_srchasver): new regex.
878         (parse_changes): use regex to split 'Source (Version)' style
879         Source fields into 'source' and 'source-version'.
880
881         * config/debian/cron.daily: use $base instead of hardcoding path
882         name.
883
884         * scripts/debian/mkfilesindices: source 'vars' file and use it's
885         variables instead of hardcoding path names.
886
887         * config/debian/apt.conf: switch from /org to /srv.
888         * config/debian/apt.conf.buildd: likewise.
889         * config/debian/apt.conf.stable: likewise.
890         * config/debian/cron.daily: likewise.
891         * config/debian/cron.hourly: likewise.
892         * config/debian/cron.monthly: likewise.
893         * config/debian/cron.unchecked: likewise.
894         * config/debian/cron.weekly: likewise.
895         * config/debian/dak.conf: likewise.
896         * config/debian/vars: likewise.
897         * scripts/debian/mkfilesindices: likewise.
898
899 2007-02-08  James Troup  <james@nocrew.org>
900
901         * dak/process_unchecked.py (check_signed_by_key): new function to
902         ensure .changes files are signed by an authorized uploader.
903         (process_it): use it.
904
905         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
906         to configure per suite/component/architecture binary upload
907         restrictions.
908
909 2007-02-08  Anthony Towns  <ajt@debian.org>
910
911         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
912         signing key.  Drop maximum index diffs down to 14.
913
914         * config/debian/apt.conf: add udeb support for non-free (testing,
915         unstable) and experimental.
916         * config/debian/dak.conf: likewise.
917
918         * dak/generate_releases.py (main): handle udebs in any component.
919
920         * daklib/queue.py (Upload.build_summaries): handle files without a
921         'type' gracefully.
922
923         * dak/generate_releases.py (print_sha256_files): new function.
924         (main): use it.
925
926         * dak/process_accepted.py (stable_install): fix name of template
927         mail.
928
929         * dak/process_unchecked.py (is_stableupdate): fix invocation of
930         database.get_suite_id().
931
932         * templates/process-new.bxa_notification: Update on request
933         of/after discussion with BIS staff.
934
935         * scripts/debian/mkfilesindices: also handle proposed-updates.
936
937 2007-02-08  Ryan Murray  <rmurray@debian.org>
938
939         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
940         group name for chgrp of mail archives.
941
942         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
943         orig.tar.gz's by picking the first one by file id.
944
945         * dak/override.py (main): limit to binary overrides only for now.
946         (usage): update to match.
947
948         * config/debian/cron.daily: track when we have the accepted lock
949         and clean it up on exit if we have it.  Take/check the
950         cron.unchecked lock just before traping to cleanup on exit.
951         Remove potato override handling.  Remove any dangling symlinks in
952         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
953
954         * config/debian/apt.conf: change default compression scheme for
955         both Sources and Packages to gzip and bzip2 rather than
956         uncompressed and gzip (Packages) and gzip (Sources).  Use old
957         defaults for proposed-updates.
958
959         * dak/control_overrides.py (main): refuse to operate on
960         untouchable suites.
961
962         * config/debian/pseudo-packages.maintainers: drop install,
963         installation, boot-floppy, slink-cd, potato-cd and
964         nonus.debian.org.  Update base.
965         * config/debian/pseudo-packages.description: likewise.
966
967         * daklib/utils.py (re_srchasver): new regex.
968         (parse_changes): use regex to split 'Source (Version)' style
969         Source fields into 'source' and 'source-version'.
970
971         * config/debian/cron.daily: use $base instead of hardcoding path
972         name.
973
974         * scripts/debian/mkfilesindices: source 'vars' file and use it's
975         variables instead of hardcoding path names.
976
977         * config/debian/apt.conf: switch from /org to /srv.
978         * config/debian/apt.conf.buildd: likewise.
979         * config/debian/apt.conf.stable: likewise.
980         * config/debian/cron.daily: likewise.
981         * config/debian/cron.hourly: likewise.
982         * config/debian/cron.monthly: likewise.
983         * config/debian/cron.unchecked: likewise.
984         * config/debian/cron.weekly: likewise.
985         * config/debian/dak.conf: likewise.
986         * config/debian/vars: likewise.
987         * scripts/debian/mkfilesindices: likewise.
988
989 2007-02-08  James Troup  <james@nocrew.org>
990
991         * dak/process_unchecked.py (check_signed_by_key): new function to
992         ensure .changes files are signed by an authorized uploader.
993         (process_it): use it.
994
995         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
996         to configure per suite/component/architecture binary upload
997         restrictions.
998
999 2006-10-09  James Troup  <james.troup@canonical.com>
1000
1001         * dak/process_unchecked.py (check_timestamps): change match to
1002         search as recent versions of python-apt prefix the string with 'E: '.
1003
1004 2006-10-09  James Troup  <james.troup@canonical.com>
1005
1006         * dak/process_unchecked.py (check_timestamps): change match to
1007         search as recent versions of python-apt prefix the string with 'E: '.
1008
1009 2006-06-26  Ryan Murray  <rmurray@debian.org>
1010
1011         * dak/process_unchecked.py (check_files): strip optional source version
1012         from Source: field in changes file, and ensure what is left is a valid
1013         package name.
1014
1015 2006-06-26  Ryan Murray  <rmurray@debian.org>
1016
1017         * dak/process_unchecked.py (check_files): strip optional source version
1018         from Source: field in changes file, and ensure what is left is a valid
1019         package name.
1020
1021 2006-06-23  Ryan Murray  <rmurray@debian.org>
1022
1023         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1024         queue for source.
1025
1026 2006-06-23  Ryan Murray  <rmurray@debian.org>
1027
1028         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1029         queue for source.
1030
1031 2006-06-18  Ryan Murray  <rmurray@debian.org>
1032
1033         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1034         the log, too.
1035
1036         * dak/process_unchecked.py (check_files): only check embargoed and
1037         unembargoed queues if the keys are set.
1038
1039         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1040         and bzip2 for etch.
1041
1042 2006-06-18  Ryan Murray  <rmurray@debian.org>
1043
1044         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1045         the log, too.
1046
1047         * dak/process_unchecked.py (check_files): only check embargoed and
1048         unembargoed queues if the keys are set.
1049
1050         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1051         and bzip2 for etch.
1052
1053 2006-06-16  James Troup  <james@nocrew.org>
1054
1055         * dak/dak.py (init): add new-security-install.
1056
1057         * dak/new_security_install.py: cleanups and adapt for new naming
1058         scheme and other changes.
1059
1060 2006-06-16  Anthony Towns  <ajt@debian.org>
1061
1062         * dak/new_security_install.py: initial version imported from
1063         klecker.
1064
1065 2006-06-16  James Troup  <james@nocrew.org>
1066
1067         [Merged changes from klecker - original author unknown.]
1068
1069         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1070
1071         * dak/security_install.py (do_upload): fix check for oldstable and
1072         upload file list handling.
1073
1074         * dak/process_unchecked.py (check_files): update "check for
1075         source" code to also look in Embargoed and Unembargoed queues.
1076         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1077
1078         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1079
1080         * config/debian-security/vars (disembargo): add.
1081
1082         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1083         update.
1084         (Process-Unchecked::AcceptedLockFile): add.
1085         (Suite::Testing): clean up Version and Description.
1086         (SuiteMappings): add silent map from etch-secure to testing.
1087
1088         * config/debian-security/cron.unchecked: add support for
1089         disembargoed queues.
1090
1091         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1092         files too.
1093
1094         * config/debian-security/apt.conf: add amd64 to architectures for
1095         testing-security.
1096
1097 2006-06-11  James Troup  <troup@spohr.debian.org>
1098
1099         * config/debian/cron.daily: invoke process-accepted not
1100         process-unchecked.
1101
1102         * config/debian/vars (scriptsdir): new variable.
1103         * config/debian/cron.daily: use it.
1104
1105         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1106         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1107         make-maintainers' invocation to look in $configdir for
1108         pseudo-packages.maintainers.
1109
1110         * daklib/queue.py (Upload.do_reject): use correct name for
1111         rejection template.
1112
1113 2006-06-11  James Troup  <james@nocrew.org>
1114
1115         * dak/override.py (main): temporarily add content of old X-Katie
1116         header back as the PTS apparently filters on it.
1117         * dak/process_accepted.py (main): likewise.
1118         * dak/process_new.py (main): likewise.
1119         * dak/process_unchecked.py (main): likewise.
1120         * dak/reject_proposed_updates.py (main): likewise.
1121         * dak/rm.py (main): likewise.
1122         * daklib/queue.py (Upload.do_reject): likewise.
1123
1124         * config/debian/cron.unchecked: set -u to error out on undefined
1125         variables.  Preset LOCKDAILY to "" accordingly.
1126         * config/debian/cron.hourly: likewise.
1127         * config/debian/cron.monthly: likewise.
1128         * config/debian/cron.weekly: likewise.
1129
1130         * config/debian/vars (configdir): add new variable pointing to
1131         this directory.
1132
1133         * config/debian/cron.daily: use $configdir inplace of $masterdir
1134         when that's what we mean, and don't cd into $masterdir just to run
1135         dak scripts as we don't need to do that anymore.
1136         * config/debian/cron.hourly: likewise.
1137         * config/debian/cron.unchecked: likewise.
1138         * config/debian/cron.weekly: likewise.
1139
1140         * config/debian/dak.conf
1141         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1142         user back to list of known users as it's non-trivial to entirely
1143         change the owner of a database with postgresql 7.4.
1144
1145         * daklib/queue.py (Upload.source_exists): use string object
1146         methods rather than string module.
1147         (Upload.get_anyversion): likewise.
1148
1149         * daklib/utils.py (validate_changes_file_arg): update filename
1150         slicing to cope with new .dak filenames.
1151
1152         * dak/ls.py (main): add back 'heidi' as a valid argument for
1153         -f/--format as people are using it in scripts and breaking that
1154         without warning seems rude.
1155
1156 2006-05-21  James Troup  <james@nocrew.org>
1157
1158         * dak/rm.py (main): use string .isdigit() rather than
1159         utils.str_isnum().
1160         * dak/process_new.py (edit_overrides): likewise.
1161
1162         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1163         string import.
1164
1165 2006-05-21  James Troup  <james@nocrew.org>
1166
1167         * dak/check_archive.py (check_indices_files_exist): use list
1168         comprehension instead of map().  No longer need to import
1169         deprecated string module as a side-effect.
1170         * dak/check_overrides.py (process): likewise.
1171         (main): likewise.
1172         * dak/cruft_report.py (do_obsolete_source): likewise.
1173         (main): likewise.
1174         * dak/ls.py (main): likewise.
1175         * dak/make_suite_file_list.py (write_filelists): likewise.
1176         * dak/process_accepted.py (stable_install): likewise.
1177         * dak/rm.py (main): likewise.
1178         * dak/stats.py (number_of_packages): likewise.
1179         * daklib/logging.py (Logger.log): likewise.
1180         * daklib/queue.py (Upload.source_exists): likewise.
1181         (Upload.cross_suite_version_check): likewise.
1182         * daklib/utils.py (parse_args): likewise.
1183
1184 2006-05-21  James Troup  <james@nocrew.org>
1185
1186         * daklib/utils.py (process_gpgv_output): new function, split out
1187         of check_signature().
1188         (check_signature): adapt accordingly.
1189         (retrieve_key): new function that will try to retrieve the key
1190         that signed a given file from a keyserver.
1191         (check_signature): add 'autofetch' argument that if not set
1192         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1193         If 'autofetch' is true, invoke retrieve_key().
1194
1195         * docs/README.config: document Dinstall::KeyAutoFetch and
1196         Dinstall:KeyServer.
1197
1198 2006-05-20  James Troup  <james@nocrew.org>
1199
1200         * dak/find_null_maintainers.py (main):
1201         s/createtimestamp/createTimestamp/ to make things work with modern
1202         slapd.
1203
1204         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1205         Stable::Version and Stable::Description for 3.1r2.
1206
1207         * config/debian-non-US/dak.conf: sync with klecker - update
1208         version number of 3.0 and MoreInfoURL.
1209
1210         * docs/README.stable-point-release: Add notes about updating
1211         dak.conf and Reject-Proposed-Updates section in particular.
1212         s/woody/stable/.  Also need to update README.html.
1213
1214         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1215
1216         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1217
1218 2006-05-20  Ryan Murray  <rmurray@debian.org>
1219
1220         * scripts/debian/update-ftpstats: new script to update daily
1221         architecture size graph data.
1222
1223         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1224         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1225         there.
1226
1227         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1228         before we finish.  Don't push to merkel.
1229
1230         * dak/process_unchecked.py (check_changes): Also look in
1231         ProposedUpdates queue dir.
1232         (check_files): likewise.
1233
1234 2006-05-20  Anthony Towns  <ajt@debian.org>
1235
1236         * scripts/debian/mkfilesindices: new script to generate file
1237         indices used for partial mirroring.
1238
1239         * config/debian/cron.daily: add progress timestamps.
1240
1241         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1242         amd64 to testing, unstable and experimental.  Drop sh from
1243         experimental.  Move Experimental to dists/experimental.  Add
1244         Dir::ProposedUpdates.  Add Architectures::amd64.
1245
1246         * config/debian/apt.conf: add amd64 to testing, unstable and
1247         experimental.  Drop uncompressed Packages files from testing. Drop
1248         sh from experimental.  Move experimental to dists/experimental/.
1249
1250         * config/debian/vars (archs): add amd64.
1251
1252         * dak/process_unchecked.py (action): Add support for
1253         proposed-updates approval queue.
1254         (is_stableupdate): new function - checks if the upload is targeted
1255         at proposed-updates.
1256         (do_stableupdate): likewise - moves upload to proposed-updates
1257         holding area.
1258
1259         * dak/process_new.py (do_new): warn if original or new target
1260         suite are invalid.
1261
1262         * dak/generate_releases.py (print_md5sha_files): less whitespace
1263         between the hash and size.
1264
1265         * dak/generate_index_diffs.py (genchanges): don't say we're not
1266         doing anything.  Better formatting of other messages.
1267         (main): don't skip experimental and remove some 'doing stuff'
1268         prints.
1269
1270 2006-05-18  James Troup  <james@nocrew.org>
1271
1272         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1273         query.
1274
1275         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1276         docstrings, untabify, don't shadow builtins, lowercase non-global
1277         variable names, spaces after commas.  Also bail if given any
1278         arguments since we don't accept any.
1279         * dak/init_db.py: likewise.  Also split large main() into
1280         subfunctions and rename get() to sql_get().
1281
1282         * dak/init_db.py (main): check returned value from
1283         database.get_archive_id().
1284
1285         * dak/dak.py: renamed from shell.py.  Update to support new source
1286         layout.  Created init() and usage() functions.  Various
1287         pylint-inspired cleanups.  Use daklib utils.warn() and
1288         utils.fubar().  Change 'functionality' variable to only have
1289         (command, description) and always invoke main() when running the
1290         module.  Also support -h.
1291
1292 2006-05-17  James Troup  <james@nocrew.org>
1293
1294         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1295         imports of and calls to daklib modules.  Change script name
1296         everywhere, i.e. in output, mails, comments and configuration tree
1297         + filenames.  Also update references to other renamed scripts,
1298         classes and templates.  Use '.dak' instead of '.katie' for the
1299         queue info storage files.
1300         (Renamed from tea)
1301         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1302         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1303         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1304         * dak/clean_queues.py: likewise.  (Renamed from shania)
1305         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1306         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1307         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1308         * dak/control_suite.py: likewise.  (Renamed from heidi)
1309         * dak/cruft_report.py: likewise.  (Renamed from rene)
1310         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1311         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1312         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1313         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1314         * dak/import_archive.py: likewise.  (Renamed from neve)
1315         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1316         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1317         * dak/init_db.py: likewise. (Renamed from alyson)
1318         * dak/init_dirs.py: likewise. (Renamed from rose)
1319         * dak/ls.py: likewise. (Renamed from madison)
1320         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1321         * dak/make_overrides.py: likewise.  (Renamed from denise)
1322         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1323         * dak/mirror_split.py: likewise.  (Renamed from billie)
1324         * dak/override.py: likewise.  (Renamed from alicia)
1325         * dak/poolize.py: likewise.  (Renamed from catherine)
1326         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1327         * dak/process_new.py: likewise.  (Renamed from lisa)
1328         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1329         * dak/queue_report.py: likewise.  (Renamed from helena)
1330         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1331         * dak/rm.py: likewise.  (Renamed from melanie)
1332         * dak/security_install.py: likewise.  (Renamed from amber)
1333         * dak/split_done.py: likewise.  (Renamed from nina)
1334         * dak/stats.py: likewise.  (Renamed from saffron)
1335         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1336         * daklib/database.py: likewise.  (Renamed from db_access)
1337         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1338         * daklib/utils.py: likewise.
1339
1340         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1341         doesn't need to notify anyone" string.
1342         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1343
1344         * dak/process_accepted.py (init): drop -V/--version argument.
1345         * dak/process_new.py (init): likewise.
1346         * dak/process_unchecked.py (init): likewise.
1347         * dak/reject_proposed_updates.py (init): likewise
1348
1349         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1350
1351         * dak/stats.py: in usage() output change STAT to MODE.
1352
1353 2006-05-15  James Troup  <james@nocrew.org>
1354
1355         * dak/queue_report.py: remove unused encodings imports.
1356
1357         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1358         imports.  Initalize 'Cnf' as a global.
1359         (BillieDB._internal_recurse): fix 'util.' typo.
1360
1361         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1362         commented out time check for LDAP search.
1363
1364 2005-12-16  Ryan Murray  <rmurray@debian.org>
1365
1366         * halle: add support for udebs
1367         * kelly: stable_install: add support for binNMU versions
1368
1369 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1370
1371         * katie.py: Move accept() autobuilding support into separate function 
1372         (queue_build), and generalise to build different queues
1373
1374         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1375
1376         * jennifer: Initial support for enabling embargo handling with the
1377         Dinstall::SecurityQueueHandling option.
1378         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1379         functions.
1380
1381         * katie.conf-security: Include embargo options
1382         * katie.conf-security: Add Lock dir
1383         * init_pool.sql-security: Create disembargo table
1384         * init_pool.sql-security: Add constraints for disembargo table
1385
1386 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1387
1388         * Merge of changes from klecker, by various people
1389
1390         * amber: special casing for not passing on amd64 and oldstable updates
1391         * amber: security mirror triggering
1392         * templates/amber.advisory: updated advisory structure
1393         * apt.conf.buildd-security: update for sarge's release
1394         * apt.conf-security: update for sarge's release
1395         * cron.buildd-security: generalise suite support, update for sarge's release
1396         * cron.daily-security: update for sarge's release, add udeb support
1397         * vars-security: update for sarge's release
1398         * katie.conf-security: update for sarge's release, add amd64 support,
1399         update signing key
1400
1401         * docs/README.names, docs/README.quotes: include the additions
1402
1403 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1404
1405         * Changed accepted_autobuild to queue_build everywhere.
1406         * Add a queue table.
1407         * Add a "queue" field in the queue_build table (currently always 0)
1408
1409         * jennifer: Restructure to make it easier to support special
1410         purpose queues between unchecked and accepted.
1411
1412 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1413
1414         * Finishing merge of changes from spohr, by various people still
1415
1416         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1417         works
1418         * jennifer: Re-enable .deb ar format checking
1419         * katie.py: Convert to +bX binNMU special casing
1420         * rhona: Add some debug output when deleting binaries
1421         * cron.daily: Add emilie
1422         * cron.unchecked: Add lock files
1423
1424 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1425
1426         * Merge of changes from spohr, by various people.
1427
1428         * tiffani: new script to do patches to Packages, Sources and Contents
1429         files for quicker downloads.
1430         * ziyi: update to authenticate tiffani generated files
1431
1432         * dak: new script to provide a single binary with less arbitrary names
1433         for access to dak functionality.
1434
1435         * cindy: script implemented
1436
1437         * saffron: cope with suites that don't have a Priority specified
1438         * heidi: use get_suite_id()
1439         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1440         * denise: remove override munging for testing (now done by cindy)
1441         * helena: expanded help, added new, sort and age options, and fancy headers
1442         * jennifer: require description, add a reject for missing dsc file
1443         * jennifer: change lock file
1444         * kelly: propogation support
1445         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1446         * madison: don't say "dep-retry"
1447         * melanie: bug fix in output (missing %)
1448         * natalie: cope with maintainer_override == None; add type_id for overrides
1449         * nina: use mtime, not ctime
1450
1451         * katie.py: propogation bug fixes
1452         * logging.py: add debugging support, use | as the logfile separator
1453
1454         * katie.conf: updated signing key (4F368D5D)
1455         * katie.conf: changed lockfile to dinstall.lock
1456         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1457         * katie.conf: added tiffani, cindy support
1458         * katie.conf: updated to match 3.0r6 release
1459         * katie.conf: updated to match sarge's release
1460
1461         * apt.conf: update for sarge's release
1462         * apt.conf.stable: update for sarge's release
1463         * apt.conf: bump daily max Contents change to 25MB from 12MB
1464
1465         * cron.daily: add accepted lock and invoke cindy
1466         * cron.daily: add daily.lock
1467         * cron.daily: invoke tiffani
1468         * cron.daily: rebuild accepted buildd stuff
1469         * cron.daily: save rene-daily output on the web site
1470         * cron.daily: disable billie
1471         * cron.daily: add stats pr0n
1472
1473         * cron.hourly: invoke helena
1474
1475         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1476         * vars: add lockdir, add etch to copyoverrides
1477         * Makefile: add -Ipostgresql/server to CXXFLAGS
1478
1479         * docs/: added README.quotes
1480         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1481         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1482
1483         * TODO: correct spelling of "conflicts"
1484
1485 2005-05-28  James Troup  <james@nocrew.org>
1486
1487         * helena (process_changes_files): use MTIME rather than CTIME (the
1488         C's not for 'creation', stupid).
1489         * lisa (sort_changes): likewise.
1490
1491         * jennifer (check_distributions): use has_key rather than an 'in'
1492         test which doesn't work with python2.1.  [Probably by AJ]
1493
1494 2005-03-19  James Troup  <james@nocrew.org>
1495
1496         * rene (main): use Suite::<suite>::UdebComponents to determine
1497         what components have udebs rather than assuming only 'main' does.
1498
1499 2005-03-18  James Troup  <james@nocrew.org>
1500
1501         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1502         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1503         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1504         <andrew@ubuntu.com>.
1505
1506 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1507
1508         * helena: add -n/--new HTML output option and improved sorting
1509         options.
1510
1511 2005-03-06  Ryan Murray  <rmurray@debian.org>
1512
1513         * shania(main): use Cnf::Dir::Reject instead of REJECT
1514
1515 2005-02-08  James Troup  <james@nocrew.org>
1516
1517         * rene (main): add partial NBS support by checking that binary
1518         packages are built by their real parent and not some random
1519         stranger.
1520         (do_partial_nbs): likewise.
1521
1522 2005-01-18  James Troup  <james@nocrew.org>
1523
1524         * katie.py (Katie.build_summaries): avoid leaking file handle when
1525         extracting package description.
1526         (Katie.force_reject): remember and close each file descriptor we
1527         use.
1528         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1529         s/reason_file/reason_fd/ because it's a file descriptor.
1530         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1531         invoking apt_pkg.md5sum().
1532
1533         * jennifer (check_deb_ar): new function: sanity check the ar
1534         contents of a .deb.
1535         (check_files): use it.
1536         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1537         found.
1538         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1539
1540 2005-01-14  Anthony Towns  <ajt@debian.org>
1541
1542         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1543
1544         * propup stuff (thanks to Andreas Barth)
1545         * katie.conf: add stable MustBeOlderThan testing, add -security
1546           propup
1547         * jennifer: set distribution-version in .katie if propup may be needed
1548         * katie.py: add propogation to cross_suite_version_check
1549
1550 2004-11-27  James Troup  <james@nocrew.org>
1551
1552         * nina: new script to split monolithic queue/done into date-based
1553         hierarchy.
1554
1555         * rene (usage): document -s/--suite.
1556         (add_nbs): use .setdefault().
1557         (do_anais): likewise.
1558         (do_nbs): don't set a string to "" and then += it.
1559         (do_obsolete_source): new function - looks for obsolete source
1560         packages (i.e source packages whose binary packages are ALL a)
1561         claimed by someone else and b) newer when built from the other
1562         source package).
1563         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1564         and 'full' check modes.  Check for obsolete source packages.
1565         linux-wlan-ng has been fixed - remove hideous bodge.
1566
1567         * jennifer (check_distributions): support 'reject' suite map type.
1568
1569         * utils.py (validate_changes_file_arg): s/file/filename/.
1570         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1571         and return the .changes filename regardless.
1572         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1573         (re_no_revision): don't escape '-', it's not a special character.
1574         s/\*/+/ as there must be at least one non-dash character after the
1575         dash in a revision.  Thanks to Christian Reis for noticing both of
1576         these.
1577
1578         * ashley (main): pass require_changes=-1 to
1579         utils.validate_changes_file_arg().
1580
1581         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1582         Team <debian-kernel@lists.debian.org>'.
1583
1584         * katie.py (Katie.in_override_p): fix .startswith() usage.
1585
1586         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1587         (Lauren::MoreInfoURL): update to 3.0r3.
1588         (Suite::Stable::Version): likewise.
1589         (Suite::Stable::Description): likewise.
1590
1591         * cron.daily: disable automatic task override generation.
1592
1593         * cindy (process): restrict "find all packages" queries by
1594         component.  Respect Options["No-Action"].
1595         (main): add -n/--no-action support.  Only run on unstable.  Rename
1596         type to otype (pychecker).
1597
1598 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1599
1600         * katie.conf (Billie::BasicTrees): add all architectures.
1601         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1602         'everything'.
1603
1604         * cron.daily: Update a 'current' symlink when creating the
1605         post-daily-cron-job database backup to aid mirroring to merkel.
1606         Run billie.
1607
1608         * billie (BillieTarget.poolish_match): handle .udeb too.
1609
1610 2004-10-13  Ryan Murray  <rmurray@debian.org>
1611
1612         * amber (do_upload): Sort changes files in "katie" order so that
1613           source always arrives before binary-only rebuilds
1614
1615 2004-10-05  James Troup  <james@nocrew.org>
1616
1617         * jennifer (check_dsc): correct reject message on invalid
1618         Maintainer field.
1619
1620 2004-09-20  James Troup  <james@nocrew.org>
1621
1622         * alicia: remove unused 'pwd' import.
1623
1624         * tea (check_override): underline suite name in output properly.
1625
1626         * rene (main): read a compressed Packages file.
1627         * tea (validate_packages): likewise.
1628
1629         * katie.py (re_fdnic): add 'r' prefix.
1630         (re_bin_only_nmu_of_mu): likewise.
1631         (re_bin_only_nmu_of_nmu): likewise.
1632
1633         * madison (main): retrieve component information too and display
1634         it if it's not 'main'.
1635         * melanie (reverse_depends_check): likewise.
1636
1637         * utils.py (pp_dep): renamed...
1638         (pp_deps): ... to this.
1639         * jeri (check_dep): update calls to utils.pp_deps().
1640         * melanie (reverse_depends_check): likewise.
1641
1642         * jennifer (check_changes): move initalization of email variables
1643         from here...
1644         (process_it): ...to here as we no longer always run
1645         check_changes().  Don't bother to initialize
1646         changes["architecture"].
1647
1648         * denise (list): renamed to...
1649         (do_list): ...this to avoid name clash with builtin 'list'.
1650         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1651         for dictionaries.
1652         (main): Likewise for name clash avoidance and also
1653         s/override_type/suffix/.  Adjust call to do_list().
1654
1655 2004-09-01  Ryan Murray  <rmurray@debian.org>
1656
1657         * tea (check_files): check the pool/ directory instead of dists/
1658
1659 2004-08-04  James Troup  <james@nocrew.org>
1660
1661         * jenna (cleanup): use .setdefault() for dictionaries.
1662         (write_filelists): likewise.
1663
1664         (write_filelists): Use utils.split_args() not split() to split
1665         command line arguments.
1666         (stable_dislocation_p): likewise.
1667
1668         (write_filelists): Add support for mapping side of suite-based
1669         "Arch: all mapping".
1670         (do_da_do_da): ensure that if we're not doing all suites that we
1671         process enough to be able correct map arch: all packages.
1672
1673         * utils.py (cant_open_exc): correct exception string,
1674         s/read/open/, s/.$//.
1675
1676         * templates/amber.advisory: update to match reality a little
1677         better.
1678
1679         * melanie (reverse_depends_check): read Packages.gz rather than
1680         Packages.
1681
1682         * jennifer (check_files): check for unknown component before
1683         checking for NEWness.
1684
1685         * katie.py (Katie.in_override_p): use .startswith in favour of a
1686         slice.
1687
1688         * docs/melanie.1.sgml: document -R/--rdep-check.
1689
1690 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1691
1692         * billie (main): Make the verbatim lists include all the README
1693           elements.
1694         * docs/README.names: Add billie in (correcting oversight)
1695
1696 2004-07-01  James Troup  <james@nocrew.org>
1697
1698         * emilie (main): handle woody's case-sensitive python-ldap,
1699         s/keyfingerprint/keyFingerPrint/.
1700
1701 2004-06-25  James Troup  <james@nocrew.org>
1702
1703         * debian/control (Depends): add dpkg-dev since jennifer uses
1704         dpkg-source.
1705
1706 2004-06-24  James Troup  <james@nocrew.org>
1707
1708         * melanie (main): s/file/temp_file/ and close file handle before
1709         removing the temporary file.
1710         (main): don't warn about needing a --carbon-copy if in no-action
1711         mode.
1712
1713         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1714         (main): likewise.
1715
1716         * test/006/test.py (main): check bracketed email-only form.
1717
1718         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1719         email-only, strip the brackets so we don't end up with
1720         <<james@nocrew.org>>.
1721
1722 2004-06-20  James Troup  <james@nocrew.org>
1723
1724         * jennifer (process_it): only run check_changes() if
1725         check_signature() returns something.  (Likewise)
1726
1727         * utils.py (changes_compare): if there's no changes["version"] use
1728         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1729
1730 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1731
1732         * jeri (pp_dep): moved from here to ...
1733         * utils.py (pp_dep): here.
1734
1735         * melanie (main): add reverse dependency checking.
1736
1737 2004-06-17  James Troup  <james@nocrew.org>
1738
1739         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1740         * tea (check_dscs): likewise.
1741
1742         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1743         change from boolean to a variable with 3 possible values, 0 and 1
1744         as before, -1 means don't require a signature.  Makes
1745         parse_changes() useful for parsing arbitary RFC822-style files,
1746         e.g. 'Release' files.
1747         (check_signature): add support for detached signatures by passing
1748         the files the signature is for as an optional third argument.
1749         s/filename/sig_filename/g.  Add a fourth optional argument to
1750         choose the keyring(s) to use.  Don't os.path.basename() the
1751         sig_filename before checking it for taint.
1752         (re_taint_free): allow '/'.
1753
1754 2004-06-11  James Troup  <james@nocrew.org>
1755
1756         * tea (check_files): make override.unreadable optional.
1757         (validate_sources): close the Sources file handle.
1758
1759         * docs/README.first: clarify that 'alyson' and running
1760         add_constraints.sql by hand is something you only want to do if
1761         you're not running 'neve'.
1762
1763         * docs/README.config (Location::$LOCATION::Suites): document.
1764
1765         * db_access.py (do_query): also print out the result of the query.
1766
1767 2004-06-10  James Troup  <james@nocrew.org>
1768
1769         * katie.py (Katie.cross_suite_version_check): post-woody versions
1770         of python-apt's apt_pkg.VersionCompare() function apparently
1771         returns variable integers for less than or greater than results -
1772         update our result checking to match.
1773         * jenna (resolve_arch_all_vs_any): likewise.
1774         * charisma (main): likewise.
1775
1776 2004-06-09  James Troup  <james@nocrew.org>
1777
1778         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1779         valid_dsc_p and don't run check_source() if check_dsc() failed.
1780         (check_dsc): on fatal failures return 0 so check_source() isn't
1781         run (since it makes fatal assumptions about the presence of
1782         mandatory .dsc fields).
1783         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1784
1785 2004-05-07  James Troup  <james@nocrew.org>
1786
1787         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1788         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1789
1790         * katie.conf (Dir::Override): remove duplicate definition.
1791
1792         * neve (get_or_set_files_id): add an always-NULL last_used column
1793         to output.
1794
1795 2004-04-27  James Troup  <james@nocrew.org>
1796
1797         * apt.conf-security (tree "dists/stable/updates"): add
1798         ExtraOverride - noticed by Joey Hess (#246050).
1799         (tree "dists/testing/updates"): likewise.
1800
1801 2004-04-20  James Troup  <james@nocrew.org>
1802
1803         * jennifer (check_files): check for existing .changes or .katie
1804         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1805         directories.
1806
1807 2004-04-19  James Troup  <james@nocrew.org>
1808
1809         * jennifer (check_source): handle failure to remove the temporary
1810          directory (used for source tree extraction) better, specifically:
1811          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1812          and try again and if that works, REJECT the package.
1813
1814 2004-04-17  James Troup  <james@nocrew.org>
1815
1816         * docs/madison.1.sgml: document -b/--binary-type,
1817         -g/--greaterorequal and -G/--greaterthan.
1818
1819         * madison (usage): -b/--binary-type only takes a single argument.
1820         Document -g/--greaterorequal and -G/--greaterthan.
1821         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1822
1823 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1824
1825         * billie: Cleaned up a load of comments, added /README.non-US to
1826           the verbatim matches list.
1827
1828 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1829
1830         * utils.py (size_type): Make it use real binary megabytes and
1831           kilobytes, instead of the marketing terms used before.
1832
1833 2004-04-07  James Troup  <james@nocrew.org>
1834
1835         * katie.py (Katie.check_dsc_against_db): in the case we're
1836         ignoring an identical-to-existing orig.tar.gz remember the path to
1837         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1838         location.path too to be able to do so.
1839
1840 2004-04-03  James Troup  <james@nocrew.org>
1841
1842         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1843         needed for new utils.rfc2047_encode() function.
1844
1845         * utils.py (re_parse_maintainer): allow whitespace inside the
1846         email address.
1847         (Error): new exception base class.
1848         (ParseMaintError): new exception class.
1849         (force_to_utf8): new function.
1850         (rfc2047_encode): likewise.
1851         (fix_maintainer): rework.  use force_to_utf8() to force name and
1852         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1853         return an rfc2047 value.  Validate the address to catch missing
1854         email addresses and (some) broken ones.
1855
1856         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1857         by adopting foo2047 return value.
1858         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1859         mandatory changes fields.  Promote changes and maintainer822 to
1860         mandatory fields.
1861         (Katie.update_subst): default maintainer2047 rather than
1862         maintainer822.  User foo2047 rather than foo822 when setting
1863         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1864
1865         * jennifer (check_changes): set default changes["maintainer2047"]
1866         and changes["changedby2047"] values rather than their 822
1867         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1868         to new utils.fix_maintainer() - reject on exception and adopt
1869         foo2047 return value.
1870         (check_dsc): if a mandatory field is missing don't do any further
1871         checks and as a result reduce paranoia about dsc[var] existence.
1872         Validate the maintainer field by calling new
1873         utils.fix_maintainer().
1874
1875         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1876         changes fields.  Promote maintainer822 to a mandatory changes
1877         field.  add "pool name" to files fields.
1878
1879         * test/006/test.py: new file - tests for new
1880         utils.fix_maintainer().
1881
1882 2004-04-01  James Troup  <james@nocrew.org>
1883
1884         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1885
1886         * jennifer (get_changelog_versions): create a symlink mirror of
1887         the source files in the temporary directory.
1888         (check_source): if check_dsc_against_db() couldn't find the
1889         orig.tar.gz bail out.
1890
1891         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1892         part of the upload store the path to it in pkg.orig_tar_gz and if
1893         it can't be found set pkg.orig_tar_gz to -1.
1894
1895         Explicitly return the second value as None in the (usual) case
1896         where we don't have to reprocess.  Remove obsolete diagnostic
1897         logs.
1898
1899         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1900
1901         * utils.py (temp_filename): new helper function that wraps around
1902         tempfile.mktemp().
1903
1904         * katie.py (Katie.do_reject): use it and don't import tempfile.
1905         * lisa (prod_maintainer): likewise.
1906         (edit_note): likewise.
1907         (edit_new): likewise.
1908         * lauren (reject): likewise.
1909         * melanie (main): likewise.
1910         * neve (do_sources): likewise.
1911         * rene (main): likewise.
1912         * tea (validate_sources): likewise.
1913
1914 2004-03-31  James Troup  <james@nocrew.org>
1915
1916         * tea (validate_sources): remove unused 's' temporary variable.
1917
1918 2004-03-15  James Troup  <james@nocrew.org>
1919
1920         * jennifer (check_dsc): check changes["architecture"] for
1921         source before we do anything else.
1922
1923 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1924
1925         * billie: Added
1926         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1927
1928 2004-03-12  James Troup  <james@nocrew.org>
1929
1930         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1931
1932         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1933
1934         * katie.py (Katie.accept): add support for DebBugs Version
1935         Tracking by writing out .versions (generated in jennifer's
1936         get_changelog_versions()) and .debinfo (mapping of binary ->
1937         source) files.
1938
1939         * ashley (main): add dsc["bts changelog"].
1940
1941         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1942
1943         * jennifer (check_diff): obsoleted by check_source(), removed.
1944         (check_source): new function: create a temporary directory and
1945         move into it and call get_changelog_versions().
1946         (get_changelog_versions): new function: extract the source package
1947         and optionally parse debian/changelog to obtain the version
1948         history for the BTS.
1949         (process_it): call check_source() rather than check_diff().
1950
1951 2004-03-08  James Troup  <james@nocrew.org>
1952
1953         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1954         listbar" rather than "if listbar.count(varfoo)"' change on
1955         2004-02-24.
1956
1957 2004-03-05  James Troup  <james@nocrew.org>
1958
1959         * alicia (main): don't warn about not closing bugs - we don't
1960         manage overrides through the BTS.
1961
1962 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1963
1964         * docs/README.config: lots of updates and corrections.
1965         * docs/README.first: likewise.
1966
1967         * docs/README.config: drop unused Dir::Queue::Root.
1968         * katie.conf-non-US: likewise.
1969         * katie.conf: likewise.
1970         * katie.conf-security: likewise.
1971
1972 2004-02-27  James Troup  <james@nocrew.org>
1973
1974         * rose (process_tree): use 'if var in [ list ]' rather than long
1975         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1976         Michlmayr.
1977
1978         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1979         suggested by Martin Michlmayr.
1980         * catherine (poolize): likewise.
1981         * charisma (main): likewise.
1982         * halle (check_changes): likewise.
1983         * heidi (main): likewise.
1984         (process_file): likewise.
1985         * kelly (install): likewise.
1986         (stable_install): likewise.
1987         * utils.py (fix_maintainer): likewise.
1988
1989         * apt.conf: add support for debian-installer in testing-proposed-updates.
1990         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1991         add - set to main.
1992
1993         * mkmaintainers: add "-T15" option to wget of non-US packages file
1994         so that we don't hang cron.daily if non-US is down.
1995
1996         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1997
1998         * templates/jennifer.bug-close: add Source and Source-Version
1999         pseudo-headers that may be used for BTS Version Tracking someday
2000         [ajt@].
2001
2002         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2003         (main): likewise.
2004
2005         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2006
2007 2004-02-25  James Troup  <james@nocrew.org>
2008
2009         * katie.conf (SuiteMappings): don't map testing-security to
2010         proposed-updates.
2011
2012 2004-02-24  James Troup  <james@nocrew.org>
2013
2014         * katie.py (Katie.__init__): remove unused 'values' field.
2015
2016         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2017         rather than 's.count(c) > 0'.
2018
2019         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2020         rather than "if listbar.count(varfoo)".
2021         * halle (check_joey): likewise.
2022         * jeri (check_joey): likewise.
2023         * lisa (edit_index): likewise.
2024         * jenna (stable_dislocation_p): likewise.
2025
2026         * jennifer (main): remove unused global 'nmu'.
2027
2028 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2029
2030         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2031           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2032           the dak tools close bugs.
2033
2034 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2035
2036         * katie.conf (Alicia): Added an Alicia section with email address
2037         * templates/alicia.bug-close: Added
2038         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2039         * alicia (main): Added a -d/--done argument
2040
2041 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2042
2043         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2044
2045 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2046
2047         * lisa (prod_maintainer): Added function to prod the maintainer without
2048           accepting or rejecting the package
2049         * templates/lisa.prod: Added this template for the prodding mail
2050
2051         * .cvsignore: Added neve-files which turns up in new installations
2052
2053 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2054
2055         * alicia (usage): Fixed usage message to offer section and priority
2056           as seperately optional arguments.
2057         * alicia (main): Added a % (arg) interpolation needed when only
2058           one of section or priority is provided and it cannot be found.
2059
2060 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2061
2062         * alicia: Added
2063         * docs/alicia.1.sgml: Added
2064         * docs/Makefile: Added alicia to the list of manpages to build
2065         * docs/README.names: Noted what alicia does
2066         * docs/README.first: Noted where alicia is useful
2067
2068 2004-01-21  James Troup  <james@nocrew.org>
2069
2070         * madison (main): add -b/--binary-type.
2071         (usage): likewise.
2072
2073         * denise (main): generate debian-installer overrides for testing
2074         too.
2075         * apt.conf: add support for debian-installer in testing.
2076         * katie.conf (Suite::Testing::UdebComponents): set to main.
2077
2078         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2079         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2080         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2081
2082         * utils.py (parse_changes): don't process data not inside the
2083         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2084         pointing this out.
2085         * test/005/test.py (main): new test to test for above.
2086
2087 2004-01-04  James Troup  <james@nocrew.org>
2088
2089         * jenna (write_filelists): correct typo, s/Components/Component/
2090         for Options.
2091
2092 2004-01-04  Ryan Murray  <rmurray@debian.org>
2093
2094         * cron.buildd: move update of overrides and Packages file...
2095         * cron.unchecked: to here.
2096         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2097         * katie.conf-security: likewise
2098
2099 2003-11-20  James Troup  <james@nocrew.org>
2100
2101         * jenna (main): don't use utils.try_with_debug(), it produces way
2102         too much output.
2103
2104         * halle (check_changes): don't error out if a .changes refers to a
2105         non-existent package, just warn and skip the file.
2106
2107         * docs/README.stable-point-release: mention halle and .changes
2108         obsoleted by removal through melanie.  Update for 3.0r2.
2109
2110         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2111         (Suite::Stable::Description): update for 3.0r2.
2112         (Lauren::MoreInfoURL): likewise.
2113         * katie.conf-non-US (Suite::Stable::Version): likewise.
2114         (Suite::Stable::Description): likewise.
2115         (Lauren::MoreInfoURL): likewise.
2116
2117         * apt.conf.stable (Default): don't define MaxContentsChange.
2118         * apt.conf.stable-non-US (Default): likewise.
2119
2120         * lauren (reject): hack to work around partial replacement of an
2121         upload, i.e. one or more binaries superseded by another source
2122         package.
2123
2124 2003-11-17  James Troup  <james@nocrew.org>
2125
2126         * pseudo-packages.maintainers: point installation-reports at
2127         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2128         request.
2129
2130         * utils.py (parse_changes): calculate the number of lines once
2131         with len() rather than max().
2132
2133         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2134         files, since check_dsc_against_db() deletes the .orig.tar.gz
2135         entry.
2136
2137 2003-11-13  Ryan Murray  <rmurray@debian.org>
2138
2139         * apt.conf: specify a src override file for debian-installer
2140
2141 2003-11-10  James Troup  <james@nocrew.org>
2142
2143         * fernanda.py (strip_pgp_signature): new function - strips PGP
2144         signature from a file and returns the modified contents of the
2145         file in a string.
2146         (display_changes): use it.
2147         (read_dsc): likewise.
2148
2149 2003-11-09  Ryan Murray  <rmurray@debian.org>
2150
2151         * cron.buildd: export accepted_autobuild table for unstable, and use
2152         it to generate the incoming Packages/Sources rather than having apt
2153         walk the directory.
2154         * apt.conf.buildd: use exported table from cron.buildd to generate
2155         Packages/Sources
2156
2157 2003-11-07  James Troup  <james@nocrew.org>
2158
2159         * kelly: import errno.
2160
2161         * katie.py (Katie.build_summaries): sort override disparities.
2162
2163         * kelly (install): set dsc_component based on the .dsc's component
2164         not a random binaries.
2165
2166 2003-10-29  James Troup  <james@nocrew.org>
2167
2168         * katie.py (Katie.build_summaries): don't assume changes["source"]
2169         exists since it might not.
2170
2171 2003-10-20  James Troup  <james@nocrew.org>
2172
2173         * pseudo-packages.maintainers: update security.d.o to use
2174         team@s.d.o at joy@'s request.
2175
2176 2003-10-17  James Troup  <james@nocrew.org>
2177
2178         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2179
2180 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2181
2182         * tea (chk_bd_process_dir): use .endswith rather than slice.
2183
2184 2003-10-14  James Troup  <james@nocrew.org>
2185
2186         * tea (check_build_depends): new function.
2187         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2188         in the archive.
2189         (main): update for new function.
2190         (usage): likewise.
2191
2192         * katie.py (Katie.do_reject): sanitize variable names,
2193         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2194         os.close() to outside if clause.
2195
2196         * jennifer (check_dsc): check build-depends and
2197         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2198         Fold the ARRAY check into the same code block and tidy up it's
2199         rejection message.
2200         (check_changes): ensure that the Files field is non-empty.
2201         Suggested by Santiago Vila <sanvila@unex.es>
2202         (check_changes): normalize reject messages.
2203         (check_dsc): instead of doing most of the checks inside a for loop
2204         and an if, find the dsc_filename in a short loop over files first
2205         and then do all the checks.  Add check for more than one .dsc in a
2206         .changes which we can't handle.  Normalize reject messages.
2207
2208 2003-10-13  James Troup  <james@nocrew.org>
2209
2210         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2211         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2212
2213         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2214         variables while iterating over 'files'.  Don't regenerate it when
2215         checking for source if source is mentioned.
2216
2217         Reject source only uploads if the config variable
2218         Dinstall::Reject::NoSourceOnly is set.
2219
2220 2003-10-03  James Troup  <james@nocrew.org>
2221
2222         * rene (main): add nasty hardcoded reference to debian-installer
2223         so we detect NBS .udebs.
2224
2225 2003-09-29  James Troup  <james@nocrew.org>
2226
2227         * apt.conf (old-proposed-updates): remove.
2228         * apt.conf-non-US (old-proposed-updates): likewise.
2229
2230 2003-09-24  James Troup  <james@nocrew.org>
2231
2232         * tea (check_files_not_symlinks): new function, ensure files
2233         mentioned in the database aren't symlinks.  Includes code to
2234         update any files that are like this to their real filenames +
2235         location; commented out by though.
2236         (usage): update for new function.
2237         (main): likewise.
2238
2239 2003-09-24  Anthony Towns  <ajt@debian.org>
2240
2241         * vars: external-overrides variable added
2242         * cron.daily: Update testing/unstable Task: overrides from joeyh
2243         managed external source.
2244
2245 2003-09-22  James Troup  <james@nocrew.org>
2246
2247         * kelly (install): if we can't move the .changes into queue/done,
2248         fail don't warn and carry on.  The old behaviour pre-dates NI and
2249         doesn't make much sense now since jennifer checks both
2250         queue/accepted and queue/done for any .changes files it's
2251         processing.
2252
2253         * utils.py (move): don't throw exceptions on existing files or
2254         can't overwrite, instead just fubar out.
2255
2256         * jennifer (check_dsc): also check Build-Depends-Indep for
2257         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2258
2259 2003-09-18  James Troup  <james@nocrew.org>
2260
2261         * katie.py (Katie.close_bugs): only log the bugs we've closed
2262         once.
2263
2264         * kelly (main): log as 'kelly', not 'katie'.
2265
2266 2003-09-16  James Troup  <james@nocrew.org>
2267
2268         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2269
2270         * jennifer (check_changes): normalize reject message for "changes
2271         file already exists" to be %s: <foo>.
2272         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2273         produced by broken dpkg-source in 1.10.11.  Tone down and
2274         normalize rejection message for incompatible 'Format' version
2275         numbers.
2276         (check_diff): likewise tone down and normalize.
2277
2278 2003-09-07  James Troup  <james@nocrew.org>
2279
2280         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2281         don't bomb out on bogus empty lines.
2282         (build_file_list): check for changes["files"] earlier.  use Dict
2283         to create files[name] dictionary.
2284         (send_mail): don't bother validating arguments.
2285         (check_signature): minor improvements to some of the rejection
2286         messages including listing the key id of the key that wasn't found
2287         in the keyring.
2288         (wrap): new function.
2289
2290         * tea: add new check 'validate-indices' that ensures all files
2291         mentioned in indices (Packages, Sources) files do in fact exist.
2292
2293         * catherine (poolize): use a local re_isadeb which handles legacy
2294         (i.e. no architecture) style .deb filenames.
2295
2296         * rosamund: new script.
2297
2298         * rhona (check_binaries): when checking for binary packages not in
2299         a suite, don't bother selecting files that already have a
2300         last_used date.
2301         (check_sources): likewise.
2302
2303         * rhona: change all SQL EXISTS sub-query clauses to use the
2304         postgres suggested convention of "SELECT 1 FROM".
2305         * andrea (main): likewise.
2306         * tea (check_override): likewise.
2307         * catherine (main): likewise.
2308
2309         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2310         entries and in other suites MustBeNewerThan's.
2311         (SuiteMappings): likewise
2312         * katie.conf-non-US: likewise.
2313         * katie.conf-security: likewise.
2314
2315         * apt.conf-security: remove oldstable.
2316         * apt.conf.stable: likewise.
2317         * apt.conf.stable-non-US: likewise.
2318         * cron.buildd-security: likewise.
2319         * cron.daily-security: likewise.
2320         * vars-security (suites): likewise.
2321         * wanna-build/trigger.daily: likewise.
2322
2323         * claire.py (clean_symlink): move...
2324         * utils.py (clean_symlink): here.
2325
2326         * claire.py (find_dislocated_stable): update accordingly.
2327
2328 2003-08-16  Anthony Towns  <ajt@debian.org>
2329
2330         * katie.py (source_exists): expand the list of distributions
2331         the source may exist in to include any suite that's mapped to
2332         the destination suite (even transitively (a->b->c)). This should
2333         unbreak binary uploads to *-proposed-updates.
2334
2335 2003-08-09  Randall Donald  <rdonald@debian.org>
2336
2337         * lisa (recheck): change changes["distribution"].keys() to
2338         Katie.pkg.changes...
2339
2340 2003-08-08  Randall Donald  <rdonald@debian.org>
2341
2342         * katie.py: only tag bugs as fixed-in-experimental for
2343         experimental uploads
2344
2345 2003-07-26  Anthony Towns  <ajt@debian.org>
2346
2347         * katie.py (source_exists): add an extra parameter to limit the
2348         distribution(s) the source must exist in.
2349         * kelly, lisa, jennifer: update to use the new source_exists
2350
2351 2003-07-15  Anthony Towns  <ajt@debian.org>
2352
2353         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2354         checksums for debian-installer stuff even when it's just a symlink to
2355         another suite
2356
2357         * apt.conf: add the FakeDI line
2358
2359 2003-06-09  James Troup  <james@nocrew.org>
2360
2361         * kelly (check): make sure the 'file' we're looking for in 'files'
2362         hasn't been deleted by katie.check_dsc_against_db().
2363
2364 2003-05-07  James Troup  <james@nocrew.org>
2365
2366         * helena (time_pp): fix s/years/year/ typo.
2367
2368 2003-04-29  James Troup  <james@nocrew.org>
2369
2370         * madison (usage): document -c/--component.
2371
2372         * madison (usage): Fix s/seperated/separated/.
2373         * melanie (usage): likewise.
2374         * jenna (usage): likewise.
2375
2376 2003-04-24  James Troup  <james@nocrew.org>
2377
2378         * cron.daily-non-US: if there's nothing for kelly to install, say
2379         so.
2380
2381         * jennifer (check_timestamps): print sys.exc_value as well as
2382         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2383         failed' with 'deb contents' to make it clearer what timestamp(s)
2384         are being checked.
2385
2386 2003-04-15  James Troup  <james@nocrew.org>
2387
2388         * cron.daily-non-US: only run kelly if there are some .changes
2389         files in accepted.
2390
2391         * rene: add -m/--mode argument which can be either daily (default)
2392         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2393         Various changes to make this possible including a poor attempt at
2394         splitting main() up a little.  De-hardcode suite numbers from SQL
2395         queries and return quietly from do_nviu() if experimental doesn't
2396         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2397         is.
2398
2399         * debian/control (Depends): remove python-zlib as it's obsolete.
2400
2401         * charisma (main): don't slice the \n off strings when we're
2402         strip()-ing it anyway.
2403         * heidi (set_suite): likewise.
2404         (process_file): likewise.
2405         * natalie (process_file): likewise.
2406
2407 2003-04-08  James Troup  <james@nocrew.org>
2408
2409         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2410         slow queries by using one LIKE '%foo%' and then matching against
2411         '%s' or '/%s$' in python.  Also only join location when we need it
2412         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2413         query, so 6s for each sourceful package.
2414
2415         * cron.daily: invoke rene and send the report to ftpmaster.
2416         * cron.daily-non-US: likewise.
2417
2418 2003-03-14  James Troup  <james@nocrew.org>
2419
2420         * utils.py (send_mail): default filename to blank.
2421         * amber (make_advisory): adapt.
2422         * jennifer (acknowledge_new): likewise.
2423         * katie.py (Katie.close_bugs): likewise.
2424         (Katie.announce): likewise.
2425         (Katie.accept): likewise.
2426         (Katie.check_override): likewise.
2427         (Katie.do_reject): likewise.
2428         * kelly (do_reject): likewise.
2429         (stable_install): likewise.
2430         * lisa (do_bxa_notification): likewise.
2431         * lauren (reject): likewise.
2432         * melanie (main): likewise.
2433
2434         * rene (add_nbs): check any NBS packages against unstable to see
2435         if they haven't been removed already.
2436
2437         * templates/katie.rejected: remove paragraph about rejected files
2438         since they're o-rwx due to c-i-m and the uploader can't do
2439         anything about them and shania will take care of them anyway.
2440
2441         * madison (usage): update usage example to use comma seperation.
2442         * melanie (usage): likewise.
2443
2444         * utils.py (split_args): new function; splits command line
2445         arguments either by space or comma (whichever is used).  Also has
2446         optional-but-default DWIM spurious space detection to avoid
2447         'command -a i386, m68k' problems.
2448         (parse_args): use it.
2449         * melanie (main): likewise.
2450
2451         * melanie (main): force the admin to tell someone if we're not
2452         doing a rene-led removal (or closing a bug, which counts as
2453         telling someone).
2454
2455 2003-03-05  James Troup  <james@nocrew.org>
2456
2457         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2458         and python sections.
2459         * katie.conf-security (Section): likewise.
2460
2461         * add_constraints.sql: add uid and uid_id_seq to grants.
2462
2463         * lisa (determine_new): also warn about adding overrides to
2464         oldstable.
2465
2466         * madison (main): make the -S/--source-and-binary query obey
2467         -s/--suite restrictions.
2468
2469 2003-03-03  James Troup  <james@nocrew.org>
2470
2471         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2472         exists, warn the user that our output might seem strange.  (People
2473         get confused by multiple versions in a suite which happens
2474         post-kelly but pre-jenna.)
2475
2476 2003-02-21  James Troup  <james@nocrew.org>
2477
2478         * kelly (main): we don't need to worry about StableRejector.
2479
2480         * melanie (main): sort versions with apt_pkg.VersionCompare()
2481         prior to output.
2482
2483         * lauren: new script to manually reject packages from
2484         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2485
2486 2003-02-20  James Troup  <james@nocrew.org>
2487
2488         * kelly (init): remove unused -m/--manual-reject argument.
2489
2490         * katie.py (Katie.force_reject): renamed from force_move to make
2491         it more explicit what this function does.
2492         (Katie.do_reject): update to match.
2493
2494         * utils.py (prefix_multi_line_string): add an optional argument
2495         include_blank_lines which defaults to 0.  If non-zero, blank lines
2496         will be includes in the output.
2497
2498         * katie.py (Katie.do_reject): don't add leading space to each line
2499         of the reject message.  Include blank lines when showing the
2500         message to the user.
2501
2502 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2503
2504         * utils.py (fix_maintainer): replace pointless re.sub() with
2505         simple string format.
2506
2507 2003-02-11  James Troup  <james@nocrew.org>
2508
2509         * lisa (edit_overrides): only strip-to-one-char and upper-case
2510         non-numeric answers.  Fixes editing of items with indices >= 10;
2511         noticed by Randall.
2512         (edit_overrides): correct order of arguments to "not a valid
2513         index" error message.
2514
2515         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2516         remove_duplicate_versions(); thanks to aj for the initial
2517         diagnosis.
2518         (remove_duplicate_versions): correct how we return
2519         dominant_versions.
2520         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2521         a tuple rather than just a tuple.
2522
2523 2003-02-10  James Troup  <james@nocrew.org>
2524
2525         * emilie: new script - sync fingerprint and uid tables with a
2526         debian.org LDAP DB.
2527
2528         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2529         in 'fingerprint'.
2530
2531         * db_access.py (get_or_set_uid_id): new function.
2532
2533         * jennifer (main): update locking to a) not used FCNTL (deprecated
2534         in python >= 2.2) and b) acknowledge upstream's broken
2535         implementation of lockf (see Debian bug #74777), c) try to acquire
2536         the lock non-blocking.
2537         * kelly (main): likewise.
2538
2539         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2540
2541         * madison (main): only append the package to new_packages if it's
2542         not already in there; fixes -S/--source-and-binary for cases where
2543         the source builds a binary package of the same name.
2544
2545 2003-02-10  Anthony Towns  <ajt@debian.org>
2546
2547         * madison (main): use explicit JOIN syntax for
2548         -S/--source-and-binary queries to reduce the query's runtime from
2549         >10 seconds to negligible.
2550
2551 2003-02-08  James Troup  <james@nocrew.org>
2552
2553         * rene (main): in the NVIU output, append items to lists, not
2554         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2555         should be removed.
2556
2557 2003-02-07  James Troup  <james@nocrew.org>
2558
2559         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2560         Sources [aj].
2561
2562         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2563         O. Benham/Adam Heath/.
2564
2565         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2566         (Suite::Stable::Description): update for 3.0r1a.
2567         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2568
2569         * utils.py (gpgv_get_status_output): rename from
2570         get_status_output().
2571
2572         * neve (check_signature): use gpgv_get_status_output and Dict from
2573         utils().  Add missing newline to error message about duplicate tokens.
2574
2575         * saffron (per_arch_space_use): also print space used by source.
2576         (output_format): correct string.join() invocation.
2577
2578         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2579
2580 2003-02-04  James Troup  <james@nocrew.org>
2581
2582         * cron.buildd: correct generation of Packages/Sources and grep out
2583         non-US/non-free as well as non-free.
2584
2585 2003-02-03  Ryan Murray  <rmurray@debian.org>
2586
2587         * cron.buildd: generate quinn-diff output with full Packages/Sources
2588           files to get out-of-date vs. uncompiled right.
2589         * apt.conf.buildd: no longer generate uncompressed files, as they
2590           are generated in cron.buildd instead
2591         * add -i option to quinn-diff to ignore binary-all packages
2592         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2593           aren't in the packages file, the arch that uploaded them will build
2594           them anyways...
2595
2596 2003-01-30  James Troup  <james@nocrew.org>
2597
2598         * rene (main): only print suggested melanie command when there's
2599         some NBS to remove.
2600
2601 2003-01-30  Ryan Murray  <rmurray@debian.org>
2602
2603         * cron.buildd: fix incorrectly inverted lockfile check
2604
2605 2003-01-29  Ryan Murray  <rmurray@debian.org>
2606
2607         * cron.buildd: generate override.sid.all3.src
2608         * apt.conf.buildd: use generated override.sid.all3.src
2609
2610 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2611
2612         * utils.py (get_status_output): moved from jennifer.
2613         (Dict): likewise.
2614         (check_signature): likewise.
2615
2616         * jennifer (get_status_output): moved to utils.py.
2617         (Dict): likewise.
2618         (check_signature): likewise.
2619
2620         * utils.py (check_signature): add an argument to specifiy which
2621         function to call when an error was found.
2622         (check_signature): document this function better.
2623
2624         * jennifer (check_files): pass the reject function as an argument
2625         to utils.check_signature.
2626         (process_it): likewise.
2627
2628 2003-01-20  James Troup  <james@nocrew.org>
2629
2630         * rene (main): lots of changes to improve the output and make it
2631         more useful.
2632
2633         * katie.py (Katie.check_override): make the override messages
2634         clearer (hopefully).
2635
2636 2002-12-26  James Troup  <james@nocrew.org>
2637
2638         * ziyi (usage): document the ability to pass suite(s) as
2639         argument(s).
2640         (main): read apt.conf after checking for -h/--help.
2641
2642         * tea (main): take the check to run as an argument.
2643
2644         * saffron.R: R script to graph daily install runs.
2645
2646         * saffron: new script; various stats functions.
2647
2648         * rhona (main): connect to the database after checking for -h/--help.
2649
2650         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2651
2652         * melanie (main): sort versions with utils.arch_compare_sw().
2653
2654         * madison (usage): alphabetize order of options.
2655         * melanie (usage): likewise.
2656
2657         * kelly (usage): fix usage short description (we aren't dinstall).
2658
2659         * julia (usage): fix usage description and alphabetize order of
2660         options.
2661
2662         * jeri (usage): fix usage short description.
2663
2664         * jennifer (main): move --help and --version checks from here...
2665         (init): to here so that they work with an empty katie.conf.
2666         * kelly: likewise.
2667
2668         * alyson (usage): new function.
2669         (main): use it.
2670         * andrea: likewise.
2671         * ashley: likewise.
2672         * cindy: likewise.
2673         * denise: likewise.
2674         * helena: likewise.
2675         * neve: likewise.
2676         * rene: likewise.
2677         * rose: likewise.
2678         * tea: likewise.
2679
2680         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2681         entry that caused tasks to be omitted from 3.0r1.
2682
2683 2002-12-10  James Troup  <james@nocrew.org>
2684
2685         * jennifer (check_files): sanity check the Depends field to ensure
2686         it's non-empty if present since apt chokes on an empty one.
2687         Thanks to Ryan Murray for the idea.
2688
2689 2002-12-08  James Troup  <james@nocrew.org>
2690
2691         * katie.conf-security (Helena::Directories): new; include accepted
2692         in addition to byhand and new.
2693
2694         * helena (process_changes_files): use utils.arch_compare_sw().
2695         Justify things based on the longest [package, version,
2696         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2697         the commas in architecture and version lists for the same reason.
2698         (main): make directories we process configurable through
2699         Helena::Directories in the config file; if that doesn't exist
2700         default to the old hardcoded values (byhand & new).
2701
2702         * utils.py (arch_compare_sw): moved here from madison.
2703         * madison (main): adjust to compensate.
2704
2705 2002-12-06  James Troup  <james@nocrew.org>
2706
2707         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2708         right filename.
2709
2710 2002-12-05  James Troup  <james@nocrew.org>
2711
2712         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2713
2714 2002-11-28  Randall Donald  <rdonald@debian.org>
2715
2716         * fernanda.py (read_control): fix typo of 'Architecture'.
2717
2718 2002-11-26  James Troup  <james@nocrew.org>
2719
2720         * lisa (check_pkg): call less with '-R' so we see the colour from
2721         Randall's fernanda changes.
2722
2723         * neve (process_sources): if Directory points to a legacy location
2724         but the .dsc isn't there; assume it's broken and look in the pool.
2725         (update_section): new, borroed from alyson.
2726         (do_da_do_da): use it.
2727         (process_packages): add suite_it to the cache key used for
2728         arch_all_cache since otherwise we only add a package to the first
2729         suite it's in and ignore any subsequent ones.
2730
2731         * katie.conf-non-US (Location): fixed to reflect reality (all
2732         suites, except old-proposed-updates (which is legacy-mixed)) are
2733         pool.
2734
2735         * utils.py (try_with_debug): wrapper for print_exc().
2736         * jenna (main): use it.
2737         * neve (main): likewise.
2738
2739 2002-11-25  Randall Donald  <rdonald@debian.org>
2740
2741         * fernanda.py (main): added -R to less command line for raw control
2742         character support to print colours
2743         (check_deb): Instead of running dpkg -I on deb file, call
2744         output_deb_info, the new colourized control reporter.
2745         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2746         of printing out each .dsc line.
2747         (output_deb_info): new function. Outputs each key/value pair from
2748         read_control except in special cases where we highlight section,
2749         maintainer, architecture, depends and recommends.
2750         (create_depends_string): new function. Takes Depends tree and looks
2751         up it's compontent via projectb db, colourizes and constructs a
2752         depends string in original order.
2753         (read_dsc): new function. reads and parses .dsc info via
2754         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2755         colourized.
2756         (read_control): new function. reads and parses control info via
2757         apt_pkg. Depends and Recommends are split in to list structures,
2758         Section and Architecture are colourized. Maintainer is colourized
2759         if it has a localhost.localdomain address.
2760         (split_depends): new function. Creates a list of lists of
2761         dictionaries of depends (package,version relation). Top list is
2762         colected from comma delimited items. Sub lists are | delimited.
2763         (get_comma_list): new function. splits string input among commas
2764         (get_or_list): new function. splits string input among | delimiters
2765         (get_depends_parts): new function. Creates dictionary of package name
2766         and version relation from dependancy string.
2767         Colours for section and depends are per component. Unfound depends
2768         are in bold. Lookups using version info is not supported yet.
2769
2770 2002-11-22  James Troup  <james@nocrew.org>
2771
2772         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2773         'udmsearch'.
2774
2775         * amber (make_advisory): string.atol() is deprecated and hasn't
2776         been ported to string methods.  Use long() instead.
2777
2778         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2779         creating the database since we'll fail badly if it's created with
2780         e.g. UNICODE encoding.
2781
2782         * rose (main): AptCnf is a global.
2783
2784         * neve (get_location_path): new function determines the location
2785         from the the first (left-most) directory of a Filename/Directory.
2786         (process_sources): don't need 'location' anymore.  Use
2787         utils.warn().  Use the Directory: field for each package to find
2788         the .dsc.  Use get_location_path() to determine the location for
2789         each .dsc.
2790         (process_packages): do't need 'location' anymore.  Use
2791         utils.warn().  Use get_location_path().
2792         (do_sources): don't need 'location', drop 'prefix' in favour of
2793         being told the full path to the Sources file, like
2794         process_packages().
2795         (do_da_do_da): main() renamed, so that main can call us in a
2796         try/except.  Adapt for the changes in do_sources() and
2797         process_packages() above.  Assume Sources and Packages file are in
2798         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2799
2800         * katie.conf-security (Location): fixed to reflect reality (all
2801         suites are pool, not legacy).
2802
2803         * utils.py (print_exc): more useful (i.e. much more verbose)
2804         traceback; a recipe from the Python cookbook.
2805         * jenna (main): use it.
2806         * neve (main): likewise.
2807
2808 2002-11-19  James Troup  <james@nocrew.org>
2809
2810         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2811         handling which was FUBAR for multi-suite uploads.  Now we just
2812         make a dictionary of destinations to copy to and iterate over
2813         those.
2814
2815         * fernanda.py (check_deb): run linda as well as lintian.
2816
2817 2002-10-21  James Troup  <james@nocrew.org>
2818
2819         * melanie (main): change X-Melanie to X-Katie and prefix it with
2820         'melanie '.
2821
2822         * lisa (main): prefix X-Katie with 'lisa '.
2823
2824         * jennifer (clean_holding): fix typo in string method changes;
2825         s/file.find(file/file.find(/.
2826
2827         * cron.daily: invoke helena and send the report to ftpmaster.
2828         * cron.daily-non-US: likewise.
2829
2830 2002-10-16  James Troup  <james@nocrew.org>
2831
2832         * kelly (check): call reject() with a blank prefix when parsing
2833         the return of check_dsc_against_db() since it does its own
2834         prefix-ing.
2835
2836         * rose: new script; only handles directory creation initally.
2837
2838         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2839         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2840
2841 2002-10-06  James Troup  <james@nocrew.org>
2842
2843         * rene (main): remove bogus argument handling.
2844
2845         * kelly: katie, renamed.
2846         * cron.daily: adapt for katie being renamed to kelly.
2847         * cron.daily-non-US: likewise.
2848         * amber (main): likewise.
2849
2850         * Changes for python 2.1.
2851
2852         * kelly: time.strftime no longer requires a second argument of
2853         "time.localtime(time.time())".
2854         * logging.py: likewise.
2855         * rhona: likewise.
2856         * shania (init): likewise.
2857
2858         * amber: use augmented assignment.
2859         * catherine (poolize): likewise.
2860         * claire.py (fix_component_section): likewise.
2861         * halle (check_changes): likewise.
2862         * helena: likewise.
2863         * jenna: likewise.
2864         * jennifer: likewise.
2865         * jeri: likewise.
2866         * katie.py: likewise.
2867         * kelly: likewise.
2868         * lisa: likewise.
2869         * madison (main): likewise.
2870         * melanie: likewise.
2871         * natalie: likewise.
2872         * neve: likewise.
2873         * rhona: likewise.
2874         * tea: likewise.
2875         * utils.py: likewise.
2876         * ziyi: likewise.
2877
2878         * amber: use .endswith.
2879         * fernanda.py: likewise.
2880         * halle (main): likewise.
2881         * jennifer: likewise.
2882         * jeri: likewise.
2883         * katie.py: likewise.
2884         * kelly: likewise.
2885         * lisa: likewise.
2886         * neve: likewise.
2887         * shania (main): likewise.
2888         * utils.py: likewise.
2889
2890         * alyson: use string methods.
2891         * amber: likewise.
2892         * andrea: likewise.
2893         * ashley: likewise.
2894         * catherine: likewise.
2895         * charisma: likewise.
2896         * claire.py: likewise.
2897         * db_access.py: likewise.
2898         * denise: likewise.
2899         * halle: likewise.
2900         * heidi: likewise.
2901         * helena: likewise.
2902         * jenna: likewise.
2903         * jennifer: likewise.
2904         * jeri: likewise.
2905         * julia: likewise.
2906         * katie.py: likewise.
2907         * kelly: likewise.
2908         * lisa: likewise.
2909         * logging.py: likewise.
2910         * madison: likewise.
2911         * melanie: likewise.
2912         * natalie: likewise.
2913         * neve: likewise.
2914         * rene: likewise.
2915         * tea: likewise.
2916         * utils.py: likewise.
2917         * ziyi: likewise.
2918
2919 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2920
2921         * utils.py (parse_changes): use <string>.startswith() rather than
2922         string.find().
2923
2924 2002-08-27  Anthony Towns  <ajt@debian.org>
2925
2926         * katie.py (in_override_p): when searching for a source override,
2927         and the dsc query misses, search for both udeb and deb overrides
2928         as well. Should fix the UNACCEPT issues with udebs.
2929
2930 2002-08-24  James Troup  <james@nocrew.org>
2931
2932         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2933         source+binary package finding code which was causing severe
2934         performance degradation with postgres 7.2.
2935
2936 2002-08-14  James Troup  <james@nocrew.org>
2937
2938         * julia (main): use the pwd.getpwall() to get system user info
2939         rather than trying to read a password file.  Add a -n/--no-action
2940         option.
2941
2942         * cron.hourly: julia no longer takes any arguments.
2943         * cron.hourly-non-US: likewise.
2944
2945 2002-08-07  James Troup  <james@nocrew.org>
2946
2947         * katie (install): handle multi-suite uploads when CopyChanges
2948         and/or CopyKatie are in use, ensuring we only copy stuff once.
2949
2950 2002-08-01  Ryan Murray  <rmurray@debian.org>
2951
2952         * wanna-build/trigger.daily: initial commit, with locking
2953         * cron.buildd: add locking against daily run
2954
2955 2002-07-30  James Troup  <james@nocrew.org>
2956
2957         * melanie (main): readd creation of suite_ids_list so melanie is
2958         remotely useful again.
2959
2960         * katie.conf: adopt for woody release; diable
2961         StableDislocationSupport, add oldstable, adjust other suites and
2962         mappings, fix up location.
2963         * katie.conf-non-US: likewise.
2964         * katie.conf-security: likewise.
2965
2966         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2967         stable.
2968         * apt.conf.stable-non-US: likewise.
2969
2970         * apt.conf-security: adapt for woody release; adding oldstable,
2971         oldstable, adjust stable and testing.
2972         * cron.daily-security: likewise.
2973         * cron.buildd-security: likewise.
2974
2975         * apt.conf: adapt for woody release; rename woody-proposed-updates
2976         to testing-proposed-updates and proposed-updates to
2977         old-proposed-updates.
2978         * apt.conf-non-US: likewise.
2979
2980         * vars-non-US (copyoverrides): add sarge.
2981         * vars (copyoverrides): likewise.
2982
2983         * vars-security (suites): add oldstable.
2984
2985 2002-07-22  Ryan Murray  <rmurray@debian.org>
2986
2987         * apt.conf.security-buildd: use suite codenames instead of
2988           distnames.
2989
2990 2002-07-16  James Troup  <james@nocrew.org>
2991
2992         * denise (main): fix filenames for testing override files.
2993
2994 2002-07-14  James Troup  <james@nocrew.org>
2995
2996         * jennifer (process_it): call check_md5sums later so we can check
2997         files in the .dsc too
2998         (check_md5sums): check files in the .dsc too.  Check both md5sum
2999         and size.
3000
3001         * melanie (main): use parse_args() and join_with_commas_and() from
3002         utils.  If there's nothing to do, say so and exit, don't ask for
3003         confirmation etc.
3004
3005         * amber (join_with_commas_and): moved from here to ...
3006         * utils.py (join_with_commas_and): here.
3007
3008 2002-07-13  James Troup  <james@nocrew.org>
3009
3010         * madison (main): use parse_args() from utils.  Support
3011         -c/--component.
3012
3013         * jenna (parse_args): moved from here to ...
3014         * utils.py (parse_args): here.
3015
3016         * katie.conf (Architectures): minor corrections to the description
3017         for arm, mips and mipsel.
3018         * katie.conf-non-US (Architectures): likewise.
3019         * katie.conf-security (Architectures): likewise.
3020
3021         * cron.daily-security: use natalie's new -a/--add functionality to
3022         flesh out the security overrides.
3023
3024 2002-07-12  James Troup  <james@nocrew.org>
3025
3026         * cron.buildd (ARCHS): add arm.
3027
3028         * katie.conf: 2.2r7 was released.
3029         * katie.conf-non-US: likewise.
3030
3031         * utils.py (parse_changes): handle a multi-line field with no
3032         starting line.
3033
3034 2002-06-25  James Troup  <james@nocrew.org>
3035
3036         * templates/amber.advisory (To): add missing email address since
3037         __WHOAMI__ is only a name.
3038
3039         * katie.conf-security (Melane::LogFile): correct to go somewhere
3040         katie has write access to.
3041         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3042         Testing.
3043
3044         * natalie: add support for -a/-add which adds packages only
3045         (ignoring changes and deletions).
3046
3047         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3048         use FindB, not get.
3049
3050 2002-06-22  James Troup  <james@nocrew.org>
3051
3052         * jennifer (check_files): validate the package name and version
3053         field.  If 'Package', 'Version' or 'Architecture' are missing,
3054         don't try any further checks.
3055         (check_dsc): likewise.
3056
3057         * utils.py (re_taint_free): add '~' as a valid character.
3058
3059 2002-06-20  Anthony Towns  <ajt@debian.org>
3060
3061         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3062
3063 2002-06-09  James Troup  <james@nocrew.org>
3064
3065         * jennifer (check_files): reduce useless code.
3066
3067         * cron.daily-security: run symlinks -dr on $ftpdir.
3068
3069         * vars-security (ftpdir): add.
3070
3071 2002-06-08  James Troup  <james@nocrew.org>
3072
3073         * neve (update_override_type): transaction is handled higher up in
3074         main().
3075         (update_priority): likewise.
3076         (process_sources): remove code that makes testing a duplicate of
3077         stable.
3078         (process_packages): likewise.
3079
3080         * templates/amber.advisory: add missing mail headers.
3081
3082         * cron.daily-security: also call apt-ftparchive clean for
3083         apt.conf.buildd-security.
3084         * cron.weekly: likewise.
3085
3086         * amber (do_upload): write out a list of source packages (and
3087         their version) uploaded for testing.
3088         (make_advisory): add more Subst mappings for the mail headers.
3089         (spawn): check for suspicious characters in the command and abort
3090         if their found.
3091
3092 2002-06-07  James Troup  <james@nocrew.org>
3093
3094         * ziyi (main): remove the 'nonus'/'security' hacks and use
3095         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3096         the lower level Release files, even if they don't exist.  fubar
3097         out if we can't open a lower level Release file for writing.
3098
3099         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3100         ziyi.
3101         * katie.conf-security (Dinstall): likewise.
3102
3103         * amber (do_upload): renamed from get_file_list().  Determine the
3104         upload host from the original component.
3105         (init): Add a -n/--no-action option.  Fix how we get changes_files
3106         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3107         sys.argv).  Add an Options global.
3108         (make_advisory): support -n/--no-action.
3109         (spawn): likewise.
3110         (main): likewise.
3111         (usage): document -n/--no-action.
3112
3113         * cron.buildd-security: fix path to Packages-arch-specific in
3114         quinn-diff invocation.
3115
3116         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3117         to proper suite names (i.e. stable, testing) rather than codenames
3118         (potato, woody).
3119         (Dinstall::DefaultSuite): likewise.
3120         (Suite): likewise.
3121         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3122         * vars-security (suites): likewise.
3123         * apt.conf-security: likewise.
3124
3125         * katie.conf-security (Component): add "updates/" prefix.
3126         (Suite::*::Components): likewise.
3127         (ComponentMappings): new; map all {ftp-master,non-US} components
3128         -> updates/<foo>.
3129
3130         * katie.conf-security (Natalie): removed; the options have
3131         defaults and ComponentPosition is used by alyson which doesn't
3132         work on security.d.o.
3133         (Amber): replace UploadHost and UploadDir with ComponentMappings
3134         which is a mapping of components -> URI.
3135         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3136         (SuiteMappings): use "silent-map" in preference to "map".
3137
3138         * cron.unchecked-security: fix call to cron.buildd-security.
3139
3140         * cron.daily-security: map local suite (stable) -> override suite
3141         (potato) when fixing overrides.  Correct component in natalie call
3142         to take into account "updates/" prefix.  Fix cut'n'waste in
3143         override.$dist.all3 generation, the old files weren't being
3144         removed, so they were endlessly growing.
3145
3146         * neve (main): don't use .Find for the CodeName since we require
3147         it.  Location::*::Suites is a ValueList.
3148         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3149         out on expired keys, just warn.
3150         (update_override_type): new function; lifted from alyson.
3151         (update_priority): likewise.
3152         (main): use update_{override_type,priority}().
3153
3154         * jennifer (check_distributions): remove redunant test for
3155         SuiteMappings; ValueList("does-not-exist") returns [] which is
3156         fine.  Add support for a "silent-map" type which doesn't warn
3157         about the mapping to the user.
3158         (check_files): add support for ComponentMappings, similar to
3159         SuiteMappings, but there's no type, just a source and a
3160         destination and the original component is stored in "original
3161         component".
3162         * katie.py (Katie.dump_vars): add "original component" as an
3163         optionsal files[file] dump variable.
3164
3165         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3166         query.  Add support for section-less legacy locations like current
3167         security.debian.org through YetAnotherConfigBoolean
3168         'LegacyStableHasNoSections'.
3169         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3170
3171         * utils.py (real_arch): moved here from ziyi.
3172         * ziyi (real_arch): moved to utils.py.
3173         * ziyi (main): likewise.
3174
3175         * claire.py (find_dislocated_stable): use real_arch() with
3176         filter() to strip out source and all.
3177         * neve (main): likewise.
3178         * rene (main): likewise.
3179         * jeri (parse_packages): likewise.
3180
3181 2002-06-06  James Troup  <james@nocrew.org>
3182
3183         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3184         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3185         doing.
3186
3187 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3188
3189         * jeri (check_joey): check if the line contains two elements
3190         before accessing the second.  Also, strip trailing spaces as well
3191         as the newline.
3192         * halle (check_joey): likewise.
3193
3194 2002-06-05  James Troup  <james@nocrew.org>
3195
3196         * cron.unchecked-security: new file; like cron.unchecked but if
3197         there's nothing to do exit so we don't call cron.buildd-security.
3198
3199         * apt.conf.buildd-security: new file.
3200
3201         * vars (archs): alphabetize.
3202         * vars-non-US (archs): likewise.
3203
3204         * vars-security: add unchecked.
3205
3206         * madison (main): reduce rather bizarrely verbose and purposeless
3207         code to print arches to a simple string.join.
3208
3209         * katie.conf (Suites::Unstable): add UdebComponents, a new
3210         valuelist of suites, used by jenna to flesh out the list of
3211         <suite>_main-debian-installer-binary-<arch>.list files generated.
3212         (Dinstall): add StableDislocationSupport, a new boolean used by
3213         jenna to enable or disable stable dislocation support
3214         (i.e. claire), as true.
3215
3216         * katie.conf (Dinstall): add StableDislocationSupport, a new
3217         boolean used by jenna to enable or disable stable dislocation
3218         support (i.e. claire), as true.
3219         * katie.conf-non-US: likewise.
3220         * katie.conf-security: likewise.
3221
3222         * cron.daily-security: generate .all3 overrides for the buildd
3223         support.  Freshen a local copy of Packages-arch-specific from
3224         buildd.debian.org.
3225
3226         * claire.py (find_dislocated_stable): disable the support for
3227         files in legacy-mixed locations since none of the Debian archives
3228         have any anymore.
3229
3230         * helena: new script; produces a report on NEW and BYHAND
3231         packages.
3232
3233         * jenna: rewritten from scratch to fix speed problems.  Run time
3234         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3235         minutes, 105 seconds are the monster query and 70 odd seconds is
3236         claire.
3237
3238         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3239         irrelevant.
3240
3241 2002-06-05  Ryan Murray  <rmurray@debian.org>
3242
3243         * cron.buildd-security: new file.
3244
3245 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3246
3247         * denise (list): take a file argument and use it.
3248         (main): don't abuse sys.stdout, just write to the file.
3249
3250         * claire.py (usage): Fix misspelling.
3251         (clean_symlink): Simplify.
3252         (find_dislocated_stable): Avoid unnecessary work.
3253
3254 2002-05-29  James Troup  <james@nocrew.org>
3255
3256         * cameron: removed; apt-ftparchive can simply walk the directory.
3257
3258 2002-05-26  Anthony Towns  <ajt@debian.org>
3259
3260         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3261         for the autobuilders.
3262
3263 2002-05-24  Ryan Murray  <rmurray@debian.org>
3264
3265         * cron.buildd: update override files before running apt-ftparchive
3266
3267 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3268
3269         * amber (main): remove extra space in prompt.
3270
3271         * utils.py (validate_changes_file_arg): use original filename in
3272         error messages.
3273
3274         * jeri (check_joey): close file after use.
3275         (parse_packages): likewise.
3276         (main): setup debug option properly.
3277
3278         * melanie (main): remove unused packages variable and simplify the
3279         code to build up con_packages by using repr().
3280
3281 2002-05-23  James Troup  <james@nocrew.org>
3282
3283         * lisa (recheck): when we reject, also return 0 so the package is
3284         skipped.
3285         (sg_compare): fix note sorting.
3286         (recheck): remove the .katie file after rejection.
3287
3288         * katie.py (Katie.accept): accepted auto-build support take 3;
3289         this time adding support for security.  Security needs a) non-pool
3290         files copied rather than symlinked since accepted is readable only
3291         by katie/security and www-data needs to be able to see the files,
3292         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3293         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3294         SecurityAcceptedAutoBuild is a new boolean which controls whether
3295         or not normal or security style is used.  The unstable_accepted
3296         table was renamed to accepted_autobuild and a suite column added.
3297         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3298         didn't have it's last_used/in_accepted flags correctly updated.
3299         * katie (install): likewise.
3300         * rhona (clean_accepted_autobuild): likewise.
3301
3302 2002-05-22  James Troup  <james@nocrew.org>
3303
3304         * lisa (sort_changes): new function; sorts changes properly.
3305         Finally.
3306         (sg_compare): new function; helper for sort_changes().  Sorts by
3307         have note and time of oldest upload.
3308         (indiv_sg_compare): new function; helper for sort_changes().
3309         Sorts by source version, have source and filename.
3310         (main): use sort_changes().
3311         (changes_compare): obsoleted; removed.
3312
3313 2002-05-20  James Troup  <james@nocrew.org>
3314
3315         * rhona (clean_accepted_autobuild): don't die if a file we're
3316         trying to remove doesn't exist.  Makes rhona more friendly to
3317         katie/katie.py crashes/bugs without any undue cost.
3318
3319 2002-05-19  James Troup  <james@nocrew.org>
3320
3321         * lisa (main): if sorting a large number of changes give some
3322         feedback.
3323         (recheck): new function, run the same checks (modulo NEW,
3324         obviously) as katie does, if they fail do the standard
3325         reject/skip/quit dance.
3326         (do_pkg): use it.
3327
3328         * katie (install): don't try to unlink the symlink in the
3329         AcceptedAutoBuild support if the destination is not a symlink (or
3330         doesn't exist).  Avoids unnecessary bombs on previous partial
3331         accepts and will still bomb hard if the file exists and isn't a
3332         symlink.
3333
3334         * utils.py: blah, commands _is_ used when the mail stuff isn't
3335         commented out like it is in my test environment.
3336
3337         * lisa (changes_compare): "has note" overrides everything else.
3338         Use .katie files rather than running parse_changes, faster and
3339         allows "has note" to work.  Correct version compare, it was
3340         reversed.  Ctime check should only kick in if the source packages
3341         are not the same.
3342         (print_new): print out and return any note.  Rename 'ret_code' to
3343         'broken'.
3344         (edit_new): renamed from spawn_editor.  Don't leak file
3345         descriptors.  Clean up error message if editor fails.
3346         (edit_note): new function, allows one to edit notes.
3347         (do_new): add note support, editing and removing.
3348         (init): kill -s/--sort; with notes we always want to use our
3349         sorting method.
3350         (usage): likewise.
3351
3352         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3353         changes field.
3354
3355         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3356         it default to 0.  Adapt tests to assume it's boolean.
3357         * fernanda.py (check_changes): adjust call appropriately.
3358         * halle (check_changes): likewise.
3359         * jennifer (check_changes): likewise.
3360         * jeri (check_changes): likewise.
3361         * shania (flush_orphans): likewise.
3362
3363         * jennifer (check_dsc): pass is_a_dsc by name when calling
3364         build_file_list() for clarity.
3365         * shania (flush_orphans): likewise.
3366         * tea (check_missing_tar_gz_in_dsc): likewise.
3367
3368         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3369         calling parse_changes() for clarity.
3370         * tea (check_dscs): likewise.
3371
3372         * utils.py (parse_changes): make dsc_whitespace_rules default to
3373         not true.
3374         * halle (check_changes): adjust call appropriately.
3375         * jennifer (check_changes): likewise.
3376         * jeri (check_changes): likewise.
3377         * lisa (changes_compare): likewise.
3378         * utils.py (changes_compare): likewise.
3379         * melanie (main): likewise.
3380         * shania (flush_orphans): likewise.
3381         * fernanda.py (check_changes): likewise.
3382
3383 2002-05-18  James Troup  <james@nocrew.org>
3384
3385         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3386         it's not useful and by and large a duplication of information
3387         available in readable format in other files.
3388
3389 2002-05-16  Ryan Murray  <rmurray@debian.org>
3390
3391         * melanie: Dir::TemplatesDir -> Dir::Templates
3392
3393 2002-05-15  Ryan Murray  <rmurray@debian.org>
3394
3395         * cameron: correct the use of os.path.join
3396
3397 2002-05-15  Anthony Towns  <ajt@debian.org>
3398
3399         * ziyi: Update to match the new format for Architectures/Components
3400         in katie.conf.
3401
3402 2002-05-14  James Troup  <james@nocrew.org>
3403
3404         * amber: new script; 'installer' wrapper script for the security
3405         team.
3406
3407         * katie.py (Katie.announce): remove unused 'dsc' local
3408         variable. (pychecker)
3409
3410         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3411
3412         * neve: don't import sys, we don't use it. (pychecker)
3413         (check_signature): fix return type mismatch. (pychecker)
3414
3415         * utils.py: don't import commands, we don't use it.  (pychecker)
3416
3417         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3418
3419         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3420         obsoleted by the change to "othercomponents" handling in jennifer
3421         detailed below.
3422         (Katie.cross_suite_version_check): new function; implements
3423         cross-suite version checking rules specified in the conf file
3424         while also enforcing the standard "must be newer than target
3425         suite" rule.
3426         (Katie.check_binary_against_db): renamed, since it's invoked once
3427         per-binary, "binaries" was inaccurate.  Use
3428         cross_suite_version_check() and don't bother with the "oldfiles"
3429         rubbish as jennifer works out "othercomponents" herself now.
3430         (Katie.check_source_against_db): use cross_suite_version_check().
3431
3432         * katie (check): the version and file overwrite checks
3433         (check_{binary,source,dsc}_against_db) are not per-suite.
3434
3435         * jennifer (check_files): less duplication of
3436         'control.Find("Architecture", "")' by putting it in a local
3437         variable.
3438         (check_files): call check_binary_against_db higher up since it's
3439         not a per-suite check.
3440         (check_files): get "othercomponents" directly rather than having
3441         check_binary_against_db do it for us.
3442
3443         * heidi (main): 'if x:', not 'if x != []:'.
3444         * katie.py (Katie.in_override_p): likewise.
3445         (Katie.check_dsc_against_db): likewise.
3446         * natalie (main): likewise.
3447         * rene (main): likewise.
3448         * ziyi (real_arch): likewise.
3449
3450         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3451         and OverrideType are now value lists, not lists.
3452         * andrea (main): likewise.
3453         * cindy (main): likewise.
3454         * claire.py (find_dislocated_stable): likewise.
3455         * denise (main): likewise.
3456         * jenna (main): likewise.
3457         * jennifer (check_distributions): likewise.
3458         (check_files): likewise.
3459         (check_urgency): likewise (Urgency::Valid).
3460         * jeri (parse_packages): likewise.
3461         * neve (main): likewise (and Location::%s::Suites).
3462         * rene (main): likewise.
3463
3464 2002-05-13  James Troup  <james@nocrew.org>
3465
3466         * katie.py (Katie.check_source_against_db): correct case of reject
3467         message to be consistent with binary checks.
3468
3469         * jennifer (get_status_output): don't leak 2 file descriptors per
3470         invocation.
3471         (check_signature): add missing '\n' to "duplicate status token"
3472         error message.
3473
3474 2002-05-09  James Troup  <james@nocrew.org>
3475
3476         * utils.py (validate_changes_file_arg): new function; validates an
3477         argument which should be a .changes file.
3478         * ashley (main): use it.
3479         * lisa (main): likewise.
3480
3481         * katie.py (Katie.check_dsc_against_db): since there can be more
3482         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3483         entry still exists in files.
3484
3485         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3486         files, since check_dsc_against_db() deletes the .orig.tar.gz
3487         entry.
3488
3489         * cameron: cleanups.
3490
3491         * utils.py (changes_compare): change sort order so that source
3492         name and source version trump 'have source'; this should fix
3493         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3494         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3495         by Ryan.
3496
3497         * lisa (main): allow the arguments to be .katie files too.
3498
3499 2002-05-07  Ryan Murray  <rmurray@debian.org>
3500
3501         * cron.buildd: add s390 to arch list again
3502
3503 2002-05-05  Ryan Murray  <rmurray@debian.org>
3504
3505         * cron.buildd: new script, update w-b database from unstable_accepted
3506         table
3507         * cameron: new script, take list in unstable_accepted and write out
3508         a file list for apt-ftparchive
3509         * apt.conf.buildd: new apt configuration for Packages/Sources for
3510         unstable_accepted
3511         * vars: add s390 to arch list.
3512
3513 2002-05-03  James Troup  <james@nocrew.org>
3514
3515         * neve (main): don't hard code the calling user as that doesn't
3516         work with modern postgres installs.  Fix psql invocation for
3517         init_pool.sql (database name required).  Dont' hard code the
3518         database name.
3519         (process_sources): add support for fingerprint and install_date.
3520         (process_packages): add support for fingerprint.
3521         (do_sources): pass in the directory, fingerprint support needs it.
3522         (get_status_output): borrowed from jennifer.
3523         (reject): likewise.
3524         (check_signature): likewise.
3525
3526         * katie (install): only try to log urgencies if Urgency_Logger is
3527         defined.
3528         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3529         defined; only close Urgency_Logger if it's defined.
3530
3531         * catherine (poolize): adapt for Dir rationalization.
3532         * claire.py (find_dislocated_stable): likewise.
3533         * denise (main): likewise.
3534         * halle (check_joey): likewise.
3535         * jenna: likewise.
3536         * jennifer: likewise.
3537         * jeri: likewise.
3538         * katie.py: likewise.
3539         * katie: likewise.
3540         * lisa (do_bxa_notification): likewise.
3541         * logging.py (Logger.__init__): likewise
3542         * rene (main): likewise.
3543         * rhona (clean): likewise.
3544         * shania (init): likewise.
3545         * tea: likewise.
3546         * ziyi: likewise.
3547
3548         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3549         FindB, not FindI.
3550
3551         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3552         boolean, use FindB, not get.
3553
3554         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3555         .orig.tar.gz's which are an exact (size/md5sum) match.
3556
3557         * ashley (main): really allow *.katie files as arguments too;
3558         noticed by aj.
3559
3560         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3561
3562 2002-05-03  Anthony Towns  <ajt@debian.org>
3563
3564         * ziyi: support for security.
3565
3566 2002-05-02  James Troup  <james@nocrew.org>
3567
3568         * jennifer (accept): call Katie.check_override() unconditional as
3569         no-mail check moved into that function.
3570         (do_byhand): likewise.
3571
3572         * katie.py (Katie.check_override): don't do anything if we're a)
3573         not sending mail or b) the override disparity checks have been
3574         disbled via Dinstall::OverrideDisparityCheck.
3575
3576         * jennifer (check_files): don't hard code Unstable as the suite
3577         used to check for architecture validity; use
3578         Dinstall::DefaultSuite instead, if it exists.
3579         (accept): conditionalize
3580
3581         * katie.py (Katie.update_subst): support global maintainer
3582         override with Dinstall::OverrideMaintainer.
3583
3584         * jennifer (check_distributions): new function, Distribution
3585         validation and mapping.  Uses new SuiteMappings variable from
3586         config file to abstract suite mappings.
3587         (check_changes): call it.
3588
3589         * natalie: renamed; nothing imports or likely will for some time.
3590
3591         * denise (main): remove unused natalie import and init().
3592
3593         * natalie.py (init): removed.
3594         (main): initalize here instead and don't hardcode the database
3595         name.
3596
3597 2002-04-30  James Troup  <james@nocrew.org>
3598
3599         * katie.py (Katie.close_bugs): new function, split out from
3600         announce().
3601         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3602         true.
3603         (Katie.close_bugs): new function, split out
3604         (Katie.close_bugs): return immediately if there are no bugs to
3605         close.
3606
3607         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3608         * katie (do_reject): likewise.
3609         (stable_install): likewise.
3610         * katie.py (Katie.announce): likewise.
3611         (Katie.accept): likewise.
3612         (Katie.check_override): likewise.
3613         (Katie.do_reject): likewise.
3614         * lisa (do_bxa_notification): likewise.
3615         * melanie (main): likewise.
3616
3617         * utils.py (TemplateSubst): change second argument to be a
3618         filename rather than a template since every caller opened a file
3619         on the fly which was ugly and leaked file descriptor.
3620
3621 2002-04-29  James Troup  <james@nocrew.org>
3622
3623         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3624         <hertzog@debian.org> to send 'accepted' announce mails to the
3625         PTS. [#128140]
3626
3627 2002-04-24  James Troup  <james@nocrew.org>
3628
3629         * init_pool.sql (unstable_accepted): add two new fields to
3630         unstable_accepted; in_accepted is a boolean indicating whether or
3631         not the file is in accepted and last_used is a timestamp used by
3632         rhona to determine when to remove symlinks for installed packages.
3633
3634         * katie.py (Katie.accept): auto-build support take 2.  Create
3635         symlinks for all files into a seperate directory.  Add files to
3636         unstable_accepted as paths to the new directory; mark them as
3637         being in accepted for cameron.  Properly conditionalize it on a
3638         configuration variable.
3639
3640         * katie (install): likewise.  Update symlinks to point into the
3641         pool; mark the files for later deletion by rhona and mark them as
3642         not being in accepted for cameron.
3643
3644         * rhona (clean_accepted_autobuild): new function.
3645
3646 2002-04-22  James Troup  <james@nocrew.org>
3647
3648         * jennifer (check_files): handle db_access.get_location_id()
3649         returning -1 properly/better.
3650
3651         * rhona (clean_fingerprints): new function.
3652
3653 2002-04-21  James Troup  <james@nocrew.org>
3654
3655         * utils.py (touch_file): unused; remove.
3656         (plural): likewise.
3657
3658         * jennifer (check_files): close file descriptor used to get the
3659         control file.
3660         (check_md5sums): likewise.
3661         (callback): likewise.
3662
3663         * katie.py (Katie.do_reject): handle manual rejects much better;
3664         call the editor first and get confirmation from the user before
3665         proceeding.
3666
3667         * jennifer (check_signature): prefix_multi_line_string() moved to
3668         utils.
3669
3670         * utils.py (prefix_multi_line_string): moved here from jennifer.
3671
3672 2002-04-20  James Troup  <james@nocrew.org>
3673
3674         * lisa (main): handle non-existent files.
3675
3676         * ashley (main): allow *.katie files as arguments too.
3677
3678 2002-04-19  James Troup  <james@nocrew.org>
3679
3680         * katie.py (Katie.accept): add stuff to help auto-building from
3681         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3682         in the pool), create a symlink to it in the accepted directory and
3683         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3684
3685         * katie (install): undo the "auto-building from accepted" stuff
3686         (i.e. remove the .orig.tar.gz symlink and remove the files from
3687         unstable_accepted table).
3688
3689 2002-04-16  James Troup  <james@nocrew.org>
3690
3691         * jennifer (upload_too_new): fix typo which was causing all
3692         timestamp comparisons to be against the .changes file.  Also move
3693         back to the original directory so we do the comparisons against
3694         accurate timestamps.
3695
3696         * tea (check_missing_tar_gz_in_dsc): new function.
3697
3698         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3699         file mentioned in the .dsc.
3700
3701         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3702         way mails reach debian-{devel-,}changes@l.d.o.
3703
3704 2002-04-02  Ryan Murray  <rmurray@debian.org>
3705
3706         * cron.daily: run shania after rhona
3707         * cron.daily-non-US: likewise.
3708
3709 2002-04-01  James Troup  <james@nocrew.org>
3710
3711         * katie: re-add proposed-updates/stable install support.
3712
3713         * katie.py (Katie.dump_vars): add changes["changes"] as an
3714         optional field; should be mandatory later.
3715
3716 2002-03-31  James Troup  <james@nocrew.org>
3717
3718         * katie (install): support a Suite::<foo>::CopyKatie similar to
3719         CopyChanges.  Done seperately because .katie files don't need to
3720         be mirrored and will probably be copied to another directory as a
3721         result.
3722
3723         * halle (main): add missing debug to options.
3724
3725 2002-03-29  James Troup  <james@nocrew.org>
3726
3727         * madison (main): add a -r/--regex option.
3728
3729 2002-03-26  James Troup  <james@nocrew.org>
3730
3731         * lisa: don't trample on changes["distribution"]; make a copy of
3732         it as changes["suite"] instead and use that.
3733
3734 2002-03-16  Anthony Towns  <ajt@debian.org>
3735
3736         * templates/lisa.bxa_notification: Fix some grammatical errors.
3737         Encourage contact via bxa@ftp-master email address.
3738
3739 2002-03-15  James Troup  <james@nocrew.org>
3740
3741         * jennifer (check_timestamps): remove bogus raise in except.
3742
3743 2002-03-15  Anthony Towns  <ajt@debian.org>
3744
3745         * cron.monthly: rotate mail/archive/bxamail as well as
3746         mail/archive/mail. This is for a complete archive of
3747         correspondence with the BXA.
3748
3749 2002-03-14  Anthony Towns  <ajt@debian.org>
3750
3751         * crypto-in-main changes.
3752
3753         * utils.py (move, copy): add an optional perms= parameter to let you
3754         set the resulting permissions of the moved/copied file
3755         * katie.py (force_move): rejected/morgued files should be unreadable
3756         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3757         should be unreadable.
3758
3759 2002-03-07  Ryan Murray  <rmurray@debian.org>
3760
3761         * katie (install): check for existance of "files id" key as well as
3762         it being set to a valid value.
3763         * katie (install): check for existense and valid value for location
3764         id as well
3765
3766 2002-03-05  Ryan Murray  <rmurray@debian.org>
3767
3768         * katie.py (do_reject): reread the reason file after editing it.
3769
3770 2002-02-25  James Troup  <james@nocrew.org>
3771
3772         * jennifer (check_changes): don't enforce sanity in .changes file
3773         names since it doesn't seem to be possible; pcmica-cs and similar
3774         freak show packages in particular cause real problems.
3775
3776         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3777         each dsc_file since the .orig.tar.gz checking code now uses it as
3778         a boolean.  Fixes bizarro rejections which bogusly claimed
3779         .diff.gz md5sum/size was incorrect.
3780
3781 2002-02-24  James Troup  <james@nocrew.org>
3782
3783         * katie (process_it): reset reject_message.
3784
3785 2002-02-22  James Troup  <james@nocrew.org>
3786
3787         * db_access.py(set_files_id): disable use of
3788         currval('files_id_seq') because it was taking 3 seconds on auric
3789         which is insane (most calls take < 0.01) and simply call
3790         get_files_id() for the return value instead.
3791
3792         * katie.py (Katie.do_query): convenience function; unused by
3793         default, useful for profiling.
3794         * db_access.py (do_query): likewise.
3795
3796         * katie (install): fix insert SQL call when binary has no source.
3797
3798         * lisa (determine_new): auto-correct non-US/main to non-US.
3799         (determine_new): add a warning when adding things to stable.
3800         (edit_index): use our_raw_input().
3801         (edit_overrides): likewise.
3802         (do_new): likewise.  Use re.search() not re.match() since the
3803         default answer may not be the first one.
3804         (do_byhand): likewise.
3805         (do_new): Default to 'S'kip and never 'A'dd.
3806
3807         * jennifer (action): pass prompt to our_raw_input().
3808         * melanie (game_over): likewise.
3809         * katie (action): likewise.
3810
3811         * utils.py (our_raw_input): add an optional prompt argument to
3812         make the function more usable as a drop in replacement for
3813         raw_input().
3814
3815         * jennifer (check_files): correct reject() to not double prefix
3816         when using katie.py based functions.
3817         (check_dsc): likewise.
3818
3819         * katie.py (Katie.reject): prepend a new line if appropriate
3820         rathen than appending one to avoid double new lines when caller
3821         adds one of his own.
3822
3823         * lisa (determine_new): warn if the package is also in other
3824         components.
3825
3826 2002-02-20  James Troup  <james@nocrew.org>
3827
3828         * jennifer (check_files): if .changes file lists "source" in
3829         Architecture field, there must be a .dsc.
3830
3831 2002-02-15  James Troup  <james@nocrew.org>
3832
3833         * ashley (main): add some missing fields.
3834
3835         * katie.py (Katie.check_dsc_against_db): fix to take into account
3836         the fact that the .orig.tar.gz might be in byhand, accepted or
3837         new.  Also fix calling of reject().
3838         (Katie.check_binaries_against_db): fix calling of reject().
3839         (Katie.check_source_against_db): likewise.
3840         (Katie.dump_vars): add missing variables used for bug closures.
3841
3842         * lisa (changes_compare_by_time): sort by reverse time.
3843
3844         * katie.py (Katie.accept): log.
3845         (Katie.dump_vars): missing has_key test for optional changes fields.
3846
3847         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3848         (process_it): traceback goes to stderr, not stdout.
3849         (acknowledge_new): log.
3850         (do_byhand): likewise.
3851
3852         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3853
3854         * add_constraints.sql: add grants for the new fingerprint table.
3855
3856 2002-02-13  James Troup  <james@nocrew.org>
3857
3858         * katie (do_reject): basename the .changes filename before trying
3859         to use it to construct the .reason filename.
3860         (process_it): call Katie.update_subst() so do_reject() DTRT with
3861         the mail template.
3862         (do_reject): setup the mail template correctly.
3863
3864 2002-02-12  James Troup  <james@nocrew.org>
3865
3866         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3867         (check_files): don't abuse global dictionaries.
3868         (Ent): use all variables.
3869         (check_timestamps): don't abuse global dictionaries.
3870
3871         * fernanda.py: renamed to .py so lisa can import it.
3872         (check_dsc): remove unused local variables (pychecker).
3873         (display_changes): split off from check_changes.
3874
3875         * katie: rewritten; most of the functionality moves to jennifer;
3876         what's left is the code to install packages once a day from the
3877         'accepted' directory.
3878
3879         * jennifer: new program, processes packages in 'unchecked'
3880         (i.e. most of the non-install functionality of old katie).
3881
3882         * katie.py: common functions shared between the clique of
3883         jennifer, lisa and katie.
3884
3885         * lisa: new program; handles NEW and BYHAND packages.
3886
3887         * jeri (usage): new function.
3888         (main): use it.
3889         (check_package): remove unused local variable (pychecker).
3890
3891         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3892         binaries and source.  Add install_date to source.
3893
3894         * halle (usage): new function.
3895         (main): use it.  Remove unused options.
3896         (check_changes): remove unused local variable (pychecker).
3897
3898         * add_constraints.sql: add fingerprint references.
3899
3900         * db_access.py (get_or_set_fingerprint_id): new function.
3901
3902         * ashley (main): new program; dumps the contents of a .katie file
3903         to stdout.
3904
3905         * alyson (main): remove option handling since we don't actually
3906         support any.
3907         * cindy (main): likewise.
3908
3909         * remove unnecessary imports and pre-define globals (pychecker).
3910
3911 2002-02-11  Anthony Towns  <ajt@debian.org>
3912
3913         * added installation-report and upgrade-report pseudo-packages
3914
3915 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3916
3917         * katie (update_subst): use Dinstall::TrackingServer.
3918         * melanie (main): likewise.
3919
3920 2002-01-27  James Troup  <james@nocrew.org>
3921
3922         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3923         noticing, jgg@ for fix.
3924
3925 2002-01-19  James Troup  <james@nocrew.org>
3926
3927         * utils.py (extract_component_from_section): handle non-US
3928         non-main properly.
3929
3930 2002-01-12  James Troup  <james@nocrew.org>
3931
3932         * madison: add support for -S/--source-and-binary which displays
3933         information for the source package and all it's binary children.
3934
3935 2002-01-13  Anthony Towns  <ajt@debian.org>
3936
3937         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3938         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3939           and 2002 key ids.
3940         * katie.conf-non-US: Likewise.
3941         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3942           multiple keys automatically. This is probably only useful for
3943           transitioning from an expired (or revoked?) key.
3944
3945 2002-01-08  Ryan Murray  <rmurray@debian.org>
3946
3947         * debian/python-dep: new file that prints out python:Depends for
3948           substvars
3949         * debian/control: use python:Depends, build-depend on python
3950           lower Depends: on postgresql to Suggests:
3951         * debian/rules: determine python version, install to the correct
3952           versioned dir
3953
3954 2001-12-18  Anthony Towns  <ajt@debian.org>
3955
3956         * ziyi: unlink Release files before overwriting them (in case they've
3957           been merged)
3958         * ziyi: always include checksums/sizes for the uncompressed versions
3959           of Sources and Packages, even if they're not present on disk
3960
3961 2001-11-26  Ryan Murray  <rmurray@debian.org>
3962
3963         * ziyi (main): add SigningPubKey config option
3964         * katie.conf: use SigningPubKey config option
3965         * katie.conf-non-US: likewise
3966
3967 2001-11-24  James Troup  <james@nocrew.org>
3968
3969         * katie (acknowledge_new): log newness.
3970
3971 2001-11-24  Anthony Towns  <ajt@debian.org>
3972
3973         * ziyi (real_arch): bail out if some moron forgot to reset
3974         untouchable on stable.
3975         (real_arch): source Release files.
3976
3977 2001-11-19  James Troup  <james@nocrew.org>
3978
3979         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3980         utils.get_conf().
3981         * shania (main): likewise.
3982
3983         * rhona (main): add default options.
3984
3985         * db_access.py (get_archive_id): case independent.
3986
3987         * katie (action): sort files so that ordering is consistent
3988         between mails; noticed/requested by Joey.
3989
3990 2001-11-17  Ryan Murray  <rmurray@debian.org>
3991
3992         * utils.py: add get_conf function, change startup code to read all
3993           config files to the Cnf that get_conf returns
3994           use the component list from the katie conf rather than the hardcoded
3995           list.
3996         * all scripts: use new get_conf function
3997         * shania: fix try/except around changes files
3998         * jenna: only do debian-installer if it is a section in Cnf
3999
4000 2001-11-16  Ryan Murray  <rmurray@debian.org>
4001
4002         * shania (main): Initialize days to a string of a number.
4003                  (main): Initialize Cnf vars before reading in Cnf
4004
4005 2001-11-14  Ryan Murray  <rmurray@debian.org>
4006
4007         * shania (main): Initialize days to a number.
4008
4009 2001-11-04  James Troup  <james@nocrew.org>
4010
4011         * docs/Makefile: use docbook-utils' docbook2man binary.
4012
4013         * Change all "if foo == []" constructs into "if not foo".
4014
4015         * katie (check_changes): when installing into stable from
4016         proposed-updates, remove all non-stable target distributions.
4017         (check_override): don't check for override disparities on stable
4018         installs.
4019         (stable_install): update install_bytes appropriately.
4020         (reject): stable rejection support; i.e. don't remove files when
4021         rejecting files in the pool, rather remove them from the
4022         proposed-update suite instead, rhona will do the rest.
4023         (manual_reject): support for a stable specific template.
4024         (main): setup up stable rejector in subst.
4025
4026 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4027
4028         * debian/control (Build-Depends): docbook2man has been superseded
4029         by docbook-utils.
4030
4031         * neve (main): exit with a more useful error message.
4032         (update_suites): Suite::<suite>::Version, Origin and Description
4033         are not required, so don't fail if they don't exist.
4034
4035         * db_access.py (get_archive_id): return -1 on error rather than
4036         raise an exception.
4037         (get_location_id): likewise.
4038
4039         * madison (main): don't exit on the first not-found package,
4040         rather exit with an appropriate return code after processing all
4041         packages.
4042
4043 2001-11-03  James Troup  <james@nocrew.org>
4044
4045         * claire.py (find_dislocated_stable): add per-architecture
4046         symlinks for dislocated architecture: all debs.
4047
4048 2001-10-19  Anthony Towns  <ajt@debian.org>
4049
4050         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4051
4052 2001-10-10  Anthony Towns  <ajt@debian.org>
4053
4054         * claire.py (fix_component_section): do _not_ assign to None under
4055         any circumstances
4056
4057 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4058
4059         * melanie (main): don't duplicate architectures when removing from
4060         more than one suite.
4061
4062         * heidi (main, process_file, get_list): report suite name not ID.
4063
4064         * naima (nmu_p): be case insensitive.
4065
4066         * naima (action): more list handling clean ups.
4067
4068         * melanie (main): clean up lists handling to use string.join and
4069         IN's.
4070
4071         * madison (main): clean up suite and architecture argument parsing
4072         to use slices less and string.join more.
4073
4074         * utils.py (parse_changes): Use string.find() instead of slices for
4075         string comparisons thereby avoid hardcoding the length of strings.
4076         * ziyi (main): likewise.
4077
4078 2001-10-07  James Troup  <james@nocrew.org>
4079
4080         * Remove mode argument from utils.open_files() calls if it's the
4081         default, i.e. 'r'.
4082
4083 2001-09-27  James Troup  <james@nocrew.org>
4084
4085         * katie (init): new function; options clean up.
4086         (usage): add missing options, remove obsolete ones.
4087         (main): adapt for the two changes above.  If the lock file or
4088         new-ack log file don't exist, create them.  Don't try to open the
4089         new-ack log file except running in new-ack mode.
4090
4091         * alyson (main): initialize all the tables that are based on the
4092         conf file.
4093
4094         * utils.py (touch_file): like touch(1).
4095         (where_am_i): typo.
4096
4097         * catherine (usage): new.
4098         (main): use it.  options cleanup.
4099         * claire.py: likewise.
4100         * fernanda: likewise.
4101         * heidi: likewise.
4102         * jenna: likewise.
4103         * shania: likewise.
4104         * ziyi: likewise.
4105
4106         * andrea: options cleanup.
4107         * charisma: likewise.
4108         * julia: likewise.
4109         * madison: likewise.
4110         * melanie: likewise.
4111         * natalie: likewise.
4112         * rhona: likewise.
4113         * tea: likewise.
4114
4115 2001-09-26  James Troup  <james@nocrew.org>
4116
4117         * utils.py: default to sane config file locations
4118         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4119         or they can point to the real ones through use of a new Config
4120         section.  Based on an old patch by Adam Heath.
4121         (where_am_i): use the new default config stuff.
4122         (which_conf_file): likewise.
4123         (which_apt_conf_file): likewise.
4124
4125         * charisma (main): output defaults to
4126         `Package~Version\tMaintainer'; input can be of either form.  When
4127         parsing the new format do version comparisons, when parsing the
4128         old format assume anything in the extra file wins.  This fixes the
4129         problem of newer non-US packages being overwhelmed by older
4130         versions still in stable on main.
4131
4132 2001-09-17  James Troup  <james@nocrew.org>
4133
4134         * natalie.py (list): use result_join().
4135
4136         * denise (main): result_join() moved to utils.
4137
4138         * utils.py (result_join): move to utils; add an optional seperator
4139         argument.
4140
4141 2001-09-14  James Troup  <james@nocrew.org>
4142
4143         * heidi (set_suite): new function; does --set like natalie does,
4144         i.e. turns it into a sequence of --add's and --remove's
4145         internally.  This is a major win (~20 minute run time > ~20
4146         seconds) in the common, everday (i.e. testing) case.
4147         (get_id): common code used by set_suite() and process_file().
4148         (process_file): call set_suite() and get_id().
4149         (main): add logging support.
4150
4151         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4152         files.
4153
4154         * utils.py (parse_changes): use slices or simple string comparison
4155         in favour of regexes where possible.
4156
4157         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4158         fact that the string VARDATA() points to are not null terminated.
4159
4160         * denise (result_join): new function; like string.join() but
4161         handles None's.
4162         (list): use it.
4163         (main): likewise.
4164
4165         * charisma (main): python-pygresql 7.1 returns None not "".
4166
4167 2001-09-14  Ryan Murray  <rmurray@debian.org>
4168
4169         * natalie.py (list): handle python-pygresql 7.1 returning None.
4170
4171 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4172
4173         * madison (main): return 1 if no package is found.
4174
4175 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4176
4177         * madison (main): better error handling for incorrect
4178         -a/--architecture or -s/--suite arguments.
4179         (usage): new.
4180         (main): use it.
4181
4182 2001-09-05  Ryan Murray  <rmurray@debian.org>
4183
4184         * charisma, madison, katie: remove use of ROUser
4185         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4186
4187 2001-08-26  James Troup  <james@nocrew.org>
4188
4189         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4190         maintained packages at cjwatson@'s request.
4191
4192 2001-08-21  James Troup  <james@nocrew.org>
4193
4194         * madison (main): add -a/--architecture support.
4195
4196         * jenna: use logging instead of being overly verbose on stdout.
4197
4198 2001-08-11  Ryan Murray  <rmurray@debian.org>
4199
4200         * melanie: add functional help option
4201
4202 2001-08-07  Anthony Towns  <ajt@debian.org>
4203
4204         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4205
4206 2001-07-28  James Troup  <james@nocrew.org>
4207
4208         * katie (check_dsc): ensure source version is >> than existing
4209         source in target suite.
4210
4211 2001-07-25  James Troup  <james@nocrew.org>
4212
4213         * natalie.py: add logging support.
4214
4215         * utils.py (open_file): make the second argument optional and
4216         default to read-only.
4217
4218         * rene (main): work around broken source packages that duplicate
4219         arch: all packages with arch: !all packages (no longer allowed
4220         into the archive by katie).
4221
4222 2001-07-13  James Troup  <james@nocrew.org>
4223
4224         * katie (action): don't assume distribution is a dictionary.
4225         (update_subst): don't assume architecture is a dictionary and that
4226         maintainer822 is defined.
4227         (check_changes): recognise nk_format exceptions.
4228         (check_changes): reject on 'testing' only uploads.
4229         (check_files): when checking to ensure all packages are newer
4230         versions check against arch-all packages too.
4231         (check_dsc): enforce the existent of a sane set of mandatory
4232         fields.  Ensure the version number in the .dsc (modulo epoch)
4233         matches the version number in the .changes file.
4234
4235         * utils.py (changes_compare): ignore all exceptions when parsing
4236         the changes files.
4237         (build_file_list): don't UNDEF on a changes file with no format
4238         field.
4239
4240 2001-07-07  James Troup  <james@nocrew.org>
4241
4242         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4243         rather than 'changedbyname' to avoid false negatives on uploads
4244         with an email-address-only Changed-By field.
4245         (check_dsc): don't overwrite reject_message; append to it.
4246         (check_signature): likewise.
4247         (check_changes): likewise.
4248         (announce): condition logging on 'action'.
4249
4250         * logging.py: new logging module.
4251
4252         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4253         sub-tree into a separate (global) variable.
4254         (check_dsc): ensure format is 1.0 to retain backwards
4255         compatability with dpkg-source in potato.
4256         (main): only try to obtain the lock when not running in no-action
4257         mode.
4258         Use the new logging module.
4259
4260         * christina: initial version; only partially usable.
4261
4262 2001-06-28  Anthony Towns  <ajt@debian.org>
4263
4264         * apt.conf: Add ExtraOverrides to auric.
4265
4266 2001-06-25  James Troup  <james@nocrew.org>
4267
4268         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4269         they preferred the name 'Uploaders'.
4270
4271 2001-06-23  James Troup  <james@nocrew.org>
4272
4273         * katie (check_files): fix typo in uncommon rejection message,
4274         s/sourceversion/source version/.
4275
4276         * denise (main): we can't use print because stdout has been
4277         redirected.
4278
4279         * katie (source_exists): new function; moved out of check_files()
4280         and added support for binary-only NMUs of earlier sourceful NMUs.
4281
4282         * rhona (clean): find_next_free has moved.
4283
4284         * utils.py (find_next_free): new function; moved here from rhona.
4285         Change too_many to be an argument with a default value, rather
4286         than a hardcoded variable.
4287
4288         * shania: rewritten to work better; REJECTion reminder mail
4289         handling got lost though.
4290
4291 2001-06-22  James Troup  <james@nocrew.org>
4292
4293         * rhona (main): remove unused override code.
4294
4295         * fernanda (main): remove extraneous \n's from utils.warn calls.
4296         * natalie.py (list): likewise.
4297
4298         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4299         use utils.{warn,fubar} where appropriate.
4300
4301 2001-06-21  James Troup  <james@nocrew.org>
4302
4303         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4304         functionality.
4305         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4306         by the "Maintainers" field in the .dsc file and maintainer groups.
4307         (nmu_p.__init__): read in the list of group maintainer names.
4308         (announce): use nmu_p.
4309
4310 2001-06-20  James Troup  <james@nocrew.org>
4311
4312         * rene (main): hardcode the suite experimental is compared to by
4313         name rather than number.
4314
4315         * katie (check_files): differentiate between doesn't-exist and
4316         permission-denied in "can not read" rejections; requested by edd@.
4317         (check_dsc): use os.path.exists rather than os.access to allow the
4318         above check to kick in.
4319
4320         * heidi (process_file): read all input before doing anything and
4321         use transactions.
4322
4323 2001-06-15  James Troup  <james@nocrew.org>
4324
4325         * fernanda: new script; replaces old 'check' shell script
4326         nastiness.
4327
4328 2001-06-14  James Troup  <james@nocrew.org>
4329
4330         * katie: actually import traceback module to avoid amusing
4331         infinite loop.
4332
4333 2001-06-10  James Troup  <james@nocrew.org>
4334
4335         * utils.py (extract_component_from_section): fix to handle just
4336         'non-free' and 'contrib'.  Also fix to handle non-US in a
4337         completely case insensitive manner as a component.
4338
4339 2001-06-08  James Troup  <james@nocrew.org>
4340
4341         * madison (arch_compare): sort function that sorts 'source' first
4342         then alphabetically.
4343         (main): use it.
4344
4345 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4346
4347         * catherine (poolize): explicitly make poolized_size a long so it
4348         doesn't overflow when poolizing e.g. entire archives.
4349
4350 2001-06-01  James Troup  <james@nocrew.org>
4351
4352         * utils.py (send_mail): throw exceptions rather than exiting.
4353
4354         * katie (process_it): catch exceptions and ignore them.
4355
4356 2001-06-01  Michael Beattie  <mjb@debian.org>
4357
4358         * added update-mailingliststxt and update-readmenonus to update
4359         those files, respectively. modified cron.daily{,-non-US} to
4360         use them.
4361
4362 2001-05-31  Anthony Towns  <ajt@debian.org>
4363
4364         * rhona: make StayOfExecution work.
4365
4366 2001-05-31  James Troup  <james@nocrew.org>
4367
4368         * rhona (find_next_free): fixes to not overwrite files but rename
4369         them by appending .<n> instead.
4370         (clean): use find_next_free and use dated sub-directories in the
4371         morgue.
4372
4373         * utils.py (move): don't overwrite files unless forced to.
4374         (copy): likewise.
4375
4376 2001-05-24  James Troup  <james@nocrew.org>
4377
4378         * katie (check_files): determine the source version here instead
4379         of during install().
4380         (check_files): check for existent source with bin-only NMU
4381         support.
4382         (main): sort the list of changes so that the source-must-exist
4383         check Does The Right Thing(tm).
4384
4385         * utils.py (changes_compare): new function; sorts a list of
4386         changes files by 'have-source', source, version.
4387         (cc_fix_changes): helper function.
4388         (parse_changes): use compiled regexes.
4389         (fix_maintainer): likewise.
4390
4391         * rene (main): warn about packages in experimental that are
4392         superseded by newer versions in unstable.
4393
4394 2001-05-21  James Troup  <james@nocrew.org>
4395
4396         * rene (main): add support for checking for ANAIS (Architecture
4397         Not Allowed In Source) packages.
4398
4399 2001-05-17  James Troup  <james@nocrew.org>
4400
4401         * katie (check_changes): initalize `architecture' dictionary in
4402         changes global so that if we can't parse the changes file for
4403         whatever reason we don't undef later on.
4404
4405         * utils.py (parse_changes): fix handling of multi-line fields
4406         where the first line did have data.
4407
4408 2001-05-05  Anthony Towns  <ajt@debian.org>
4409
4410         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4411         (It should always have been there. Ooopsy.)
4412
4413 2001-05-03  Anthony Towns  <ajt@debian.org>
4414
4415         * jenna: Cleanup packages that move from arch:any to arch:all or
4416         vice-versa.
4417
4418 2001-04-24  Anthony Towns  <ajt@debian.org>
4419
4420         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4421         cope with debian-installer and boot-floppies' md5sum.txt.
4422
4423 2001-04-16  James Troup  <james@nocrew.org>
4424
4425         * katie (check_changes): add missing %s format string argument.
4426         (stable_install): temporary work around for morgue location to
4427         move installed changes files into.
4428         (stable_install): helps if you actually read in the template.
4429         (manual_reject): fix for editing of reject messages which was
4430         using the wrong variable name.
4431
4432         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4433
4434 2001-04-13  James Troup  <james@nocrew.org>
4435
4436         * katie (manual_reject): Cc the installer.
4437         (reject): don't.
4438         (check_changes): remove unused maintainer-determination code.
4439         (update_subst): add support for Changed-By when setting the
4440         *MAINTAINER* variables.
4441
4442         * rene (bar): new function to check for packages on architectures
4443         when they shouldn't be.
4444
4445         * natalie.py (main): use fubar() and warn() from utils.
4446
4447         * utils.py (whoami): new mini-function().
4448         * melanie (main): use it.
4449         * katie (manual_reject): likewise.
4450
4451 2001-04-03  James Troup  <james@nocrew.org>
4452
4453         * katie (action): ignore exceptions from os.path.getmtime() so we
4454         don't crash on non-existent changes files (e.g. when they are
4455         moved between the start of the install run in cron.daily and the
4456         time we get round to processing them).
4457
4458         * madison (main): also list source and accept -s/--suite.
4459
4460         * jenna (generate_src_list): missing \n in error message.
4461
4462         * katie (update_subst): add sane defaults for when changes is
4463         skeletal.
4464
4465 2001-03-29  James Troup  <james@nocrew.org>
4466
4467         * melanie (main): use fubar() and warn() from utils.  Remember who
4468         the maintainer for the removed packages are and display that info
4469         to the user.  Readd support for melanie-specific Bcc-ing that got
4470         lost in the TemplateSubst transition.
4471
4472         * utils.py (fubar): new function.
4473         (warn): like wise.
4474
4475         * db_access.py (get_maintainer): as below.
4476
4477         * charisma (get_maintainer): moved the bulk of this function to
4478         db_access so that melanie can use it too.
4479
4480         * claire.py (find_dislocated_stable): restrict the override join
4481         to those entries where the suite is stable; this avoids problems
4482         with packages which have moved to new sections (e.g. science)
4483         between stable and unstable.
4484
4485 2001-03-24  James Troup  <james@nocrew.org>
4486
4487         * catherine (poolize): new function; not really independent of
4488         main() fully, yet.
4489         (main): use it.
4490
4491         * katie (stable_install): __SUITE__ needs to be space prefixed
4492         because buildd's check for 'INSTALLED$'.
4493
4494 2001-03-22  James Troup  <james@nocrew.org>
4495
4496         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4497
4498         * jenna: rewritten; now does deletions on a per-suite level
4499         instead of a per-suite-component-architecture-type level.  This
4500         allows mutli-component packages to be auto-cleaned (and as a
4501         bonus, reduces the code size and duplication).
4502
4503 2001-03-22  Anthony Towns  <ajt@debian.org>
4504
4505         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4506         instead of just giving a gpg error.
4507
4508 2001-03-21  James Troup  <james@nocrew.org>
4509
4510         * madison (main): use apt_pkg.VersionCompare to sort versions so
4511         that output is correctly sorted for packages like debhlper.
4512         Noticed by ajt@.
4513
4514         * tea (check_source_in_one_dir): actually find problematic source
4515         packages.
4516
4517         * katie (check_dsc): remember the orig.tar.gz's location ID if
4518         it's not in a legacy suite.
4519         (check_diff): we don't use orig_tar_id.
4520         (install): add code to handle sourceful diff-only upload of
4521         packages which change components by copying the .orig.tar.gz into
4522         the new component, if it doesn't already exist there.
4523         (process_it): reset orig_tar_location (as above).
4524
4525         * melanie (main): use template substiution for the bug closing
4526         emails.
4527         (main): don't hardcode bugs.debian.org or packages.debian.org
4528         either; use configuration items.
4529
4530         * katie: likewise.
4531
4532         * natalie.py (init): use None rather than 'localhost' for the
4533         hostname given to pg.connect.
4534
4535         * utils.py (TemplateSubst): new function; lifted from
4536         userdir-ldap.
4537
4538 2001-03-21  Ryan Murray  <rmurray@debian.org>
4539
4540         * katie (announce): fix the case of non-existent
4541         Suite::$SUITE::Announce.
4542
4543 2001-03-20  Ryan Murray  <rmurray@debian.org>
4544
4545         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4546         /usr/.
4547
4548         * alyson (main): use config variable for database name.
4549         * andrea (main): likewise.
4550         * catherine (main): likewise.
4551         * charisma (main): likewise.
4552         * cindy (main): likewise.
4553         * claire.py (main): likewise.
4554         * denise (main): likewise.
4555         * heidi (main): likewise.
4556         * jenna (main): likewise.
4557         * katie (main): likewise.
4558         * madison (main): likewise.
4559         * melanie (main): likewise.
4560         * neve (main): likewise.
4561         * rhona (main): likewise.
4562         * tea (main): likewise.
4563
4564 2001-03-15  James Troup  <james@nocrew.org>
4565
4566         * rhona (check_sources): fixed evil off by one (letter) error
4567         which was causing only .dsc files to be deleted when cleaning
4568         source packages.
4569
4570         * charisma (get_maintainer_from_source): remove really stupid and
4571         gratuitous IN sub-query and replace with normal inner join.
4572         (main): connect as read-only user nobody.
4573
4574         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4575         with EXISTS.
4576         (check_files): likewise; still disabled by default though.
4577         (clean_binaries): add ' seconds' to the mysterious number in the
4578         output.
4579         (clean): likewise.
4580
4581         * tea (check_files): add missing global declaration on db_files.
4582
4583 2001-03-14  James Troup  <james@nocrew.org>
4584
4585         * rhona: rewritten large chunks. Removed a lot of the silly
4586         selecting into dictionaries and replaced it with 'where exists'
4587         based sub queries.  Added support for StayOfExecution.  Fix the
4588         problem with deleting dsc_files too early and disable cleaning of
4589         unattached files.
4590
4591 2001-03-14  Anthony Towns  <ajt@debian.org>
4592
4593         * katie (announce): also check Changed-By when trying to detect
4594         NMUs.
4595
4596 2001-03-06  Anthony Towns  <ajt@debian.org>
4597
4598         * ziyi (main): Generate Release.gpg files as well, using the key from
4599         Dinstall::SigningKey in katie.conf, if present. That key has to be
4600         passwordless, and hence kept fairly secretly.
4601
4602 2001-03-02  James Troup  <james@nocrew.org>
4603
4604         * utils.py (str_isnum): new function; checks to see if the string
4605         is a number.
4606
4607         * shania (main): fix _hideous_ bug which was causing all files > 2
4608         weeks old to be deleted from incoming, even if they were part of a
4609         valid upload.
4610
4611 2001-02-27  James Troup  <james@nocrew.org>
4612
4613         * melanie (main): accept new argument -C/--carbon-copy which
4614         allows arbitarty carbon-copying of the bug closure messages.
4615         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4616         separate variable.
4617
4618 2001-02-27  Anthony Towns  <ajt@debian.org>
4619
4620         * ziyi: new program; generates Release files.
4621
4622 2001-02-25  James Troup  <james@nocrew.org>
4623
4624         * katie (reject): add missing '\n' to error message.
4625         (manual_reject): likewise.
4626         (install): catch exceptions from moving the changes file into DONE
4627         and ignore them.
4628
4629         * tea (check_md5sums): new function.
4630
4631 2001-02-25  Michael Beattie  <mjb@debian.org>
4632
4633         * melanie: use $EDITOR if available.
4634
4635 2001-02-15  James Troup  <james@nocrew.org>
4636
4637         * utils.py (parse_changes): don't crash and burn on empty .changes
4638         files.  Symptoms noticed by mjb@.
4639
4640 2001-02-15  Adam Heath  <doogie@debian.org>
4641
4642         * denise (main): use an absolute path for the output filename.
4643
4644         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4645         compile errors with postgresql-dev >= 7.0.
4646
4647 2001-02-12  James Troup  <james@nocrew.org>
4648
4649         * rene: initial version.
4650
4651         * andrea: initial version.
4652
4653         * catherine (main): remove obsolete assignment of arguments.
4654
4655 2001-02-09  James Troup  <james@nocrew.org>
4656
4657         * catherine: first working version.
4658
4659 2001-02-06  James Troup  <james@nocrew.org>
4660
4661         * katie (check_files): validate the priority field; i.e. ensure it
4662         doesn't contain a '/' (to catch people prepending the priority
4663         with the component rather than the section).
4664         (check_override): don't warn about source packages; the only check
4665         is on section and we have no GUI tools that would use the Section
4666         field for a Sources file.
4667         (announce): use tags rather than severities for NMUs.  Requested
4668         by Josip Rodin <joy@>. [#78035]
4669
4670 2001-02-04  James Troup  <james@nocrew.org>
4671
4672         * tea (check_override): new function; ensures packages in suites
4673         are also in the override file.  Thanks to bod@ for noticing that
4674         such packages existed.
4675
4676         * katie: move file type compiled regular expressions to utils as
4677         catherine uses them too.
4678         (check_changes): always default maintainer822 to the installer
4679         address so that any bail out won't cause undefs later.
4680         (check_files): update file type re's to match above.
4681         (stable_install): likewise.
4682         (reject): handle any except from moving the changes files.  Fixes
4683         crashes on unreadable changes files.
4684
4685         * melanie (main): add an explanation of why things are not removed
4686         from testing.
4687
4688 2001-01-31  James Troup  <james@nocrew.org>
4689
4690         * melanie (main): ignore a) no message, b) removing from stable or
4691         testing when invoked with -n/--no-action.
4692
4693         * katie (check_override): lower section before checking to see if
4694         we're whining about 'non-US' versus 'non-US/main'.
4695
4696         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4697         function so that we can use inside of PostgreSQL.
4698
4699 2001-01-28  James Troup  <james@nocrew.org>
4700
4701         * katie: updated to pass new flag to parse_changes() and deal with
4702         the exception raised on invalid .dsc's if appropriate.
4703         * shania (main): likewise.
4704         * melanie (main): likewise.
4705
4706         * tea (check_dscs): new function to validate all .dsc files in
4707         unstable.
4708
4709         * utils.py (parse_changes): if passed an additional flag, validate
4710         the .dsc file to ensure it's extractable by dpkg-source.
4711         Requested by Ben Collins <bcollins@>.
4712
4713 2001-01-27  James Troup  <james@nocrew.org>
4714
4715         * madison (main): connect to the DB as nobody.
4716
4717         * katie (check_files): remove support for -r/--no-version-check
4718         since it makes no sense under katie (jenna will automatically
4719         remove the (new) older version) and was evil in any event.
4720         (check_changes): add missing new line to rejection message.
4721         (check_dsc): likewise.
4722         (process_it): reset reject_message here.
4723         (main): not here.  Also remove support for -r.
4724
4725 2001-01-26  James Troup  <james@nocrew.org>
4726
4727         * katie (check_override): don't whine about 'non-US/main' versus
4728         'non-US'.
4729
4730 2001-01-26  Michael Beattie  <mjb@debian.org>
4731
4732         * natalie.py (usage): new function.
4733         (main): use it.
4734
4735 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4736
4737         * update-mirrorlists: Update README.non-US too (request from Joy).
4738
4739 2001-01-25  James Troup  <james@nocrew.org>
4740
4741         * katie (reject): catch any exception from utils.move() and just
4742         pass, we previously only caught can't-overwrite errors and not
4743         can't-read ones.
4744
4745         * jenna (generate_src_list): use ORDER BY in selects to avoid
4746         unnecessary changes to Packages files.
4747         (generate_bin_list): likewise.
4748
4749         * utils.py (extract_component_from_section): separated out from
4750         build_file_list() as it's now used by claire too.
4751
4752         * claire.py (find_dislocated_stable): rewrite the query to extract
4753         section information and handle component-less locations properly.
4754         Thanks to ajt@ for the improved queries.
4755         (fix_component_section): new function to fix components and
4756         sections.
4757
4758 2001-01-23  James Troup  <james@nocrew.org>
4759
4760         * katie (check_files): set file type for (u?)debs first thing, so
4761         that if we continue, other functions which rely on file type
4762         existing don't bomb out.  If apt_pkg or apt_inst raise an
4763         exception when parsing the control file, don't try any other
4764         checks, just drop out.
4765         (check_changes): new test to ensure there is actually a target
4766         distribution.
4767
4768 2001-01-22  James Troup  <james@nocrew.org>
4769
4770         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4771         <grin@>.
4772         (check_changes): when mapping to unstable, remember to actually
4773         add unstable to the suite list and not just remove the invalid
4774         suite.
4775
4776 2001-01-21  James Troup  <james@nocrew.org>
4777
4778         * katie (check_files): catch exceptions from debExtractControl()
4779         and reject packages which raise any.
4780
4781 2001-01-19  James Troup  <james@nocrew.org>
4782
4783         * katie (check_signature): basename() file name in rejection
4784         message.
4785
4786 2001-01-18  James Troup  <james@nocrew.org>
4787
4788         * katie (in_override_p): remember the section and priority from
4789         the override file so we can check them against the package later.
4790         (check_override): new function; checks section and priority (for
4791         binaries) from the package against the override file and mails the
4792         maintainer about any disparities.
4793         (install): call check_override after announcing the upload.
4794
4795 2001-01-16  James Troup  <james@nocrew.org>
4796
4797         * utils.py (build_file_list): catch ValueError's from splitting up
4798         the files field and translate it into a parse error.
4799
4800         * tea: add support for finding unreferenced files.
4801
4802         * katie (in_override_p): add support for suite-aliasing so that
4803         proposed-updates uploads work again.
4804         (check_changes): catch parses errors from utils.build_file_list().
4805         (check_dsc): likewise.
4806         (check_diff): yet more dpkg breakage so we require even newer a
4807         version.
4808
4809         * jenna (generate_bin_list): don't do nasty path munging that's no
4810         longer needed.
4811
4812         * denise (main): support for non-US; and rename testing's override
4813         files so they're based on testing's codename.
4814
4815 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4816
4817         * melanie: add to the bug closing message explaining what happens
4818         (or rather doesn't) with bugs against packages that have been
4819         removed.
4820
4821 2001-01-14  James Troup  <james@nocrew.org>
4822
4823         * charisma (main): fix silly off-by-one error; suite priority
4824         checking was done using "less than" rather than "less than or
4825         equal to" which was causing weird hesienbugs with wrong Maintainer
4826         fields.
4827
4828 2001-01-10  James Troup  <james@nocrew.org>
4829
4830         * katie (in_override_p): adapted to use SQL-based overrides.
4831         read_override_file function disappears.
4832
4833         * db_access.py: add new functions get_section_id, get_priority_id
4834         and get_override_type_id.
4835         (get_architecture_id): return -1 if the architecture is not found.
4836
4837         * heidi: switch %d -> %d in all SQL queries.
4838         (get_list): Use string.join where appropriate.
4839
4840         * rhona (in_override_p): don't die if the override file doesn't
4841         exist.
4842         (main): warn if the override file doesn't exist.
4843
4844         * alyson: new script; will eventually sync the config file and the
4845         SQL database.
4846
4847         * natalie.py: new script; manipulates overrides.
4848
4849         * melanie: new script; removes packages from suites.
4850
4851 2001-01-08  James Troup  <james@nocrew.org>
4852
4853         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4854         anything it just changed the symptom.  Recognise the new breakage
4855         and reject them too.
4856
4857 2001-01-07  James Troup  <james@nocrew.org>
4858
4859         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4860         to the .changes file, be sure to set up files[filename]["type"]
4861         too.
4862
4863 2001-01-06  James Troup  <james@nocrew.org>
4864
4865         * katie (check_diff): new function; detects bad diff files
4866         produced by dpkg 1.8.1 and rejects thems.
4867         (process_it): call check_diff().
4868         (check_dsc): gar.  Add support for multiple versions of the
4869         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4870         and size against all versions and use one which matches if
4871         possible and exclude any that don't from being poolized to avoid
4872         file overwrites.  Thanks to broonie@ for providing the example.
4873         (install): skip any files marked as excluded as above.
4874
4875 2001-01-05  James Troup  <james@nocrew.org>
4876
4877         * heidi (process_file): add missing argument to error message.
4878
4879 2001-01-04  James Troup  <james@nocrew.org>
4880
4881         * heidi (main): fix handling of multiple files by reading all
4882         files not just the first file n times (where n = the number of
4883         files passed as arguments).
4884
4885 2001-01-04  Anthony Towns  <ajt@debian.org>
4886
4887         * katie (check_dsc): proper fix for the code which locates the
4888         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4889
4890 2000-12-20  James Troup  <james@nocrew.org>
4891
4892         * rhona: replace IN's with EXISTS's to make DELETE time for
4893         binaries and source sane on auric.  Add a -n/--no-action flag and
4894         make it stop actions if used.  Fixed a bug in binaries deletion
4895         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4896         -V/--version.  Giving timing info on deletion till I'm sure it's
4897         sane.
4898
4899         * katie (check_changes): map testing to unstable.
4900
4901         * madison: new script; shows versions in different architectures.
4902
4903         * katie (check_dsc): ensure size matches as well as md5sum;
4904         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4905         #69702.
4906
4907 2000-12-19  James Troup  <james@nocrew.org>
4908
4909         * katie (reject): ignore the "can't overwrite file" exception from
4910         utils.move() and leave the files where they are.
4911         (reject): doh! os.access() test was reversed so we only tried to
4912         move files which didn't exist... replaced with os.path.exists()
4913         test the right way round.
4914
4915         * utils.py (move): raise an exception if we can't overwrite the
4916         destination file.
4917         (copy): likewise.
4918
4919 2000-12-18  James Troup  <james@nocrew.org>
4920
4921         * rhona: first working version.
4922
4923         * db_access.py (get_files_id): force both sizes to be integers.
4924
4925         * katie (main): use size_type().
4926
4927         * utils.py (size_type): new function; pretty prints a file size.
4928
4929 2000-12-17  James Troup  <james@nocrew.org>
4930
4931         * charisma (main): do version compares so that older packages do
4932         not override newer ones and process source first as source wins
4933         over binaries in terms of who we think of as the Maintainer.
4934
4935 2000-12-15  James Troup  <james@nocrew.org>
4936
4937         * katie (install): use the files id for the .orig.tar.gz from
4938         check_dsc().
4939         (install): limit select for legacy source to a) source in legacy
4940         or legacy-mixed type locations and b) distinct on files.id.
4941         (install): rather than the bizarre insert new, delete old method
4942         for moving legacy source into the pool, use a simple update of
4943         files.
4944         (process_it): initalize some globals before each process.
4945
4946 2000-12-14  James Troup  <james@nocrew.org>
4947
4948         * katie (in_override_p): index on binary_type too since .udeb
4949         overrides are in a different file.
4950         (read_override_file): likewise.
4951         (check_files): correct filename passed to get_files_id().
4952         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4953         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4954         (check_dsc): remember the files id of the .orig.tar.gz, not the
4955         location id.
4956
4957 2000-12-13  James Troup  <james@nocrew.org>
4958
4959         * utils.py (poolify): force the component to lower case except for
4960         non-US.
4961
4962         * katie (in_override_p): handle .udeb-specific override files.
4963         (check_files): pass the binary type to in_override_p().
4964         (check_dsc): remember the location id of the old .orig.tar.gz in
4965         case it's not in the pool.
4966         (install): use location id from dsc_files; which is where
4967         check_dsc() puts it for old .orig.tar.gz files.
4968         (install): install files after all DB work is complete.
4969         (reject): basename() the changes filename.
4970         (manual_reject): likewise.
4971
4972         * shania: new progam; replaces incomingcleaner.
4973
4974 2000-12-05  James Troup  <james@nocrew.org>
4975
4976         * katie (check_changes): if inside stable and can't find files
4977         from the .changes; assume it's installed in the pool and chdir()
4978         to there.
4979         (check_files): we are not installing for stable installs, so don't
4980         check for overwriting existing files.
4981         (check_dsc): likewise.
4982         (check_dsc): reorder .orig.tar.gz handling so that we search in
4983         the pool first and only then fall back on any .orig.tar.gz in the
4984         cwd; this avoids false positives on the overwrite check when
4985         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4986         (install): if this is a stable install, bail out to
4987         stable_install() immediately.
4988         (install): dsc_files handling was horribly broken. a) we need to
4989         add files from the .dsc and not the .changes (duh), b) we need to
4990         add the .dsc file itself to dsc_files (to be consistent with neve
4991         if for no other reason).
4992         (stable_install): new function; handles installs from inside
4993         proposed-updates to stable.
4994         (acknowledge_new): basename changes_filename before doing
4995         anything.
4996         (process_it): absolutize the changes filename to avoid the
4997         requirement of being in the same directory as the .changes file.
4998         (process_it): save and restore the cwd as stable installs can
4999         potentially jump into the pool to find files.
5000
5001         * jenna: dislocated_files support using claire.
5002
5003         * heidi (process_file): select package field from binaries
5004         explicitly.
5005
5006         * db_access.py (get_files_id): fix cache key used.
5007
5008         * utils.py (build_file_list): fix 'non-US/non-free' case in
5009         section/component splitting.
5010         (move): use os.path.isdir() rather than stat.
5011         (copy): likewise.
5012
5013         * claire.py: new file; stable in non-stable munger.
5014
5015         * tea: new file; simply ensures all files in the DB exist.
5016
5017 2000-12-01  James Troup  <james@nocrew.org>
5018
5019         * katie (check_dsc): use regex_safe().
5020         (check_changes): typo in changes{} key:
5021         s/distributions/distribution/.
5022         (install): use changes["source"], not files[file]["source"] as the
5023         latter may not exist and the former is used elsewhere.  Commit the
5024         SQL transaction earlier.
5025
5026         * utils.py (regex_safe): new function; escapes characters which
5027         have meaning to SQL's regex comparison operator ('~').
5028
5029 2000-11-30  James Troup  <james@nocrew.org>
5030
5031         * katie (install): pool_location is based on source package name,
5032         not binary package.
5033
5034         * utils.py (move): if dest is a directory, append the filename
5035         before chmod-ing.
5036         (copy): ditto.
5037
5038         * katie (check_files): don't allow overwriting of existing .debs.
5039         (check_dsc): don't allow overwriting of existing source files.
5040
5041 2000-11-27  James Troup  <james@nocrew.org>
5042
5043         * katie (check_signature): don't try to load rsaref; it's
5044         obsolete.
5045         (in_override_p): don't try to lookup override entries for packages
5046         with an invalid suite name.
5047         (announce): don't assume the suite name is valid; use Find() to
5048         lookup the mailing list name for announcements.
5049
5050         * utils.py (where_am_i): typo; hostname is in the first element,
5051         not second.
5052
5053         * db_access.py (get_suite_id): return -1 on an unknown suite.
5054
5055 2000-11-26  James Troup  <james@nocrew.org>
5056
5057         * katie (install): fix CopyChanges handling; typo in in checking
5058         Cnf for CopyChanges flag and was calling non-existent function
5059         copy_file.
5060
5061         * utils.py (copy): new function; clone of move without the
5062         unlink().
5063
5064 2000-11-25  James Troup  <james@nocrew.org>
5065
5066         * utils.py (build_file_list): handle non-US prefixes properly
5067         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5068         + 'libs' not 'non-US/libs').
5069         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5070         delays.  This is possibly(/probably) exim speicifc and (like other
5071         sendmail options) needs to be in the config file.
5072
5073 2000-11-24  James Troup  <james@nocrew.org>
5074
5075         * rhona (check_sources): we need file id from dsc_files; not id.
5076         Handle non .dsc source files being re-referenced in dsc_files.
5077
5078         * katie (in_override_p): strip out any 'non-US' prefix.
5079         (check_files): use utils.where_am_i() rather than hardcoding.
5080         (check_files): validate the component.
5081         (install): use utils.where_am_i() rather than hardcoding.
5082         (install): fix mail to go to actual recepient.
5083         (reject): likewise.
5084         (manual_reject): likewise.
5085         (acknowledge_new): likewise.
5086         (announce): likewise.
5087
5088         * db_access.py (get_component_id): ignore case when searching for
5089         the component and don't crash if the component can't be found, but
5090         return -1.
5091         (get_location_id): handle -1 from get_component_id().
5092
5093         * jenna (generate_src_list): don't bring 'suite' into our big
5094         multi-table-joining select as we already know the 'suite_id'.
5095         (generate_bin_list): likewise.
5096
5097         * neve (main): don't quit if not on ftp-master.
5098         (process_packages): remove unused variable 'suite_codename'.
5099
5100         * utils.py (move): actually move the file.
5101         (build_file_list): handle non-US prefixes in the section.
5102
5103         * catherine (main): use which_conf_file().
5104         * charisma (main): likewise.
5105         * heidi (main): likewise.
5106         * jenna (main): likewise.
5107         * katie (main): likewise.
5108         * neve (main): likewise.
5109         * rhona (main): likewise.
5110
5111         * utils.py (where_am_i): new routine; determines the archive as
5112         understood by other 'dak' programs.
5113         (which_conf_file): new routine; determines the conf file to read.
5114
5115 2000-11-17  James Troup  <james@nocrew.org>
5116
5117         * katie (install): fix where .changes files for proposed-updates
5118         go.
5119
5120 2000-11-04  James Troup  <james@nocrew.org>
5121
5122         * jenna (main): handle architecture properly if no
5123         -a/--architecture argument is given, i.e. reset architecture with
5124         the values for the suite for each suite.
5125
5126         * Add apt_pkg.init() to the start of all scripts as it's now
5127         required by python-apt.
5128
5129 2000-10-29  James Troup  <james@nocrew.org>
5130
5131         * jenna (generate_bin_list): take an additional argument 'type'
5132         and use it in the SELECT.
5133         (main): if processing component 'main', process udebs and debs.
5134
5135         * neve (process_packages): set up 'type' in 'binaries' (by
5136         assuming .deb).
5137
5138         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5139         (check_files): set up files[file]["dbtype"].
5140         (install): use files[file]["dbtype"] to set up the 'type' field in
5141         the 'binaries' table.
5142
5143         * init_pool.sql: add a 'type' field to the 'binaries' table to
5144         distinguisgh between ".udeb" and ".deb" files.
5145
5146         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5147         dest ? dirname(dest)" type check instead.
5148
5149         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5150         in the pool without crashing.  Also handle the case of being asked
5151         to look for something other than an .orig.tar.gz in the pool.
5152
5153 2000-10-26  James Troup  <james@nocrew.org>
5154
5155         * katie (install): fix filenames put into files table during
5156         poolification of legacy source.
5157
5158         * utils.py (move): work around a bug in os.path.basename() which
5159         cunningly returns '' if there is a trailing slash on the path
5160         passed to it.
5161
5162         * katie (check_dsc): Remove more cruft.  If we find the
5163         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5164         location, make a note of that so we can fix things in install().
5165         (install): as above.  Move any old source out of legacy locations
5166         so that 'apt-get source' will work.
5167         (process_it): reset the flag that indicates to install that the
5168         source needs moved.
5169
5170         * cron.daily: more.  Nowhere near complete yet though.
5171
5172         * katie (install): don't run os.makedirs, a) utils.move() does
5173         this now, b) we weren't removing the user's umask and were
5174         creating dirs with SNAFU permissions.
5175         (check_dsc): rewrite the .orig.tar.gz handling to take into
5176         account, err, package pools.  i.e. look anywhere in the pool
5177         rather than faffing around with two simple paths.
5178
5179         * neve (process_sources): add the .dsc to dsc_files too.
5180
5181 2000-10-25  James Troup  <james@nocrew.org>
5182
5183         * neve (process_sources): don't duplicate .orig.tar.gz's.
5184
5185 2000-10-23  James Troup  <james@nocrew.org>
5186
5187         * utils.py (re_extract_src_version): moved here.
5188
5189         * neve: move re_extract_src_version to utils.
5190         (process_packages): reflect change.
5191
5192         * katie (install): reflect change.
5193
5194 2000-10-19  James Troup  <james@nocrew.org>
5195
5196         * jenna (generate_src_list): handle locations with null
5197         components.
5198         (generate_bin_list): likewise.
5199